基于驾驶场景信息的音乐播放方法、装置及设备与流程
未命名
07-22
阅读:96
评论:0
1.本发明涉及车辆控制技术领域,尤其涉及一种基于驾驶场景信息的音乐播放方法、装置及设备。
背景技术:
2.随着国民经济的飞速增长,各种车辆被投入使用,极大地改善了人们的交通、运输条件,但与此同时,燃油机所排放的大量尾气污染了环境,在环保部门倡导绿色环保的背景下,各种用途的电动汽车应运而生。
3.现有电动汽车越来越智能化、多功能化发展,在驾驶车辆的时候,用户可向汽车中控系统请求播放音乐。然而,现有的汽车中控系统只能根据用户想要什么歌曲向用户播放相应的音乐,而不能根据用户所处的场景调整音乐播放音量,以及推荐合适的音乐。
技术实现要素:
4.本发明提供一种基于驾驶场景信息的音乐播放方法、装置及设备,以解决现有技术不能根据用户所处的场景调整音乐播放音量,以及推荐合适的音乐的问题,本发明能够基于驾驶场景信息调节音乐播放音量并向用户推荐适合当前场景的音乐,用户体验高。
5.为实现上述目的,本发明实施例提供了一种基于驾驶场景信息的音乐播放方法,包括:
6.获取车内场景信息;
7.当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
8.当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
9.控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。
10.作为上述方案的改进,所述获取车内场景信息,包括:
11.通过车内摄像头获取拍摄到的车内视频;
12.对所述车内视频进行识别,得到车内场景信息。
13.作为上述方案的改进,所述安静环境条件包括以下中的至少一种:
14.车内光亮强度小于预设的光亮强度阈值;
15.车内音量小于预设的音量阈值;
16.车内乘客的眼睛处于闭合状态的时长大于预设的时长阈值;
17.车内存在办公设备且所述办公设备处于工作状态;
18.车内存在办公设备,且所述办公设备与车内乘客的手部的重叠面积大于预设的重叠面积阈值。
19.作为上述方案的改进,所述获取车外场景信息,包括:
20.通过车外摄像头获取拍摄到的车外视频;
21.对所述车外视频进行识别,得到车外场景信息。
22.作为上述方案的改进,所述对所述车外视频进行识别,得到车外场景信息,包括:
23.提取所述车外视频中的若干图像帧和音频信息;
24.将所有所述图像帧输入至预设的场景识别模型中的第一子网络进行图像识别,得到每一所述图像帧的图像特征;
25.将所述音频信息输入至所述场景识别模型中的第二子网络进行音频分析,得到所述音频信息的音频特征;
26.将所述图像特征和所述音频特征按照时间节点进行对齐后输入至所述场景识别模型中的主网络中进行综合分析,得到车外场景信息。
27.作为上述方案的改进,所述车外场景信息至少包括:位置信息、天气信息和节日信息。
28.作为上述方案的改进,在所述确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型之后,所述基于驾驶场景信息的音乐播放方法还包括:
29.获取所述车外场景信息的若干关键词和音乐库中与所述车内场景信息匹配的音乐类型的每一首音乐的标签;
30.将所述关键词和所述标签分别转换为向量形式,得到若干第一词向量和若干第二词向量;
31.对于每一所述第一词向量,计算所述第一词向量分别和每一所述第二词向量之间的余弦距离,从所有所述余弦距离中选取最大的余弦距离;
32.对于每一首音乐,计算所有最大的余弦距离的平均值,将所述平均值作为与所述音乐与所述车外场景信息之间的匹配度;
33.将音乐库中与所述车内场景信息匹配的音乐类型中的音乐按照匹配度从高到低的顺序进行排序;
34.则,控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放包括:
35.控制车载娱乐设备按照确定的音量和匹配度从高到低的顺序进行音乐播放。
36.作为上述方案的改进,在所述控制车载娱乐设备按照确定的音量和音乐进行播放之后,所述基于驾驶场景信息的音乐播放方法还包括:
37.获取车内用户的人脸图像;
38.对所述人脸图像进行识别,得到面部表情;
39.基于面部表情对车内用户的情绪进行分析,当车内用户的情绪为预设的情绪状态时,控制所述车载娱乐设备切换音乐。
40.为实现上述目的,本发明实施例还提供了一种基于驾驶场景信息的音乐播放装置,包括:
41.车内场景信息获取模块,用于获取车内场景信息;
42.第一确定模块,用于当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
43.第二确定模块,用于当所述车内场景不满足所述安静环境条件时,确定所述待播
放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
44.音乐播放模块,用于控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。
45.为实现上述目的,本发明实施例还提供了一种终端设备,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器在执行所述计算机程序时实现如上述的基于驾驶场景信息的音乐播放方法。
46.与现有技术相比,本发明实施例提供的一种基于驾驶场景信息的音乐播放方法、装置及设备,具有如下有益效果:
47.(1)当车内场景信息满足安静环境条件时,先根据车内场景信息,确定音量模式及音乐类型,当车内场景信息不满足所述安静环境条件时,再获取车外场景信息,确定与车外场景信息匹配的音乐类型,并以中高音模式进行播放,能够灵活调整音乐播放模式,更加适配驾驶场景。
48.(2)以向量形式进行匹配,并选取与每个第一词向量的余弦距离最大的第二词向量及其对应的最大的余弦距离,计算每一首音乐中所有的最大的余弦距离的平均值,将平均值作为音乐与所述车外场景信息之间的匹配度,提高匹配精度。
49.(3)第一子网络进行图像识别、第二子网络进行音频分析,两个网络分工合作,提高分析效率;同时将分析得到的每张图像帧的图像特征及对应的音频特征按照时间节点进行对齐后输入主网络中进行综合分析,得到车外场景信息,以综合分析图像特征及对应时间节点的音频特征,提高车外场景信息识别精度。
附图说明
50.图1是本发明实施例提供的一种基于驾驶场景信息的音乐播放方法的流程图;
51.图2是本发明实施例提供的一种基于驾驶场景信息的音乐播放装置的结构框图;
52.图3是本发明实施例提供的一种终端设备的结构框图。
具体实施方式
53.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
54.参见图1,图1是本发明实施例提供的一种基于驾驶场景信息的音乐播放方法的流程图,所述基于驾驶场景信息的音乐播放方法包括:
55.s1、获取车内场景信息;
56.s2、当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
57.s3、当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
58.s4、控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。
59.可以理解的是,在音乐播放过程中或者响应音乐播放指令,获取车内场景信息;当车内场景信息满足安静环境条件时,判定到车内用户需要安静的环境,因此确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型,该音乐类型需要符合当前安静环境,可以是用户预先设置好的与所述车内场景信息匹配的音乐类型,例如可以为轻音乐或助眠曲,在此不做具体限制。
60.当车内场景信息不满足所述安静环境条件时,判定到车内用户不需要安静的环境,获取车外场景信息,确定与车外场景信息匹配的音乐类型,并以中高音模式进行播放。本发明实施例通过结合车内外场景信息即驾驶场景信息,灵活调整音乐播放模式,更加适配驾驶场景。
61.在一可选实施例中,所述获取车内场景信息,包括:
62.通过车内摄像头获取拍摄到的车内视频;
63.对所述车内视频进行识别,得到车内场景信息。
64.可以理解的是,在本发明实施例中,通过预设的场景识别模型对所述车内视频进行识别,得到车内场景信息。
65.在一可选实施例中,所述安静环境条件包括以下中的至少一种:
66.车内光亮强度小于预设的光亮强度阈值;
67.车内音量小于预设的音量阈值;
68.车内乘客的眼睛处于闭合状态的时长大于预设的时长阈值;
69.车内存在办公设备且所述办公设备处于工作状态;
70.车内存在办公设备,且所述办公设备与车内乘客的手部的重叠面积大于预设的重叠面积阈值。
71.可以理解的是,当车内场景信息存在有人员睡觉或办公时,此时所述车内场景信息满足预设的安静环境条件,则确定音乐播放的音量为低音模式,并确定音乐类型为与所述车内场景信息匹配的音乐类型。
72.在一可选实施例中,所述获取车外场景信息,包括:
73.通过车外摄像头获取拍摄到的车外视频;
74.对所述车外视频进行识别,得到车外场景信息。
75.在一可选实施例中,所述对所述车外视频进行识别,得到车外场景信息,包括:
76.提取所述车外视频中的若干图像帧和音频信息;
77.将所有所述图像帧输入至预设的场景识别模型中的第一子网络进行图像识别,得到每一所述图像帧的图像特征;
78.将所述音频信息输入至所述场景识别模型中的第二子网络进行音频分析,得到所述音频信息的音频特征;
79.将所述图像特征和所述音频特征按照时间节点进行对齐后输入至所述场景识别模型中的主网络中进行综合分析,得到车外场景信息。
80.可以理解的是,通过预设的场景识别模型对所述车外视频进行识别,得到车外场景信息,所述场景识别模型由主网络及第一子网络、第二子网络组成;具体可先提取车外视频流的多张图像帧,将多张图像帧输入第一子网络进行图像识别,得到每张图像帧的图像
特征,然后提取车外视频流的音频信息,将音频信息输入第二子网络进行音频分析,得到该音频信息对应的音频特征,将分析得到的每张图像帧的图像特征及对应的音频特征按照时间节点进行对齐后输入主网络中进行综合分析,得到车外场景信息,本发明实施例能够提高车外场景信息识别精度。
81.在一可选实施例中,所述车外场景信息至少包括:位置信息、天气信息和节日信息。
82.可以理解的是,该车外场景信息包括位置信息、天气信息、节日信息等等,基于所述车外场景信息确定播放的音乐内容,例如,当车外场景信息为当天节日是春节时,则播放庆祝春节相关的音乐,当车外场景信息为地点位于成都时,则播放成都这首歌。
83.示例性的,所述车外场景信息具有优先级,例如,节日信息的优先级最大,位置信息的优先级次之,天气信息的优先级最小,具体的,先分析节日信息,当判断该日为某个节日时,则播放该节日的音乐,若不是,则对位置信息进行分析,查找出歌词内容中含有该位置信息的音乐并进行播放,若无,则分析天气信息,播放与天气信息相符合的音乐。
84.在一可选实施例中,在所述确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型之后,所述基于驾驶场景信息的音乐播放方法还包括:
85.获取所述车外场景信息的若干关键词和音乐库中与所述车内场景信息匹配的音乐类型的每一首音乐的标签;
86.将所述关键词和所述标签分别转换为向量形式,得到若干第一词向量和若干第二词向量;
87.对于每一所述第一词向量,计算所述第一词向量分别和每一所述第二词向量之间的余弦距离,从所有所述余弦距离中选取最大的余弦距离;
88.对于每一首音乐,计算所有最大的余弦距离的平均值,将所述平均值作为与所述音乐与所述车外场景信息之间的匹配度;
89.将音乐库中与所述车内场景信息匹配的音乐类型中的音乐按照匹配度从高到低的顺序进行排序;
90.则,控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放包括:
91.控制车载娱乐设备按照确定的音量和匹配度从高到低的顺序进行音乐播放。
92.可以理解的是,当确定与所述车内场景信息匹配的音乐类型后,可以基于该音乐类型包括的音乐曲目的匹配度进行顺序播放,具体的,从车外场景信息中提取描述车外场景的一个或多个关键词,同时获取音乐库中该音乐类型包含的每首音乐的标签,该标签包括音乐的主旨、歌词或歌名等等;分别将每个关键词转换为向量形式,得到多个第一词向量,同时将每个标签也转换为向量形式,得到多个第二词向量;计算每个第一词向量与每个第二词向量之间的余弦距离,选取与每个第一词向量的余弦距离最大的第二词向量及其对应的最大余弦距离,计算所有最大余弦距离的平均值,该平均值用于反映车外场景信息与音乐的匹配度,将这些音乐按照匹配度从高到低的顺序进行排序,控制车载娱乐设备按照确定的音量和匹配度从高到低的顺序进行音乐播放。例如,当第一词向量为a、b、c,该首音乐的第二词向量为a、b、c、d时,假设a与每个a、b、c、d对应的余弦距离为30%、40%、50%、60%,则与a的余弦距离最大的第二词向量为d,对应的最大余弦距离为60%。依此类推,假设与b的余弦距离最大的第二词向量为a,对应的最大余弦距离为60%;与c的余弦距离最大
的第二词向量为d,对应的最大余弦距离为80%;与d的余弦距离最大的第二词向量为b,对应的最大余弦距离为80%,则该首音乐的所有最大余弦距离的平均值该平均值则作为该首音乐与车外场景信息之间的匹配度。
93.在一可选实施例中,在所述控制车载娱乐设备按照确定的音量和音乐进行播放之后,所述基于驾驶场景信息的音乐播放方法还包括:
94.获取车内用户的人脸图像;
95.对所述人脸图像进行识别,得到面部表情;
96.基于面部表情对车内用户的情绪进行分析,当车内用户的情绪为预设的情绪状态时,控制所述车载娱乐设备切换音乐。
97.可以理解的是,本发明实施例还可采集车内用户在播放音乐时的人脸图像,调用预设的表情识别模型对人脸图像进行识别,得到面部表情,基于面部表情对车内用户的情绪进行分析,当车内用户的情绪表现为不喜欢该目标音乐时,切换音乐,例如切换为匹配度仅低于当前播放音乐的音乐,进行播放。
98.参见图2,图2是本发明实施例提供的一种基于驾驶场景信息的音乐播放装置10的结构框图,所述基于驾驶场景信息的音乐播放装置10包括:
99.车内场景信息获取模块11,用于获取车内场景信息;
100.第一确定模块12,用于当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
101.第二确定模块13,用于当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;
102.音乐播放模块14,用于控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。
103.可选地,所述获取车内场景信息,包括:
104.通过车内摄像头获取拍摄到的车内视频;
105.对所述车内视频进行识别,得到车内场景信息。
106.可选地,所述安静环境条件包括以下中的至少一种:
107.车内光亮强度小于预设的光亮强度阈值;
108.车内音量小于预设的音量阈值;
109.车内乘客的眼睛处于闭合状态的时长大于预设的时长阈值;
110.车内存在办公设备且所述办公设备处于工作状态;
111.车内存在办公设备,且所述办公设备与车内乘客的手部的重叠面积大于预设的重叠面积阈值。
112.可选地,所述获取车外场景信息,包括:
113.通过车外摄像头获取拍摄到的车外视频;
114.对所述车外视频进行识别,得到车外场景信息。
115.可选地,所述对所述车外视频进行识别,得到车外场景信息,包括:
116.提取所述车外视频中的若干图像帧和音频信息;
117.将所有所述图像帧输入至预设的场景识别模型中的第一子网络进行图像识别,得到每一所述图像帧的图像特征;
118.将所述音频信息输入至所述场景识别模型中的第二子网络进行音频分析,得到所述音频信息的音频特征;
119.将所述图像特征和所述音频特征按照时间节点进行对齐后输入至所述场景识别模型中的主网络中进行综合分析,得到车外场景信息。
120.可选地,所述车外场景信息至少包括:位置信息、天气信息和节日信息。
121.可选地,所述基于驾驶场景信息的音乐播放装置还包括:
122.关键词和标签获取模块,用于获取所述车外场景信息的若干关键词和音乐库中与所述车内场景信息匹配的音乐类型的每一首音乐的标签;
123.转换模块,用于将所述关键词和所述标签分别转换为向量形式,得到若干第一词向量和若干第二词向量;
124.余弦距离计算模块,用于对于每一所述第一词向量,计算所述第一词向量分别和每一所述第二词向量之间的余弦距离,从所有所述余弦距离中选取最大的余弦距离;
125.匹配度计算模块,用于对于每一首音乐,计算所有最大的余弦距离的平均值,将所述平均值作为与所述音乐与所述车外场景信息之间的匹配度;
126.排序模块,用于将音乐库中与所述车内场景信息匹配的音乐类型中的音乐按照匹配度从高到低的顺序进行排序;
127.则,所述音乐播放模块还用于:
128.控制车载娱乐设备按照确定的音量和匹配度从高到低的顺序进行音乐播放。
129.可选地,所述基于驾驶场景信息的音乐播放装置还包括:
130.人脸图像获取模块,用于获取车内用户的人脸图像;
131.面部表情识别模块,用于对所述人脸图像进行识别,得到面部表情;
132.音乐切换模块,用于基于面部表情对车内用户的情绪进行分析,当车内用户的情绪为预设的情绪状态时,控制所述车载娱乐设备切换音乐。
133.值得说明的是,本发明实施例所述的基于驾驶场景信息的音乐播放装置10中各个模块的工作过程可参考上述实施例所述的基于驾驶场景信息的音乐播放方法的工作过程,在此不再赘述。
134.本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序;其中,所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行如上述实施例所述的基于驾驶场景信息的音乐播放方法。
135.参见图3,图3是本发明实施例提供的一种终端设备20的结构框图,所述终端设备20包括:处理器21、存储器22以及存储在所述存储器22中并可在所述处理器21上运行的计算机程序。所述处理器21执行所述计算机程序时实现上述基于驾驶场景信息的音乐播放方法实施例中的步骤。或者,所述处理器21执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能。
136.示例性的,所述计算机程序可以被分割成一个或多个模块/单元,所述一个或者多
个模块/单元被存储在所述存储器22中,并由所述处理器21执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述终端设备20中的执行过程。
137.所述终端设备20可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备20可包括,但不仅限于,处理器21、存储器22。本领域技术人员可以理解,所述示意图仅仅是终端设备20的示例,并不构成对终端设备20的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备20还可以包括输入输出设备、网络接入设备、总线等。
138.所称处理器21可以是中央处理单元(central processing unit,cpu),还可以是其他通用处理器、数字信号处理器(digital signal processor,dsp)、专用集成电路(application specific integrated circuit,asic)、现场可编程门阵列(field-programmable gate array,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器21是所述终端设备20的控制中心,利用各种接口和线路连接整个终端设备20的各个部分。
139.所述存储器22可用于存储所述计算机程序和/或模块,所述处理器21通过运行或执行存储在所述存储器22内的计算机程序和/或模块,以及调用存储在存储器22内的数据,实现所述终端设备20的各种功能。所述存储器22可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器22可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(smart media card,smc),安全数字(secure digital,sd)卡,闪存卡(flash card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
140.其中,所述终端设备20集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器21执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom,read-only memory)、随机存取存储器(ram,random access memory)、电载波信号、电信信号以及软件分发介质等。
141.需说明的是,以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本发明提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解
并实施。
142.与现有技术相比,本发明实施例提供的一种基于驾驶场景信息的音乐播放方法、装置及设备,具有如下有益效果:
143.(1)当车内场景信息满足安静环境条件时,先根据车内场景信息,确定音量模式及音乐类型,当车内场景信息不满足所述安静环境条件时,再获取车外场景信息,确定与车外场景信息匹配的音乐类型,并以中高音模式进行播放,能够灵活调整音乐播放模式,更加适配驾驶场景。
144.(2)以向量形式进行匹配,并选取与每个第一词向量的余弦距离最大的第二词向量及其对应的最大的余弦距离,计算每一首音乐中所有的最大的余弦距离的平均值,将平均值作为音乐与所述车外场景信息之间的匹配度,提高匹配精度。
145.(3)第一子网络进行图像识别、第二子网络进行音频分析,两个网络分工合作,提高分析效率;同时将分析得到的每张图像帧的图像特征及对应的音频特征按照时间节点进行对齐后输入主网络中进行综合分析,得到车外场景信息,以综合分析图像特征及对应时间节点的音频特征,提高车外场景信息识别精度。
146.以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。
技术特征:
1.一种基于驾驶场景信息的音乐播放方法,其特征在于,包括:获取车内场景信息;当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。2.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,所述获取车内场景信息,包括:通过车内摄像头获取拍摄到的车内视频;对所述车内视频进行识别,得到车内场景信息。3.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,所述安静环境条件包括以下中的至少一种:车内光亮强度小于预设的光亮强度阈值;车内音量小于预设的音量阈值;车内乘客的眼睛处于闭合状态的时长大于预设的时长阈值;车内存在办公设备且所述办公设备处于工作状态;车内存在办公设备,且所述办公设备与车内乘客的手部的重叠面积大于预设的重叠面积阈值。4.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,所述获取车外场景信息,包括:通过车外摄像头获取拍摄到的车外视频;对所述车外视频进行识别,得到车外场景信息。5.如权利要求4所述的基于驾驶场景信息的音乐播放方法,其特征在于,所述对所述车外视频进行识别,得到车外场景信息,包括:提取所述车外视频中的若干图像帧和音频信息;将所有所述图像帧输入至预设的场景识别模型中的第一子网络进行图像识别,得到每一所述图像帧的图像特征;将所述音频信息输入至所述场景识别模型中的第二子网络进行音频分析,得到所述音频信息的音频特征;将所述图像特征和所述音频特征按照时间节点进行对齐后输入至所述场景识别模型中的主网络中进行综合分析,得到车外场景信息。6.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,所述车外场景信息至少包括:位置信息、天气信息和节日信息。7.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,在所述确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型之后,所述基于驾驶场景信息的音乐播放方法还包括:获取所述车外场景信息的若干关键词和音乐库中与所述车内场景信息匹配的音乐类
型的每一首音乐的标签;将所述关键词和所述标签分别转换为向量形式,得到若干第一词向量和若干第二词向量;对于每一所述第一词向量,计算所述第一词向量分别和每一所述第二词向量之间的余弦距离,从所有所述余弦距离中选取最大的余弦距离;对于每一首音乐,计算所有最大的余弦距离的平均值,将所述平均值作为与所述音乐与所述车外场景信息之间的匹配度;将音乐库中与所述车内场景信息匹配的音乐类型中的音乐按照匹配度从高到低的顺序进行排序;则,控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放包括:控制车载娱乐设备按照确定的音量和匹配度从高到低的顺序进行音乐播放。8.如权利要求1所述的基于驾驶场景信息的音乐播放方法,其特征在于,在所述控制车载娱乐设备按照确定的音量和音乐进行播放之后,所述基于驾驶场景信息的音乐播放方法还包括:获取车内用户的人脸图像;对所述人脸图像进行识别,得到面部表情;基于面部表情对车内用户的情绪进行分析,当车内用户的情绪为预设的情绪状态时,控制所述车载娱乐设备切换音乐。9.一种基于驾驶场景信息的音乐播放装置,其特征在于,包括:车内场景信息获取模块,用于获取车内场景信息;第一确定模块,用于当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;第二确定模块,用于当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;音乐播放模块,用于控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。10.一种终端设备,其特征在于,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器在执行所述计算机程序时实现如权利要求1~8任一项所述的基于驾驶场景信息的音乐播放方法。
技术总结
本发明公开了一种基于驾驶场景信息的音乐播放方法、装置及设备,包括:获取车内场景信息;当所述车内场景信息满足预设的安静环境条件时,确定待播放音乐的音量为低音量,以及确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;当所述车内场景不满足所述安静环境条件时,确定所述待播放音乐的音量为大于所述低音量的音量,并获取车外场景信息,确定所述待播放音乐的音乐类型为与所述车内场景信息匹配的音乐类型;控制车载娱乐设备按照确定的音量和音乐类型进行音乐播放。采用本发明实施例能够基于驾驶场景信息调节音乐播放音量并向用户推荐适合当前场景的音乐,用户体验高。户体验高。户体验高。
技术研发人员:罗国辉 沈仲孝 刘棨 冉光伟 张莹 刘俊峰
受保护的技术使用者:星河智联汽车科技有限公司
技术研发日:2023.04.03
技术公布日:2023/7/20
版权声明
本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)
飞行汽车 https://www.autovtol.com/
