一种无线扩音方法、装置及系统与流程

1.本技术涉及通信技术领域，尤其涉及一种无线扩音方法、装置及系统。


背景技术：

2.在会议室场景或教室场景等需要进行无线扩音的场景中，常通过用户随身携带或场景预先设置的扩音设备实现无线扩音，例如，用户随身携带的无线拾音设备(如蓝牙耳机或领夹麦克风等)与会议室终端或教室终端等终端设备建立无线连接后，用户随身携带的无线拾音设备可以将拾取的音频数据发送给会议室终端或教室终端等终端设备，使得会议室终端或教室终端等终端设备通过自身携带的扩音设备对接收的音频数据进行扩音。
3.然而，由于无线拾音设备和终端设备之间的无线连接以及开关扩音等操作都需要用户手动进行，并且无线拾音设备与终端设备之间的无线连接只能根据无线拾音设备与终端设备之间的距离自动断开或重连，无法根据用户需求自动断开或重连，例如，用户离开会议室或教室时未摘取无线拾音设备，那么无线拾音设备和会议室终端或教室终端等终端设备之间的无线连接只有在用户与会议室或教室的距离大于阈值时才会自动断开，在距离不大于阈值时不会自动断开，若此时用户未手动关闭扩音并接听私人电话，将造成隐私泄露，导致用户体验较差。
4.由此可见，现有的无线扩音方法不仅需要手动进行配对无线连接、开关扩音等操作，而且无线连接无法根据用户需求自动断开或重连，导致用户体验较差。


技术实现要素：

5.本技术实施例提供一种无线扩音方法、装置及系统，以解决现有的无线扩音方法存在的需要手动进行各种配对的无线连接、开关扩音等操作，并且无线连接无法根据用户需求自动断开或重连，导致用户体验较差。
6.第一方面，本技术实施例提供一种无线扩音方法，包括：
7.终端设备与无线拾音设备建立无线连接并开启扩音功能，将与所述无线拾音设备关联的用户的特征信息或所述无线拾音设备的设备信息和所述无线连接的连接信息绑定存储；
8.确定监控区域，并根据所述用户的特征信息确定所述用户是否在所述监控区域或根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域；
9.若确定不在所述监控区域，则断开所述无线连接并关掉扩音功能。
10.基于上述技术方案，终端设备可以与无线拾音设备建立无线连接并开启扩音功能，将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储，确定监控区域，并根据用户的特征信息确定用户是否在监控区域或根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域，若确定不在监控区域，则断开无线连接并关掉扩音功能。通过用户的特征信息或无线拾音设备的设备信息确定是否用户或无线拾音设备是否在监控区域，不仅实现根据用户需求自动断开与无线拾音设备之间
的无线连接，而且不需要手动进行配对无线连接、开关扩音等操作，提高用户体验。
11.一种可能的设计中，确定监控区域，包括：
12.根据与所述终端设备关联的摄像头的视野确定所述监控区域；或者，
13.根据与所述终端设备关联的信号检测设备的检测范围确定所述监控区域。
14.一种可能的设计中，所述用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。
15.一种可能的设计中，根据所述用户的特征信息确定所述用户是否在所述监控区域，包括：
16.若所述用户的特征信息包括2d人脸特征，则根据所述2d人脸特征以及与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
17.若所述用户的特征信息包括声纹特征，则根据所述声纹特征以及与所述终端设备关联的拾音设备针对所述监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定所述用户是否在所述监控区域；
18.若所述用户的特征信息包括姿态特征，则根据所述姿态特征与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
19.若所述用户的特征信息包括3d人脸特征，则根据所述3d人脸特征与所述终端设备关联的3d结构光检测设备针对所述监控区域获取的图像数据，确定所述用户是否在所述监控区域。
20.一种可能的设计中，根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域，包括：
21.将所述无线拾音设备的设备信息发送给所述信号检测设备，以使所述信号检测设备根据接收到的所述无线拾音设备发送的无线信号的时间和强度确定所述无线拾音设备的位置信息，并将所述位置信息发送给所述终端设备；
22.根据所述位置信息确定所述无线拾音设备是否在所述监控区域。
23.一种可能的设计中，断开所述无线连接之后，还包括：
24.确定所述用户不在所述监控区域或所述无线拾音设备不在所述监控区域的持续时长是否大于阈值；
25.若不大于所述阈值，则根据所述无线连接的连接信息重新建立所述无线连接并开启扩音功能；
26.若大于所述阈值，则删除所述用户的特征信息和所述无线连接的连接信息，或者，删除所述无线拾音设备的设备信息和所述无线连接的连接信息。
27.基于上述技术方案，终端设备可以断开与无线拾音设备建立的无线连接之后，确定用户不在监控区域或无线拾音设备不在监控区域的持续时长是否大于阈值，若不大于阈值，则根据无线连接的连接信息重新建立无线连接并开启扩音功能，若大于阈值，则删除用户的特征信息和无线连接的连接信息，或者，删除无线拾音设备的设备信息和无线连接的连接信息。通过用户不在监控区域或无线拾音设备不在监控区域的持续时长确定是否与无线拾音设备重新建立无线连接并开启扩音功能，不仅实现根据用户需求自动建立与无线拾音设备之间的无线连接，而且不需要手动进行配对无线连接、开关扩音等操作，提高用户体
验。
28.一种可能的设计中，还包括：
29.若所述无线拾音设备为蓝牙耳机，则确定所述蓝牙耳机是否具有主动降噪功能；
30.若确定具有主动降噪功能，则关闭所述蓝牙耳机的主动降噪功能。
31.第二方面，本技术还提供一种无线扩音装置，所述装置具有实现上述第一方面或者第一方面的任一种可能的设计中方法的功能，所述功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块，比如包括第一处理模块、确定模块、第二处理模块。
32.第一处理模块，用于与无线拾音设备建立无线连接并开启扩音功能，将与所述无线拾音设备关联的用户的特征信息或所述无线拾音设备的设备信息和所述无线连接的连接信息绑定存储；
33.确定模块，用于确定监控区域，并根据所述用户的特征信息确定所述用户是否在所述监控区域或根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域；
34.第二处理模块，用于若确定不在所述监控区域，则断开所述无线连接并关掉扩音功能。
35.一种可能的设计中，所述确定模块，具体用于：
36.根据与所述终端设备关联的摄像头的视野确定所述监控区域；或者，
37.根据与所述终端设备关联的信号检测设备的检测范围确定所述监控区域。
38.一种可能的设计中，所述用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。
39.一种可能的设计中，所述确定模块，具体用于：
40.若所述用户的特征信息包括2d人脸特征，则根据所述2d人脸特征以及与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
41.若所述用户的特征信息包括声纹特征，则根据所述声纹特征以及与所述终端设备关联的拾音设备针对所述监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定所述用户是否在所述监控区域；
42.若所述用户的特征信息包括姿态特征，则根据所述姿态特征与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
43.若所述用户的特征信息包括3d人脸特征，则根据所述3d人脸特征与所述终端设备关联的3d结构光检测设备针对所述监控区域获取的图像数据，确定所述用户是否在所述监控区域。
44.一种可能的设计中，所述确定模块，具体用于：
45.将所述无线拾音设备的设备信息发送给所述信号检测设备，以使所述信号检测设备根据接收到的所述无线拾音设备发送的无线信号的时间和强度确定所述无线拾音设备的位置信息，并将所述位置信息发送给所述终端设备；
46.根据所述位置信息确定所述无线拾音设备是否在所述监控区域。
47.一种可能的设计中，所述装置还包括第三处理模块，用于：
48.确定所述用户不在所述监控区域或所述无线拾音设备不在所述监控区域的持续时长是否大于阈值；
49.若不大于所述阈值，则根据所述无线连接的连接信息重新建立所述无线连接并开启扩音功能；
50.若大于所述阈值，则删除所述用户的特征信息和所述无线连接的连接信息，或者，删除所述无线拾音设备的设备信息和所述无线连接的连接信息。
51.一种可能的设计中，所述装置还包括第四处理模块，用于：
52.若所述无线拾音设备为蓝牙耳机，则确定所述蓝牙耳机是否具有主动降噪功能；
53.若确定具有主动降噪功能，则关闭所述蓝牙耳机的主动降噪功能。
54.第三方面，本技术还提供一种无线扩音系统，所述无线扩音系统包括至少一个处理器和存储器；所述存储器存储一个或多个计算机程序；当所述存储器存储的一个或多个计算机程序被所述至少一个处理器执行时，使得所述无线扩音系统执行上述第一方面或上述第一方面的任意一种可能的设计的方法。
55.第四方面，本技术还提供一种计算机存储介质，所述计算机存储介质包括计算机指令，当所述计算机指令在计算机上运行时，使得所述计算机执行上述第一方面或上述第一方面的任意一种可能的设计的方法。
56.第五方面，本技术还提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行上述第一方面或上述第一方面的任意一种可能的设计的方法。
57.第六方面，本技术还提供一种芯片，所述芯片可以与无线扩音系统的存储器耦合，用于调用存储器中存储的计算机程序并执行上述第一方面或上述第一方面的任意一种可能的设计的方法。
58.上述第二方面至第六方面及其任意一种可能的设计中的有益效果可以参考上述对第一方面及其任意一种可能的设计中方法的有益效果的描述。
附图说明
59.图1为本技术实施例提供的一种无线扩音系统的结构示意图；
60.图2为本技术实施例提供的一种无线扩音方法的流程示意图；
61.图3a为本技术实施例提供的一种无线扩音场景的示意图；
62.图3b为本技术实施例提供的另一种无线扩音场景的示意图；
63.图3c为本技术实施例提供的一种声源定位的示意图；
64.图3d为本技术实施例提供的另一种无线扩音场景的示意图；
65.图3e为本技术实施例提供的另一种无线扩音场景的示意图；
66.图3f为本技术实施例提供的另一种无线扩音场景的示意图；
67.图4为本技术实施例提供的一种无线扩音装置的结构示意图；
68.图5为本技术实施例提供的又一种无线扩音系统的结构示意图。
具体实施方式
69.为了使本技术实施例的目的、技术方案和优点更加清楚，下面将结合本技术实施
例中的附图，对本技术实施例中的技术方案进行清楚、完整的描述。
70.如前述的背景技术所述，当用户随身携带的无线拾音设备(如蓝牙耳机或领夹麦克风等)与会议室终端或教室终端等终端设备建立无线连接后，用户随身携带的无线拾音设备可以将拾取的音频数据发送给会议室终端或教室终端等终端设备，使得会议室终端或教室终端等终端设备通过自身携带的扩音设备对接收的音频数据进行扩音，从而能够在不需要用户单独购入扩音设备的情况下实现本地扩音。然而，当用户离开会议室或教室时未摘取无线拾音设备，那么无线拾音设备和会议室终端或教室终端等终端设备之间的无线连接只有在用户与会议室或教室的距离大于阈值时才会自动断开，在距离不大于阈值时不会自动断开，若此时用户未手动关闭扩音并接听私人电话，将造成隐私泄露。当用户离开会议室或教室时摘取无线拾音设备或手动关闭扩音，那么用户重新进入会议室或教室时需要重新佩戴无线拾音设备或手动开启扩音。由此可见，现有的无线扩音方法存在无线拾音设备和终端设备之间的无线连接以及开关扩音等操作都需要用户手动进行，并且无线拾音设备与终端设备之间的无线连接只能根据无线拾音设备与终端设备之间的距离自动断开或重连，无法根据用户需求自动断开或重连等问题，导致用户体验较差。
71.鉴于此，本技术实施例提供一种无线扩音方法，该方法应用于终端设备，可以与无线拾音设备建立无线连接并开启扩音功能，将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储，确定监控区域，并根据用户的特征信息确定用户是否在监控区域或根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域，若确定不在监控区域，则断开无线连接并关掉扩音功能。通过用户的特征信息或无线拾音设备的设备信息确定是否用户或无线拾音设备是否在监控区域，不仅实现根据用户需求自动断开与无线拾音设备之间的无线连接，而且不需要手动进行配对无线连接、开关扩音等操作，提高用户体验。
72.应理解，本技术实施例的技术方案可以应用于一种无线扩音系统，示例性地，如图1所示，为本技术实施例提供的一种无线扩音系统的结构示意图，图1中的无线扩音系统包括终端设备110，无线拾音设备120(如蓝牙耳机或领夹麦克风等)，与终端设备110关联的摄像头130、与终端设备110关联的信号检测设备140、与终端设备110关联的拾音设备150以及与终端设备110关联的3d结构光检测设备160。其中，摄像头130与信号检测设备140对于无线扩音系统是可选的，无线扩音系统可以只包括摄像头130，也可以只包括信号检测设备140，也可以包括摄像头130和信号检测设备140，本技术实施例对此不作具体的限定。拾音设备150以及3d结构光检测设备160对于无线扩音系统也是可选的，无线扩音系统可以包括拾音设备150和/或3d结构光检测设备160，也可以不包括拾音设备150和/或3d结构光检测设备160，本技术实施例对此不作具体的限定。为了方便说明，图1以无线扩音系统包括摄像头130、信号检测设备140、拾音设备150和3d结构光检测设备160为例。
73.应理解，在本技术实施例中，终端设备110可以是诸如手机、平板电脑、车载设备、增强现实(augmented reality，ar)/虚拟现实(virtual reality，vr)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，umpc)、上网本、个人数字助理(personal digital assistant，pda)、智能家居设备(例如，智能电视，智能音箱，智能摄像头等)等终端设备，本技术实施例对终端设备的具体类型不作任何限制。
74.应理解，在本技术实施例中，所提到的终端设备还可以是可穿戴设备。可穿戴设备
也可以称为穿戴式智能设备或智能穿戴式设备等，是应用穿戴式技术对日常穿戴进行智能化设计、开发出可以穿戴的设备的总称，如眼镜、手套、手表、服饰及鞋等。可穿戴设备即直接穿在身上，或是整合到用户的衣服或配件的一种便携式设备。可穿戴设备不仅仅是一种硬件设备，更是通过软件支持以及数据交互、云端交互来实现强大的功能。广义穿戴式智能设备包括功能全、尺寸大、可不依赖智能手机实现完整或者部分的功能，例如：智能手表或智能眼镜等，以及只专注于某一类应用功能，需要和其它设备如智能手机配合使用，如各类进行体征监测的智能手环、智能头盔、智能首饰等。
75.而如上介绍的各种终端设备，如果位于车辆中，例如放置在车辆内或安装在车辆内，都可以认为是车载终端设备，车载终端设备也称为车载单元(on-board unit，obu)。如果位于会议室或教室中，例如安装在会议室或教室内，可以认为是会议室终端设备或教室终端设备。
76.应理解，在本技术实施例中，终端设备110具备扩音功能，例如，终端设备为教室终端设备时，手机可以通过自身携带的扩音设备(如扬声器)进行扩音，也可以通过与教室终端设备关联的扩音设备进行扩音。可选的，终端设备110具备拾音功能，例如，终端设备为教室终端设备时，教室终端设备可以通过自身携带的拾音设备(如麦克风阵列)进行拾音，也可以通过与教室终端设备关联的拾音设备进行拾音。
77.应理解，图1中仅为便于理解，示例性地示出了一个无线扩音系统，但这不应对本技术构成任何限定，该无线扩音系统中还可以包括更多数量的终端设备，也可以包括更多数量的无线拾音设备，与不同的终端设备建立无线连接的无线拾音设备可以是相同的无线拾音设备，也可以是不同的无线拾音设备，与不同的终端设备通信的无线拾音设备的数量可以相同，也可以不同，本技术实施例对此不做具体限定。
78.以上介绍了本技术实施例提供的一种无线扩音系统，接下来结合附图介绍本技术实施例提供的一种无线扩音方法。
79.应理解，本技术实施例中的术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b的情况，其中a，b可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指的这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b，或c中的至少一项(个)，可以表示：a，b，c，a和b，a和c，b和c，或a和b和c。
80.如图2所示，为本技术实施例提供的一种无线扩音方法的流程示意图，该无线扩音方法可以应用于图1所示的或者与图1功能结构类似的无线扩音系统，本技术实施例在此不作具体限制。该无线扩音方法的具体流程描述如下。应理解，在本技术实施例中，以终端设备作为执行方法的执行主体为例，对方法进行说明，作为示例而非限定，执行方法的执行主体也可以是应用于终端设备的芯片、芯片系统、或处理器等。
81.s201、与无线拾音设备建立无线连接并开启扩音功能，将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储。
82.在一些实施例中，终端设备与无线拾音设备建立无线连接之后，可以在接收到扩
音开启指令时开启扩音功能，例如，在接收到无线拾音设备通过无线连接发送的音频数据时，可以通过自身携带的扩音设备(如扬声器)对音频数据进行扩音，也可以通过与终端设备关联的扩音设备对音频数据进行扩音，并将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储。
83.需要说明的是，在本技术实施例中，与无线拾音设备关联的用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。其中，终端设备可以通过与终端设备关联的摄像头获取与无线拾音设备关联的用户的2d人脸特征，例如，终端设备可以通过与终端设备关联的摄像头拍摄与无线拾音设备关联的用户的图像，提取图像的方向梯度直方图(histogram of oriented gradient，hog)特征，利用支持向量机(support vector machines，svm)对hog特征进行分类，确定图像的人脸区域，提取人脸区域的关键点作为特征点x，将x输入识别模型，得到2d人脸特征y＝model(x)，将2d人脸特征y与无线连接的连接信息info(connect)绑定存储(y:info(connect))。终端设备可以通过自身携带的拾音设备或者与终端设备关联的拾音设备获取与无线拾音设备关联的用户的声纹特征。终端设备可以通过与终端设备关联的摄像头获取与无线拾音设备关联的用户的姿态特征。终端设备可以通过与终端设备关联的3d结构光检测设备获取与无线拾音设备关联的用户的3d人脸特征。
84.s202、确定监控区域，并根据用户的特征信息确定用户是否在监控区域或根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域。
85.在一些实施例中，终端设备在将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储之后，终端设备可以根据与终端设备关联的摄像头的视野确定监控区域，并根据与无线拾音设备关联的用户的特征信息确定与无线拾音设备关联的用户是否在监控区域。
86.具体的，若特征信息包括2d人脸特征，则根据2d人脸特征以及与终端设备关联的摄像头针对监控区域获取的视频数据，确定与无线拾音设备关联的用户是否在监控区域。
87.示例性的，如图3a所示，为本技术实施例提供的一种无线扩音场景的示意图，终端设备为教室的教室终端设备，无线拾音设备为用户随身携带的蓝牙耳机，与终端设备关联的摄像头的视野360度覆盖教室内部，终端设备可以根据与终端设备关联的摄像头的视野确定监控区域为教室内部。若用户的特征信息包括2d人脸特征，则终端设备可以根据与终端设备关联的摄像头针对教室内部获取的视频数据，确定所有在教室内部的人的2d人脸特征，与存储的用户的2d人脸特征进行匹配，若匹配失败，则确定用户不在教室内部，若匹配成功，则确定用户在教室内部。
88.若特征信息包括声纹特征，则根据声纹特征以及与终端设备关联的拾音设备针对监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定与无线拾音设备关联的用户是否在监控区域。
89.示例性的，如图3b所示，为本技术实施例提供的另一种无线扩音场景的示意图，终端设备为教室的教室终端设备，无线拾音设备为用户随身携带的蓝牙耳机，与终端设备关联的摄像头的视野180度覆盖教室内部，终端设备可以根据与终端设备关联的摄像头的视野确定监控区域为教室内部。若用户的特征信息包括2d人脸特征和声纹特征，则终端设备可以根据用户的2d人脸特征和与终端设备关联的摄像头针对教室内部获取的视频数据进
行目标视觉追踪，例如，从与终端设备关联的摄像头针对教室内部获取的视频数据中确定连续多帧图像，先从第一帧图像开始按序对每一帧图像使用目标检测算法(例如yolo算法)，检测到2d人脸特征与用户的2d人脸特征匹配的目标，再对检测到目标的帧图像使用信号追踪算法(例如卡尔曼滤波算法)，预测目标在下一帧图像中的位置，然后将目标、目标在下一帧图像中的预测位置和下一帧图像输入匹配算法(例如匈牙利匹配算法)，得到目标在下一帧图像中的实际位置，以此类推。由于摄像头的视野仅是180度覆盖教室内部，所以为了提高目标视觉追踪的准确性，终端设备还可以根据用户的声纹特征和与终端设备关联的拾音设备针对监控区域获取的音频数据进行目标声纹匹配以及声源定位，例如，先确定与终端设备关联的拾音设备针对监控区域获取的音频数据的声纹特征与用户的声纹特征是否匹配，若匹配，则对与终端设备关联的拾音设备针对监控区域获取的音频数据的声源进行声源定位，如图3c所示，为本技术实施例提供的一种声源定位的示意图，当声源与终端设备关联的麦克风阵列的距离大于麦克风阵列中相邻的两个麦克风m1和m2的距离d的时候，声源发出的声波sk为平面波，θ为声源与终端设备关联的麦克风阵列之间的，先确定由于声源与麦克风阵列中不同的麦克风之间的角度不同导致不同的麦克风接收音频数据的时延δt，再根据公式δt＝d cosθ/v确定声源与终端设备关联的麦克风阵列之间的夹角θ，估计出声源的位置。结合目标视觉追踪结果与目标声纹匹配以及声源定位结果，确定用户是否在教室内部。
90.若特征信息包括姿态特征，则根据姿态特征与终端设备关联的摄像头针对监控区域获取的视频数据，确定与无线拾音设备关联的用户是否在监控区域。
91.示例性的，如图3d所示，为本技术实施例提供的另一种无线扩音场景的示意图，终端设备为教室的教室终端设备，无线拾音设备为用户随身携带的蓝牙耳机，与终端设备关联的摄像头的视野仅覆盖教室内部的门口，终端设备可以根据与终端设备关联的摄像头的视野确定监控区域为教室内部。若用户的特征信息包括姿态特征，则终端设备可以根据与终端设备关联的摄像头针对教室内部获取的视频数据，确定所有离开或进入教室内部的人的姿态特征，与存储的用户的姿态特征进行匹配，若匹配成功，则确定用户离开或进入教室内部。
92.若特征信息包括3d人脸特征，则根据3d人脸特征与终端设备关联的3d结构光检测设备针对监控区域获取的图像数据，确定与无线拾音设备关联的用户是否在监控区域。其中，3d结构光检测设备包括摄像头和投射器，工作原理是投射器将正弦条纹、激光条纹等主动结构信息投射到待检测的物体表面，摄像头拍摄待检测的物体表面得到结构光图像，经过图像3d解析计算实现3d重建。
93.示例性的，如图3e所示，为本技术实施例提供的另一种无线扩音场景的示意图，终端设备为教室的教室终端设备，无线拾音设备为用户随身携带的蓝牙耳机，教室门口处安装了与终端设备关联的两套3d结构光检测设备，一套面向教室内部，目的是检测离开教室的人，另一套面向教室外部，目的是检测进入教室的人，由于与终端设备关联的摄像头即是与终端设备关联的3d结构光检测设备中的摄像头，那么与终端设备关联的摄像头的视野仅覆盖教室内部的门口，终端设备可以根据与终端设备关联的摄像头的视野确定监控区域为教室内部。若用户的特征信息包括3d人脸特征，则终端设备可以根据与终端设备关联的3d结构光检测设备针对教室内部获取的视频数据，确定所有离开或进入教室内部的人的3d人
脸特征，与存储的用户的3d人脸特征进行匹配，若匹配成功，则确定用户离开或进入教室内部。
94.终端设备也可以根据与终端设备关联的信号检测设备的检测范围确定监控区域，并根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域。
95.具体的，终端设备将无线拾音设备的设备信息发送给与终端设备关联的信号检测设备，以使与终端设备关联的信号检测设备根据接收到的无线拾音设备发送的无线信号的时间和强度确定无线拾音设备的位置信息，并将无线拾音设备的位置信息发送给终端设备，终端设备根据无线拾音设备的位置信息确定无线拾音设备是否在监控区域。
96.其中，信号检测设备的工作原理是先接收待检测的无线拾音设备发送的无线信号，该无线信号可以分为电磁波和机械波两种，电磁波主要包含超宽带、蓝牙、红外线等，机械波主要包含超声波，再根据接收到的待检测的无线拾音设备发送的无线信号的时间和强度确定待检测的无线拾音设备的位置信息(与信号检测设备之间的距离或角度)。方式一，信号检测设备根据接收到的待检测的无线拾音设备发送的无线信号的时间确定待检测的无线拾音设备与信号检测设备之间的距离，例如，当有两个以上的信号检测设备参与检测的时候，可根据三角定位法测量出待检测的无线拾音设备与两个以上的信号检测设备之间的距离，三角定位的原理是假设一未知坐标的检测点和两个已知坐标的参考点可形成一个三角形，根据三角形中参考边的长度，检测两个参考点与检测点形成的角度。方式二，根据不同的信号检测设备之间的距离和所接收无线信号的时间差，得到待检测的无线拾音设备与信号检测设备之间的角度。方式三，检测无线信号在待检测的无线拾音设备与信号检测设备之间的往返时间，确定待检测的无线拾音设备与信号检测设备之间的距离。
97.示例性的，如图3f所示，为本技术实施例提供的另一种无线扩音场景的示意图，终端设备为教室的教室终端设备，无线拾音设备为用户随身携带的蓝牙耳机，教室门口处安装了一套与终端设备关联的信号检测设备，检测范围为教室门口，终端设备可以根据与终端设备关联的信号检测设备的检测范围确定监控区域为教室内部。终端设备将无线拾音设备的设备信息发送给与终端设备关联的信号检测设备之后，与终端设备关联的信号检测设备先根据无线拾音设备的设备信息确定待检测的无线拾音设备，再根据接收到的待检测的无线拾音设备发送的无线信号的时间和强度确定待检测的无线拾音设备的位置信息，并将无线拾音设备的位置信息发送给终端设备，终端设备根据无线拾音设备的位置信息确定无线拾音设备是否在教室内部。
98.需要说明的是，在本技术实施例中，信号检测设备还可以在教室天花板处安装分布式的信号检测设备或者包含阵列的信号检测设备，根据信号检测设备接收到待检测的无线拾音设备发送的无线信号的时间和强度，检测待检测的无线拾音设备与信号检测设备之间的距离以及角度，或者，可以在教室内部墙壁处安装分布式的信号检测设备或者包含阵列的信号检测设备，根据信号检测设备接收到待检测的无线拾音设备发送的无线信号的时间和强度，检测待检测的无线拾音设备与信号检测设备之间的距离以及角度，或者，可以在教室内部墙壁和教室外部墙壁处分别安装信号检测设备，根据两个信号检测设备接收到待检测的无线拾音设备发送的无线信号的时间和强度，检测待检测的无线拾音设备与信号检测设备之间的距离以及角度，本技术实施例对此不作具体的限定。
99.s203、若确定不在监控区域，则断开无线连接并关掉扩音功能。
100.在一些实施例中，终端设备在根据用户的特征信息确定用户不在监控区域或根据无线拾音设备的设备信息确定无线拾音设备不在监控区域之后，终端设备可以先断开无线连接并关掉扩音功能，再确定用户不在监控区域或无线拾音设备不在监控区域的持续时长是否大于阈值，若不大于阈值，则根据与用户的特征信息或无线拾音设备的设备信息绑定存储的无线连接的连接信息重新建立无线连接并开启扩音功能，若大于阈值，则删除绑定存储的用户的特征信息和无线连接的连接信息，或者，删除绑定存储的无线拾音设备的设备信息和无线连接的连接信息。
101.需要说明的是，在本技术实施例中，若无线拾音设备为蓝牙耳机，则终端设备确定蓝牙耳机是否具有主动降噪功能，若确定具有主动降噪功能，则关闭蓝牙耳机的主动降噪功能。
102.上述技术方案，终端设备可以与无线拾音设备建立无线连接并开启扩音功能，将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储，确定监控区域，并根据用户的特征信息确定用户是否在监控区域或根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域，若确定不在监控区域，则断开无线连接并关掉扩音功能，确定用户不在监控区域或无线拾音设备不在监控区域的持续时长是否大于阈值，若不大于阈值，则根据无线连接的连接信息重新建立无线连接并开启扩音功能，若大于阈值，则删除用户的特征信息和无线连接的连接信息，或者，删除无线拾音设备的设备信息和无线连接的连接信息。通过用户的特征信息或无线拾音设备的设备信息确定是否用户或无线拾音设备是否在监控区域，用户不在监控区域或无线拾音设备不在监控区域的持续时长确定是否与无线拾音设备重新建立无线连接并开启扩音功能，不仅实现根据用户需求自动断开和自动建立与无线拾音设备之间的无线连接，而且不需要手动进行配对无线连接、开关扩音等操作，提高用户体验。
103.上述各个实施例可以单独使用，也可以相互结合使用，以达到不同的技术效果。
104.上述本技术提供的实施例中，从终端设备作为执行主体的角度对本技术实施例提供的方法进行了介绍。为了实现上述本技术实施例提供的方法中的各功能，终端设备可以包括硬件结构和/或软件模块，以硬件结构、软件模块或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能以硬件结构、软件模块还是硬件结构加软件模块的方式来执行，取决于技术方案的特定应用和设计约束条件。
105.基于以上实施例，本技术实施例还提供一种无线扩音装置，该无线扩音装置可以是终端设备，或者是终端设备中的装置，该装置用于实现上述图2以及图3a-图3f所示的无线扩音方法。如图4所示，该无线扩音装置400可以包括：
106.第一处理模块401，用于与无线拾音设备建立无线连接并开启扩音功能，将与所述无线拾音设备关联的用户的特征信息或所述无线拾音设备的设备信息和所述无线连接的连接信息绑定存储；
107.确定模块402，用于确定监控区域，并根据所述用户的特征信息确定所述用户是否在所述监控区域或根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域；
108.第二处理模块403，用于若确定不在所述监控区域，则断开所述无线连接并关掉扩音功能。
109.一种可能的设计中，所述确定模块402，具体用于：
110.根据与所述终端设备关联的摄像头的视野确定所述监控区域；或者，
111.根据与所述终端设备关联的信号检测设备的检测范围确定所述监控区域。
112.一种可能的设计中，所述用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。
113.一种可能的设计中，所述确定模块402，具体用于：
114.若所述用户的特征信息包括2d人脸特征，则根据所述2d人脸特征以及与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
115.若所述用户的特征信息包括声纹特征，则根据所述声纹特征以及与所述终端设备关联的拾音设备针对所述监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定所述用户是否在所述监控区域；
116.若所述用户的特征信息包括姿态特征，则根据所述姿态特征与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；
117.若所述用户的特征信息包括3d人脸特征，则根据所述3d人脸特征与所述终端设备关联的3d结构光检测设备针对所述监控区域获取的图像数据，确定所述用户是否在所述监控区域。
118.一种可能的设计中，所述确定模块402，具体用于：
119.将所述无线拾音设备的设备信息发送给所述信号检测设备，以使所述信号检测设备根据接收到的所述无线拾音设备发送的无线信号的时间和强度确定所述无线拾音设备的位置信息，并将所述位置信息发送给所述终端设备；
120.根据所述位置信息确定所述无线拾音设备是否在所述监控区域。
121.一种可能的设计中，所述装置还包括第三处理模块，用于：
122.确定所述用户不在所述监控区域或所述无线拾音设备不在所述监控区域的持续时长是否大于阈值；
123.若不大于所述阈值，则根据所述无线连接的连接信息重新建立所述无线连接并开启扩音功能；
124.若大于所述阈值，则删除所述用户的特征信息和所述无线连接的连接信息，或者，删除所述无线拾音设备的设备信息和所述无线连接的连接信息。
125.一种可能的设计中，所述装置还包括第四处理模块，用于：
126.若所述无线拾音设备为蓝牙耳机，则确定所述蓝牙耳机是否具有主动降噪功能；
127.若确定具有主动降噪功能，则关闭所述蓝牙耳机的主动降噪功能。
128.基于以上实施例，本技术实施例还提供一种无线扩音系统，该无线扩音系统用于实现上述图2以及图3a-图3f所示的无线扩音方法。如图5所示，该无线扩音系统500可以包括：
129.至少一个处理器501；以及，与所述至少一个处理器501通信连接的通信接口503；
130.其中，所述至少一个处理器501通过执行存储器502存储的指令，使得所述无线扩音系统500执行图3a-图3f所示的方法。
131.可选的，所述存储器502位于所述无线扩音系统500之外。
132.可选的，所述无线扩音系统500包括所述存储器502，所述存储器502与所述至少一个处理器501相连，所述存储器502存储有可被所述至少一个处理器501执行的指令。在图5中用虚线表示所述存储器502对于所述无线扩音系统500是可选的。
133.其中，所述处理器501和所述存储器502可以通过接口电路耦合，也可以集成在一起，这里不做限制。
134.本技术实施例中不限定上述处理器501、存储器502以及通信接口503之间的具体连接介质。本技术实施例在图5中以处理器501、存储器502以及通信接口503之间通过总线504连接，总线在图5中以粗线表示，其它部件之间的连接方式，仅是进行示意性说明，并不引以为限。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
135.应理解，本技术实施例中提及的处理器可以通过硬件实现也可以通过软件实现。当通过硬件实现时，该处理器可以是逻辑电路、集成电路等。当通过软件实现时，该处理器可以是一个通用处理器，通过读取存储器中存储的软件代码来实现。
136.示例性地，处理器可以是中央处理单元(central processing unit，cpu)，还可以是其他通用处理器、数字信号处理器(digital signal processing or，dsp)、专用集成电路(application specific integrated circuit，asic)、现成可编程门阵列(field programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
137.应理解，本技术实施例中提及的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(read-only memory，rom)、可编程只读存储器(programmable rom，prom)、可擦除可编程只读存储器(erasable prom，eprom)、电可擦除可编程只读存储器(electrically eprom，eeprom)或闪存。易失性存储器可以是随机存取存储器(random access memory，ram)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的ram可用，例如静态随机存取存储器(static ram，sram)、动态随机存取存储器(dynamic ram，dram)、同步动态随机存取存储器(synchronous dram，sdram)、双倍数据速率同步动态随机存取存储器(double data eate sdram，ddr sdram)、增强型同步动态随机存取存储器(enhanced sdram，esdram)、同步连接动态随机存取存储器(synchlink dram，sldram)和直接内存总线随机存取存储器(direct rambus ram，dr ram)。
138.需要说明的是，在本技术实施例中，当处理器为通用处理器、dsp、asic、fpga或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件时，存储器(存储模块)可以集成在处理器中。
139.应注意，本文描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
140.基于以上实施例，本技术实施例还提供一种计算机存储介质，包括计算机指令，当所述计算机指令在计算机上运行时，使得如图2以及图3a-图3f所示的方法被执行。
141.基于以上实施例，本技术实施例还提供一种芯片，所述芯片与存储器耦合，用于读取并执行所述存储器中存储的程序指令，使得如图2以及图3a-图3f所示的方法被执行。
142.基于以上实施例，本技术实施例还提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得如图2以及图3a-图3f所示的方法被执行。
143.应理解，上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。
144.本领域内的技术人员应明白，本技术的实施例可提供为方法、系统、或计算机程序产品。因此，本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
145.本技术是参照根据本技术的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
146.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
147.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
148.显然，本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样，倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内，则本技术也意图包含这些改动和变型在内。

技术特征：
1.一种无线扩音方法，其特征在于，包括：终端设备与无线拾音设备建立无线连接并开启扩音功能，将与所述无线拾音设备关联的用户的特征信息或所述无线拾音设备的设备信息和所述无线连接的连接信息绑定存储；确定监控区域，并根据所述用户的特征信息确定所述用户是否在所述监控区域或根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域；若确定不在所述监控区域，则断开所述无线连接并关掉扩音功能。2.如权利要求1所述的方法，其特征在于，确定监控区域，包括：根据与所述终端设备关联的摄像头的视野确定所述监控区域；或者，根据与所述终端设备关联的信号检测设备的检测范围确定所述监控区域。3.如权利要求1所述的方法，其特征在于，所述用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。4.如权利要求1或3所述的方法，其特征在于，根据所述用户的特征信息确定所述用户是否在所述监控区域，包括：若所述用户的特征信息包括2d人脸特征，则根据所述2d人脸特征以及与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；若所述用户的特征信息包括声纹特征，则根据所述声纹特征以及与所述终端设备关联的拾音设备针对所述监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定所述用户是否在所述监控区域；若所述用户的特征信息包括姿态特征，则根据所述姿态特征与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；若所述用户的特征信息包括3d人脸特征，则根据所述3d人脸特征与所述终端设备关联的3d结构光检测设备针对所述监控区域获取的图像数据，确定所述用户是否在所述监控区域。5.如权利要求1所述的方法，其特征在于，根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域，包括：将所述无线拾音设备的设备信息发送给所述信号检测设备，以使所述信号检测设备根据接收到的所述无线拾音设备发送的无线信号的时间和强度确定所述无线拾音设备的位置信息，并将所述位置信息发送给所述终端设备；根据所述位置信息确定所述无线拾音设备是否在所述监控区域。6.如权利要求1-5任一所述的方法，其特征在于，断开所述无线连接之后，还包括：确定所述用户不在所述监控区域或所述无线拾音设备不在所述监控区域的持续时长是否大于阈值；若不大于所述阈值，则根据所述无线连接的连接信息重新建立所述无线连接并开启扩音功能；若大于所述阈值，则删除所述用户的特征信息和所述无线连接的连接信息，或者，删除所述无线拾音设备的设备信息和所述无线连接的连接信息。7.如权利要求1所述的方法，其特征在于，还包括：若所述无线拾音设备为蓝牙耳机，则确定所述蓝牙耳机是否具有主动降噪功能；若确定具有主动降噪功能，则关闭所述蓝牙耳机的主动降噪功能。
8.一种无线扩音装置，其特征在于，包括：第一处理模块，用于与无线拾音设备建立无线连接并开启扩音功能，将与所述无线拾音设备关联的用户的特征信息或所述无线拾音设备的设备信息和所述无线连接的连接信息绑定存储；确定模块，用于确定监控区域，并根据所述用户的特征信息确定所述用户是否在所述监控区域或根据所述无线拾音设备的设备信息确定所述无线拾音设备是否在所述监控区域；第二处理模块，用于若确定不在所述监控区域，则断开所述无线连接并关掉扩音功能。9.如权利要求8所述的装置，其特征在于，所述确定模块，具体用于：根据与所述终端设备关联的摄像头的视野确定所述监控区域；或者，根据与所述终端设备关联的信号检测设备的检测范围确定所述监控区域。10.如权利要求8所述的装置，其特征在于，所述用户的特征信息包括2d人脸特征、声纹特征、姿态特征和3d人脸特征中的至少一种。11.如权利要求8或10所述的装置，其特征在于，所述确定模块，具体用于：若所述用户的特征信息包括2d人脸特征，则根据所述2d人脸特征以及与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；若所述用户的特征信息包括声纹特征，则根据所述声纹特征以及与所述终端设备关联的拾音设备针对所述监控区域获取的音频数据进行目标声纹匹配以及声源定位，确定所述用户是否在所述监控区域；若所述用户的特征信息包括姿态特征，则根据所述姿态特征与所述终端设备关联的摄像头针对所述监控区域获取的视频数据，确定所述用户是否在所述监控区域；若所述用户的特征信息包括3d人脸特征，则根据所述3d人脸特征与所述终端设备关联的3d结构光检测设备针对所述监控区域获取的图像数据，确定所述用户是否在所述监控区域。12.如权利要求8所述的装置，其特征在于，所述确定模块，具体用于：将所述无线拾音设备的设备信息发送给所述信号检测设备，以使所述信号检测设备根据接收到的所述无线拾音设备发送的无线信号的时间和强度确定所述无线拾音设备的位置信息，并将所述位置信息发送给所述终端设备；根据所述位置信息确定所述无线拾音设备是否在所述监控区域。13.如权利要求8-12任一所述的装置，其特征在于，所述装置还包括第三处理模块，用于：确定所述用户不在所述监控区域或所述无线拾音设备不在所述监控区域的持续时长是否大于阈值；若不大于所述阈值，则根据所述无线连接的连接信息重新建立所述无线连接并开启扩音功能；若大于所述阈值，则删除所述用户的特征信息和所述无线连接的连接信息，或者，删除所述无线拾音设备的设备信息和所述无线连接的连接信息。14.如权利要求8所述的装置，其特征在于，所述装置还包括第四处理模块，用于：若所述无线拾音设备为蓝牙耳机，则确定所述蓝牙耳机是否具有主动降噪功能；
若确定具有主动降噪功能，则关闭所述蓝牙耳机的主动降噪功能。15.一种无线扩音系统，其特征在于，包括：至少一个处理器和存储器；所述存储器存储一个或多个计算机程序；当所述存储器存储的一个或多个计算机程序被所述至少一个处理器执行时，使得所述处理器执行如权利要求1-7任一所述的方法。16.一种计算机可读存储介质，其特征在于，包括程序或指令，当所述程序或指令在计算机上运行时，使得如权利要求1-7任一所述的方法被执行。

技术总结
本申请公开了一种无线扩音方法、装置及系统，可以解决现有的无线扩音方法存在的需要手动进行各种配对的无线连接、开关扩音等操作，并且无线连接无法根据用户需求自动断开或重连，导致用户体验较差。该方法包括：终端设备与无线拾音设备建立无线连接并开启扩音功能，将与无线拾音设备关联的用户的特征信息或无线拾音设备的设备信息和无线连接的连接信息绑定存储，确定监控区域，并根据用户的特征信息确定用户是否在监控区域或根据无线拾音设备的设备信息确定无线拾音设备是否在监控区域，若确定不在监控区域，则断开无线连接并关掉扩音功能。音功能。音功能。


技术研发人员：曹琛 张磊
受保护的技术使用者：华为技术有限公司
技术研发日：2022.01.28
技术公布日：2023/8/9