提醒事件的发送方法及装置、存储介质及电子装置与流程
未命名
07-18
阅读:66
评论:0
1.本技术涉及智慧家庭技术领域,具体而言,涉及一种提醒事件的发送方法及装置、存储介质及电子装置。
背景技术:
2.婴童的行动安全是育儿家庭特别关注的主题,现代大城市快节奏的生活,给育儿带来了压力。婴童看护人手不够,看护人无法每时每刻陪在孩子身边,在日常生活工作中,如做饭,打扫等时段,通常将婴童放入安全围栏中。婴幼儿安全围栏是目前广泛使用的通过限定婴童活动范围从而避免婴童接触危险区域的一种安全保护措施。安全围栏的材质包括塑料,网布,实木等。安全围栏进出方式有通过围栏门以及跨越进出。
3.将婴童放入安全围栏中会存在视线盲区问题,若大人离开时间过长,易发生安全事故;而且婴童往往好动且行为无法预测,存在翻越围栏的风险。
4.具体地,目前安全围栏门往往采用手动上锁的方式,但是存在由于疏忽忘记上锁的情况,若围栏门未锁,或没有大人及时看护,极易导致由于婴童跨越围栏进入危险区域的安全事故。同时安全围栏的高度固定,若太低孩子容易翻越,起不到安全保护作用,若太高则影响视线且不美观。此外,看护人由于不能时刻陪伴在孩子身边,还存在由于婴童不在视线范围内而导致的婴童哭闹不能及时安抚等问题。
5.针对相关技术中,被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险等问题,尚未提出有效的解决方案。
6.因此,有必要对相关技术予以改良以克服相关技术中的所述缺陷。
技术实现要素:
7.本技术实施例提供了一种提醒事件的发送方法及装置、存储介质及电子装置,以至少解决相关技术中被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险的问题。
8.根据本技术实施例的一方面,提供提醒事件的发送方法,包括:在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
9.在一个示例性的实施例中,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象之前,所述方法还包括:通过以下方式之一确定所述被监管对象与所述拦截装置的距离小于第一阈值:在所述拦截装置内侧设置的位移传感器检测到存在移动的被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值;在所述拦截装置内侧设置的热感传感器检测到存在被监管对象的情况下,确定
所述被监管对象与所述拦截装置的距离小于第一阈值。
10.在一个示例性的实施例中,所述方法还包括:在所述第一区域内未存在所述监管对象的情况下,向所述拦截装置发送调节指令,以增加所述拦截装置中可调节组件的高度,以及锁住所述拦截装置的拦截门。
11.在一个示例性的实施例中,确定所述监管对象所在的第二区域,包括:获取所有图像采集装置采集到的图像数据,其中,所述所有图像采集装置分别位于不同的区域;从所述图像数据中识别出一个或多个生物对象;根据所述一个或多个生物对象对应的区域确定所述第二区域。
12.在一个示例性的实施例中,根据所述一个或多个生物对象对应的区域确定所述第二区域,包括:在从所述图像数据中识别出一个生物对象的情况下,将所述一个生物对象当前所在的区域确定为所述监管对象的第二区域;在从所述图像数据中识别出多个生物对象的情况下,从所述多个生物对象的多个生物特征中确定所述监管对象对应的目标生物特征,将所述目标生物特征对应的生物对象所在的区域确定为所述第二区域。
13.在一个示例性的实施例中,根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件,包括:在所述第二区域中存在多个设备的情况下,获取所述多个设备与所述监管对象所在位置的距离;从多个所述距离中选择最小距离,并将所述最小距离对应的设备确定为响应设备;根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件。
14.在一个示例性的实施例中,根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件,包括:在根据所述当前状态确定所述被监管对象执行危险行为的情况下,将目标画面发送至所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:执行所述危险行为的被监管对象,且所述响应设备在接收到所述监管对象的确认反馈后,停止显示所述目标画面。
15.根据本技术实施例的另一方面,还提供了一种提醒事件的发送装置,包括:识别模块,用于在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;发送模块,用于在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
16.根据本技术实施例的又一方面,还提供了一种计算机可读的存储介质,该计算机可读的存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述提醒事件的发送方法。
17.根据本技术实施例的又一方面,还提供了一种电子装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,上述处理器通过计算机程序执行上述提醒事件的发送方法。
18.通过本技术,在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区
域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。也就是说,通过识别监管对象的位置,进而在监管对象不在第一区域的情况下,根据被监管对象的当前状态向监管对象发送提醒,解决了相关技术中被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险的问题,进而降低了被监管对象出现磕碰的风险。
附图说明
19.此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本技术的实施例,并与说明书一起用于解释本技术的原理。
20.为了更清楚地说明本技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
21.图1是根据本技术实施例的一种可选的提醒事件的发送方法的硬件环境示意图;
22.图2是根据本技术实施例的一种可选的提醒事件的发送方法的流程图;
23.图3是根据本技术实施例的一种可选的提醒事件的发送方法的可选实施例的流程图;
24.图4是根据本技术实施例的一种可选的提醒事件的发送方法的场景示意图;
25.图5是根据本技术实施例的一种可选的提醒事件的发送装置的结构框图。
具体实施方式
26.为了使本技术领域的人员更好地理解本技术方案,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本技术一部分的实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本技术保护的范围。
27.需要说明的是,本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
28.根据本技术实施例的一个方面,提供了一种提醒事件的发送方法。该提醒事件的发送方法广泛应用于智慧家庭(smart home)、智能家居、智能家用设备生态、智慧住宅(intelligencehouse)生态等全屋智能数字化控制应用场景。可选地,在本实施例中,上述提醒事件的发送方法可以应用于如图1所示的由多个终端设备102和服务器104所构成的硬件环境中。如图1所示,服务器104通过网络与多个终端设备102进行连接,可用于为终端或终端上安装的客户端提供服务(如应用服务等),可在服务器上或独立于服务器设置数据
库,用于为服务器104提供数据存储服务,可在服务器上或独立于服务器配置云计算和/或边缘计算服务,用于为服务器104提供数据运算服务。
29.上述网络可以包括但不限于以下至少之一:有线网络,无线网络。上述有线网络可以包括但不限于以下至少之一:广域网,城域网,局域网,上述无线网络可以包括但不限于以下至少之一:wifi(wireless fidelity,无线保真),蓝牙。终端设备102可以并不限定于为pc、手机、平板电脑、智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。
30.在本实施例中提供了一种提醒事件的发送方法,包括但不限于应用于智能围栏,图2是根据本技术实施例的提醒事件的发送方法的流程图,该流程包括如下步骤:
31.步骤s202:在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;
32.步骤s204:在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
33.通过上述步骤,在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。也就是说,通过识别监管对象的位置,进而在监管对象不在第一区域的情况下,根据被监管对象的当前状态向监管对象发送提醒,解决了相关技术中被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险的问题,进而降低了被监管对象出现磕碰的风险。
34.可选的,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象之前,所述方法还包括:通过以下方式之一确定所述被监管对象与所述拦截装置的距离小于第一阈值:在所述拦截装置内侧设置的位移传感器检测到存在移动的被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值;在所述拦截装置内侧设置的热感传感器检测到存在被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值。
35.可以理解的是,可以根据拦截装置内侧安装的位移传感器和/或热感传感器检测拦截装置内侧是否存在被监管对象。具体地,1)可以将位移传感器和/或热感传感器的检测的范围设定为整个拦截装置所包围的范围,则此时位移传感器和/或热感传感器起到的作用是检测整个拦截装置内部是否存在被监管对象。拦截装置为圆形的情况下,第一阈值应设定略大于拦截装置的半径;拦截装置为其他形状时,系统会计算出最合适的第一阈值并
设定。2)也可以进一步设定检测的第二范围,并将位移传感器和/或热感传感器的检测的第二范围设定为整个拦截装置所包围的范围的外围部分,则此时位移传感器和/或热感传感器起到的作用是识别被监控对象是否可能存在危险意图,如攀爬、翻越拦截装置的围栏等。与第一阈值对应的第二阈值应设定为被监控对象接近拦截装置的围栏的最大忍耐距离,一般由监控对象设定,也可以选择系统自设定。拦截装置内侧安装的传感器还可以是红外传感器等,本实施例对此不作限定。
36.可选的,所述方法还包括:在所述第一区域内未存在所述监管对象的情况下,向所述拦截装置发送调节指令,以增加所述拦截装置中可调节组件的高度,以及锁住所述拦截装置的拦截门。
37.具体地,在检测到拦截装置内部存在被监管对象的情况下,进一步识别拦截装置所在的第一区域是否存在监管对象,具体可以根据图像识别技术进行识别。需要说明的是,拦截装置还内嵌有通信组件,拦截装置检测到拦截装置内部存在被监管对象,会通过通信组件发送提醒信息给家庭多媒体网关,进而家庭多媒体网关发送图像收集指令给围栏所在房间的摄像设备,进而家庭多媒体网关根据摄像设备返回的视频图像数据识别拦截装置附近设定范围内(例,可以是拦截装置附近2米范围内)是否存在监管对象。需要说明的是,摄像设备不仅限于房间安装的摄像头,还可以是智能家居中带有摄像功能的家居设备,例如带有摄像功能的冰箱。
38.进一步的,拦截装置中的可调节组件可以是可调节高度的围栏。其中,围栏结构可以是可调节的交叉网状结构,也可以是可伸缩的直立式空心柱式联排结构,还可以是两排围栏并用,其中一排围栏安装有可竖直方向滑动的滑轨,供另一排围栏上下滑动(高度升降)。拦截装置根据接收到的调节指令,围栏可智能升降、门锁可智能开闭。在识别到监管对象不在第一区域的情况下,会智能升高围栏,锁住门锁;在识别到监管对象前来照管被监管对象的情况下,会智能降低围栏并打开门锁;在监管对象不能接收到危险意图和/或危险行为提醒(提示框和提示音)的情况下,会智能升高围栏,并同时播放音乐安抚被监管对象。
39.在监管对象不在拦截装置所在的第一区域的情况下,确定所述监管对象所在的第二区域,包括:
40.1)可选的,获取所有图像采集装置采集到的图像数据,其中,所述所有图像采集装置分别位于不同的区域;从所述图像数据中识别出一个或多个生物对象;根据所述一个或多个生物对象对应的区域确定所述第二区域。
41.可以理解的是,家庭多媒体网关向家庭中所有摄像设备发送图像收集指令,进而根据所有摄像设备返回的视频图像数据识别出生物对象,进而确定生物对象所在第二区域。生物对象可能识别到一个或多个,进而也可能识别到一个或多个生物对象对应的区域,进而根据一个或多个生物对象对应的区域确定第二区域。需要说明的是,被监管对象也是生物对象,但在识别过程中会被家庭多媒体网关根据预先录入的生物特征排除。
42.2)根据所述一个或多个生物对象对应的区域确定所述第二区域,包括:在从所述图像数据中识别出一个生物对象的情况下,将所述一个生物对象当前所在的区域确定为所述监管对象的第二区域;在从所述图像数据中识别出多个生物对象的情况下,从所述多个生物对象的多个生物特征中确定所述监管对象对应的目标生物特征,将所述目标生物特征对应的生物对象所在的区域确定为所述第二区域。
43.需要说明的是,只识别出一个生物对象,则一个生物对象所在的区域即为第二区域;识别出多个生物对象的情况下,根据目标生物特征从多个生物对象的生物特征中确定监管对象,进而确定第二区域。进一步的,在识别到多个生物对象的情况下,被识别到的多个生物对象可能都是监管对象,则1)可以选择多个第二区域,分别为第二-1区域、第二-2区域等;2)可以对多个监管对象进一步根据之前所有摄像设备返回的视频图像数据识别监管对象的动作行为,进而选定较为清闲的那一个监管对象所在的区域作为第二区域。
44.可选的,根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件,包括:在所述第二区域中存在多个设备的情况下,获取所述多个设备与所述监管对象所在位置的距离;从多个所述距离中选择最小距离,并将所述最小距离对应的设备确定为响应设备;根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件。
45.示例性的,选定第二区域后,例如可以是厨房,厨房中存在冰箱、微波炉、烤箱等设备。在前述家庭多媒体网关根据所有摄像设备返回的视频图像数据识别出生物对象的时候会同时将选定的作为监管对象的生物对象的平面位置信息以坐标形式保存为:p0(x0,y0);第二区域选定后,家庭多媒体网关向第二区域的所有设备(需要是带屏智能终端)发送位置查询请求,进而得到第二区域的所有设备的返回位置数据:pn(xn,yn);进而根据两点间平面距离计算方法为:计算出所有设备与监管对象的距离,并将最小距离对应的设备确定为响应设备。响应设备用于接收并显示家庭多媒体网关根据被监管对象的当前状态向响应设备发送的提醒事件。
46.可选的,根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件,包括:在根据所述当前状态确定所述被监管对象执行危险行为的情况下,将目标画面发送至所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:执行所述危险行为的被监管对象,且所述响应设备在接收到所述监管对象的确认反馈后,停止显示所述目标画面。
47.进一步的,将目标画面发送至所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:被监管对象;在根据所述当前状态确定所述被监管对象执行危险行为的情况下,发送提示框和提示音至所述响应设备,且所述响应设备在接收到所述监管对象的确认反馈后,停止显示所述提示框和所述提示音。
48.可以理解的是,在确定被监管对象可能存在危险意图和/或出现危险行为的情况下,将拦截装置所在的第一区域的监控画面实时显示到响应设备上,同时显示标红字体的提示框与急促提示音,只有在监管对象点击提示框后,提示框和提示音才会消失,否则一直提示。提示超过一定时常(如5mi n)仍旧无响应,则向其他的监管对象移动终端发送报警信息。从监管对象点击提示框后,到监管对象去照管被监管对象这中间的时间,家庭对媒体网关会推送音乐播放指令至智能围栏,以安抚被监管对象。需要说明的是,对被监管对象的监控画面在确定响应设备后是实时显示在响应设备上的,在这期间监管对象发生移动,则重新选择响应设备,进而显示。还需要说明的是,发生被监管对象可能存在危险意图和/或出现危险行为的情况,响应设备显示提示框与提示音,监管对象确认接收到提示后,提示框与提示音消失,而从头到尾,对被监管对象的监控画面一直显示在响应设备上。
49.显然,上述所描述的实施例仅仅是本技术一部分的实施例,而不是全部的实施例。
为了更好的理解上述提醒事件的发送方法,以下结合实施例对上述过程进行说明,但不用于限定本技术实施例的技术方案,具体地:
50.图3是根据本技术实施例的一种可选的提醒事件的发送方法的可选实施例的流程图,本可选实施例是基于家庭多媒体网关控制的婴童围栏安全方案,具体包括以下步骤:
51.步骤1:通过围栏传感器进行移动物体感知;
52.智能围栏内嵌有传感器以及通信组件,通过智能围栏上的位移传感器对围栏周围的移动物体进行距离感知,若感知到围栏内有移动物体(相当于上述实施例中的被监管对象),则通过通讯组件发送提醒信息给家庭多媒体网关。
53.步骤2:发送图像收集指令给围栏所在房间的摄像设备;
54.家庭多媒体网关在接收到智能围栏发送的提醒信息后,网关立即发送图像收集指令给围栏所在房间的摄像头。
55.步骤3:收集围栏附近视频图像数据;
56.通过围栏所在房间的摄像设备进行围栏周围环境图像采集,摄像设备将采集到的视频图像数据推送给家庭多媒体网关。
57.步骤4:判断围栏附近是否有看护人(相当于上述实施例中的监管对象);
58.在围栏周围有看护人的情况下,进入步骤16,结束程序;在围栏周围没有看护人的情况下,进入步骤5;
59.具体地,家庭多媒体网关接收围栏所在房间的摄像头发送的视频图像数据,利用图像识别技术对数据进行分析。若识别结果为围栏附近2米半径范围内有看护人,则结束程序,若识别结果为围栏附近2米半径范围内没有看护人;家庭多媒体网关发送围栏升高指令至智能围栏通信组件,并同时发送图像采集指令给所有房间的摄像头。
60.步骤5:自动升高围栏,同时围栏门自动上锁;
61.智能围栏通信组件接收家庭多媒体网关发送的围栏升高指令后,依据指令自动升高围栏,同时触发围栏门自动上锁。避免发生婴童攀爬或进入危险区域等安全问题。
62.步骤6:采集各房间实时图像;
63.家庭各房间内所有摄像头接收到图像采集指令后,开始进行实时图像采集,并将采集结果发送给家庭多媒体网关进行后续识别分析。
64.步骤7:识别看护人所在房间并存储看护人位置信息,同时发送围栏升高指令;
65.接收家庭内所有摄像头发送的图像数据,通过图像识别技术对数据进行分析,若从识别出具备看护人特征的图像,则判断发送此数据的摄像设备所在房间即为看护人所在房间,同时存储看护人平面位置信息/坐标数据为:p0(x0,y0),用于后续步骤10的距离计算。
66.步骤8:定位距看护人所在房间的所有带屏终端,并发送定位请求;
67.家庭多媒体网关依据识别出的看护人所在房间,向此房间的所有带屏智能终端发送位置查询请求。
68.步骤9:接收指令并发送位置信息;
69.看护人所在房间的所有带屏智能终端在接收到家庭多媒体网关发送的位置查询请求后,将各自的位置数据返回给家庭多媒体网关,位置数据设置为:pn(xn,yn)。
70.步骤10:计算出距离看护人最近的终端;
71.家庭多媒体网关在接收智能终端的位置数据后,设置两点间平面距离计算方法
为:
[0072][0073]
计算出p0与所有终端设备的距离结果,并且在结果中识别出距离最小,即|p0pn|数值最小的终端设备,将该设备标记为d
min
。
[0074]
步骤11:存储、识别、判断婴童动作图像;
[0075]
家庭多媒体网关存储摄像设备发送的婴童图像数据,并同时进行图像识别,提取特征以判断婴童动作是否存在危险。
[0076]
步骤12:判断行为是否有危险;
[0077]
在判断婴童动作行为不存在危险的情况下,进入步骤13-1;在判断婴童动作行为存在危险的情况下,进入步骤13-2;
[0078]
具体地,家庭多媒体网关对婴童动作行为进行判断,依据结果推送相应的信息给智能终端。当判断婴童行为没有危险时,网关推送即时画面至d
min
,当判断婴童行为存在危险时,网关推送即时画面与提醒信息至d
min
。
[0079]
步骤13:智能终端接收与显示数据;
[0080]
具体分为图3所示的步骤13-1与步骤13-2:
[0081]
步骤13-1:距离最近的终端显示围栏内即时画面;
[0082]
若婴童行为没有危险,则d
min
接收到多媒体网关信息后,显示婴童实时画面。便于看护人观察。同时智能终端持续向摄像设备发送实时画面请求,即重复步骤3流程,以使其实时采集围栏附近图像数据。
[0083]
步骤13-2:距离最近的终端显示围栏内即时画面,并且弹出提示框与提示音;
[0084]
若婴童行为存在危险,则d
min
接收到多媒体网关信息后,显示婴童实时画面,同时发出提示音,屏幕上弹出提示框等待看护人点击确认,若未点击,则终端一直播放提示音并且提示框不消失以引起看护人警觉。看护人点击确认后进入步骤14。
[0085]
步骤14:网关推送指令;
[0086]
家庭多媒体网关在收到看护人确认信息后,推送音乐播放指令至智能围栏以转移婴童注意力或者对哭闹的婴童起到安抚效果。
[0087]
步骤15:播放安抚音乐,同时在识别看护人到达围栏时打开门锁,自动降下围栏;
[0088]
智能围栏通信组件接收到家庭多媒体网关推送的播放指令后,通过扬声器播放安抚音乐。同时位移传感器在感应到围栏外2米内有看护人时自动触发智能门锁组件打开门锁,同时触发自动降下围栏以便看护人进入围栏。
[0089]
步骤16:结束程序。
[0090]
进一步的,在新一代信息技术在当代生活场景中的应用越来越广泛,打造了多样化的智慧场景,为用户带来便捷,高效,安全的生活体验的情况下。本可选实施例提供一种基于家庭多媒体网关控制的婴童围栏安全方案,应用图像识别,距离感知,数据分析,多屏互动等技术对行为数据、图像数据、位置数据等进行计算、分析与判断,进而形成围栏安全控制与屏幕安全预警方案,使围栏在必要条件下采取保护措施且看护人能及时监控婴童安全情况。
[0091]
更进一步的,本可选实施例涉及智慧家庭系统,应用的技术包括无线通讯、图像识
别技术、语音识别技术、数据分析技术、传感网络技术、多屏互动技术。如图4所示,智慧家庭系统包括家庭多媒体网关,智能围栏,摄像设备与家庭智能电器终端:智能围栏包括位移传感器、自动升降组件、扬声器组件,智能门锁组件;每个房间均配备智能摄像头且连接多媒体网关;智能电器终端包括智能冰箱、智能电视、智能手机等带屏终端。其中,家庭多媒体网关作为家庭智能终端的综合管理中枢,承担智能识别、逻辑判断和数据交互等功能;智能围栏主要负责采集婴童行为数据,与家庭多媒体网关进行数据交互,并依据条件执行升降、播放音乐或开关门锁;摄像设备负责依据指令捕捉对应房间的视频图像数据用于后续网关处理;智能电器终端负责与看护者的智能交互,包括接收与展示通过多媒体网关发送的监控视频与预警消息,反馈数据至网关等。
[0092]
基于上述方案可知,1)本实施例基于智慧家庭系统中家庭多媒体网关控制下的智能围栏,智能摄像头,智能带屏终端的联动,实现对围栏内婴童的安抚、防护和实时监控;2)通过应用家庭多媒体网关的图像识别技术,识别看护人位置,判断婴童危险动作等方法流程,实现对智能围栏的灵活控制;3)提出了一种基于家庭多媒体网关数据处理技术计算最小设备距离的计算方法。
[0093]
此外,从产品来看,目前普遍使用的婴儿围栏高度不可调节且门锁易开;从看护场景来看,看护人手不足时往往很难做到时刻陪伴在婴童身边,存在安全隐患。基于这两个痛点,本实施例提供了一种可以通过家庭多媒体网关控制的具有音乐播放、自动升降和自动上锁功能的智能安全围栏,使围栏实现了智能安抚的同时提升了围栏的安全系数;通过网关的距离计算实现距看护人最近设备的婴童画面投放及危险预警,使用户不在围栏附近时也能时刻关注婴童状态,使看护过程更加智能、敏捷、高效。
[0094]
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本技术各个实施例的方法。
[0095]
在本实施例中还提供了一种提醒事件的发送装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的设备较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
[0096]
图5是根据本技术实施例的一种可选的提醒事件的发送装置的结构框图,该装置包括:
[0097]
识别模块52,用于在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;;
[0098]
发送模块54,用于在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
[0099]
通过上述装置,在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。也就是说,通过识别监管对象的位置,进而在监管对象不在第一区域的情况下,根据被监管对象的当前状态向监管对象发送提醒,解决了相关技术中被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险的问题,进而降低了被监管对象出现磕碰的风险。
[0100]
可选的,识别模块52,还用于对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象之前,通过以下方式之一确定所述被监管对象与所述拦截装置的距离小于第一阈值:在所述拦截装置内侧设置的位移传感器检测到存在移动的被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值;在所述拦截装置内侧设置的热感传感器检测到存在被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值。
[0101]
可以理解的是,可以根据拦截装置内侧安装的位移传感器和/或热感传感器检测拦截装置内侧是否存在被监管对象。具体地,1)可以将位移传感器和/或热感传感器的检测的范围设定为整个拦截装置所包围的范围,则此时位移传感器和/或热感传感器起到的作用是检测整个拦截装置内部是否存在被监管对象。拦截装置为圆形的情况下,第一阈值应设定略大于拦截装置的半径;拦截装置为其他形状时,系统会计算出最合适的第一阈值并设定。2)也可以进一步设定检测的第二范围,并将位移传感器和/或热感传感器的检测的第二范围设定为整个拦截装置所包围的范围的外围部分,则此时位移传感器和/或热感传感器起到的作用是识别被监控对象是否可能存在危险意图,如攀爬、翻越拦截装置的围栏等。与第一阈值对应的第二阈值应设定为被监控对象接近拦截装置的围栏的最大忍耐距离,一般由监控对象设定,也可以选择系统自设定。拦截装置内侧安装的传感器还可以是红外传感器等,本实施例对此不作限定。
[0102]
可选的,识别模块52,还用于在所述第一区域内未存在所述监管对象的情况下,向所述拦截装置发送调节指令,以增加所述拦截装置中可调节组件的高度,以及锁住所述拦截装置的拦截门。
[0103]
具体地,在检测到拦截装置内部存在被监管对象的情况下,进一步识别拦截装置所在的第一区域是否存在监管对象,具体可以根据图像识别技术进行识别。需要说明的是,拦截装置还内嵌有通信组件,拦截装置检测到拦截装置内部存在被监管对象,会通过通信组件发送提醒信息给家庭多媒体网关,进而家庭多媒体网关发送图像收集指令给围栏所在房间的摄像设备,进而家庭多媒体网关根据摄像设备返回的视频图像数据识别拦截装置附近设定范围内(例,可以是拦截装置附近2米范围内)是否存在监管对象。需要说明的是,摄像设备不仅限于房间安装的摄像头,还可以是智能家居中带有摄像功能的家居设备,例如带有摄像功能的冰箱。
[0104]
进一步的,拦截装置中的可调节组件可以是可调节高度的围栏。其中,围栏结构可以是可调节的交叉网状结构,也可以是可伸缩的直立式空心柱式联排结构,还可以是两排
围栏并用,其中一排围栏安装有可竖直方向滑动的滑轨,供另一排围栏上下滑动(高度升降)。拦截装置根据接收到的调节指令,围栏可智能升降、门锁可智能开闭。在识别到监管对象不在第一区域的情况下,会智能升高围栏,锁住门锁;在识别到监管对象前来照管被监管对象的情况下,会智能降低围栏并打开门锁;在监管对象不能接收到危险意图和/或危险行为提醒(提示框和提示音)的情况下,会智能升高围栏,并同时播放音乐安抚被监管对象。
[0105]
可选的,发送模块54,还用于获取所有图像采集装置采集到的图像数据,其中,所述所有图像采集装置分别位于不同的区域;从所述图像数据中识别出一个或多个生物对象;根据所述一个或多个生物对象对应的区域确定所述第二区域。
[0106]
可以理解的是,家庭多媒体网关向家庭中所有摄像设备发送图像收集指令,进而根据所有摄像设备返回的视频图像数据识别出生物对象,进而确定生物对象所在第二区域。生物对象可能识别到一个或多个,进而也可能识别到一个或多个生物对象对应的区域,进而根据一个或多个生物对象对应的区域确定第二区域。需要说明的是,被监管对象也是生物对象,但在识别过程中会被家庭多媒体网关根据预先录入的生物特征排除。
[0107]
可选的,发送模块54,还用于在从所述图像数据中识别出一个生物对象的情况下,将所述一个生物对象当前所在的区域确定为所述监管对象的第二区域;在从所述图像数据中识别出多个生物对象的情况下,从所述多个生物对象的多个生物特征中确定所述监管对象对应的目标生物特征,将所述目标生物特征对应的生物对象所在的区域确定为所述第二区域。
[0108]
需要说明的是,只识别出一个生物对象,则一个生物对象所在的区域即为第二区域;识别出多个生物对象的情况下,根据目标生物特征从多个生物对象的生物特征中确定监管对象,进而确定第二区域。进一步的,在识别到多个生物对象的情况下,被识别到的多个生物对象可能都是监管对象,则1)可以选择多个第二区域,分别为第二-1区域、第二-2区域等;2)可以对多个监管对象进一步根据之前所有摄像设备返回的视频图像数据识别监管对象的动作行为,进而选定较为清闲的那一个监管对象所在的区域作为第二区域。
[0109]
可选的,发送模块54,还用于在所述第二区域中存在多个设备的情况下,获取所述多个设备与所述监管对象所在位置的距离;从多个所述距离中选择最小距离,并将所述最小距离对应的设备确定为响应设备;根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件。
[0110]
示例性的,选定第二区域后,例如可以是厨房,厨房中存在冰箱、微波炉、烤箱等设备。在前述家庭多媒体网关根据所有摄像设备返回的视频图像数据识别出生物对象的时候会同时将选定的作为监管对象的生物对象的平面位置信息以坐标形式保存为:p0(x0,y0);第二区域选定后,家庭多媒体网关向第二区域的所有设备(需要是带屏智能终端)发送位置查询请求,进而得到第二区域的所有设备的返回位置数据:pn(xn,yn);进而根据两点间平面距离计算方法为:计算出所有设备与监管对象的距离,并将最小距离对应的设备确定为响应设备。响应设备用于接收并显示家庭多媒体网关根据被监管对象的当前状态向响应设备发送的提醒事件。
[0111]
可选的,发送模块54,还用于在根据所述当前状态确定所述被监管对象执行危险行为的情况下,将目标画面发送至所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:执行所述危险行为的被监管对象,且所述响应设备在接
收到所述监管对象的确认反馈后,停止显示所述目标画面。
[0112]
进一步的,将目标画面发送至所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:被监管对象;在根据所述当前状态确定所述被监管对象执行危险行为的情况下,发送提示框和提示音至所述响应设备,且所述响应设备在接收到所述监管对象的确认反馈后,停止显示所述提示框和所述提示音。
[0113]
可以理解的是,在确定被监管对象可能存在危险意图和/或出现危险行为的情况下,将拦截装置所在的第一区域的监控画面实时显示到响应设备上,同时显示标红字体的提示框与急促提示音,只有在监管对象点击提示框后,提示框和提示音才会消失,否则一直提示。提示超过一定时常(如5mi n)仍旧无响应,则向其他的监管对象移动终端发送报警信息。从监管对象点击提示框后,到监管对象去照管被监管对象这中间的时间,家庭对媒体网关会推送音乐播放指令至智能围栏,以安抚被监管对象。需要说明的是,对被监管对象的监控画面在确定响应设备后是实时显示在响应设备上的,在这期间监管对象发生移动,则重新选择响应设备,进而显示。还需要说明的是,发生被监管对象可能存在危险意图和/或出现危险行为的情况,响应设备显示提示框与提示音,监管对象确认接收到提示后,提示框与提示音消失,而从头到尾,对被监管对象的监控画面一直显示在响应设备上。
[0114]
本技术的实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
[0115]
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
[0116]
s1,在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;
[0117]
s2,在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
[0118]
在一个示例性实施例中,上述计算机可读存储介质可以包括但不限于:u盘、只读存储器(read-only memory,简称为rom)、随机存取存储器(random access memory,简称为ram)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
[0119]
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例,本实施例在此不再赘述。
[0120]
本技术的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
[0121]
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
[0122]
s1,在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;
[0123]
s2,在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的
第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。
[0124]
在一个示例性实施例中,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
[0125]
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例,本实施例在此不再赘述。
[0126]
显然,本领域的技术人员应该明白,上述的本技术的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本技术不限制于任何特定的硬件和软件结合。
[0127]
以上所述仅是本技术的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本技术原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本技术的保护范围。
技术特征:
1.一种提醒事件的发送方法,其特征在于,包括:在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。2.根据权利要求1所述的方法,其特征在于,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象之前,所述方法还包括:通过以下方式之一确定所述被监管对象与所述拦截装置的距离小于第一阈值:在所述拦截装置内侧设置的位移传感器检测到存在移动的被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值;在所述拦截装置内侧设置的热感传感器检测到存在被监管对象的情况下,确定所述被监管对象与所述拦截装置的距离小于第一阈值。3.根据权利要求1所述的方法,其特征在于,所述方法还包括:在所述第一区域内未存在所述监管对象的情况下,向所述拦截装置发送调节指令,以增加所述拦截装置中可调节组件的高度,以及锁住所述拦截装置的拦截门。4.根据权利要求1-3任一项所述的方法,其特征在于,确定所述监管对象所在的第二区域,包括:获取所有图像采集装置采集到的图像数据,其中,所述所有图像采集装置分别位于不同的区域;从所述图像数据中识别出一个或多个生物对象;根据所述一个或多个生物对象对应的区域确定所述第二区域。5.根据权利要求4所述的方法,其特征在于,根据所述一个或多个生物对象对应的区域确定所述第二区域,包括:在从所述图像数据中识别出一个生物对象的情况下,将所述一个生物对象当前所在的区域确定为所述监管对象的第二区域;在从所述图像数据中识别出多个生物对象的情况下,从所述多个生物对象的多个生物特征中确定所述监管对象对应的目标生物特征,将所述目标生物特征对应的生物对象所在的区域确定为所述第二区域。6.根据权利要求1至5任一项所述的方法,其特征在于,根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件,包括:在所述第二区域中存在多个设备的情况下,获取所述多个设备与所述监管对象所在位置的距离;从多个所述距离中选择最小距离,并将所述最小距离对应的设备确定为响应设备;根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件。7.根据权利要求6所述的方法,其特征在于,根据所述被监管对象的当前状态向所述响应设备发送所述提醒事件,包括:在根据所述当前状态确定所述被监管对象执行危险行为的情况下,将目标画面发送至
所述响应设备,以在所述响应设备上持续显示所述目标画面,其中,所述目标画面中包括:执行所述危险行为的被监管对象,且所述响应设备在接收到所述监管对象的确认反馈后,停止显示所述目标画面。8.一种提醒事件的发送装置,其特征在于,包括:识别模块,用于在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;发送模块,用于在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。9.一种计算机可读的存储介质,其特征在于,所述计算机可读的存储介质包括存储的程序,其中,所述程序运行时执行权利要求1至7中任一项所述的方法。10.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
技术总结
本申请公开了一种提醒事件的发送方法及装置、存储介质及电子装置,涉及智慧家庭技术领域,包括:在检测到拦截装置内的被监管对象与所述拦截装置的距离小于第一阈值的情况下,对所述拦截装置所在的第一区域进行图像识别,以确定所述第一区域内是否存在监管对象,其中,所述拦截装置用于隔离出拦截区域,所述第一区域包括所述拦截区域;在所述第一区域内未存在所述监管对象的情况下,确定所述监管对象所在的第二区域,并根据所述被监管对象的当前状态向位于所述第二区域的所述监管对象发送提醒事件。解决了相关技术中被监管对象如果离开拦截区域,如果监管对象不在拦截区域内附近,被监管对象可能存在磕碰等风险的问题。被监管对象可能存在磕碰等风险的问题。被监管对象可能存在磕碰等风险的问题。
技术研发人员:余悦
受保护的技术使用者:青岛海尔科技有限公司 海尔智家股份有限公司
技术研发日:2022.12.27
技术公布日:2023/5/30
版权声明
本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)
飞行汽车 https://www.autovtol.com/
