入侵响应方法、装置、设备及可读存储介质与流程

1.本发明涉及入侵监控领域，尤其涉及一种入侵响应方法、装置、设备及可读存储介质。


背景技术：

2.目前，在无人监控领域，无法分辨出可疑轮廓，并根据监控画面中可疑轮廓的行动轨迹生成不同的入侵响应，而单一监控区域的入侵响应会时常导致误报警或漏报警。


技术实现要素：

3.本发明提供一种入侵响应方法、装置、设备及可读存储介质，用以解决现有技术中无法在无人监控中实现可疑轮廓的精确入侵响应的技术缺陷，提供了一种在监控区域中划分入侵区域对应的入侵级别，并根据不同的入侵级别响应不同的入侵告知的技术方案。
4.第一方面，本发明提供了一种入侵响应方法，包括：
5.根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；
6.在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；
7.在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；
8.所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
9.根据本发明提供的入侵响应方法，在确定目标特征轮廓之前，还包括：
10.根据红外热像仪获取红外热视频，根据可见光摄像机获取可见光视频；
11.根据不同时刻划分所述红外热视频以及所述可见光视频，获取所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧。
12.根据本发明提供的入侵响应方法，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓，包括：
13.在所述待监控区域的亮度大于或等于预设亮度的情况下，根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓；
14.在所述待监控区域的亮度小于预设亮度的情况下，根据所述红外热图像帧中的红外热成像确定目标特征轮廓；
15.所述气象信息包括晴天状态以及非晴天状态。
16.根据本发明提供的入侵响应方法，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓，包括：
17.在所述气象信息为晴天状态的情况下，根据所述可见光图像帧确定可见光特征轮廓，根据红外热图像帧确定红外热特征轮廓，在所述可见光特征轮廓与所述红外热特征轮廓的重叠度大于第一重叠度的情况下，确定所述可见光特征轮廓为所述目标特征轮廓；
18.在所述气象信息为非晴天状态的情况下，根据红外热图像帧确定红外热特征轮廓，根据所述可见光图像帧确定可见光特征轮廓，在所述红外热特征轮廓与所述可见光特征轮廓的重叠度大于第二重叠度的情况下，确定所述红外热特征轮廓为所述目标特征轮廓；
19.所述第一重叠度大于所述第二重叠度；
20.所述非晴天状态包括雨天状态、雪天状态、雾霾状态以及沙尘暴状态。
21.根据本发明提供的入侵响应方法，在确定目标特征轮廓之后，还包括：
22.在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第一标记；
23.所述第一标记用于表征行人、动物或车辆。
24.根据本发明提供的入侵响应方法，在生成第一入侵响应之后，还包括：
25.基于光流场跟踪算法处理所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧，获取所述目标特征轮廓对应的行人运动信息；
26.在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第二标记；
27.所述第二标记用于表征所述行人运动信息；
28.所述行人运动信息包括行人运动方向以及行人运动速度。
29.根据本发明提供的入侵响应方法，所述待监控区域为机场跑道或地铁铁轨、场馆门口；
30.在所述待监控区域为机场跑道或地铁铁轨的情况下，所述第一监控区域为等候区域，所述第二监控区域为危险区域，所述第二入侵响应还包括语音提示，所述语音提示用于告知入侵人员驶离所述危险区域；
31.在所述待监控区域为场馆门口的情况下，所述第一监控区域为路过区域，所述第二监控区域为警示区域，所述第二入侵响应还包括灯光提示，所述灯光提示用于告知入侵人员已进入警示区域。
32.第二方面，提供了一种入侵响应装置，包括：
33.确定单元：用于根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；
34.第一生成单元：用于在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；
35.第二生成单元：用于在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；
36.所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
37.第三方面，本发明还提供一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现所述的入侵响应方法。
38.第四方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述入侵响应方法。
39.本发明提供了一种入侵响应方法、装置、设备及可读存储介质，本发明通过实时获取同步时刻的红外热图像帧以及可见光图像帧，确定目标特征轮廓，在待监控区域中出现
目标特征轮廓的情况下，且确定目标特征轮廓为可疑人员的情况下，将提醒监控人员留意，但并不会告知可疑人员，而在可疑人员进一步深入至第二监控区域的情况下，才会将入侵行为告知入侵人员，本发明通过在不同的监控区域生成不同的响应，不仅提高了可疑人员检测的准确性，还提高了入侵响应的准确性以及合理性。
附图说明
40.为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
41.图1是本发明提供的入侵响应方法的流程示意图之一；
42.图2是本发明提供的入侵响应方法的流程示意图之二；
43.图3是本发明提供的确定目标特征轮廓的流程示意图之一；
44.图4是本发明提供的确定目标特征轮廓的流程示意图之二；
45.图5是本发明提供的入侵响应方法的流程示意图之三；
46.图6是本发明提供的入侵响应装置的结构示意图；
47.图7是本发明提供的电子设备的结构示意图。
具体实施方式
48.为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
49.目前，对移动目标的实时监控，尤其是针对行进人群、行驶车流等的实时监控尤为重要，而对于机场跑道、地铁铁轨、博物馆或者展览馆的重要防入侵场所的检测跟踪，其在管理和决策方面的部署是不可缺少的，由于红外跟踪系统是被动地接受目标的红外辐射来探测、跟踪和识别目标，具有隐蔽性好、抗电磁干扰能力强，以及体积小、重量轻、机动性强等优点，正逐渐成为现代防御体系中的一个重要组成部分。目前并没有能够充分利用可见光采集以及红外热采集的两种成像特点，解决在不同的监控区域生成不同的响应的技术问题，进而满足行人检测和跟踪的应用需求，为了解决上述技术问题，本发明提供了一种入侵响应方法、装置、设备及可读存储介质，图1是本发明提供的入侵响应方法的流程示意图之一，本发明公开了一种入侵响应方法，包括：
50.步骤101、根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；
51.步骤102、在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；
52.步骤103、在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；
53.所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
54.在步骤101中，根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓，本发明针对同一监控区域，分别采用两个不同的图像采集装置实时获取红外热视频以及可见光图视频，并将所述红外热视频转换为图像帧，将所述可见光图视频转换为图像帧，进而获取到所述红外热视频所对应的所有图像帧，以及所述可见光图视频所对应的所有图像帧，最终得到每一同步时刻对应的红外热图像帧以及可见光图像帧。
55.本发明能够根据待监控区域的地理位置、气候环境、亮度情况以及可见度情况，采取不同的目标特征轮廓的特征提取策略，获取目标特征轮廓，例如，在能见度低的情况下，采用以红外热图像帧为主，以可见光图像帧为辅的特征提取策略，而在能见度高的情况下，采用以可见光图像帧为主，以红外热图像帧为辅的特征提取策略。
56.在步骤102中，本发明区别于现有技术只能针对一个监控区域的完整画面进行监控的技术方案，将一个待监控区域分为了两个监控区域，即第一监控区域以及第二监控区域，所述第一监控区域以及第二监控区域拼接后即为所述待监控区域，而对应于这两种不同监控区域，采取不同的入侵响应策略。
57.可选地，所述第一监控区域的监控级别小于所述第二监控区域的监控级别，例如，对应于一个博物馆进口处，分别设置两个不同的图像采集装置实时获取任一同步时刻对应的红外热图像帧以及可见光图像帧，而在实际显示中，基于水平线，按照预设比例划分所述待监控区域的监控图像，上部分画面显示有所述博物馆进口，而下部分画面中没有所述博物馆进口，可以为过道走廊，此时，所述下部分画面所对应的监控区域即为第一监控区域，而所述上部分画面所对应的监控区域即为第二监控区域，由于入侵人员进入所述博物馆进口，必须经由所述第一监控区域，再经由所述第二监控区域，故只有入侵所述第二监控区域，才会导致实际入侵情况的发生，而由于工作人员有可能只是经过所述第一监控区域，而并非前往所述第二监控区域，故所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
58.进一步地，在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，即认为存在可疑物体的部分轮廓或全部轮廓进入到所述第一监控区域中，而为了排除所述目标特征轮廓可能是飞鸟、狗、猫或其他动物，本发明还需要对所述目标特征轮廓是否为可疑人员进行进一步地检测，即判断所述目标特征轮廓与预设边缘轮廓的相似度，本发明可以采用现有的轮廓相似度比较工具opencv，亦或者通过平移、旋转、仿射、透视等手段，提升所述目标特征轮廓与预设边缘轮廓的相似度比较的准确性。
59.在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度小于或等于预设阈值的情况下，即认为所述目标特征轮廓并非可疑人员，可能只是经过的动物，此时无需生成第一入侵响应，在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，即认为所述目标特征轮廓为可疑人员，此时需要记录此次所述可疑人员的出现，并进一步地跟踪所述可疑人员接下来的动向，进而生成第一入侵响应，所述第一入侵响应用于指示告知监控人员，本发明可以采用短信、响铃、警示灯或者振动等形式告知监控人员，提醒监控人员注意。
60.在本发明中并未在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，
且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，即确定所述目标特征轮廓为可疑人员的情况下，警示所述可疑人员，是因为所述第一监控区域的监控级别小于所述第二监控区域的监控级别，即进入了所述第一监控区域并不代表所述可疑人员就是入侵人员，故为了避免惊扰到其他路过人员，故无需采用声光或其他手段警示所述可疑人员。
61.在步骤103中，在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员，本发明在经过步骤102中，会持续的对所述可疑人员的接下来的行动路线进行监控，一旦发现所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠，即认为所述目标特征轮廓入侵至所述第二监控区域，即判定所述目标特征轮廓为入侵人员，此时，为了防止所述入侵人员进一步地在第二监控区域中逗留或进一步地进入其他区域，需要告知所述入侵人员，即生成第二入侵响应，本发明可以采用声音警报的方式提醒入侵人员离开，也可以采用闪灯的方式引起入侵人员注意，如果是室内环境，也可以采取关灯的形式使得入侵人员无法继续往前行走，还可以采用一些联锁机制，例如关闭或反锁由所述第二监控区域进入其他禁止区域的大门，或者将其他禁止区域断电等等，以防止入侵人员进入其他禁止区域，从而提高了监控安全系数。
62.可选地，所述待监控区域为机场跑道或地铁铁轨、场馆门口；
63.在所述待监控区域为机场跑道或地铁铁轨的情况下，所述第一监控区域为等候区域，所述第二监控区域为危险区域，所述第二入侵响应还包括语音提示，所述语音提示用于告知入侵人员驶离所述危险区域；
64.在所述待监控区域为场馆门口的情况下，所述第一监控区域为路过区域，所述第二监控区域为警示区域，所述第二入侵响应还包括灯光提示，所述灯光提示用于告知入侵人员已进入警示区域。
65.本发明针对所公开的技术方案，提供了两个较为常见的应用场景，但这并不代表本发明只能应用于上述两个场景，具体地，在所述待监控区域为机场跑道或地铁铁轨的情况下，所述待监控区域被设置为用于人员候车、候机的等候区域，以及用于飞机或火车到达接送地点的危险区域，此时，调整图像采集装置的摄像角度，以使得在待监控区域中显示所述第一监控区域以及所述第二监控区域，而在其他的实施例中，也可以在获取待监控区域后，在确定出用于分割所述第一监控区域以及所述第二监控区域的分界线，由于所述图像采集装置在采集图像的过程中无法移动，故在确定了分界线后，基于所述分界线可以处理后续其他帧的图像。更为具体地，在确定由入侵人员入侵至所述第二监控区域的情况下，生成所述第二入侵响应，所述第二入侵响应还包括语音提示，所述语音提示用于告知入侵人员驶离所述危险区域。
66.可选地，在所述待监控区域为场馆门口的情况下，所述待监控区域被设置为用于人员路过的路过区域，以及用于到达场馆内部的警示区域，为了防止其他非工作人员的入侵，本发明还可以在确定由入侵人员入侵至所述第二监控区域的情况下，生成所述第二入侵响应，所述第二入侵响应还包括灯光提示，所述灯光提示用于告知入侵人员已进入警示区域。
67.更为具体地，为了防止被允许的工作人员在进入所述第二监控区域时产生误报
警，本发明还可以在所述第二监控区域中设置预设行走路线，若所述被允许的工作人员按照所述预设行走路线进入所述第二监控区域，则不会触发所述第二入侵响应的生成；作为一个变化例，本发明还可以在所述第一监控区域中设置所述预设行走路线，以使得被允许的工作人员在所述第一监控区域中获取到能够进入第二监控区域的资格，从而在进入所述第二监控区域，不会触发所述第二入侵响应的生成。
68.本发明提供了一种基于双视相机的人员侵入检测与跟踪方法，可提高对可见光图像和红外图像相结合的画面中对于目标轮廓区域的检出率和正确检测率，并且能够多光谱、高效率、全天候地检测识别移动目标并进行跟踪，从而充分结合可见光图像和红外图像各自的优点，实现全天候行人的自动检测与跟踪。
69.本发明提供了一种入侵响应方法、装置、设备及可读存储介质，本发明通过实时获取同步时刻的红外热图像帧以及可见光图像帧，确定目标特征轮廓，在待监控区域中出现目标特征轮廓的情况下，且确定目标特征轮廓为可疑人员的情况下，将提醒监控人员留意，但并不会告知可疑人员，而在可疑人员进一步深入至第二监控区域的情况下，才会将入侵行为告知入侵人员，本发明通过在不同的监控区域生成不同的响应，不仅提高了可疑人员检测的准确性，还提高了入侵响应的准确性以及合理性。
70.图2是本发明提供的入侵响应方法的流程示意图之二，在确定目标特征轮廓之前，还包括：
71.步骤201、根据红外热像仪获取红外热视频，根据可见光摄像机获取可见光视频；
72.步骤202、根据不同时刻划分所述红外热视频以及所述可见光视频，获取所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧。
73.在步骤201中，本发明可以实现全天候不间断的实时监控，也可以根据监控人员的需求，选择预设时间段进行监控，为了记录所述红外热视频以及所述可见光视频，本发明在获取到所述红外热视频以及所述可见光视频后，还可以将所述红外热视频以及所述可见光视频进行存储，通过人工核对的形式验证所述入侵响应的触发概率以及准确性，并为后续的监控技术升级提供有力保障。
74.在步骤202中，本领域技术人员理解，图像帧是组成视频的最小单元，本发明在获取到所述红外热视频以及所述可见光视频后，处理所述红外热视频以及所述可见光视频，在每一时刻，确定其对应的红外热图像帧以及可见光图像帧，最终获取所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧。
75.图3是本发明提供的确定目标特征轮廓的流程示意图之一，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓，包括：
76.步骤1011、在所述待监控区域的亮度大于或等于预设亮度的情况下，根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓；
77.步骤1012、在所述待监控区域的亮度小于预设亮度的情况下，根据所述红外热图像帧中的红外热成像确定目标特征轮廓；
78.所述气象信息包括晴天状态以及非晴天状态。
79.在步骤1011中，本发明结合所述待监控区域的亮度，在亮度较高的情况下，更能准确的分辨出目标特征轮廓是否为可疑人员，具体地，本发明在所述待监控区域的亮度大于
或等于预设亮度的情况下，此时无论是红外热图像帧以及可见光图像帧均能较为清晰的获取到目标特征轮廓，进而采用两种图像帧相结合的形式，提高对所述目标特征轮廓的分辨能力，同时，有时虽然亮度较高，但可见度仍然很低，例如雨天、雪天等自然因素，所述气象信息包括晴天状态以及非晴天状态，本发明还结合气象信息，以更进一步地提高对所述目标特征轮廓的分辨能力。
80.在步骤1012中，在所述待监控区域的亮度小于预设亮度的情况下，即认为此时由于室内亮度调节，也可能是在室外监控环境中的日夜更替，导致所述待监控区域的可见度较低，此时，所述可见光图像帧的参考意义较低，本发明在此情况下采用所述红外热图像帧中的红外热成像的形式确定目标特征轮廓，从而减低计算复杂程度，缩短分辨时间，提高识别效率。
81.图4是本发明提供的确定目标特征轮廓的流程示意图之二，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓，包括：
82.步骤10111，在所述气象信息为晴天状态的情况下，根据所述可见光图像帧确定可见光特征轮廓，根据红外热图像帧确定红外热特征轮廓，在所述可见光特征轮廓与所述红外热特征轮廓的重叠度大于第一重叠度的情况下，确定所述可见光特征轮廓为所述目标特征轮廓；
83.步骤10112，在所述气象信息为非晴天状态的情况下，根据红外热图像帧确定红外热特征轮廓，根据所述可见光图像帧确定可见光特征轮廓，在所述红外热特征轮廓与所述可见光特征轮廓的重叠度大于第二重叠度的情况下，确定所述红外热特征轮廓为所述目标特征轮廓；
84.所述第一重叠度大于所述第二重叠度；
85.所述非晴天状态包括雨天状态、雪天状态、雾霾状态以及沙尘暴状态。
86.在步骤10111中，本发明可以采用定位系统调用气象站当前定位下的天气情况，所述气象信息包括晴天状态以及非晴天状态，这里的晴天状态可选地代指能见度较高的状态，而非晴天状态可选地代指能见度较低的状态，故所述非晴天状态包括雨天状态、雪天状态、雾霾状态以及沙尘暴状态，此时即使亮度足够，但由于图像采集系统采集的画面中包含有雨雪雾霾沙，从而导致画面不够清晰，不利于采用可见光特征轮廓作为主导。
87.可选地，在所述气象信息为晴天状态的情况下，此时根据所述可见光图像帧能够确定可见光特征轮廓，根据红外热图像帧能够确定红外热特征轮廓，将所述可见光特征轮廓作为主导，与所述述红外热特征轮廓进行比对，只要所述可见光特征轮廓与所述红外热特征轮廓的重叠度大于第一重叠度的情况下，即确定所述可见光特征轮廓为所述目标特征轮廓，所述第一重叠度可以为80％、90％，其主要是通过双重确定的形式，确保所获取的目标特征轮廓的真实性。
88.在步骤10112中，在所述气象信息为非晴天状态的情况下，此时根据红外热图像帧能够确定红外热特征轮廓，根据所述可见光图像帧虽然能够可见光特征轮廓，但可能并不够清晰，此时以所述红外热特征轮廓为主导，以所述可见光特征轮廓为辅助，对所述红外热特征轮廓的真实性进行判断，在所述红外热特征轮廓与所述可见光特征轮廓的重叠度大于第二重叠度的情况下，确定所述红外热特征轮廓为所述目标特征轮廓，所述第一重叠度大
于所述第二重叠度，所述第二重叠度可以为70％、60％，由于在非晴天状态下，利用所述红外热特征轮廓确定所述目标特征轮廓的权重较高，故对于所述红外热特征轮廓与所述可见光特征轮廓的重叠度的判断标准低于步骤10111中的判断标准。
89.图5是本发明提供的入侵响应方法的流程示意图之三，在确定目标特征轮廓之后，还包括：
90.在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第一标记；
91.所述第一标记用于表征行人、动物或车辆。
92.本发明为了能够使得监控人员能够更为直观的看到入侵对象，在实现入侵对象的入侵响应时，还能够在所述待监控区域的显示画面中生成标记的形式，以便于监控人员更容易观察到显示画面中的异常。
93.在确定目标特征轮廓之后，即确定所述目标特征轮廓为可疑对象，然而由于此时并未分辨出可疑对象是人还是其他动物，故在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第一标记，所述第一标记用于表征行人、动物或车辆。
94.可选地，在生成第一入侵响应之后，还包括：
95.步骤301、基于光流场跟踪算法处理所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧，获取所述目标特征轮廓对应的行人运动信息；
96.步骤302、在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第二标记；
97.所述第二标记用于表征所述行人运动信息；
98.所述行人运动信息包括行人运动方向以及行人运动速度。
99.本领域技术人员理解，采用光流场跟踪算法处理所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧，能够获取到所述目标特征轮廓对应的行人运动信息，所述行人运动信息包括行人运动方向以及行人运动速度，此时，由于所述目标特征轮廓已经确定为可疑人员，为了进一步地更为直观的监控所述可疑人员的走向，在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第二标记，随着所述目标特征轮廓在所述待监控区域的显示画面中移动，所述第二标记随之移动。
100.图6是本发明提供的入侵响应装置的结构示意图，本发明还提供了一种入侵响应装置，包括确定单元1：用于根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓，所述确定单元1的工作原理可以参考前述步骤101，在此不予赘述。
101.所述入侵响应装置还包括第一生成单元2：用于在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员，所述第一生成单元2的工作原理可以参考前述步骤102，在此不予赘述。
102.所述入侵响应装置还包括第二生成单元3：用于在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员，所述第二生成单元3的工作原理可以参考前述步骤103，在此不予赘述。
103.所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
104.本发明提供了一种入侵响应方法、装置、设备及可读存储介质，本发明通过实时获取同步时刻的红外热图像帧以及可见光图像帧，确定目标特征轮廓，在待监控区域中出现
目标特征轮廓的情况下，且确定目标特征轮廓为可疑人员的情况下，将提醒监控人员留意，但并不会告知可疑人员，而在可疑人员进一步深入至第二监控区域的情况下，才会将入侵行为告知入侵人员，本发明通过在不同的监控区域生成不同的响应，不仅提高了可疑人员检测的准确性，还提高了入侵响应的准确性以及合理性。
105.根据本发明的另一方面，本发明还提供了一种入侵响应系统，包括图像采集系统、视觉分析系统，所述图像采集系统通过采集软件控制可见光摄像机和红外热像仪采集环境图像，然后将采集的图像通过有线/无线传输给视觉分析系统；所述视觉分析系统根据可见光摄像机及红外热像仪采集图像信息，通过人员检测输出检测结果，并将结果传输至监控系统。
106.本发明采用人员入侵检测算法，根据检测区域环境信息建立正常状态下的环境模型，首先基于红外图像进行温度异常区域检测，对高温区域进行边缘检测，以对应于可见光图像相应的区域，再构建行人模型，将其与行人模型进行行人检测。本发明基于双视频的行人跟踪算法，通过基于可见光和红外轮廓的光流场跟踪算法，实现行人的自动跟踪，解决了单纯运用检测算法运算量大的问题。
107.所述入侵响应系统还包括监控系统，可以实施显示监测可见光及红外视频，以及入侵检测结果，所述监控系统还具备相应的可见光和红外热像仪配置功能以及算法导入功能，本发能够解决可见光摄像机受光线影响，夜间无法使用的问题，以及单纯依赖红外热像仪无法区分人、动物等问题，实现了全天候、精准的入侵检测及自动跟踪，可广泛用于机场跑道、地铁铁轨、博物馆、展览馆等防人员侵入区域。同时，本发明还实现在应用效果上提高了行人检测的可靠性，基于视频跟踪算法，提高了检测的连续性，降低在线监控对人员的依赖性，可实现自动检测预警。
108.图7是本发明提供的电子设备的结构示意图。如图7所示，该电子设备可以包括：处理器(processor)710、通信接口(communications interface)720、存储器(memory)730和通信总线740，其中，处理器710，通信接口720，存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令，以执行入侵响应方法，该方法包括：根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
109.此外，上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
110.另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的一种入侵响应方法，该方法包括：根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
111.又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法提供的入侵响应方法，该方法包括：根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。
112.以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
113.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
114.最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

技术特征：
1.一种入侵响应方法，其特征在于，包括：根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。2.根据权利要求1所述的入侵响应方法，其特征在于，在确定目标特征轮廓之前，还包括：根据红外热像仪获取红外热视频，根据可见光摄像机获取可见光视频；根据不同时刻划分所述红外热视频以及所述可见光视频，获取所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧。3.根据权利要求1所述的入侵响应方法，其特征在于，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓，包括：在所述待监控区域的亮度大于或等于预设亮度的情况下，根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓；在所述待监控区域的亮度小于预设亮度的情况下，根据所述红外热图像帧中的红外热成像确定目标特征轮廓；所述气象信息包括晴天状态以及非晴天状态。4.根据权利要求3所述的入侵响应方法，其特征在于，所述根据任一同步时刻对应的红外热图像帧以及可见光图像帧，并基于所述监控区域的气象信息，确定目标特征轮廓，包括：在所述气象信息为晴天状态的情况下，根据所述可见光图像帧确定可见光特征轮廓，根据红外热图像帧确定红外热特征轮廓，在所述可见光特征轮廓与所述红外热特征轮廓的重叠度大于第一重叠度的情况下，确定所述可见光特征轮廓为所述目标特征轮廓；在所述气象信息为非晴天状态的情况下，根据红外热图像帧确定红外热特征轮廓，根据所述可见光图像帧确定可见光特征轮廓，在所述红外热特征轮廓与所述可见光特征轮廓的重叠度大于第二重叠度的情况下，确定所述红外热特征轮廓为所述目标特征轮廓；所述第一重叠度大于所述第二重叠度；所述非晴天状态包括雨天状态、雪天状态、雾霾状态以及沙尘暴状态。5.根据权利要求1所述的入侵响应方法，其特征在于，在确定目标特征轮廓之后，还包括：在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第一标记；所述第一标记用于表征行人、动物或车辆。6.根据权利要求5所述的入侵响应方法，其特征在于，在生成第一入侵响应之后，还包括：基于光流场跟踪算法处理所有时刻对应的红外热图像帧以及每一时刻对应的可见光图像帧，获取所述目标特征轮廓对应的行人运动信息；
在所述待监控区域的显示画面中生成所述目标特征轮廓对应的第二标记；所述第二标记用于表征所述行人运动信息；所述行人运动信息包括行人运动方向以及行人运动速度。7.根据权利要求1所述的入侵响应方法，其特征在于，所述待监控区域为机场跑道或地铁铁轨、场馆门口；在所述待监控区域为机场跑道或地铁铁轨的情况下，所述第一监控区域为等候区域，所述第二监控区域为危险区域，所述第二入侵响应还包括语音提示，所述语音提示用于告知入侵人员驶离所述危险区域；在所述待监控区域为场馆门口的情况下，所述第一监控区域为路过区域，所述第二监控区域为警示区域，所述第二入侵响应还包括灯光提示，所述灯光提示用于告知入侵人员已进入警示区域。8.一种入侵响应装置，其特征在于，包括：确定单元：用于根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；第一生成单元：用于在所述目标特征轮廓与待监控区域中的第一监控区域存在重叠，且所述目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，所述第一入侵响应用于指示告知监控人员；第二生成单元：用于在所述目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，所述第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-7中任一项所述的入侵响应方法。10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的入侵响应方法。

技术总结
本发明提供一种入侵响应方法、装置、设备及可读存储介质，涉及入侵监控领域，该方法包括：根据任一同步时刻对应的红外热图像帧以及可见光图像帧，确定目标特征轮廓；在目标特征轮廓与待监控区域中的第一监控区域存在重叠，且目标特征轮廓与预设边缘轮廓的相似度大于预设阈值的情况下，生成第一入侵响应，第一入侵响应用于指示告知监控人员；在目标特征轮廓与所述待监控区域中的第二监控区域存在重叠的情况下，生成第二入侵响应，第二入侵响应用于指示告知入侵人员；所述第一监控区域的监控级别小于所述第二监控区域的监控级别。本发明通过在不同的监控区域生成不同的响应，不仅提高对可疑人员检测的准确性，还提高了入侵响应的准确性及合理性。的准确性及合理性。的准确性及合理性。


技术研发人员：李北斗
受保护的技术使用者：苏州浪潮智能科技有限公司
技术研发日：2023.03.17
技术公布日：2023/6/27