对高空抛物进行溯源监测的方法及计算设备与流程

1.本发明涉及图像处理技术领域，具体涉及一种对高空抛物进行溯源监测的方法及计算设备。


背景技术：

2.随着城市的不断发展，高层建筑物林立，随之而来的是高空抛物事件的频频发生。高空抛出物可能会对行人、车辆、建筑物等造成严重伤害或损害。因此，对于高空抛物行为的监管和检测显得尤为重要。
3.随着人工智能技术的发展、监控设备的普及，图片数据资源的重要性也日益凸显。并且近几年计算机深度学习技术的飞速发展，使得图像数据处理的应用领域非常广泛。
4.现有的检测技术大多是利用图像分析技术，使用多个摄像机对高空抛物进行监测识别。这种方式需要采用多个摄像机，设置复杂，成本较高。
5.为此，需要一种技术方案，能够在保持对高空抛物报警的准确性的情况下，降低成本。


技术实现要素：

6.本技术旨在提供用于高空抛物溯源监测的方法及计算设备，能够对高空抛出物进行检测。
7.根据本技术的一方面，提供一种高空抛物溯源监测的方法，包括：获取来自摄像装置的实时视频流的帧图像，所述实时视频流是对建筑物进行固定监测获得的；通过图像变化检测从所述帧图像中检测疑似抛出物区域；对所述疑似抛出物区域进行运动轨迹跟踪；根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物；如果判断疑似抛出物区域对应抛出物，则进行抛出物报警。
8.根据一些实施例，检测疑似抛出物区域，包括：对所述帧图像按照单个抛出区域进行分割，得到多个单独检测区域；通过图像变化检测识别各个所述单独检测区域的变化区域，所述变化区域即为所述疑似抛出物区域。
9.根据一些实施例，所述对所述疑似抛出物区域进行运动轨迹跟踪，包括：对各个单独检测区域中的疑似抛出物区域，基于特征匹配进行多目标轨迹跟踪。
10.根据一些实施例，所述方法还包括：检测所述帧图像的关注区，所述关注区对应所述建筑物；将所述关注区以外的图像区域填充为任何一种颜色或者使用所述关注区以外的区域的所有像素点的像素平均值、最大值、最小值、众数、或中位数进行填充，从而对所述帧图像设置算法识别区域。
11.根据一些示例实施例，获取来自摄像装置的实时视频流的帧图像之后，还包括：利用神经网络模型对所述帧图像进行超分处理，从而提高所述帧图像的分辨率。
12.根据一些实施例，所述摄像装置的安装，应固定它的焦距、位置和拍摄角度。
13.根据一些示例实施例，在通过图像变化检测识别各个单独检测区域的疑似抛出物区域之后，还包括；对各个单独检测区域进行干扰物检测，确定干扰物区域。如果所述干扰物区域与所述疑似抛出物区域的交并比大于预设干扰阈值，则确定所述疑似抛出物区域不对应抛出物。
14.根据一些示例实施例，根据轨迹跟踪结果判断所述疑似抛出物区域是否对应抛出物，包括：累计目标在各个单独监测区域的运动轨迹长度，判断所述轨迹长度总和是否大于预设轨迹阈值，如果判断结果为是，则判断所述疑似抛出物区域对应抛出物。
15.或判断所述目标运动轨迹途经单独检测区域的个数是否大于预设轨迹路径阈值，如果判断结果为是，则判断所述疑似抛出物区域对应抛出物。
16.根据一些实施例，所述所述摄像装置包括单一摄像头。
17.根据本技术的另一方面，提供一种计算设备，包括：处理器；以及存储器，存储有计算机程序，当所述计算机程序被所述处理器执行时，使得所述处理器执行如上任一项所述的方法。
18.根据本技术的另一方面，提供一种非瞬时性计算机可读存储介质，其上存储有计算机可读指令，当所述指令被处理器执行时，使得所述处理器执行如上任一项所述的方法。
19.根据本技术的实施例，所述变化区域检测广泛适用于任意物体，且针对单独检测区域进行的变化检测提高了检测精度，对检测出的疑似抛出物区域进行轨迹跟踪结果的二次判断，使判断结果更具可靠性。因此该高空抛物方法不仅应用场景广泛，而且识别精度和可靠性高，可以为监管高空抛物行为提供重要的技术支撑，能够有效地溯源高空抛物的位置。
20.根据一些实施例，通过变化区域疑似抛出物区域检测识别高空抛物，适用于任何物体。因此，本高空抛物监测方案应用场景广泛，可以为监管高空抛物行为提供重要的技术支撑，能够有效地溯源高空抛物的位置。此外，结合轨迹检测，可进一步提高识别准确度，避免误判。
21.根据一些实施例，通过对原始图片进行图像超分，提高图像的分辨率，有利于后续的分割窗户或者阳台、变化检测和干扰物检测的效果，同时可以降低摄像头的成本。
22.根据一些实施例，结合干扰物检测，将得到的干扰物与疑似抛出物区域，计算交并比iou，可以过滤掉疑似抛出物区域中是干扰物的物体，进一步提高高空抛物检测的准确度，避免误判。
23.应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本技术。
附图说明
24.为了更清楚地说明本技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍。
25.图1示出根据本技术示例实施例的对高空抛物进行溯源检测的方法流程图。
26.图2a示出根据本技术另一示例实施例的对高空抛物进行溯源检测的方法示意图。
27.图2b示出根据本技术示例实施例的建筑图像分割示意图。
28.图3示出根据示例性实施例用于高空抛物溯源检测方法的变化检测方法流程图。
29.图4示出根据示例性实施例用于高空抛物溯源检测方法的高空抛出物判断识别图。
30.图 5 示出根据示例性实施例的对高空抛物进行溯源检测的方案示意图。
31.图6示出本技术示例实施例的高空抛物溯源检测方法中的计算机设备的结构示意图。
具体实施方式
32.现在将参考附图更全面地描述示例实施例。然而，示例实施例能够以多种形式实施，且不应被理解为限于在此阐述的实施例；相反，提供这些实施例使得本技术将全面和完整，并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。
33.此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本技术的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本技术的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本技术的各方面。
34.附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
35.附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。
36.应理解，虽然本文中可能使用术语第一、第二、第三等来描述各种组件，但这些组件不应受这些术语限制。这些术语乃用以区分一组件与另一组件。因此，下文论述的第一组件可称为第二组件而不偏离本技术概念的教示。如本文中所使用，术语“及/或”包括相关联的列出项目中的任一个及一或多者的所有组合。
37.本技术所涉及的用户信息（包括但不限于用户设备信息、用户个人信息等）和数据（包括但不限于用于分析的数据、存储的数据、展示的数据等），均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
38.本领域技术人员可以理解，附图只是示例实施例的示意图，附图中的模块或流程并不一定是实施本技术所必须的，因此不能用于限制本技术的保护范围。
39.现有的高空抛物检测技术大多是利用图像分析技术，使用多个摄像机对高空抛物进行监测识别。这种方式需要采用多个摄像机，设置复杂，成本较高。另外，现有对高空抛物进行监测的方案中，一般是采用对特定抛出物进行识别的方式。这种对特定抛出物进行识别的检测方式，对已知抛出物以外的对象无法识别，会导致漏判的问题。而且，对特定抛出物进行分类识别的方式准确度不高，容易导致误判和漏判的问题。
40.为此，本技术提出一种高空抛物溯源检测方法，可通过单一摄像头对楼宇实时监控监测，通过疑似抛出物区域检测和轨迹判断，实现对高空抛出物进行溯源监测。以防止高空抛物事件产生的危险。根据本技术的技术方案成本低，并可解决现有高空抛物检测方法存在的误判和漏判问题。
41.下面将参照附图，将根据本技术实施例用高空抛物溯源检测的方法进行详细说明。
42.图1示出根据本技术示例实施例的对高空抛物进行溯源检测的方法流程图。
43.参见图1，在s101，获取来自摄像装置的实时视频流，所述实时视频流用于对建筑物进行固定监测。
44.根据实施例，为了对建筑物进行固定监测,摄像装置在焦距、位置及拍摄角度固定的情况下获取实时视频流。
45.在s103，通过图像变化检测从所述帧图像中检测疑似抛出物区域。
46.对所述疑似抛出物的检测，包括：对所述帧图像按照单个抛出区域进行分割，得到多个单独检测区域。通过图像变化检测识别各个单独检测区域的变化区域。所述变化区域即为疑似抛出物区域。
47.根据一些实施例，所述变化检测是针对分割后的单独检测区域进行变化检测及干扰物检测，得到排除干扰物的疑似抛出物区域。
48.根据一些示例实施例，所述目标疑似抛出物区域可以通过变化检测神经网络获取。现有的技术中有多种检测方式。用户可根据实际操作从优选择。
49.在s105，对所述疑似抛出物区域进行运动轨迹跟踪。
50.根据一些实施例，对单个或多个疑似抛出物区域的运动轨迹跟踪，可通过多目标跟踪算法实现。
51.在s107,根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物。
52.根据一些实施例，对单个或多个单独检测区域进行变化检测，经过干扰物过滤，然后将剩余的变化检测框，映射到整个图像的位置，当掉落物体到达下面的窗户或者阳台的时候，算法会基于特征匹配进行多目标跟踪，由于各检测区域单独检测，所以目标物的跟踪轨迹是不连续的，将标号窗户中的各段跟踪线的端点连在一起就能得到完整的轨迹线。累计目标在各个单独监测区域的运动轨迹长度，判断所述轨迹长度总和是否大于预设轨迹阈值，如果判断结果为是，则判断所述疑似抛出物区域对应抛出物。根据另一些实施例，可根据多目标跟踪到的物体运动轨迹途经单独检测区域个数判断是否发生高空抛物事件。
53.在s109,如果判断疑似抛出物区域对应抛出物，则进行抛出物报警.根据一些示例实施例，所述疑似抛出物区域经目标跟踪判断，确认为高空抛出物后，触发程序中的警报系统，可按照用户要求设置为现场报警音警示或计算机端报警提示，并输出相应区域标号或窗口号等具体抛出物起始点位置信息，用于后续溯源追责。
54.图2a示出根据本技术示例实施例的高空抛物溯源检测方法流程图。
55.参见图2a，在s201，获取来自摄像装置的实时视频流，所述实时视频流用于对建筑物进行固定监测。
56.根据示例实施例，可采用红外摄像头或星光级摄像头进行监测拍摄。为了对建筑物进行固定监测，根据实施例，摄像装置在焦距、位置及拍摄角度固定的情况下获取实时视频流。
57.在一个具体的实施场景中，高空抛物的事件的发生时间是随机的，可以是一天之中的任何时间，因此需要24小时不间断的对大楼进行监控，单目红外摄像头一直处于拍摄视频的状态，获取拍摄获取的当前视频流。在本实施场景中，采用单目红外摄像头进行检测，不受天气、光线等因素的干扰，在固定位置的情况下进行检测，能够提高高空抛物的检测准确率。该单目红外摄像头的拍摄焦距、拍摄位置和拍摄角度固定且已知。
58.在s203，对所述帧图像按照单个抛出区域进行分割，得到多个单独检测区域。
59.根据示例实施例，通过图像识别技术识别出当前帧图像中的窗户或阳台区域，并按其对图像进行分割，从而针对单独检测区域进行变化检测，与对整个帧图像进行变化区域检测相比，可提高识别精度和可靠性。
60.另外，可对单独检测区域进行标号，方便后续对高空抛物进行追责以及多目标跟踪中轨迹判断和途经检测区域数量的统计。单独监测区域的标号可以按照预设的标号规则进行标号，例如第x行、第y列的窗户或者阳台的编号即用(x,y)表示。对关注区域分割、分区域监控检测，便于对高空抛出事件准确追责，配合后续多目标跟踪两者配合，提高高空抛物检测的精准度。
61.在s205,通过图像变化检测识别各个单独检测区域的疑似抛出物区域。
62.根据实施例，可将当前各个单独检测区域与所对应模板区域进行比对，获取当前单独检测区域与对应模版区域的不同之处，将该不同之处作为目标疑似抛出物区域。所述单独检测区域的对应模板图像区域是动态更新的，每隔一定的时间或者帧数更新一次模板图像区域。如果连续n张图像帧中相应单独检测区域保持基本不变，则可更新作为此单独检测区域的模板图像区域。
63.根据一些示例实施例，所述目标变化区域可以通过变化检测神经网络获取。现有的技术中有多种检测方式。例如，可采用预训练过的changnet算法实现变化区域识别。
64.在s207，对所述疑似抛出物区域进行运动轨迹跟踪，根据轨迹跟踪结果判断所述疑似抛出物区域是否对应抛出物。
65.根据一些实施例，对单个或多个疑似抛出物区域的运动轨迹跟踪，可通过多目标跟踪算法实现。本示例所述的多目标跟踪方式可采用deepsort算法。
66.根据一些示例实施例，对单个或多个单独检测区域进行变化检测，经过干扰物过滤，然后将剩余的变化检测框，映射到整个图像的位置，当掉落物体到达下面的窗户或者阳台的时候，deepsort算法会基于特征匹配进行多目标跟踪，由于各检测区域单独检测，所以目标物的跟踪轨迹是不连续的，将标号窗户中的各段跟踪线的端点连在一起就能得到完整的轨迹线。这样，可确定相应单独检测区域为抛出区域，从而实现对所述抛出物的抛出溯源。相比目前比较普遍的sort等多目标跟踪算法，deepsort算法多了特征匹配环节，保证跟踪的准确性，提高了高空抛物检测的精准度。
67.根据一些实施例，所述摄像装置用于视频流的获取。基于摄像装置采集楼宇外阳台、窗户的实时视频流，并基于有线或无线网络将所述实时视频流发送至本发明的高空抛物溯源检测终端。作为获取视频流的摄像工具可用选择很多，基于成本以及适用性考量，本示例实施例中的摄像头可选单目红外摄像头，以利于夜间监控。
68.图2b示申请示例实施例的建筑图像分割示意图。
69.参见图2b，根据示例实施例，在获取来自摄像装置的实时视频流的帧图像之后，对所述帧图像按照单个抛出区域进行分割，并对所分割出的各个单独检测区进行编号。例如，可将帧图像按照每个窗户和/或阳台的区域进行图像分割，并对每个分割区域进行编号。
70.根据示例实施例，可通过语义分割网络分割并识别出当前图像中的窗户和/或阳台区域。基于分割结果，可以得到每个窗户、阳台的区域，作为单个抛出区域，并可确定每个窗户、阳台的编号。例如，用(x,y)表示第x行和第y列的窗户或者阳台的编号，方便后续对高空抛物进行追责。可以按照预设的标号规则进行标号，例如第x行、第y列的窗户或者阳台的编号即用(x,y)表示。
71.根据一些实施例，用于图像分割神经网络的损失函数可为；其中，，，，系数是一种用于评估两个样本相似性的度量函数，其值越大意味着这两个样本越相似。在语义分割问题中，表示真实分割图像的像素标签，表示模型预测分割图像的像素类别，近似为预测图像的像素与真实标签图像的像素之间的点乘，并将点乘结果相加，和分别近似为它们各自对应图像中的像素相加。
72.是一个超参数，用于平衡交叉熵损失和dice损失。
73.表示样本属于第类的概率，是样本的one-hot标签，当样本属于第i类时，，否则，。
74.图3示出根据示例性实施例用于高空抛物溯源检测方法的变化检测方法流程图参见图3,在s301,获取来自摄像装置的实时视频流的帧图像。关于视频流的可参见前面的描述。
75.在s303,更新模版图像区域。
76.模板图像区域用于图像变化检测。所述单独检测区域的对应模板图像区域是动态更新的，每隔一定的时间或者帧数更新一次模板图像区域。例如，如果连续n张图像帧中相应单独检测区域保持基本不变，则可更新作为此单独检测区域的模板图像区域。由于大楼的各个窗户或阳台的状态不是一成不变的，如果采用固定的图像作为模板图像，可能会导致需要判断是否发生高空抛物的次数过于频繁，对资源进行无意义的消耗。此外，相较于采用帧差法（相邻两帧图像，前者作为后者的模板图像），本发明避免了一些可能的拖影干扰
等情况，提高了检测的准确性和可靠性。
77.在s305,识别实时视频流的帧图像中各个单独检测区域的变化区域。
78.将当前单独检测区域与相应模板图像区域进行比对，获取所述两图像对应的单独检测区域中的不同之处，将该不同之处对应的区域作为目标变化区域。
79.根据一些实施例，所述目标变化区域可以通过变化检测神经网络识别。例如，可采用changnet实现变化区域识别。
80.changnet是一个基于深度学习的变化检测网络，应用孪生神经网络(siamese network)和fcn，并用softmax进行分类，最终输出变化区域。
81.在变化检测中，无变化像素的数量往往远超变化像素的数量。为了削弱正负样本不平衡的影像，使用混合损失函数（加权交叉熵和重叠度结合）混合损失函数可具体如下：加权交叉熵（wce）损失函数如下：其中变化图可视为点的集合：，和表示变化图的高和宽，表示中的点，每个只有m个结果，这里m为2，只有不变化和变化两类。是类预测结果，是one-hot编码的目标类别向量。为对预测变化图中每个类别的权重；。
82.变化图通过softmax计算重叠度损失，为真实值。
83.重叠度损失函数如下：图4示出本技术示例实施例利用干扰物检测确定抛出物的方法流程。
84.为了排除干扰物对高空抛物时间的判断，可对帧图像的各个单独检测区域进行干扰物检测，干扰物范围包括鸟、树叶、树枝等常见已知物体。
85.参见图4，在s401，识别实时视频流帧图像的各个单独检测取的变化区域。参见前面的描述，此处不再赘述。
86.在s403，对于所述单独检测区域进行干扰物检测，确定干扰物区域。
87.根据一些实施例，所述干扰物检测可通过预训练的yolov7神经网络模型实现。
88.当干扰物检测神经网络检测到当前图像中存在干扰物时，会将干扰物所在的位置用干扰物检测框进行标记。在其他实施场景中，还可以使用一些图像处理算法，如边缘检测、形态学处理等，来检测图像中的干扰物，并将其标记为干扰物检测框。
89.根据一些实施例，干扰物检测神经网络的损失函数为：其中，是位置回归损失函数，根据以下公式获取：
是物体置信度损失函数，根据以下公式获取：是物体置信度损失函数，根据以下公式获取：是分类损失函数，根据以下公式获取：是分类损失函数，根据以下公式获取：表示网格序号，b表示当前网格的第b个框，在本实施场景中，每个网格有3个框。
90.表示当前网格是否存在物体，有物体=1，没物体=0。
91.表示当前网格是否存在物体，与刚好相反，有物体=0，没物体=1。
92.表示所有网格里，所有框有物体的累加。
93.表示参数因子。
94.分别表示预测框和真实框的中心点距离，以及外包矩形的斜边长。
95.表示预测框和真实框的交并比。
96.表示预测框的宽和高。
97.表示真实框的宽和高。
98.表示第个网格的第个框置信度，表示第个网格的第个框的预测框的置信度。
99.表示第个网格的第j个框为类别c的概率值，表示第个网格的第j个预测框为类别c的概率值。
100.在s405，判断干扰物区域与疑似抛出物区域的交并比是否大于预设干扰阈值。
101.如果所述干扰物区域与所述疑似抛出物区域的交并比大于预设干扰阈值，则确定所述疑似抛出物区域为干扰物，而不是抛出物。否则，可确定该疑似抛出物区域不是干扰物，后续将进行目标跟踪检测，如前面所描述的。
102.例如，将干扰物检测的目标框的位置与变化检测的疑似抛出物区域计算交并比iou(intersection over union)。如果iou大于预设干扰阈值，那么该疑似抛出物区域为干扰物。否则，该疑似抛出物区域为疑似有危险的高空抛出物。这样，可以做到对高空抛物事件的准确检测，避免误报，例如将飞鸟误报为高空抛物。
103.根据实施例，通过干扰物检测排除掉预定种类干扰物，可以提高高空抛物监测的可靠性和准确性，避免产生误报。
104.图5示出本技术示例实施例的对高空抛物进行溯源监测的方案示意图。
105.参见图5，准备一个单目红外摄像设备或星光级摄像设备，它的焦距、位置和角度固定。
106.对所述摄像设备进行内参标定，得到内参矩阵和畸变系数。内参标定的具体方法有线性标定、非线性优化标定法、两步标定法。本实施例采用两步标定法中的张正友内参标定法，但本技术的方案不限于此。将得到的数据参数存储到配置文件。作为帧图像处理的基本数据，留待后续使用。
107.获取实时视频流的帧图像。利用之前存储在配置文件中的内参矩阵与畸变系数，对获取的帧图像进行畸变校正。将所述畸变校正后的帧图像进行去噪处理。
108.现实中的数字图像在数字化和传输过程中常受到成像设备与外部环境的噪声干扰影响，这些噪声可能在传输中产生也可能在量化等处理中产生，且后续图像超分处理中,可能放大噪声。
109.根据一些实例，增加图像去噪处理环节。现行的处理方式有多种，如均值滤波器、自适应维纳滤波器中值滤波器等等，可按照具体的实施监测环境自行选择，达到处理目的即可。
110.将所述去噪后的帧图像，进行超分处理，即将低分辨率的图像恢复为高分辨率图像。超分处理使本技术方法本身对摄像装置的分辨率要求降低，能够对建筑物或建筑小区本身摄像装置的加以利用，降低本发明方法的额外应用成本。例如，从1080p(分辨率为1920*1080)变为4k(分辨率为3840*2160)，有利于后续的分析任务。
111.根据一些实施例，超分可应用深度卷积神经网络来构建，这些方法使用不同的采样结构，对应不同的插值算法进而补充像素，使图像分辨率提高。这里可以自行选择方法，不影响后续判断。
112.对超分后的图片检测关注区，识别图像中的建筑物区域为关注区，作为算法识别区域。对关注以外的区域，使用任意一种颜色填充或者使用算法识别区域以外的区域的所有像素点的像素的平均值、最大值、最小值、众数、中位数等进行填充。这样做可以提升后续判断的准确性和可靠性。
113.根据一些实施例，关注区可以由人通过算法参数配置界面设置，也可以是通过图像识别，自动识别出大楼所在的区域，将天空、草坪等背景作为其余区域。用任何一种颜色除关注区域以外的其余区域，也可以获取关注区域以外的其余区域的所有像素点的像素值的均值、最大值、最小值、众数、中位数等对应的目标像素值，用目标像素值填充除关注区域以外的其余区域。这样，后续的处理均针对目标区域内的内容进行，不会考虑其余区域避免发生误判。
114.根据一些实施例，设置好所述关注区之后，将关注区域分割成多个单独检测区域，
对单独检测区域进行变化检测、干扰物检测，对排除干扰物的疑似抛出物区域进行基于特征匹配的多目标跟踪，根据多目标跟踪到的物体运动轨迹或轨迹途经单独检测区域个数判断是否发生高空抛物事件。具体步骤的实施方式与细节已在前文中做出详述，此处不在多做赘述。通过对示例实施例的描述，本领域技术人员易于理解，根据本技术实施例的技术方案至少具有以下优点中的一个或多个。
115.根据实施例，通过疑似抛出物区域检测识别高空抛物，适用于任何物体。因此，本高空抛物监测方案应用场景广泛，可以为监管高空抛物行为提供重要的技术支撑，能够有效地溯源高空抛物的位置。结合轨迹检测，可进一步提高识别准确度，避免误判，提高高空抛物的判断精度。
116.根据实施例，通过对原始图片进行图像超分，提高图像的分辨率，有利于后续的分割窗户或者阳台、变化检测和干扰物检测的效果，同时可以降低摄像头的成本。
117.根据实施例，通过分割窗户或者阳台，结合变化检测得到的变化区域，可以得到高空抛物的窗户或者阳台的编号，即高空抛物的位置，有效地溯源高空抛物的位置。
118.根据实施例，使用干扰物检测，将得到的干扰物与变化区域，计算交并比iou，可以过滤掉变化区域中是干扰物的物体，进一步提高高空抛物检测的准确度，避免误判。
119.根据一些实施例，对检测出的疑似抛出物区域进行轨迹跟踪结果的二次判断，使判断结果更具可靠性。对所述帧图像进行分区检测标号，能够有效地溯源高空抛物的位置。
120.图6示出申请示例实施例的高空抛物溯源检测方法中的计算设备的框图。
121.如图6所示，计算设备30包括处理器12和存储器14。计算设备30还可以包括总线22、网络接口16以及i/o接口18。处理器12、存储器14、网络接口16以及i/o接口18可以通过总线22相互通信。
122.处理器12可以包括一个或多个通用cpu(central processing unit，处理器)、微处理器、或专用集成电路等，用于执行相关程序指令。根据一些实施例，计算设备30还可包括为处理器12进行加速的高性能显示适配器（gpu）20。
123.存储器14可以包括易失性存储器形式的机器系统可读介质，例如随机存取存储器（ram）、只读存储器（rom）和/或高速缓存存储器。存储器14用于存储包含指令的一个或多个程序以及数据。处理器12可读取存储在存储器14中的指令以执行上述根据本技术实施例的方法。
124.计算设备30也可以通过网络接口16与一个或者多个网络通信。该网络接口16可以是无线网络接口。
125.总线22可以为包括地址总线、数据总线、控制总线等。总线22提供了各组件之间交换信息的通路。
126.需要说明的是，在具体实施过程中，计算设备30还可以包括实现正常运行所必需的其他组件。此外，本领域的技术人员可以理解的是，上述设备中也可以仅包含实现本说明书实施例方案所必需的组件，而不必包含图中所示的全部组件。
127.本技术还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述方法的步骤。计算机可读存储介质可以包括但不限于任何类型的盘，包括软盘、光盘、dvd、cd-rom、微型驱动器以及磁光盘、rom、ram、eprom、eeprom、dram、vram、闪
速存储器设备、磁卡或光卡、纳米系统（包括分子存储器ic）、网络存储设备、云存储设备，或适合于存储指令和/或数据的任何类型的媒介或设备。
128.本技术实施例还提供一种计算机程序产品，该计算机程序产品包括存储计算机程序的非瞬时性计算机可读存储介质，该计算机程序可操作来使计算机执行如上述方法实施例中记载的任何一种方法的部分或全部步骤。
129.本领域的技术人员可以清楚地了解到本技术的技术方案可借助软件和/或硬件来实现。本说明书中的“单元”和“模块”是指能够独立完成或与其他部件配合完成特定功能的软件和/或硬件，其中硬件例如可以是现场可编程门阵列、集成电路等。
130.需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本技术并不受所描述的动作顺序的限制，因为依据本技术，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本技术所必须的。
131.在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
132.在本技术所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些服务接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。
133.作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
134.另外，在本技术各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
135.集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备（可为个人计算机、服务器或者网络设备等）执行本技术各个实施例方法的全部或部分步骤。
136.在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
137.以上具体地展示和描述了本技术的示例性实施例。应可理解的是，本技术不限于这里描述的详细结构、设置方式或实现方法；相反，本技术意图涵盖包含在所附条款的精神和范围内的各种修改和等效设置。

技术特征：
1.一种对高空抛物进行溯源监测的方法，其特征在于，包括：获取来自摄像装置的实时视频流的帧图像，所述实时视频流是对建筑物进行固定监测获得的；通过图像变化检测从所述帧图像中检测疑似抛出物区域；对所述疑似抛出物区域进行运动轨迹跟踪；根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物；如果判断所述疑似抛出物区域对应抛出物，则进行抛出物报警。2.根据权利要求1所述的方法，其特征在于，检测疑似抛出物区域，包括：对所述帧图像按照单个抛出区域进行分割，得到多个单独检测区域；通过图像变化检测识别各个所述单独检测区域的变化区域，所述变化区域即为所述疑似抛出物区域。3.根据权利要求2所述的方法，其特征在于，所述对所述疑似抛出物区域进行运动轨迹跟踪，包括：对各个单独检测区域中的疑似抛出物区域，基于特征匹配进行多目标轨迹跟踪。4.根据权利要求1所述的方法，其特征在于，还包括：检测所述帧图像的关注区，所述关注区对应所述建筑物；将所述关注区以外的图像区域填充为任何一种颜色或者使用所述关注区以外的区域的所有像素点的像素平均值、最大值、最小值、众数、或中位数进行填充，从而对所述帧图像设置算法识别区域。5.根据权利要求1所述的方法，其特征在于，获取来自摄像装置的实时视频流的帧图像之后，还包括：利用神经网络模型对所述帧图像进行超分处理。6.根据权利要求1所述的方法，其特征在于，所述摄像装置在焦距、位置及拍摄角度固定的情况下获取所述实时视频流。7.根据权利要求3所述的方法，其特征在于，根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物，包括：累计目标在各个单独监测区域的运动轨迹长度，判断所述轨迹长度总和是否大于预设轨迹阈值，如果判断结果为是，则判断所述疑似抛出物区域对应抛出物。8.根据权利要求3所述的方法，其特征在于，根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物，包括：判断所述目标运动轨迹途经单独检测区域的个数是否大于预设轨迹路径阈值，如果判断结果为是，则判断所述疑似抛出物区域对应抛出物。9.根据权利要求3所述的方法，其特征在于，所述摄像装置包括单一摄像头。10.一种计算设备，其特征在于，包括：处理器；以及存储器，存储有计算机程序，当所述计算机程序被所述处理器执行时，实现如权利要求1-9中任一项所述的方法。

技术总结
本申请提供一种对高空抛物进行溯源监测的方法及计算设备。所述方法包括：获取来自摄像装置的实时视频流的帧图像，所述实时视频流是对建筑物进行固定监测获得的；通过图像变化检测从所述帧图像中检测疑似抛出物区域；对所述疑似抛出物区域进行运动轨迹跟踪；根据轨迹跟踪结果确认所述疑似抛出物区域是否对应抛出物；如果判断疑似抛出物区域对应抛出物，则进行抛出物报警。本申请的技术方案能够实现对高空抛物进行溯源监测，并能够在提高高空抛物报警的准确性的情况下，降低使用成本。降低使用成本。降低使用成本。


技术研发人员：赵景程 熊超 牛昕宇
受保护的技术使用者：深圳鲲云信息科技有限公司
技术研发日：2023.08.29
技术公布日：2023/10/8