一种用于施工现场辅助管理的旁站机器人及工程监理方法与流程

1.本技术涉及监理现场设备的技术领域，尤其是涉及一种用于施工现场辅助管理的旁站机器人及工程监理方法。


背景技术：

2.旁站、巡视、平行检验是国家《建设工程监理规范》中明确的监理方法，旁站是指“项目监理机构对工程的关键部位或关键工序的施工质量进行的监督活动”；近年来，随着政府机构、建设单位对安全工作的日益重视，不少监理机构对工程施工现场也开展了“安全旁站”和“质量旁站”；无论是质量旁站还是安全旁站，均要求监理人员对现场的关键部位、关键工序施工过程进行现场监督活动；在旁站监理制度实施的二十多年来，各企业、各项目由于人工成本问题，对旁站监理的执行力度参差不齐，且由于工程施工点多面广，由监理人员在工程施工现场旁站监督，很难完全监督到位。
3.因此，针对上述相关技术，发明人认为目前的旁站监理工作存在容易出现纰漏的问题。


技术实现要素：

4.为了提高旁站监理工作的可靠性，本技术提供一种用于施工现场辅助管理的旁站机器人及工程监理方法。
5.本技术的发明目的一采用如下技术方案实现：一种用于施工现场辅助管理的旁站机器人，包括机器人主体和监理服务器；所述机器人主体包括：摄像采集模块，用于实时采集施工现场的画面信息；语音收录模块，用于实时收录施工现场运作时的语音信息；通信模块，通讯连接于监理服务器，用于向施工现场、监理人员端发送信息，并接收施工现场、监理人员端的信息；所述监理服务器包括：数据处理模块，用于处理及存储所述画面信息和所述语音信息；行为识别模块，用于分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为；预警模块，用于根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块。
6.通过采用上述技术方案，旁站机器人包括机器人主体和监理服务器，其中机器人主体包括摄像采集模块和语音收录模块，用于获取施工现场的画面信息和语音信息，通信模块通讯连接于监理服务器，以便将画面信息和语音信息发送至监理服务器；监理服务器的数据处理模块用于对画面信息和语音信息进行处理和存储，便于后续识别违规施工行为；行为识别模块用于对画面信息和语音信息进行分析，进而识别施工现场出现的违规施
工行为；预警模块用于根据识别到的违规施工行为生成对应的警示信息，并发送至通信模块，以便通信模块通知施工现场的施工人员停止违规施工，注意规范操作，并通知监理人员督促施工人员修正违规施工行为，无需监理人员在各施工现场执行旁站监理工作，提高了旁站监理工作的效率并降低了旁站监理工作纰漏的可能性，进而提高了旁站监理工作的可靠性。
7.本技术在一较佳示例中：所述数据处理模块包括：人员合规分析子模块，用于将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息；设备合规分析子模块，用于从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息；建材合规分析子模块，用于从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信息和数量信息。
8.通过采用上述技术方案，将画面信息输入至图像处理模型中，以便基于内置的数据库识别画面信息，从画面信息中识别人体轮廓以及数量信息，并进一步识别人脸图像和施工护具，从而确定画面信息中人员的身份和护具使用情况；从画面信息中识别多种施工设备的型号和数量情况，并从画面信息中识别施工建材的型号和数量情况，以便后续分析施工现场的人员配备、施工设备配备、施工建材配备是否合规。
9.本技术在一较佳示例中：所述摄像采集模块包括：监理摄像头，用于实时拍摄施工现场的所述画面信息；影像接收子模块，用于接收由安装了辅助监理应用的影像设备所拍摄的所述画面信息；所述语音收录模块包括：监理麦克风，用于实时录制施工现场的所述语音信息；音频接收子模块，用于接收由安装了辅助监理应用的录音设备所录制的所述语音信息。
10.通过采用上述技术方案，摄像采集模块包括监理摄像头，且语音收录模块包括监理麦克风，以便直接拍摄、录制施工现场的画面信息和语音信息；摄像采集模块包括影像接收子模块，且语音收录模块包括音频接收子模块，便于通过安装了辅助监理应用的设备如手机、无人机、监控摄像头、甚至是监理人员、施工人员所使用的终端设备等影音设备获取施工现场的画面信息和语音信息，作为旁站机器人信息收集的补充，以便补充由旁站机器人上安装的监理摄像头、监理麦克风所无法获取的施工现场的画面信息和语音信息。
11.本技术在一较佳示例中：所述通信模块包括：警示灯，用于根据接收到的警示信息播放对应的警示光信号；扬声器，用于根据接收到的警示信息播放对应的警示声信号，并用于接收并播放监理人员端发出的语音信息；通话麦克风，用于输入语音信息；电信子模块，用于与监理人员端、施工人员端和监理服务器建立通讯连接。
12.通过采用上述技术方案，通信模块包括警示灯和扬声器，可用于根据接收到警示
信息播放对应的警示光信号和警示声信号，以便提示现场的施工人员当前存在违规施工行为；扬声器还可用于接收并播放监理人员端发出的语音信息，使得旁站机器人不仅能够获取施工现场的画面信息和语音信息，还便于监理人员对施工现场进行语音喊话，以便向施工现场的施工人员发表讲话；扬声器与通话麦克风配合使用，便于监理人员与施工现场的施工人员进行语音通话；电信子模块用于实现机器人主体、监理人员端、施工人员端和监理服务器之间的通讯连接，便于实现画面信息、语音信息的远程传递。
13.本技术在一较佳示例中：所述监理人员端为执行监理工作的人员所登录的辅助监理应用客户端；所述施工人员端为执行施工作业的人员所登录的辅助监理应用客户端；所述监理服务器无线通讯连接于各所述辅助监理应用客户端和各所述通信模块。
14.通过采用上述技术方案，监理人员和施工人员均可注册辅助监理应用客户端的账号并进行身份认证，以便在辅助监理应用客户端上登录，便于监理人员与施工人员之间的远程信息交互；由于在大型工程项目中，同步施工的关键部位、关键工序数量较多，因而需要同时执行旁站监理工作的施工点数量也较多，可通过在施工前在所有需要执行旁站监理工作的施工现场均部署旁站机器人的机器人主体，若干机器人主体可通过通信模块将在各施工现场中获取的画面信息和语音信息传输至监理服务器，便于轮流值班的监理人员通过监理人员端接入监理服务器，以对施工现场进行监督，并分析施工现场的画面信息和语音信息，实现一人多机或少人多机的监理，可节约旁站监理人员，提高了旁站监理工作的效率。
15.本技术的发明目的二采用如下技术方案实现：一种工程监理方法，应用于上述任一项所述用于施工现场辅助管理的旁站机器人，包括：实时获取施工现场的画面信息和语音信息；处理及存储所述画面信息和所述语音信息；分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为；根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块。
16.通过采用上述技术方案，实时获取施工现场的画面信息和语音信息，对画面信息和语音信息进行处理和存储，便于后续识别违规施工行为；对施工现场的画面信息和语音信息进行分析，进而识别施工现场出现的违规施工行为；根据识别到的违规施工行为生成对应的警示信息，并发送至通信模块，以便通信模块通知施工现场的施工人员停止违规施工，注意规范操作，并通知监理人员督促施工人员修正违规施工行为，无需监理人员在各施工现场执行旁站监理工作，提高了旁站监理工作的效率并降低了旁站监理工作纰漏的可能性，进而提高了旁站监理工作的可靠性。
17.本技术在一较佳示例中：所述处理及存储所述画面信息和所述语音信息，包括：将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息；从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息；从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信
息和数量信息；所述图像处理模型内置有施工设备图像库、施工建材图像库和人员身份数据库。
18.通过采用上述技术方案，将画面信息输入至图像处理模型中，以便基于内置的施工设备图像库、施工建材图像库和人员身份数据库识别画面信息；从画面信息中识别人体轮廓以及数量信息，并进一步识别人脸图像和施工护具，从而确定画面信息中人员的身份和护具使用情况；从画面信息中识别多种施工设备的型号和数量情况，并从画面信息中识别施工建材的型号和数量情况，以便后续分析施工现场的人员配备、施工设备配备、施工建材配备是否合规。
19.本技术在一较佳示例中：所述处理及存储所述画面信息和所述语音信息，包括：将所述语音信息输入至语音识别模型中，识别所述语音信息的语义并生成语音文本信息；基于所述人员身份信息、所述护具使用信息、多种施工设备的型号信息和数量信息、多种施工建材的型号信息和数量信息生成图像标注信息；将所述语音文本信息和所述图像标注信息标注至所述画面信息中，将标注后的画面信息根据时间先后顺序存储至监理数据库中。
20.通过采用上述技术方案，将语音信息输入至语音识别模型中从而识别语音信息的语义，得到语音文本信息，便于监理人员获知施工现场的施工人员的交流；基于识别到的施工人员的身份信息、护具使用信息，多种施工设备的型号信息和数量信息，多种施工建材的型号信息和数量信息生成图像标注信息，生成图像标注信息，以便后续标注画面信息中重要信息；将语音文本信息和图像标注信息标注至画面信息中，便于监理人员迅速从画面信息中查看到重点信息，以防监理人员遗漏画面信息中的关键细节；将标注后的画面信息根据时间先后顺序存储至监理数据库中，便于后续制作旁站监理记录和监理日记，并保存旁站监理的原始资料，便于后续回放查看。
21.本技术在一较佳示例中：所述分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为，包括：基于识别到的人体轮廓的数量、各人员身份信息和各护具使用信息，判断是否存在人员数量不合格、人员资质不合格、安全措施不合格的违规施工行为；基于识别到的多种施工设备的型号信息和数量信息，判断是否存在设备配备不合格的违规施工行为；基于识别到的多种施工建材的型号信息和数量信息，判断是否存在建材储备不合格的违规施工行为；将识别到的所述语音文本信息输入至预设的敏感语句库中进行匹配，将匹配成功的敏感语句发送至监理人员端复核；接收监理人员端发出的违规复核结果，基于违规复核结果确定对应的违规项目。
22.通过采用上述技术方案，基于识别到的人体轮廓的数量、人员身份和护具使用情况，判断施工现场是否存在相关人员配备数量不合格、人员资质不合格和安全措施不合格的违规施工行为，并确定对应的违规项目；基于识别到的多种施工设备的型号、数量，判断是否符合设备配备不合格的违规项目；基于识别到的多种施工建材的型号、数量，判断是否符合建材储备不合格的违规项目；将识别到的语音文本信息输入至预设的敏感语句库中如
匹配到敏感语句，则发送至监理人员端进行复核，以便监理人员判断是否确实为违规施工行为，以及违规项目类型；接收监理人员端发出的违规复核结果，以确定对应的违规项目。
23.本技术在一较佳示例中：所述根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块，包括：根据识别到的违规施工行为对应的违规项目，从预设的警示信息匹配库中对应的警示信息；将警示信息发送至通信模块，以将警示信息发送至监理人员端。
24.通过采用上述技术方案，根据识别到的违规施工行为所对应的违规项目，从预设的警示信息匹配库中匹配到对应的警示信息，将警示信息发送至通信模块，以便通过通信模块向监理人员端或施工现场的人员传达警示信息，使监理人员或施工人员获知违规施工行为并改正。
25.综上所述，本技术包括以下至少一种有益技术效果：1. 旁站机器人包括机器人主体和监理服务器，其中机器人主体包括摄像采集模块和语音收录模块，用于获取施工现场的画面信息和语音信息，通信模块通讯连接于监理服务器，以便将画面信息和语音信息发送至监理服务器；监理服务器的数据处理模块用于对画面信息和语音信息进行处理和存储，便于后续识别违规施工行为；行为识别模块用于对画面信息和语音信息进行分析，进而识别施工现场出现的违规施工行为；预警模块用于根据识别到的违规施工行为生成对应的警示信息，并发送至通信模块，以便通信模块通知施工现场的施工人员停止违规施工，注意规范操作，并通知监理人员督促施工人员修正违规施工行为，无需监理人员在各施工现场执行旁站监理工作，提高了旁站监理工作的效率并降低了旁站监理工作纰漏的可能性，进而提高了旁站监理工作的可靠性。
26.2. 将画面信息输入至图像处理模型中，以便基于内置的施工设备图像库、施工建材图像库和人员身份数据库识别画面信息；从画面信息中识别人体轮廓以及数量信息，并进一步识别人脸图像和施工护具，从而确定画面信息中人员的身份和护具使用情况；从画面信息中识别多种施工设备的型号和数量情况，并从画面信息中识别施工建材的型号和数量情况，以便后续分析施工现场的人员配备、施工设备配备、施工建材配备是否合规。
27.3. 基于识别到的人体轮廓的数量、人员身份和护具使用情况，判断施工现场是否存在相关人员配备数量不合格、人员资质不合格和安全措施不合格的违规施工行为，并确定对应的违规项目；基于识别到的多种施工设备的型号、数量，判断是否符合设备配备不合格的违规项目；基于识别到的多种施工建材的型号、数量，判断是否符合建材储备不合格的违规项目；将识别到的语音文本信息输入至预设的敏感语句库中如匹配到敏感语句，则发送至监理人员端进行复核，以便监理人员判断是否确实为违规施工行为，以及违规项目类型；接收监理人员端发出的违规复核结果，以确定对应的违规项目。
附图说明
28.图1是本技术实施例一中用于施工现场辅助管理的旁站机器人的原理框图。
29.图2是本技术实施例二中工程监理方法的流程图。
30.图3是本技术实施例二中工程监理方法中步骤s20的流程图。
31.图4是本技术实施例二中工程监理方法中步骤s20的另一流程图。
32.图5是本技术实施例二中工程监理方法中步骤s30的流程图。
33.图6是本技术实施例二中工程监理方法中步骤s40的流程图。
具体实施方式
34.以下结合附图1至6对本技术作进一步详细说明。
35.实施例一参照图1，本技术公开一种用于施工现场辅助管理的旁站机器人，用于对工程的关键部位或关键工序的施工质量进行监督，旁站机器人包括机器人主体和监理服务器，其中机器人主体用于部署于需要进行旁站监理工作的施工现场处，以从施工现场处收集信息，而监理服务器用于处理从施工现场处收集的信息，从而实现对施工现场的旁站监理，并用于运行辅助监理应用程序。
36.机器人主体包括用于实时采集施工现场的画面信息的摄像采集模块，以及用于实时收录施工现场运作时的语音信息的语音收录模块；在本实施例中，画面信息是指对施工现场进行拍摄得到的影像，语音信息是指施工现场的施工人员交谈的语音；优选的，机器人主体安装有定位模块，且各机器人主体均预设有唯一标识信息，便于后续监理人员准确定位机器人主体对应的施工现场位置。摄像采集模块包括监理摄像头和影像接收子模块，语音收录模块包括监理麦克风和音频接收子模块，优选的，监理摄像头可以选用具有远程控制转向和变焦功能的摄像头，监理麦克风可以是监理摄像头上自带的麦克风；通过监理摄像头和监理麦克风便于直接拍摄、录制施工现场的实时画面信息和实时语音信息；影像接收子模块用于接收由安装了辅助监理应用的影像设备所拍摄的所述画面信息，音频接收子模块用于接收由安装了辅助监理应用的录音设备所录制的所述语音信息，便于通过安装了辅助监理应用的设备如手机、无人机、监控摄像头、甚至是监理人员、施工人员所使用的终端设备等影音设备获取施工现场的画面信息和语音信息，作为旁站机器人信息收集的补充，以便补充由旁站机器人上安装的监理摄像头、监理麦克风所无法获取的施工现场的画面信息和语音信息；在本实施例中，影像设备是指具有影像拍摄功能或者是能够接收、存储影像文件的设备，例如手机、计算机、运动相机、无人机等；录音设备是指具有麦克风或者是能够接收、存储音频文件的设备，例如手机、计算机、运动相机、录音笔等。
37.通信模块，通讯连接于监理服务器，用于向施工现场、监理人员端发送信息，并接收施工现场、监理人员端的信息，通信模块还用于向监理服务器发送由摄像采集模块、语音收录模块获取到的施工现场的画面信息和语音信息。
38.监理服务器内置有数据处理模块、行为识别模块和预警模块，其中数据处理模块用于对接收到的画面信息和语音信息进行处理和存储，便于后续识别违规施工行为；行为识别模块用于对画面信息和语音信息进行分析，进而识别施工现场出现的违规施工行为；预警模块用于根据识别到的违规施工行为生成对应的警示信息，并发送至通信模块，以便通信模块通知施工现场的施工人员停止违规施工，注意规范操作，并通知监理人员督促施工人员修正违规施工行为，无需监理人员在各施工现场执行旁站监理工作，提高了旁站监理工作的效率并降低了旁站监理工作纰漏的可能性，进而提高了旁站监理工作的可靠性；在本实施例中，监理服务器可以是云服务器，也可以是本地服务器。
39.通信模块包括警示灯和扬声器，警示灯用于根据接收到的警示信息播放对应的警
示光信号，扬声器用于根据接收到的警示信息播放对应的警示声信号，以便提示现场的施工人员注意当前存在违规施工行为；在本实施例中，警示光信号是指由警示灯发出的光信号，不同警示光信号具有不同的亮灭、明暗、颜色变化规律；警示声信号是指由扬声器发出的声信号，不同警示声信号为不同的安全宣传标语；通信模块存储有多个用于控制警示灯发出警示光信号的灯光控制程序，以及多个用于控制扬声器发出警示声信号的音频播放程序，通信模块接收到不同的警示信息会触发运行对应的灯光控制程序和/或音频播放程序。
40.通信模块还包括通话麦克风，扬声器还可用于接收并播放监理人员端发出的语音信息，使得旁站机器人不仅能够获取施工现场的画面信息和语音信息，还便于监理人员对施工现场进行语音喊话，以便向施工现场的施工人员发表讲话；扬声器与通话麦克风配合使用，便于监理人员与施工现场的施工人员进行语音通话。
41.通信模块还包括电信子模块，用于与监理人员端、施工人员端和监理服务器建立通讯连接，以实现机器人主体、监理人员端、施工人员端和监理服务器之间画面信息、语音信息的远程传递。
42.在本实施例中，监理人员端为执行监理工作的人员所登录的辅助监理应用客户端；施工人员端为执行施工作业的人员所登录的辅助监理应用客户端；辅助监理应用客户端为辅助监理应用程序的客户端；监理服务器无线通讯连接于各辅助监理应用客户端和各通信模块。
43.具体地，监理人员和施工人员均可注册辅助监理应用客户端的账号并进行身份认证，以便在辅助监理应用客户端上登录，便于监理人员与施工人员之间的远程信息交互；由于在大型工程项目中，同步施工的关键部位、关键工序数量较多，因而需要同时执行旁站监理工作的施工点数量也较多，可通过在施工前在所有需要执行旁站监理工作的施工现场均部署旁站机器人的机器人主体，若干机器人主体可通过通信模块将在各施工现场中获取的画面信息和语音信息传输至监理服务器，便于轮流值班的监理人员通过监理人员端接入监理服务器，以对施工现场进行监督，并分析施工现场的画面信息和语音信息，实现一人多机或少人多机的监理，可节约旁站监理人员，提高了旁站监理工作的效率。
44.在本实施例中，数据处理模块包括：人员合规分析子模块，用于将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息；设备合规分析子模块，用于从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息；建材合规分析子模块，用于从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信息和数量信息。
45.关于数据处理模块的具体限定可以参见下文中对于一种工程监理方法的限定，在此不再赘述；数据处理模块中的各个模块/子模块可全部或部分通过软件、硬件及其组合来实现；上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以是以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
46.实施例二
参照图2，本技术公开一种工程监理方法，具体包括如下步骤：s10：实时获取施工现场的画面信息和语音信息。
47.具体地，通过摄像采集模块实时采集施工现场的画面信息，并通过语音收录模块实时收录施工现场运作时的语音信息，便于后续对施工现场的画面信息和语音信息进行处理、存储和分析。
48.s20：处理及存储所述画面信息和所述语音信息。
49.具体地，如图3所示，在步骤s20中，包括：s21：将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息。
50.在本实施例中，图像处理模型内置有施工设备图像库、施工建材图像库和人员身份数据库，其中人员身份数据库包括本施工项目中登记过的所有施工人员的照片、资质证书信息等，图像处理模型还内置有图像匹配算法。
51.具体地，将画面信息输入至图像处理模型中，基于内置的图像匹配算法和施工设备图像库、施工建材图像库和人员身份数据库，对画面信息进行识别；从画面信息中识别人体轮廓以及人体轮廓的数量信息，进一步基于人体轮廓识别对应的人脸图像和施工护具，从而确定画面信息中人员的身份信息和护具使用情况，生成人员身份信息和护具使用信息，便于后续判断施工现场的人员配备是否合规。
52.s22：从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息。
53.具体地，通过图像匹配算法从画面信息中识别多种施工设备的型号和数量情况，以便后续判断施工现场的施工设备配备是否合规。
54.s23：从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信息和数量信息。
55.具体地，通过图像匹配算法从画面信息中识别多种施工建材的型号和数量情况，以便后续判断施工现场的施工建材配备是否合规。
56.其中，如图4所示，在步骤s20中，包括：s24：将所述语音信息输入至语音识别模型中，识别所述语音信息的语义并生成语音文本信息。
57.在本实施例中，语音识别模型内置有语义识别算法和声纹识别算法。
58.具体地，将语音信息输入至语音识别模型中从而识别各条语音信息的语义和声纹特征，从而得到语音文本信息，其中语音文本信息标注了讲话者标识，便于监理人员通过语音文本信息获知施工现场的施工人员之间的语言交流情况。
59.s25：基于所述人员身份信息、所述护具使用信息、多种施工设备的型号信息和数量信息、多种施工建材的型号信息和数量信息生成图像标注信息。
60.在本实施例中，图像标注信息是指需要以字幕的形式标注在画面信息中的重要信息。
61.具体地，基于施工现场的画面信息、语音信息识别到的施工人员的身份信息、护具使用信息，各种施工设备的型号信息和数量信息，各种施工建材的型号信息和数量信息生
成图像标注信息，生成图像标注信息，以便后续标注画面信息中这些重要信息。
62.s26：将所述语音文本信息和所述图像标注信息标注至所述画面信息中，将标注后的画面信息根据时间先后顺序存储至监理数据库中。
63.在本实施例中，监理数据库是指用于存储施工现场的历史画面信息和语音信息的数据库。
64.具体地，将语音文本信息和图像标注信息标注至画面信息中，便于监理人员迅速从画面信息中查看到重点信息，以防监理人员遗漏画面信息中的关键细节；将标注后的画面信息根据时间先后顺序存储至监理数据库中，便于后续制作旁站监理记录和监理日记，并保存旁站监理的原始资料，便于后续回放查看。
65.进一步地，基于监理数据库中存储的历史画面信息，从历史画面信息中剪辑关键工序的画面，生成建筑施工缩时录影，将施工缩时录影上传至云端，并开放下载接口，便于后续向业主交付物业时，可将施工缩时录影作为增值服务赠予业主，以便业主在需要对物业进行装修改造时，查看建筑内部的管线布置，防止装修改造对管线造成破坏。
66.进一步地，数据处理模块包括：语音文本信息生成子模块，用于将所述语音信息输入至语音识别模型中，识别所述语音信息的语义并生成语音文本信息；图像标注信息生成子模块，用于基于所述人员身份信息、所述护具使用信息、多种施工设备的型号信息和数量信息、多种施工建材的型号信息和数量信息生成图像标注信息；监理资料存档子模块，用于将所述语音文本信息和所述图像标注信息标注至所述画面信息中，将标注后的画面信息根据时间先后顺序存储至监理数据库中。
67.s30：分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为。
68.具体地，在施工过程中通过行为识别模块结合智能ai算法分析施工现场的画面信息和语音信息，进而识别施工现场是否存在违规施工行为，以对施工现场进行远程监控，代替管理人员旁站，以对施工现场进行远程监控。
69.其中，如图5所示，在步骤s30中，包括：s31：基于识别到的人体轮廓的数量、各人员身份信息和各护具使用信息，判断是否存在人员数量不合格、人员资质不合格、安全措施不合格的违规施工行为。
70.在本实施例中，违规项目是指违规施工行为的具体分类项目。
71.具体地，基于识别到的人体轮廓的数量、人员身份和护具使用情况，判断施工现场是否存在相关人员配备数量不合格、人员资质不合格和安全措施不合格的违规施工行为，并确定对应的违规项目；其中，人员配备数量不合格是指施工人员的到岗数量不足、过多，或者是安全员、质检人员、特殊工种人员等的到岗数量不足；人员资质不合格是指施工现场中安全员、质检人员、特殊工种人员等不具备相应的资质；安全措施不合格是指施工现场的施工人员未正确使用劳保用品、未正确采取安全措施。
72.s32：基于识别到的多种施工设备的型号信息和数量信息，判断是否存在设备配备不合格的违规施工行为。
73.具体地，基于识别到的多种施工设备的型号、数量，评估施工现场的施工设备配备情况，以判断是否符合设备配备不合格的违规项目。
74.s33：基于识别到的多种施工建材的型号信息和数量信息，判断是否存在建材储备不合格的违规施工行为。
75.具体地，基于识别到的多种施工建材的型号、数量和相应的质量检测报告，评估施工现场的建筑材料、建筑构配件和商品混凝土的配备情况，判断是否符合建材储备不合格的违规项目。
76.进一步地，若出现建材储备不合格的违规项目，则监理人员可到达施工现场监督施工企业进行施工建材的检验或者委托具有资格的第三方进行复验。
77.s34：将识别到的所述语音文本信息输入至预设的敏感语句库中进行匹配，将匹配成功的敏感语句发送至监理人员端复核。
78.在本实施例中，敏感语句库是指预设的用于匹配语音文本信息中是否存在敏感语句的数据库，敏感语句包括施工人员所发表的可能涉及消极作业或遇险的语句，例如包含“随便”、“救命”等关键词的语句。
79.具体地，将识别到的语音文本信息输入至预设的敏感语句库中如匹配到敏感语句，则发送至监理人员端进行复核，以便监理人员判断是否确实为违规施工行为，以及对应的违规项目类型。
80.s35：接收监理人员端发出的违规复核结果，基于违规复核结果确定对应的违规项目。
81.在本实施例中，违规复核结果是指监理人员进行人工复核的结果。
82.具体地，接收监理人员端发出的违规复核结果，以确定匹配到的敏感语句是否确实属于违规施工行为，并确定对应的违规项目。
83.进一步地，行为识别模块还包括：人员合规评估子模块，用于基于识别到的人体轮廓的数量、各人员身份信息和各护具使用信息，判断是否存在人员数量不合格、人员资质不合格、安全措施不合格的违规施工行为；设备合规评估子模块，用于基于识别到的多种施工设备的型号信息和数量信息，判断是否存在设备配备不合格的违规施工行为；建材合规评估子模块，用于基于识别到的多种施工建材的型号信息和数量信息，判断是否存在建材储备不合格的违规施工行为；敏感语句复核子模块，用于将识别到的所述语音文本信息输入至预设的敏感语句库中进行匹配，将匹配成功的敏感语句发送至监理人员端复核；敏感语句违规确定子模块，用于接收监理人员端发出的违规复核结果，基于违规复核结果确定对应的违规项目。
84.s40：根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块。
85.在本实施例中，每一种违规项目对应一种警示信息。
86.具体地，根据识别到的违规施工行为生成对应的警示信息，并发送至通信模块，以便通信模块通知施工现场的施工人员停止违规施工，注意规范操作，并通知监理人员督促施工人员修正违规施工行为，无需监理人员在各施工现场执行旁站监理工作，提高了旁站监理工作的效率并降低了旁站监理工作纰漏的可能性，进而提高了旁站监理工作的可靠性。
87.其中，如图6所示，在步骤s40中，包括：s41：根据识别到的违规施工行为对应的违规项目，从预设的警示信息匹配库中对应的警示信息。
88.在本实施例中，警示信息匹配库中存储有各种违规项目与各种警示信息之间的对应关系。
89.具体地，根据识别到的违规施工行为所对应的违规项目，从预设的警示信息匹配库中匹配到对应的警示信息。
90.s42：将警示信息发送至通信模块，以将警示信息发送至监理人员端。
91.具体地，将警示信息发送至通信模块，以便通过通信模块向监理人员端或施工现场的人员传达警示信息，使监理人员或施工人员获知违规施工行为并改正。
92.进一步地，预警模块还包括：警示信息匹配子模块，用于根据识别到的违规施工行为对应的违规项目，从预设的警示信息匹配库中对应的警示信息；警示信息发送子模块，用于将警示信息发送至通信模块，以将警示信息发送至监理人员端。
93.应理解，上述实施例中各步骤的序号大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本技术实施例的实施过程构成任何限定。
94.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本技术所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器（rom）、可编程rom（prom）、电可编程rom（eprom）、电可擦除可编程rom（eeprom）或闪存。易失性存储器可包括随机存取存储器（ram）或者外部高速缓冲存储器。作为说明而非局限，ram以多种形式可得，诸如静态ram（sram）、动态ram（dram）、同步dram（sdram）、双数据率sdram（ddrsdram）、增强型sdram（esdram）、同步链路（synchlink）、dram（sldram）、存储器总线（rambus）直接ram（rdram）、直接存储器总线动态ram（drdram）、以及存储器总线动态ram（rdram）等。
95.所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。
96.以上所述实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述实施例对本技术进行了详细的说明，本领域普通技术人员应当理解；其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的精神和范围，均应包含在本技术的保护范围之内。

技术特征：
1.一种用于施工现场辅助管理的旁站机器人，其特征在于，包括机器人主体和监理服务器；所述机器人主体包括：摄像采集模块，用于实时采集施工现场的画面信息；语音收录模块，用于实时收录施工现场运作时的语音信息；通信模块，通讯连接于监理服务器，用于向施工现场、监理人员端发送信息，并接收施工现场、监理人员端的信息；所述监理服务器包括：数据处理模块，用于处理及存储所述画面信息和所述语音信息；行为识别模块，用于分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为；预警模块，用于根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块。2.根据权利要求1所述的一种用于施工现场辅助管理的旁站机器人，其特征在于，所述数据处理模块包括：人员合规分析子模块，用于将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息；设备合规分析子模块，用于从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息；建材合规分析子模块，用于从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信息和数量信息。3.根据权利要求1所述的一种用于施工现场辅助管理的旁站机器人，其特征在于，所述摄像采集模块包括：监理摄像头，用于实时拍摄施工现场的所述画面信息；影像接收子模块，用于接收由安装了辅助监理应用的影像设备所拍摄的所述画面信息；所述语音收录模块包括：监理麦克风，用于实时录制施工现场的所述语音信息；音频接收子模块，用于接收由安装了辅助监理应用的录音设备所录制的所述语音信息。4.根据权利要求1所述的一种用于施工现场辅助管理的旁站机器人，其特征在于，所述通信模块包括：警示灯，用于根据接收到的警示信息播放对应的警示光信号；扬声器，用于根据接收到的警示信息播放对应的警示声信号，并用于接收并播放监理人员端发出的语音信息；通话麦克风，用于输入语音信息；电信子模块，用于与监理人员端、施工人员端和监理服务器建立通讯连接。5.根据权利要求4所述的一种用于施工现场辅助管理的旁站机器人，其特征在于：所述
监理人员端为执行监理工作的人员所登录的辅助监理应用客户端；所述施工人员端为执行施工作业的人员所登录的辅助监理应用客户端；所述监理服务器无线通讯连接于各所述辅助监理应用客户端和各所述通信模块。6.一种工程监理方法，其特征在于，应用于上述权利要求1-5任一项所述用于施工现场辅助管理的旁站机器人，包括：实时获取施工现场的画面信息和语音信息；处理及存储所述画面信息和所述语音信息；分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为；根据识别到的违规施工行为生成相应的警示信息并发送至所述通信模块。7.根据权利要求6所述的一种工程监理方法，其特征在于：所述处理及存储所述画面信息和所述语音信息，包括：将所述画面信息输入至图像处理模型中，从所述画面信息中识别人体轮廓以及对应的数量信息，并进一步从人体轮廓中识别人脸图像和施工护具，确定人员身份信息和护具使用信息；从所述画面信息中识别多种施工设备图像，并进一步识别多种施工设备的型号信息和数量信息；从所述画面信息中识别多种施工建材图像，并进一步识别多种施工建材的型号信息和数量信息；所述图像处理模型内置有施工设备图像库、施工建材图像库和人员身份数据库。8.根据权利要求7所述的一种工程监理方法，其特征在于：所述处理及存储所述画面信息和所述语音信息，包括：将所述语音信息输入至语音识别模型中，识别所述语音信息的语义并生成语音文本信息；基于所述人员身份信息、所述护具使用信息、多种施工设备的型号信息和数量信息、多种施工建材的型号信息和数量信息生成图像标注信息；将所述语音文本信息和所述图像标注信息标注至所述画面信息中，将标注后的画面信息根据时间先后顺序存储至监理数据库中。9.根据权利要求8所述的一种工程监理方法，其特征在于：所述分析施工现场的所述画面信息和所述语音信息，以识别违规施工行为，包括：基于识别到的人体轮廓的数量、各人员身份信息和各护具使用信息，判断是否存在人员数量不合格、人员资质不合格、安全措施不合格的违规施工行为；基于识别到的多种施工设备的型号信息和数量信息，判断是否存在设备配备不合格的违规施工行为；基于识别到的多种施工建材的型号信息和数量信息，判断是否存在建材储备不合格的违规施工行为；将识别到的所述语音文本信息输入至预设的敏感语句库中进行匹配，将匹配成功的敏感语句发送至监理人员端复核；接收监理人员端发出的违规复核结果，基于违规复核结果确定对应的违规项目。10.根据权利要求9所述的一种工程监理方法，其特征在于：所述根据识别到的违规施
工行为生成相应的警示信息并发送至所述通信模块，包括：根据识别到的违规施工行为对应的违规项目，从预设的警示信息匹配库中对应的警示信息；将警示信息发送至通信模块，以将警示信息发送至监理人员端。

技术总结
本申请涉及监理现场设备的技术领域，公开了一种用于施工现场辅助管理的旁站机器人及工程监理方法，旁站机器人包括机器人主体和通讯连接于机器人主体的监理服务器，机器人主体包括摄像采集模块，语音收录模块，用于处理及存储摄像采集模块与语音收录模块采集到的画面信息、语音信息的数据处理模块；在摄像采集模块监控过程中，可通过行为识别模块结合智能算法分析施工现场是否存在违规操作，以对施工现场进行远程监控，代替管理人员旁站；当出现违规操作时，预警模块生成警示信息，通过通信模块提醒施工人员注意规范操作，同时向监理人员发出提示信息，督促现场施工人员规范操作；本申请具有提高旁站监理工作的可靠性的效果。本申请具有提高旁站监理工作的可靠性的效果。本申请具有提高旁站监理工作的可靠性的效果。


技术研发人员：田建东 黄茂鸿 陈杰
受保护的技术使用者：中海监理有限公司
技术研发日：2023.06.20
技术公布日：2023/9/20