业务办理操作的评估方法、装置、存储介质及电子设备与流程
未命名
08-14
阅读:192
评论:0
1.本发明涉及金融科技领域,具体而言,涉及一种业务办理操作的评估方法、装置、存储介质及电子设备。
背景技术:
2.随着现代科技的发展,人们对于金融服务的需求越来越高,然而,在这个数字化时代中,聋哑人群体却面临着受限制的困境。由于他们无法听到声音、也无法说话,因此很难与金融机构中的工作人员进行有效沟通。
3.为了解决这一问题,金融机构开始采用手语服务来满足聋哑用户的需求。通过提供专门培训过的员工使用手语与用户交流,金融机构可以更好地为聋哑人提供金融服务。然而,相关技术中在金融机构中员工使用手语服务的过程中,并不能很好的评估员工手语的准确性,从而会影响用户体验。
4.针对上述的问题,目前尚未提出有效的解决方案。
技术实现要素:
5.本发明实施例提供了一种业务办理操作的评估方法、装置、存储介质及电子设备,以至少解决现有技术中对工作人员办理业务过程中的手势操作进行评估时,存在的评估准确性低的技术问题。
6.根据本发明实施例的一个方面,提供了一种业务办理操作的评估方法,包括:获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息;根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范;在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型;在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
7.进一步地,业务办理操作的评估方法还包括:通过手骨骼预测模型识别手势视频中多帧图像中的骨骼点坐标,得到手势信息;将手势信息输入至手势分类模型,处理得到手势分类结果,其中,手势分类结果用于表征多帧图像依序对应的手势类别;确定业务信息匹配的手势流程中各个手势的手势类别,得到第一规范手势信息;根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息,其中,初始信息用于表征第一对象的手势是否符合初始规范。
8.进一步地,业务办理操作的评估方法还包括:根据手势分类结果中的手势类别确定第一手势执行顺序;根据第一规范手势信息中的手势类别确定第二手势执行顺序;在第一手势执行顺序包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势符合初始规范的信息;在第一手势执行顺序不包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势不符合初始规范的信息。
9.进一步地,手势分类结果为手势类别序列,其中,在目标类型为老年人的情况下,业务办理操作的评估方法还包括:从手势类别序列中提取出符合第二手势执行顺序的目标手势类别序列;确定目标手势类别序列的序列长度,其中,序列长度与目标手势类别序列所对应的图像的图像数量具有关联关系,图像数量与时间因素具有关联关系;从第二规范手势信息中确定目标业务匹配的第一目标序列长度;根据第一目标序列长度与序列长度之间的关系,确定目标信息。
10.进一步地,业务办理操作的评估方法还包括:在序列长度大于或等于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息;在序列长度小于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势不符合目标规范的信息。
11.进一步地,业务办理操作的评估方法还包括:从第二规范手势信息中确定关键手势类别以及关键手势类别匹配的第二目标序列长度;确定目标手势类别序列中关键手势类别连续出现的序列的最大序列长度;在最大序列长度大于或等于第二目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息。
12.进一步地,业务办理操作的评估方法还包括:在判断第二对象的对象类型是否为目标类型之后,在对象类型不是目标类型的情况下,确定第一对象的手势符合目标规范。
13.根据本发明实施例的另一方面,还提供了一种业务办理操作的评估装置,包括:获取模块,用于获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息;第一判断模块,用于根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范;第二判断模块,用于在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型;处理模块,用于在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
14.根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,其中,计算机程序被设置为运行时执行上述的业务办理操作的评估方法。
15.根据本发明实施例的另一方面,还提供了一种电子设备,电子设备包括一个或多个处理器;存储器,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行时,使得一个或多个处理器实现用于运行程序,其中,程序被设置为运行时执行上述的业务办理操作的评估方法。
16.在本发明实施例中,采用从多维度评估业务办理操作的方式,通过获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息,然后根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范,接着在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型,从而在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
17.在上述过程中,通过根据业务信息匹配的第一规范手势信息对第一对象办理业务
的手势进行初步评估,实现了对第一对象在业务维度上的手势准确性的有效评估。通过根据目标类型匹配的第二规范手势信息对第一对象的手势进行进一步地评估,实现了对第一对象在特定服务需求维度上的手势准确性的有效评估。由此,实现了对第一对象的业务办理操作的准确评估,避免了仅针对业务评估手势准确性时,由于忽略手势的展示对象导致对手势中的特定特征缺乏判断,从而影响业务办理操作评估准确性的问题。
18.由此可见,本技术所提供的方案达到了从多维度评估业务办理操作的目的,从而实现了提高评估准确性的技术效果,进而解决了现有技术中对工作人员办理业务过程中的手势操作进行评估时,存在的评估准确性低的技术问题。
附图说明
19.此处所说明的附图用来提供对本发明的进一步理解,构成本技术的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
20.图1是根据本发明实施例的一种可选的业务办理操作的评估方法的示意图;
21.图2是根据本发明实施例的一种可选的手势分类模型的训练示意图;
22.图3是根据本发明实施例的一种可选的业务办理操作的评估装置的示意图;
23.图4是根据本发明实施例的一种可选的电子设备的示意图。
具体实施方式
24.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
25.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
26.需要说明的是,本公开的业务办理操作的评估方法、装置、存储介质及电子设备可用于金融科技领域,也可用于除金融科技领域之外的任意领域,本公开的业务办理操作的评估方法、装置、存储介质及电子设备的应用领域不做限定。
27.需要说明的是,本技术所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
28.实施例1
29.根据本发明实施例,提供了一种业务办理操作的评估方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
30.图1是根据本发明实施例的一种可选的业务办理操作的评估方法的示意图,如图1所示,该方法包括如下步骤:
31.步骤s101,获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息。
32.可选的,可以将服务器、应用系统、电子设备作为前述的业务办理操作的评估方法的执行主体。在本实施例中,可以将目标评估系统作为执行主体以执行前述的业务办理操作的评估方法。
33.其中,第一对象可以是金融机构线下网点中通过手势提供业务办理服务的工作人员,第二对象可以是在线下网点中办理业务的用户,且第二对象为具有听力功能障碍的对象,前述的手势包括但不限于手语等通过手部变换实现的操作。第一对象为第二对象办理业务时的手势视频为通过线下网点中的摄像装置采集的,目标评估系统可以与前述的摄像装置进行信息交互,以获取手势视频。进一步地,第二对象在线下网点的终端设备上办理目标业务,目标评估系统可以与前述的终端设备进行信息交互,以获取业务信息,其中,业务信息包括但不限于目标业务的业务名称等。
34.步骤s102,根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范。
35.在步骤s102中,目标评估系统可以根据业务信息从数据库中找到与业务信息匹配的第一规范手势信息,其中,数据库内预先存储有与不同业务匹配的规范手势信息,且数据库内的规范手势信息可以通过业务的业务信息索引到,第一规范手势信息用于指示业务信息所匹配的手势的执行顺序,还可以用于指示其它信息。
36.进一步地,当获取了第一规范手势信息之后,目标评估系统可以从手势视频中提取出第一对象的手势信息,手势信息为用于表征第一对象的手势的运动特征的信息,运动特征包括但不限于运动时间、姿势等。
37.更进一步地,目标评估系统可以通过比对第一规范手势信息中和手势视频中的手势信息,以判断第一对象的手势是否符合初始规范。
38.需要说明的是,通过根据业务信息匹配的第一规范手势信息对第一对象的手势进行初步评估,实现了对第一对象在业务维度上的手势准确性的有效评估。
39.步骤s103,在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型。
40.由于在线下网点中会有不同的用户需要提供手势服务,且各用户面对手势服务会具有不同的需求,例如,老年人需要手势慢一些以便理解手势所要表达的意思,具有视觉功能障碍的人需要手势幅度大一些以便看清手势等。
41.因此,在本实施例中,可以预先设定不同对象类型所匹配的规范手势信息,并在第一对象的手势通过初步评估之后,判断第二对象的对象类型是否为目标类型。其中,目标类型即为具有相匹配的规范手势信息的对象类型。从而可以在确定第二对象的对象类型为目
标类型的情况下,确定第一对象的手势还有需要满足的其它条件存在。
42.其中,当用户进入到网点时,如果其有需要手势服务的需求,用户会主动寻求工作人员的帮助或是在相关交互设备上登记信息,在此情况下,工作人员可以对用户的对象类型进行识别然后将对象类型上传到目标评估系统,或者是目标评估系统从交互设备上获取该用户的对象类型,从而实现对对象类型的有效获取。
43.步骤s104,在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
44.可选的,当确定对象类型为目标类型之后,目标评估系统可以查找到与目标类型匹配的第二规范手势信息,其中,第二规范手势信息用于指示为目标类型的第二对象办理业务时所需要满足的信息,例如,第二规范手势信息可以是与业务相关的手势的执行总时长大于或等于预设时长,第二规范手势信息也可以是与业务相关的手势的空间执行范围不小于预设范围等。
45.进一步地,目标评估系统可以通过比对第二规范手势信息中和手势视频中的手势信息,以判断第二对象的手势是否符合目标规范。
46.需要说明的是,通过根据目标类型匹配的第二规范手势信息对第一对象的手势进行进一步地评估,实现了对第一对象在特定服务需求维度上的手势准确性的有效评估。由此,实现了对第一对象的业务办理操作的准确评估,避免了仅针对业务评估手势准确性时,由于忽略手势的展示对象导致对手势中的特定特征缺乏判断,从而影响业务办理操作评估准确性的问题。
47.基于上述步骤s101至步骤s104所限定的方案,可以获知,在本发明实施例中,采用从多维度评估业务办理操作的方式,通过获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息,然后根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范,接着在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型,从而在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
48.容易注意到的是,在上述过程中,通过根据业务信息匹配的第一规范手势信息对第一对象办理业务的手势进行初步评估,实现了对第一对象在业务维度上的手势准确性的有效评估。通过根据目标类型匹配的第二规范手势信息对第一对象的手势进行进一步地评估,实现了对第一对象在特定服务需求维度上的手势准确性的有效评估。由此,实现了对第一对象的业务办理操作的准确评估,避免了仅针对业务评估手势准确性时,由于忽略手势的展示对象导致对手势中的特定特征缺乏判断,从而影响业务办理操作评估准确性的问题。
49.由此可见,本技术所提供的方案达到了从多维度评估业务办理操作的目的,从而实现了提高评估准确性的技术效果,进而解决了现有技术中对工作人员办理业务过程中的手势操作进行评估时,存在的评估准确性低的技术问题。
50.在一种可选的实施例中,在根据业务信息匹配的第一规范手势信息以及手势视频
中的手势信息,判断第一对象的手势是否符合初始规范的过程中,目标评估系统可以通过手骨骼预测模型识别手势视频中多帧图像中的骨骼点坐标,得到手势信息,然后将手势信息输入至手势分类模型,处理得到手势分类结果,其中,手势分类结果用于表征多帧图像依序对应的手势类别,接着确定业务信息匹配的手势流程中各个手势的手势类别,得到第一规范手势信息,从而根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息,其中,初始信息用于表征第一对象的手势是否符合初始规范。
51.可选的,对提取手势信息的方法进行说明。在本实施例中,手骨骼预测模型可以采用mediapipe hands,mediapipe hands是一种机器学习框架,可用于检测和跟踪手部姿势,它使用深度神经网络技术,通过输入视频流或图像序列来识别、定位和追踪人手。具体地,目标评估系统可以将手势视频输入到的手骨骼预测模型,手骨骼预测模型在获取到手势视频之后,会先根据预设的参数自动从手势视频中提取出多帧图像,然后再对每帧图像中的骨骼点坐标进行识别,从而得到手势信息。可选的,在其它实施例中,也可以先将手势视频分解为由多帧图像组成的图像序列,然后将图像序列输入到手骨骼预测模型,从而得到手势信息。
52.其中,前述的手骨骼预测模型可以是由大量包含手部姿势、动作的图像和视频组成的训练样本集训练得到的。
53.进一步地,当获取到了手势信息之后,目标评估系统可以将手势信息输入到手势分类模型,从而得到手势分类结果。其中,手势分类结果为手势类别序列,手势类别序列中的每一个手势类别与多帧图像中的一帧图像相对应,或者,手势类别序列中的每一个手势类别与多帧图像中的至少两帧图像相对应,且当手势类别序列中的一个手势类别与多帧图像中的至少两帧图像相对应时,该至少两帧图像为连续的图像,且每个手势类别对应的图像数量相同。
54.其中,图2是根据本发明实施例的一种可选的手势分类模型的训练示意图,如图2所示,前述的手势分类模型可以是由包含多个样本手势信息以及真实手势类别序列标签的训练样本集训练得到的,样本手势信息为手骨骼预测模型对样本手势视频处理得到的。在训练过程中,可以采用十折交叉验证法训练得到手势分类模型,以提升模型的准确性与可靠性。
55.可选的,在构建训练样本集的过程中,还可以对手骨骼预测模型输出的样本手势信息进行归一化处理,然后基于归一化处理后的样本手势信息构建手势分类模型的训练样本集。进一步地,在将手势信息输入至手势分类模型,处理得到手势分类结果的过程中,目标评估系统可以先对手势信息进行归一化处理,再将处理后的手势信息输入至手势分类模型。其中,通过归一化处理,可以避免手势实施的空间位置与拍摄位置之间的距离对手势分类结果产生影响。
56.更进一步地,当得到了手势分类结果之后,目标评估系统可以确定业务信息匹配的手势流程中各个手势的手势类别,从而得到第一规范手势信息,在本实施例中,第一规范手势信息为规范手势类别序列。之后,目标评估系统可以根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息,例如,在确定手势分类结果中的手势类别包含第一规范手势信息中的所有手势类别的情况下,确定初始信息为表征第一对象的手势符合初始规范的信息,反之,确定初始信息为表征第一对象的手势不符合初始规范的信
息。又例如,结合手势的执行顺序确定初始信息。
57.需要说明的是,通过根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息,可以实现对初始信息的准确确定。
58.在一种可选的实施例中,在根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息的过程中,目标评估系统可以根据手势分类结果中的手势类别确定第一手势执行顺序,然后根据第一规范手势信息中的手势类别确定第二手势执行顺序,从而在第一手势执行顺序包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势符合初始规范的信息,在在第一手势执行顺序不包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势不符合初始规范的信息。
59.可选的,由于手势分类结果为手势类别序列,第一规范手势信息为规范手势类别序列,因此,目标评估系统可以根据手势类别序列中手势类别的排列顺序确定第一手势执行顺序,例如,若手势类别序列为“手势1-手势1-手势2-手势2-手势2-手势2-手势3-手势3”,则第一手势执行顺序为“手势1-手势2-手势3”。同理,目标评估系统可以根据规范手势类别序列中手势类别的排列顺序确定第二手势执行顺序,故此处不再赘述。
60.进一步地,由于手势视频中不仅会包含与业务相关的手势,还会包含用于表达其它内容的手势,因此,目标评估系统可以在第一手势执行顺序包含第二手势执行顺序的情况下,确定第一对象的手势符合初始规范的信息,在第一手势执行顺序不包含第二手势执行顺序的情况下,确定第一对象的手势不符合初始规范的信息。例如,若第一手势执行顺序为“手势1-手势2-手势3”,第二手势执行顺序为“手势1-手势2”或者“手势2-手势3”,则确定第一手势执行顺序包含第二手势执行顺序,若第一手势执行顺序为“手势1-手势2-手势3”,第二手势执行顺序为“手势1-手势3”,则确定第一手势执行顺序不包含第二手势执行顺序。
61.需要说明的是,通过根据第一手势执行顺序和第二手势执行顺序确定初始信息,可以实现对初始信息更准确的确定。
62.在一种可选的实施例中,手势分类结果为手势类别序列,其中,在目标类型为老年人的情况下,在根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息的过程中,目标评估系统可以从手势类别序列中提取出符合第二手势执行顺序的目标手势类别序列,然后确定目标手势类别序列的序列长度,接着从第二规范手势信息中确定目标业务匹配的第一目标序列长度,从而根据第一目标序列长度与序列长度之间的关系,确定目标信息。其中,序列长度与目标手势类别序列所对应的图像的图像数量具有关联关系,图像数量与时间因素具有关联关系。
63.可选的,当目标类型为老年人时,第一对象需要使用相对更慢的速度展示手势,以便于第二对象理解手势所要表达的信息。因此,在本实施例中,目标评估系统可以在时间因素上对第一对象与业务相关的手势进行分析,以确定目标信息。其中,老年人的年龄区间可以是工作人员预设的。
64.具体地,目标评估系统可以先从手势类别序列中提取出符合第二手势执行顺序的目标手势类别序列,也即目标手势类别序列对应的手势执行顺序与第二手势执行顺序相同。
65.进一步地,目标评估系统确定目标手势类别序列的序列长度,例如,若目标手势类别序列为“手势1-手势1-手势2-手势2-手势2”,则序列长度为5,若目标手势类别序列为“手
势1-手势1-手势2-手势2”,则序列长度为4。
66.其中,需要强调的是,在手骨骼预测模型对手势视频进行处理时,手骨骼预测模型是按照预设的参数从手势视频中提取出多帧图像的,例如,一秒提取30帧图像,并且,每帧图像的时间间隔相同。因此,当手势视频的视频时间越长时,所提取出的图像数量也越多。进一步地,由于手势类别序列中每个手势类别所匹配的图像的图像数量是预设的固定值,因此,目标手势类别序列的序列长度可以间接表征目标手势类别序列对应的手势的执行时长。
67.更进一步地,目标评估系统可以从第二规范手势信息中确定目标业务匹配的第一目标序列长度,第一目标序列长度用于表征目标业务所对应的规范手势类别序列需要满足的序列长度,也即间接表征目标业务所对应的手势需要满足的执行时长。之后,目标评估系统可以根据第一目标序列长度与序列长度之间的关系,确定目标信息,例如,确定第一目标序列长度与序列长度之间的差值,并将差值与预设数值比较,从而根据比较结果确定目标信息,其中,差值可以为正可以为负。
68.需要说明的是,通过在目标类型为老年人的情况下,通过确定目标手势类别序列的序列长度,实现了对第一对象与业务相关的手势的执行时长的有效确定,通过根据第一目标序列长度与序列长度之间的关系,确定目标信息,实现了根据手势的执行时长确定目标信息,从而实现了对目标信息的准确确定。
69.在一种可选的实施例中,在根据第一目标序列长度与序列长度之间的关系,确定目标信息的过程中,目标评估系统可以在序列长度大于或等于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息,在序列长度小于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势不符合目标规范的信息。
70.其中,在序列长度大于或等于第一目标序列长度的情况下,确定第一对象与业务相关的手势的执行时长满足所需要的时长,反之,在序列长度小于第一目标序列长度的情况下,确定第一对象与业务相关的手势的执行时长不满足所需要的时长。
71.需要说明的是,通过根据序列长度与第一目标序列长度是否相同确定目标信息,实现了对目标信息的准确确定。
72.在一种可选的实施例中,在确定目标信息为表征第一对象的手势符合目标规范的信息的过程中,目标评估系统可以从第二规范手势信息中确定关键手势类别以及关键手势类别匹配的第二目标序列长度,然后确定目标手势类别序列中关键手势类别连续出现的序列的最大序列长度,从而在最大序列长度大于或等于第二目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息。
73.可选的,在为第二对象办理业务的过程中,会存在一些关键手势,如果关键手势出现问题或者没有表达清楚,可能会导致第二对象办理业务时输错信息,从而影响业务办理效率以及用户体验。因此,在本实施例中,目标评估系统可以在时间因素上对第一对象与业务相关的关键手势进行分析,以更准确地确定目标信息。
74.具体地,目标评估系统可以从第二规范手势信息中确定关键手势类别以及关键手势类别匹配的第二目标序列长度,其中,第二目标序列长度表征目标业务所对应的关键手势类别需要满足的序列长度,也即间接表征目标业务所对应的关键手势需要满足的执行时长。
75.进一步地,目标评估系统可以确定目标手势类别序列中关键手势类别连续出现的序列的最大序列长度,例如,若目标手势类别序列为“手势1-手势1-手势2-手势2-手势3-手势3-手势2-手势4”,关键手势为手势1,则最大序列长度2。
76.更进一步地,目标评估系统可以在前述的最大序列长度大于或等于第二目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息,反之,若前述的最大序列长度小于第二目标序列长度,则确定目标信息为表征第一对象的手势不符合目标规范的信息。
77.需要说明的是,通过结合关键手势的执行时长确定目标信息,实现了对目标信息更加准确的确定。
78.在一种可选的实施例中,在判断第二对象的对象类型是否为目标类型之后,目标评估系统可以在对象类型不是目标类型的情况下,确定第一对象的手势符合目标规范。
79.可选的,若第一对象的对象类型不是目标类型,则可以确定第一对象的手势不需要满足额外的特定需求,从而可以直接确定第一对象的手势符合目标规范。从而实现了对第一对象的手势的有效评估。
80.由此可见,本技术所提供的方案达到了从多维度评估业务办理操作的目的,从而实现了提高评估准确性的技术效果,进而解决了现有技术中对工作人员办理业务过程中的手势操作进行评估时,存在的评估准确性低的技术问题。
81.实施例2
82.根据本发明实施例,提供了一种业务办理操作的评估装置的实施例,其中,图3是根据本发明实施例的一种可选的业务办理操作的评估装置的示意图,如图3所示,该装置包括:
83.获取模块301,用于获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息;
84.第一判断模块302,用于根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范;
85.第二判断模块303,用于在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型;
86.处理模块304,用于在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息,其中,目标信息用于表征第一对象的手势是否符合目标规范。
87.需要说明的是,上述获取模块301、第一判断模块302、第二判断模块303以及处理模块304对应于上述实施例中的步骤s101至步骤s104,四个模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。
88.可选的,第一判断模块302包括:识别子模块,用于通过手骨骼预测模型识别手势视频中多帧图像中的骨骼点坐标,得到手势信息;处理子模块,用于将手势信息输入至手势分类模型,处理得到手势分类结果,其中,手势分类结果用于表征多帧图像依序对应的手势类别;第一确定子模块,用于确定业务信息匹配的手势流程中各个手势的手势类别,得到第一规范手势信息;第二确定子模块,用于根据手势分类结果中的手势类别和第一规范手势信息中的手势类别,确定初始信息,其中,初始信息用于表征第一对象的手势是否符合初始
规范。
89.可选的,第二确定子模块还包括:第一确定单元,用于根据手势分类结果中的手势类别确定第一手势执行顺序;第二确定单元,用于根据第一规范手势信息中的手势类别确定第二手势执行顺序;第三确定单元,用于在第一手势执行顺序包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势符合初始规范的信息;第四确定单元,用于在第一手势执行顺序不包含第二手势执行顺序的情况下,确定初始信息为表征第一对象的手势不符合初始规范的信息。
90.可选的,手势分类结果为手势类别序列,其中,在目标类型为老年人的情况下,处理模块304包括:提取子模块,用于从手势类别序列中提取出符合第二手势执行顺序的目标手势类别序列;第三确定子模块,用于确定目标手势类别序列的序列长度,其中,序列长度与目标手势类别序列所对应的图像的图像数量具有关联关系,图像数量与时间因素具有关联关系;第四确定子模块,用于从第二规范手势信息中确定目标业务匹配的第一目标序列长度;第五确定子模块,用于根据第一目标序列长度与序列长度之间的关系,确定目标信息。
91.可选的,第五确定子模块还包括:第五确定单元,用于在序列长度大于或等于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息;第六确定单元,用于在序列长度小于第一目标序列长度的情况下,确定目标信息为表征第一对象的手势不符合目标规范的信息。
92.可选的,第五确定单元还包括:第一确定子单元,用于从第二规范手势信息中确定关键手势类别以及关键手势类别匹配的第二目标序列长度;第二确定子单元,用于确定目标手势类别序列中关键手势类别连续出现的序列的最大序列长度;第三确定子单元,用于在最大序列长度大于或等于第二目标序列长度的情况下,确定目标信息为表征第一对象的手势符合目标规范的信息。
93.可选的,业务办理操作的评估装置还包括:确定模块,用于在对象类型不是目标类型的情况下,确定第一对象的手势符合目标规范。
94.实施例3
95.根据本发明实施例的另一方面,还提供了计算机可读存储介质,计算机可读存储介质中存储有计算机程序,其中,计算机程序被设置为运行时执行上述的业务办理操作的评估方法。
96.实施例4
97.根据本发明实施例的另一方面,还提供了一种电子设备,其中,图4是根据本发明实施例的一种可选的电子设备的示意图,如图4所示,电子设备包括一个或多个处理器;存储器,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行时,使得一个或多个处理器实现用于运行程序,其中,程序被设置为运行时执行上述的业务办理操作的评估方法。
98.上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
99.在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
100.在本技术所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的
方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
101.作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
102.另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
103.集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:u盘、只读存储器(rom,read-only memory)、随机存取存储器(ram,random access memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
104.以上仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
技术特征:
1.一种业务办理操作的评估方法,其特征在于,包括:获取第一对象为第二对象办理业务时的手势视频,并获取所述第二对象实际办理的目标业务的业务信息;根据所述业务信息匹配的第一规范手势信息以及所述手势视频中的手势信息,判断所述第一对象的手势是否符合初始规范;在确定所述第一对象的手势符合所述初始规范的情况下,判断所述第二对象的对象类型是否为目标类型;在所述对象类型为所述目标类型的情况下,根据所述目标类型匹配的第二规范手势信息以及所述手势视频中的手势信息,得到目标信息,其中,所述目标信息用于表征所述第一对象的手势是否符合目标规范。2.根据权利要求1所述的方法,其特征在于,根据所述业务信息匹配的第一规范手势信息以及所述手势视频中的手势信息,判断所述第一对象的手势是否符合初始规范,包括:通过手骨骼预测模型识别所述手势视频中多帧图像中的骨骼点坐标,得到所述手势信息;将所述手势信息输入至手势分类模型,处理得到手势分类结果,其中,所述手势分类结果用于表征所述多帧图像依序对应的手势类别;确定所述业务信息匹配的手势流程中各个手势的手势类别,得到所述第一规范手势信息;根据所述手势分类结果中的手势类别和所述第一规范手势信息中的手势类别,确定初始信息,其中,所述初始信息用于表征所述第一对象的手势是否符合所述初始规范。3.根据权利要求2所述的方法,其特征在于,根据所述手势分类结果中的手势类别和所述第一规范手势信息中的手势类别,确定初始信息,包括:根据所述手势分类结果中的手势类别确定第一手势执行顺序;根据所述第一规范手势信息中的手势类别确定第二手势执行顺序;在所述第一手势执行顺序包含所述第二手势执行顺序的情况下,确定所述初始信息为表征所述第一对象的手势符合所述初始规范的信息;在所述第一手势执行顺序不包含所述第二手势执行顺序的情况下,确定所述初始信息为表征所述第一对象的手势不符合所述初始规范的信息。4.根据权利要求3所述的方法,其特征在于,所述手势分类结果为手势类别序列,其中,在所述目标类型为老年人的情况下,根据所述目标类型匹配的第二规范手势信息以及所述手势视频中的手势信息,得到目标信息,包括:从所述手势类别序列中提取出符合所述第二手势执行顺序的目标手势类别序列;确定所述目标手势类别序列的序列长度,其中,所述序列长度与所述目标手势类别序列所对应的图像的图像数量具有关联关系,所述图像数量与时间因素具有关联关系;从所述第二规范手势信息中确定所述目标业务匹配的第一目标序列长度;根据所述第一目标序列长度与所述序列长度之间的关系,确定所述目标信息。5.根据权利要求4所述的方法,其特征在于,根据所述第一目标序列长度与所述序列长度之间的关系,确定所述目标信息,包括:在所述序列长度大于或等于所述第一目标序列长度的情况下,确定所述目标信息为表
征所述第一对象的手势符合所述目标规范的信息;在所述序列长度小于所述第一目标序列长度的情况下,确定所述目标信息为表征所述第一对象的手势不符合所述目标规范的信息。6.根据权利要求5所述的方法,其特征在于,确定所述目标信息为表征所述第一对象的手势符合所述目标规范的信息,包括:从所述第二规范手势信息中确定关键手势类别以及所述关键手势类别匹配的第二目标序列长度;确定所述目标手势类别序列中所述关键手势类别连续出现的序列的最大序列长度;在所述最大序列长度大于或等于所述第二目标序列长度的情况下,确定所述目标信息为表征所述第一对象的手势符合所述目标规范的信息。7.根据权利要求1所述的方法,其特征在于,在判断所述第二对象的对象类型是否为目标类型之后,所述方法还包括:在所述对象类型不是所述目标类型的情况下,确定所述第一对象的手势符合所述目标规范。8.一种业务办理操作的评估装置,其特征在于,包括:获取模块,用于获取第一对象为第二对象办理业务时的手势视频,并获取所述第二对象实际办理的目标业务的业务信息;第一判断模块,用于根据所述业务信息匹配的第一规范手势信息以及所述手势视频中的手势信息,判断所述第一对象的手势是否符合初始规范;第二判断模块,用于在确定所述第一对象的手势符合所述初始规范的情况下,判断所述第二对象的对象类型是否为目标类型;处理模块,用于在所述对象类型为所述目标类型的情况下,根据所述目标类型匹配的第二规范手势信息以及所述手势视频中的手势信息,得到目标信息,其中,所述目标信息用于表征所述第一对象的手势是否符合目标规范。9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至7任一项中所述的业务办理操作的评估方法。10.一种电子设备,其特征在于,所述电子设备包括一个或多个处理器;存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现用于运行程序,其中,所述程序被设置为运行时执行所述权利要求1至7任一项中所述的业务办理操作的评估方法。
技术总结
本发明公开了一种业务办理操作的评估方法、装置、存储介质及电子设备。涉及金融科技领域,该方法包括:获取第一对象为第二对象办理业务时的手势视频,并获取第二对象实际办理的目标业务的业务信息;根据业务信息匹配的第一规范手势信息以及手势视频中的手势信息,判断第一对象的手势是否符合初始规范;在确定第一对象的手势符合初始规范的情况下,判断第二对象的对象类型是否为目标类型;在对象类型为目标类型的情况下,根据目标类型匹配的第二规范手势信息以及手势视频中的手势信息,得到目标信息。本发明解决了现有技术中对工作人员办理业务过程中的手势操作进行评估时,存在的评估准确性低的技术问题。准确性低的技术问题。准确性低的技术问题。
技术研发人员:廖芯艺 许倍源 蒲泽栋 吴念桓
受保护的技术使用者:中国工商银行股份有限公司
技术研发日:2023.06.01
技术公布日:2023/8/13
版权声明
本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)
飞行汽车 https://www.autovtol.com/
上一篇:一种推拉自锁式连接器的制作方法 下一篇:一种高光密度绿光量子点及其制备方法与流程
