一种元宇宙场景下的交互系统、方法、设备及存储介质与流程

未命名 08-13 阅读:114 评论:0


1.本发明实施例涉及元宇宙技术,尤其涉及一种元宇宙场景下的交互系统、方法、设备及存储介质。


背景技术:

2.目前职场心理健康也成为了一个常见的问题,据统计,每6名员工中就有1人患有心理健康问题。最常见的心理健康问题之一是抑郁症,在近几年患病人数不断上升,尤其是在工作场所中,每个组织无论大小都不能忽视这一点。
3.由于心理健康的咨询和治疗过程是一个长期过程,在此过程中,用户不仅需要与医生进行面对面交流,还需要耗费大量的时间成本和经济成本。


技术实现要素:

4.本发明提供一种元宇宙场景下的交互系统、方法、设备及存储介质,以实现通过元宇宙场景的线上形式实现关于心理问题的交互。
5.第一方面,本发明实施例提供了一种元宇宙场景下的交互系统,包括:医生端和用户端,所述医生端和用户端通过通信网络进行数据传输;
6.所述用户端创建第一虚拟形象,并将所述第一虚拟形象传输到医生端;
7.所述医生端根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。
8.可选的,所述交互数据包括音视频数据;
9.所述获取所述第一虚拟形象在所述虚拟交互场景中的交互数据,包括:
10.通过虚拟摄像头采集所述第一虚拟形象在所述虚拟交互场景中视频数据,和/或,采集所述第一虚拟形象在所述虚拟交互场景中音频数据。
11.可选的,所述医生端,基于情绪分析模型对所述交互数据进行情绪分析,得到用户在所述虚拟交互场景的交互过程中的情绪数据。
12.可选的,所述医生端创建第二虚拟形象,所述第二虚拟形象与所述第一虚拟形象位于同一虚拟空间内;
13.所述医生端基于同一虚拟空间的所述第二虚拟形象和所述第一虚拟形象,与所述用户端进行信息交互。
14.可选的,所述医生端预先设置多个虚拟交互场景,响应于获取的心理类型调用所述心理类型对应的虚拟交互场景;或者响应于对任一虚拟交互场景的选择操作,调用被选择的虚拟交互场景。
15.可选的,所述医生端还用于接收虚拟交互场景的配置信息,基于所述配置信息更新调用的虚拟交互场景。
16.可选的,所述医生端展示所述交互数据;
17.以及,响应于对虚拟交互场景的调节操作,更新所述虚拟交互场景。
18.可选的,所述用户端采集用户体征数据,并将所述用户体征数据传输至所述医生端;或者,
19.所述用户端采集用户体征数据,并将所述用户体征数据映射到所述第一虚拟形象中;
20.所述医生端从所述第一虚拟形象中采集所述用户体征数据,并展示。
21.第二方面,本发明实施例还提供了一种元宇宙场景下的交互方法,包括:
22.接收用户端创建的第一虚拟形象;
23.根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。
24.第三方面,本发明实施例还提供了一种电子设备,所述电子设备包括:
25.至少一个处理器;以及
26.与所述至少一个处理器通信连接的存储器;其中,
27.所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行第二方面所述的元宇宙场景下的交互方法。
28.第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现第二方面所述的元宇宙场景下的交互方法。
29.本发明提供的一种元宇宙场景下的交互系统包括医生端和用户端,所述医生端和用户端通过通信网络进行数据传输,所述用户端创建第一虚拟形象,并将所述第一虚拟形象传输到医生端,所述医生端根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。通过基于用户心理类型设置虚拟交互场景,为用户提供了更加舒适且个性化的场景,基于通信网络进行数据传输实现了用户足不出户即可完成和医生的交互,而虚拟交互场景的设置使用户在不通过现实场景也能实现心理问题的缓解,达到用户足不出户就能完成问诊和缓解的效果,同时节省了在现实场景中缓解心理问题所消耗的时间、经济等成本。
附图说明
30.为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
31.图1是本发明实施例一提供的一种元宇宙场景下的交互系统的结构示意图;
32.图2是本发明实施例二提供的一种元宇宙场景下的交互方法的流程图;
33.图3是本发明实施例二提供的一种基于元宇宙场景下的交互系统的心理问题治疗流程图;
34.图4是本发明实施例三提供的一种电子设备的结构示意图。
具体实施方式
35.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
36.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
37.实施例一
38.图1是本发明实施例一提供的一种元宇宙场景下的交互系统的结构示意图。如图1所示,该系统包括:医生端110和用户端120,医生端110和用户端120通过通信网络进行数据传输。
39.需要说明的是,元宇宙(metaverse),是人运用数字技术构建的,由现实世界映射或超越现实世界,并可与现实世界交互的虚拟世界,具备新型社会体系的数字生活空间,其可以是在扩展现实、区块链、云计算和数字孪生等技术下的概念具化。
40.相应的,医生端110和用户端120可以是一种虚拟世界的载体,其可以基于医生或用户的操作创建虚拟世界和虚拟形象,例如,智能终端、vr等电子设备。医生端110和用户端120通过通信网络进行数据传输可以是通过网络实现连接,例如,用户端120通过5g或wifi等与医生端110建立连接并实现数据传输,完成预约,使用户可以足不出户完成与医生的交互,避免给用户造成不必要的压力。
41.在本发明实施例中,用户端120创建第一虚拟形象,并将第一虚拟形象传输到医生端110。
42.其中,第一虚拟形象可以是基于用户提供的资料对应生成的一种虚拟人物。具体的,用户可以通过用户端120输入基本资料,由用户端120基于用户提供的基本资料自动构建第一虚拟形象,其中,用户通过用户端120输入基本资料需真实准确,使用户端120构建的第一虚拟形象能真实准确的反映用户的真实情况,实现医生在不与用户面对面也能准确的了解用户的基本情况。可选的,用户还可以通过用户端120输入填写相关的问卷调查表,并将填写好的问卷调查表传输至医生端110,使医生无需与用户在现实场景中见面,通过问卷调查表即可了解到用户的心理类型,节省成本。具体的,可以通过网络,例如,5g或wifi等,将第一虚拟形象和问卷调查表传输到医生端110,实现用户与医生的远程交互。
43.医生端110根据用户的心理类型设置虚拟交互场景,将第一虚拟形象导入得到虚拟交互场景中,并获取第一虚拟形象在虚拟交互场景中的交互数据。
44.其中,医生端110可以通过网络,例如,5g或wifi等接收用户传输过来的问卷调查表,通过读取问卷调查表获得用户的心理类型,从而使医生能更加针对性的给用户提供缓
解心理问题的虚拟交互场景。心理类型可以是指用户当前所患有的心理问题类型,例如,压力、抑郁、焦虑等。根据用户的心理类型设置虚拟交互场景可以是根据用户传输来的问卷调查表上显示的心理类型选择对应的虚拟交互场景,并将其部署在元宇宙场景下的交互系统中,供用户通过交互设备控制第一虚拟形象进行交互。
45.其中,虚拟交互场景可以是基于元宇宙技术构建的一种可交互的虚拟场景,例如,瑜伽运动场景、美食场景、靓丽风景场景、美术馆场景、音乐会场景等。相应的,将第一虚拟形象导入得到虚拟交互场景中可以是将虚拟交互场景之外的某个虚拟形象数据输入到该虚拟交互场景中,具体的,医生端110将用户端120提供的第一虚拟形象输入虚拟交互场景中,用户通过用户端120控制第一虚拟形象与虚拟交互场景进行交互,例如,在瑜伽运动场景中,将第一虚拟形象导入后,用户控制第一虚拟形象,使第一虚拟形象根据用户所需进行瑜伽运动,或在美食场景中,将第一虚拟形象导入后,用户控制第一虚拟形象,使第一虚拟形象摄取用户所需的美食等,此处不做具体限定。通过用户控制第一虚拟形象在虚拟交互场景中进行预设交互活动,一定程度上使用户的心理问题得到缓解。
46.可选的,医生端110可以预先设置多个虚拟交互场景,响应于获取的心理类型调用心理类型对应的虚拟交互场景。
47.其中,虚拟交互场景可以根据用户实际需求的调查结果或历史数据的分析结果进行设置,例如,通过用户实际需求的调查结果或历史数据的分析结果,了解到一部分用户觉得欣赏艺术品有助于释放压力,因此设置美术馆场景,用于在获取到的用户心理类型为压力时调用,一部分用户觉得听音乐有助于缓解焦虑,因此设置音乐会场景,用于在获取到的用户心理类型为焦虑时调用等,此处仅为举例说明。相应的,不同用户的心理类型不同,针对不同心理类型进行缓解的场景也不同,可以预先设置多个虚拟交互场景,医生端110响应于获取的心理类型,调用心理类型对应的虚拟交互场景,使虚拟交互场景能满足用户的不同心理类型。
48.可选的,医生端110还可以响应于对任一虚拟交互场景的选择操作,调用被选择的虚拟交互场景。
49.其中,选择操作可以是根据需求在预先设置的多个虚拟交互场景中点击或触发任意虚拟交互场景的操作。调用被选择的虚拟交互场景可以是将当前虚拟场景替换为被选择的虚拟交互场景,并将第一虚拟形象导入被选择的虚拟交互场景的过程。具体的,医生可以基于实际需求通过医生端110对任一虚拟交互场景进行点击或触发,医生端110响应于该操作,并将当前虚拟场景替换为被点击或触发的虚拟交互场景。
50.通过设置多种虚拟交互场景,响应于获取的心理类型或对任一虚拟交互场景的选择操作调用对应的虚拟交互场景,满足了不同用户的各种心理类型对不同虚拟交互场景的需求。
51.可选的,医生端110还用于接收虚拟交互场景的配置信息,基于配置信息更新调用的虚拟交互场景。
52.其中,配置信息可以是虚拟交互场景中可交互物体的参数信息,其可以根据用户提供的身体资料、生活地区、兴趣爱好等提取获得,以美食场景为例,可根据用户的生活地区设置不同的美食,例如,某用户的家乡在北方,而目前在南方打工,则可以将虚拟交互场景中设置各种北方菜品,从而满足用户的对家乡食的需求等,或可根据用户对不同种类食
物的喜好程度设置不同的美食,例如,某用户非常喜欢吃甜食,可以将虚拟交互场景中设置各种甜食,供该用户控制第一虚拟形象交互,从而满足用户的对甜食的需求等。相应的,更新调用的虚拟交互场景可以是对虚拟交互场景进行除旧布新的过程,具体的,基于配置信息更新调用的虚拟交互场景可以是基于配置信息对虚拟交互场景中的可交互物体进行替换、增加、减少等操作,使当前虚拟交互场景更加满足用户的需求。
53.通过基于配置信息更新调用的虚拟交互场景,使各个虚拟交互场景与用户的需求更加匹配,提高了虚拟交互场景与用户的适配性,从而实现虚拟交互场景个性化。
54.其中,交互数据可以是用户通过手柄、眼镜、生物反馈传感器等交互设备控制第一虚拟形象与虚拟交互场景进行交互活动时产生的数据。具体的,交互数据可以包括但不限于第一虚拟形象的行为数据、表情数据、语言数据等,例如,在靓丽风景场景中的交互数据可以是用户在各景物处的逗留时间,及其在观看各处风景时的表情变化、肢体动作等,在美食场景中的交互数据可以是用户控制第一虚拟形象吃了哪些美食及在吃这些美食时第一虚拟形象的表情变化、肢体动作等数据,此处仅为举例说明,不作具体限定。相应的,交互数据的获取可以通过虚拟交互场景中设置的虚拟摄像头进行采集。通过获取交互数据,使医生能准确的了解到用户在控制第一虚拟形象与虚拟交互场景进行交互活动时产生的数据,为后续对用户的分析提供了依据。
55.可选的,交互数据包括音视频数据。其中,音视频数据可以是虚拟摄像头采集到的第一虚拟形象在与虚拟交互场景交互过程中产生的声音数据及第一虚拟形象在与虚拟交互场景交互过程的视频数据,例如,第一虚拟形象在与虚拟交互场景交互时说出的评价等音频数据,及在该过程中表情变化过程、肢体动作的视频数据。
56.相应的,医生端110获取交互数据的方式可以是通过虚拟摄像头采集第一虚拟形象在虚拟交互场景中视频数据,和/或,采集第一虚拟形象在虚拟交互场景中音频数据。
57.其中,虚拟摄像头可以是通过代码实现设置在虚拟交互场景中的音视频采集装置。音频数据和视频数据可以统一通过虚拟摄像头采集获取,例如,虚拟摄像头拍摄第一虚拟形象与虚拟交互场景的交互过程,获取带有音频的视频数据。音频数据和视频数据还可以通过虚拟摄像头分别采集获取,例如,虚拟摄像头拍摄第一虚拟形象与虚拟交互场景的交互过程得到视频数据,并对该过程中的声音进行录音得到音频数据。
58.通过获取多种类型的交互数据,并将交互数据在医生端110进行展示,使医生能更准确的了解到用户在控制第一虚拟形象与虚拟交互场景进行交互活动时产生的数据,为后续对用户的分析提供了依据。
59.可选的,医生端110还可以展示交互数据,以及,响应于对虚拟交互场景的调节操作,更新虚拟交互场景。
60.其中,交互数据可以通过医生端110的显示模块进行展示,例如,智能终端的显示屏、vr眼镜的显示面板等。调节操作可以是在一定的数量或程度范围内进行调整、节制,使目标符合预设要求,具体的,对虚拟交互场景的调节操作可以是基于用户的情绪数据调节虚拟交互场景或场景中可交互物体的各项参数,例如,运动强度、背景音乐、风景风格等。更新虚拟交互场景可以是基于调节操作将调节后的各项参数应用于虚拟交互场景,使虚拟交互场景符合调节要求。可选的,对虚拟交互场景的调节操作还可以包括控制第一虚拟形象退出虚拟交互场景。
61.通过医生端110展示交互数据,确保医生对用户的交互过程有一个准确的了解,对场景进行调整,确保了用户心理问题的缓解效果。
62.可选的,医生端110还可以基于情绪分析模型对交互数据进行情绪分析,得到用户在虚拟交互场景的交互过程中的情绪数据。
63.其中,情绪分析模型可以是一种机器学习模型,例如,神经网络、决策树、随机森林等。具体的,情绪分析模型的获取方式可以是通过提取医生端110中的历史音视频数据,基于历史音视频数据将用户的历史情绪数据与对应的虚拟交互场景进行标记。将完成标记的历史音视频数据及虚拟交互场景输入至初始神经网络模型中对初始神经网络模型进行训练,直至初始神经模型的各项参数满足预设要求、模型的预测精度满足预设要求或训练次数满足预设要求中的一项或多项,停止训练并将该初始神经网络模型作为训练好的情绪分析模型输出,使训练好的情绪分析模型能够满足输入用户控制第一虚拟形象在虚拟交互场景中活动产生的交互数据能输出用户在虚拟交互场景的交互过程中的情绪数据即可,此处不作具体限定。例如,用户在某虚拟交互场景中产生开心情绪,便会开怀大笑并产生开心情绪对应的音视频数据,在某虚拟交互场景中就经常产生悲伤情绪,便会嚎啕大哭并产生悲伤情绪对应的音视频数据,或者在某虚拟交互场景中就极易变得暴躁,便会手舞足蹈并产生暴躁情绪对应的音视频数据等。
64.具体的,医生端110可以通过虚拟摄像头采集用户在控制第一虚拟形象在虚拟交互场景中活动时产生的音视频数据,并将其输入至训练好的情绪分析模型中,情绪分析模型对音视频数据进行分析获取用户在当前虚拟交互场景中进行交互过程中的情绪数据。
65.通过基于情绪分析模型对交互数据进行分析获取用户在虚拟交互场景的交互过程中的情绪数据,并展示在医生端110供医生查看,例如,用户在某虚拟交互场景下随着交互过程的不断进行,交互数据中显示用户从面无表情到微笑再到开怀大笑,此时,情绪分析模型对交互数据的分析可以是该用户在当前虚拟交互场景中产生了开心情绪,且在开心情绪的等级在不断提高,而对情绪数据的展示可以是将不同情绪数据的不同等级对应不同的图标展示在第一虚拟形象上方,例如,情绪分析模型在分析出用户在交互过程中的情绪数据为开心情绪,随着开心情绪的等级不断提高,一开始用户面无表情时可以用一个平静的表情图标展示在第一虚拟形象上方,用户出现微笑,将平静的表情图标变为微笑的表情图标展示在第一虚拟形象上方,最终用户开怀大笑,可以将微笑的表情图标变为呲牙等体现用户高度开心情绪的表情图标并展示在第一虚拟形象上方,使医生能准确的知晓用户在交互过程中的情绪变化,从而根据用户在交互过程中的情绪变化对虚拟交互场景进行调节和更新。
66.可选的,医生端110还可以创建第二虚拟形象,第二虚拟形象与第一虚拟形象位于同一虚拟空间内,医生端110基于同一虚拟空间的第二虚拟形象和第一虚拟形象,与用户端120进行信息交互。
67.其中,第二虚拟形象可以是医生通过医生端110创建的一种虚拟人物。虚拟空间可以是任何场景,包括但不限于虚拟交互场景,例如,诊所、公园、沙滩等能够满足虚拟形象间进行交互需求的场景。相应的,基于同一虚拟空间的第二虚拟形象和第一虚拟形象与用户端120进行信息交互可以是由医生控制第二虚拟形象与用户控制的第一虚拟形象进行交谈询问,医生通过第二虚拟形象向用户控制的第一虚拟形象提出相关问题,用户通过第一虚
拟形象向医生控制的第二虚拟形象反馈相关问题的答复,例如,医生端110和用户端120通过通信网络建立连接,医生通过医生端110显示模块上提供的对话输入框输入相关问题,并展示在第二虚拟形象上方,用户读取第二虚拟形象上方展示的相关问题,并通过用户端120显示模块上提供的对话输入框输入相关问题的回复,并展示在第一虚拟形象上方,医生读取第一虚拟形象上方展示的相关问题的回复,实现基于同一虚拟空间的第二虚拟形象和第一虚拟形象与用户端120进行信息交互。
68.通过创建第二虚拟形象与第一虚拟形象在同一虚拟空间中进行交互,搭建了模拟问诊的情景,使医生更加直观的了解用户当前用户的心理问题,使医生能够针对当前虚拟空间的场景处方相应的行为,确保医生能对用户的心理问题对症下药并给出对应的医嘱。
69.在另一个实施例中,用户端120还可以采集用户体征数据,并将用户体征数据传输至医生端110。
70.其中,用户体征数据包括但不限于体重、心率、体温、血压等信息数据。用户体征数据可以通过用户佩戴的设备进行采集,具体的,用户佩戴的设备可以是带有用户体征数据检测功能的运动手环等,具有用户体征数据检测功能且能够与用户端120实现信息交互的设备即可,此处不做具体限定。示例性的,以用户佩戴的设备是带有用户体征数据检测功能的运动手环为例,用户佩戴的运动手环与用户端120通过蓝牙等无线通讯技术实现信息交互,用户端120实时采集运动手环检测到的用户在虚拟交互场景交互过程中的用户体征数据并传输至医生端110。用户通过佩戴的设备获取自身的用户体征数据,并通过网络(5g或wifi)将用户体征数据传输给医生端110。
71.通过获取用户体征数据,使医生能及时察觉到用户的异常,从而及时切换虚拟交互场景或终止交互过程。
72.可选的,用户端120还可以采集用户体征数据,并将用户体征数据映射到第一虚拟形象中,医生端110从第一虚拟形象中采集用户体征数据,并展示。
73.其中,用户端120采集用户体征数据可以通过无线通迅技术与用户佩戴的设备进行信息交互完成采集。映射的实现方式可以是通过明确定义要移动的源数据字段,将需要移动的源数据字段从原始数据集对应映射到目标数据集,并匹配源数据字段和目标数据字段,若源数据字段与目标数据字段不匹配,则基于对应的转换公式或规则对源数据字段进行转换。具体的,用户端120采集用户体征数据作为源数据字段,将第一虚拟形象定义为用户体征数据即源数据字段传输的目的地,将用户体征数据与第一虚拟形象中的目标数据字段建立起一种唯一的对应关系,或给用户体征数据在第一虚拟形象中赋予一个唯一的别名或表现形式,即匹配源数据字段和目标数据字段,在无法匹配时基于对应的规则对用户体征数据进行转换,实现第一虚拟形象能准确的反映用户在交互过程中的用户体征数据即可。相应的,将用户体征数据映射到第一虚拟形象中可以是将用户的各项体征数据对应在第一虚拟形象中,并赋予一个唯一的别名或表现形式,并基于用户体征数据及其唯一的别名或表现形式建立映射关系,例如,在第一虚拟形象头顶设置多个图标,包括但不限于温度计图标、心形图标等,具体的,使温度计图标对应用户体征数据中的体温,心形图标对应用户体征数据中的心率等,此处仅为举例说明,不做具体限定。
74.其中,医生端110从第一虚拟形象中采集用户体征数据可以是通过读取映射关系获取用户体征数据,例如,心形图标闪烁的频率随着用户心率升高而增加等。医生端110从
第一虚拟形象中采集用户体征数据后可以通过医生端110显示模块进行展示,例如,智能终端的显示屏、vr眼镜的显示面板等。
75.需要说明的是,第一虚拟形象是用户根据自身自定义创建或由系统自动创建的虚拟人物,第一虚拟形象在虚拟交互场景中的交互过程一定程度的反映了用户在真实场景中的交互过程,通过将采集到的用户的体征数据映射到第一虚拟形象中依然能使医生能及时察觉到用户的异常,从而及时切换虚拟交互场景或终止交互过程。
76.本实施例提供的一种元宇宙场景下的交互系统包括医生端110和用户端120,医生端110和用户端120通过通信网络进行数据传输,用户端120创建第一虚拟形象,并将第一虚拟形象传输到医生端110,医生端110根据用户的心理类型设置虚拟交互场景,将第一虚拟形象导入得到虚拟交互场景中,并获取第一虚拟形象在虚拟交互场景中的交互数据。通过基于用户心理类型设置虚拟交互场景,为用户提供了更加舒适且个性化的场景,基于通信网络进行数据传输实现了用户足不出户即可完成和医生的交互,而虚拟交互场景的设置使用户在不通过现实场景也能实现心理问题的缓解,达到用户足不出户就能完成问诊和缓解的效果,同时节省了在现实场景中缓解心理问题所消耗的时间、资金等成本。
77.实施例二
78.图2是本发明实施例二提供的一种元宇宙场景下的交互方法的流程图,本实施例可适用于心理问题诊疗的情况,该方法可以由元宇宙场景下的交互系统来执行,该元宇宙场景下的交互系统可以采用硬件和/或软件的形式实现,该元宇宙场景下的交互系统可配置于诸如计算机、移动终端等的电子设备中。如图2所示,该方法包括:
79.s210、接收用户端创建的第一虚拟形象。
80.s220、根据用户的心理类型设置虚拟交互场景,将第一虚拟形象导入得到虚拟交互场景中,并获取第一虚拟形象在虚拟交互场景中的交互数据。
81.可选的,在根据用户的心理类型设置虚拟交互场景之前可以预先设置多个虚拟交互场景,在获取到用户的心理类型后,调用心理类型对应的虚拟交互场景。
82.其中,虚拟交互场景可以根据用户实际需求的调查结果或历史数据的分析结果进行设置。相应的,不同用户的心理类型不同,针对不同心理类型进行缓解的场景也不同,可以预先设置多个虚拟交互场景,使医生获取到用户的心理类型后,能够根据用户的心理类型调用对应的虚拟交互场景,使虚拟交互场景能满足用户的不同心理类型。
83.可选的,在获取到用户的心理类型后还可以通过操作医生端执行对任一虚拟交互场景的选择操作,调用被选择的虚拟交互场景。
84.其中,选择操作可以是根据需求在预先设置的多个虚拟交互场景中点击或触发任意虚拟交互场景的操作。调用被选择的虚拟交互场景可以是将当前虚拟场景替换为被选择的虚拟交互场景,并将虚拟形象导入被选择的虚拟交互场景的过程。具体的,医生可以基于用户的情绪数据对不同虚拟交互场景进行及时调用。
85.通过设置多种虚拟交互场景,并在获取到用户的心理类型后调用对应的虚拟交互场景,同时能够执行对任一虚拟交互场景的选择操作并调用对应的虚拟交互场景,满足了不同用户的各种心理类型对不同虚拟交互场景的需求。
86.可选的,在完成虚拟交互场景的调用后还可以接收虚拟交互场景的配置信息,基于配置信息更新调用的虚拟交互场景。
87.其中,配置信息可以是虚拟交互场景中可交互物体的参数信息。相应的,更新调用的虚拟交互场景可以是对虚拟交互场景进行除旧布新的过程,具体的,基于配置信息更新调用的虚拟交互场景可以是基于配置信息对虚拟交互场景中的可交互物体进行替换、增加、减少等操作,使当前虚拟交互场景更加满足用户的需求。
88.通过基于配置信息更新调用的虚拟交互场景,使各个虚拟交互场景与用户的需求更加匹配,提高了虚拟交互场景与用户的适配性,从而实现虚拟交互场景个性化。
89.其中,交互数据可以是用户通过手柄、眼镜、生物反馈传感器等交互设备控制第一虚拟形象与虚拟交互场景进行交互活动时产生的数据。
90.可选的,交互数据包括音视频数据。
91.其中,音视频数据可以是虚拟摄像头采集到的虚拟形象在与虚拟交互场景交互过程中产生的声音数据及虚拟形象在与虚拟交互场景交互过程的视频数据。
92.相应的,交互数据的获取可以是通过虚拟摄像头采集第一虚拟形象在虚拟交互场景中视频数据,和/或,采集第一虚拟形象在虚拟交互场景中音频数据。
93.其中,虚拟摄像头可以是通过代码实现设置在虚拟交互场景中的音视频采集装置。进一步的,音频数据和视频数据可以统一通过虚拟摄像头采集获取,或通过虚拟摄像头分别采集获取。
94.通过获取多种类型的交互数据,并将交互数据进行展示,使医生能更准确的了解到用户在控制第一虚拟形象与虚拟交互场景进行交互活动时产生的数据,为后续对用户的分析提供了依据。
95.可选的,在获取第一虚拟形象在虚拟交互场景中的交互数据后还可以对交互数据进行展示,并响应于对虚拟交互场景的调节操作,更新虚拟交互场景。
96.其中,交互数据可以通过医生端的显示模块进行展示,例如,智能终端的显示屏、vr眼镜的显示面板等。调节操作可以是在一定的数量或程度范围内进行调整、节制,使目标符合预设要求,具体的,对虚拟交互场景的调节操作可以是基于用户的情绪数据调节虚拟交互场景或场景中可交互物体的各项参数,例如,运动强度、背景音乐、风景风格等。更新虚拟交互场景可以是基于调节操作将调节后的各项参数应用于虚拟交互场景,使虚拟交互场景符合调节要求。
97.通过展示交互数据,确保医生对用户的交互过程有一个准确的了解,对场景进行调整,确保了用户心理问题的缓解效果。
98.可选的,在用户控制第一虚拟形象在虚拟交互场景中进行交互活动时还可以基于情绪分析模型对交互数据进行情绪分析,得到用户在虚拟交互场景的交互过程中的情绪数据。
99.其中,情绪分析模型可以是一种机器学习模型,例如,神经网络、决策树、随机森林等,使训练好的情绪分析模型能够满足输入用户控制第一虚拟形象在虚拟交互场景中活动产生的交互数据能输出用户在虚拟交互场景的交互过程中的情绪数据即可,此处不作具体限定。
100.具体的,医生可以操作医生端通过虚拟摄像头采集用户在控制第一虚拟形象在虚拟交互场景中活动时产生的音视频数据,并将其输入至训练好的情绪分析模型中,情绪分析模型对音视频数据进行分析获取用户在当前虚拟交互场景中进行交互过程中的情绪数
据。
101.通过基于情绪分析模型对交互数据进行分析获取用户在虚拟交互场景的交互过程中的情绪数据并展示,使医生能准确的知晓用户在交互过程中的情绪变化,从而根据用户在交互过程中的情绪变化对虚拟交互场景进行调节和更新。
102.可选的,医生还可以通过医生端创建第二虚拟形象,第二虚拟形象与第一虚拟形象位于同一虚拟空间内,基于同一虚拟空间的第二虚拟形象和第一虚拟形象,与用户进行信息交互。
103.其中,第二虚拟形象可以是医生通过医生端创建的虚拟人物。虚拟空间可以是任何场景,包括但不限于虚拟交互场景,例如,诊所、公园、沙滩等能够满足虚拟形象间进行交互需求的场景。相应的,基于同一虚拟空间的第二虚拟形象和第一虚拟形象与用户进行信息交互可以是由医生控制第二虚拟形象与用户控制的第一虚拟形象进行交谈询问,医生通过第二虚拟形象向用户控制的第一虚拟形象提出相关问题,用户通过第一虚拟形象向医生控制的第二虚拟形象反馈相关问题的答复。
104.通过创建第二虚拟形象与第一虚拟形象在同一虚拟空间中进行交互,搭建了模拟问诊的情景,使医生更加直观的了解用户当前承受的心理问题,使医生能够针对当前虚拟空间的场景处方相应的行为,确保医生能对用户的心理问题对症下药并给出对应的医嘱。
105.在另一个可选的实施例中,在用户控制第一虚拟形象在虚拟交互场景中进行交互活动时医生还可以通过医生端接收采集用户体征数据。
106.其中,用户体征数据可以是体重、心率、体温、血压等信息数据。用户体征数据可以通过用户佩戴的设备进行采集。用户通过佩戴的设备获取自身的用户体征数据,并通过网络(5g或wifi)将用户体征数据发送给医生。
107.通过获取用户体征数据,使医生能及时察觉到用户的异常,从而及时切换虚拟交互场景或终止交互过程。
108.可选的,在用户控制第一虚拟形象在虚拟交互场景中进行交互活动时医生还可以通过医生端从第一虚拟形象中采集用户体征数据,并展示。
109.其中,用户体征数据可以通过用户端与用户佩戴的设备基于无线通迅技术进行信息交互完成采集并映射到第一虚拟形象中。
110.其中,从第一虚拟形象中采集用户体征数据可以是通过读取映射关系获取用户体征数据,例如,心形图标闪烁的频率随着用户心率升高而增加等。从第一虚拟形象中采集用户体征数据后可以通过医生端显示模块进行展示,例如,智能终端的显示屏、vr眼镜的显示面板等。
111.需要说明的是,第一虚拟形象是用户根据自身自定义创建或由系统自动创建的虚拟人物,虚拟形象在虚拟交互场景中的交互过程一定程度的反映了用户在真实场景中的交互过程,通过将采集到的用户的体征数据映射到第一虚拟形象中依然能使医生能及时察觉到用户的异常,从而及时切换虚拟交互场景或终止交互过程。
112.在一个优选实施例中,具体参见图3,图3公开了基于元宇宙场景下的交互系统的心理问题治疗流程。用户在用户端填写基础信息和心理类型问卷调查表。用户端根据用户输入的基础信息创建第一虚拟形象。医生端通过读取心理类型问卷调查表,根据心理类型设置虚拟交互场景,如瑜伽运动场景、美食场景、靓丽风景场景、美术馆场景、音乐会场景
等。医生端创建第二虚拟形象,将第二虚拟形象与第一虚拟形象导入虚拟交互场景中,基于同一虚拟交互场景的第二虚拟形象和第一虚拟形象与用户进行信息交互,实现心理咨询。医生通过医生端采集交互数据,给出针对性的诊断和治疗方案。
113.本实施例的技术方案,通过接收用户端创建的第一虚拟形象,根据用户的心理类型设置虚拟交互场景,将第一虚拟形象导入得到虚拟交互场景中,并获取第一虚拟形象在虚拟交互场景中的交互数据。通过基于用户心理类型设置虚拟交互场景,为用户提供了更加舒适且个性化的场景,虚拟交互场景的设置使用户在不通过现实场景也能实现心理问题的缓解,实现用户足不出户即可完成心理问题的缓解,同时节省了在现实场景中缓解心理问题所消耗的时间、资金等成本。
114.实施例三
115.图4是本发明实施例三提供的一种电子设备的结构示意图。电子设备10旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
116.如图4所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(rom)12、随机访问存储器(ram)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(rom)12中的计算机程序或者从存储单元18加载到随机访问存储器(ram)13中的计算机程序,来执行各种适当的动作和处理。在ram 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、rom 12以及ram 13通过总线14彼此相连。输入/输出(i/o)接口15也连接至总线14。
117.电子设备10中的多个部件连接至i/o接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
118.处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能(ai)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如元宇宙场景下的交互方法。
119.在一些实施例中,元宇宙场景下的交互方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由rom 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到ram 13并由处理器11执行时,可以执行上文描述的元宇宙场景下的交互方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行元宇宙场景下的交互方法。
120.本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统
的系统(soc)、负载可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
121.用于实施本发明的元宇宙场景下的交互方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
122.实施例四
123.本发明实施例四还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行一种元宇宙场景下的交互方法,该方法包括:
124.接收用户端创建的第一虚拟形象;
125.根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。
126.在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
127.为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,crt(阴极射线管)或者lcd(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
128.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(lan)、广域网(wan)、区块链网络和互联网。
129.计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与vps服务中,存在的管理难度大,业务扩展性弱的缺陷。
130.应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
131.上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

技术特征:
1.一种元宇宙场景下的交互系统,其特征在于,包括:医生端和用户端,所述医生端和用户端通过通信网络进行数据传输;所述用户端创建第一虚拟形象,并将所述第一虚拟形象传输到医生端;所述医生端根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。2.根据权利要求1所述的系统,其特征在于,所述交互数据包括音视频数据;所述获取所述第一虚拟形象在所述虚拟交互场景中的交互数据,包括:通过虚拟摄像头采集所述第一虚拟形象在所述虚拟交互场景中视频数据,和/或,采集所述第一虚拟形象在所述虚拟交互场景中音频数据。3.根据权利要求1或2所述的系统,其特征在于,所述医生端,基于情绪分析模型对所述交互数据进行情绪分析,得到用户在所述虚拟交互场景的交互过程中的情绪数据。4.根据权利要求1所述系统,其特征在于,所述医生端创建第二虚拟形象,所述第二虚拟形象与所述第一虚拟形象位于同一虚拟空间内;所述医生端基于同一虚拟空间的所述第二虚拟形象和所述第一虚拟形象,与所述用户端进行信息交互。5.根据权利要求1所述的系统,其特征在于,所述医生端预先设置多个虚拟交互场景,响应于获取的心理类型调用所述心理类型对应的虚拟交互场景;或者响应于对任一虚拟交互场景的选择操作,调用被选择的虚拟交互场景。6.根据权利要求5述的方法,其特征在于,所述医生端还用于接收虚拟交互场景的配置信息,基于所述配置信息更新调用的虚拟交互场景。7.根据权利要求1所述的系统,其特征在于,所述医生端展示所述交互数据;以及,响应于对虚拟交互场景的调节操作,更新所述虚拟交互场景。8.根据权利要求1所述的系统,其特征在于,所述用户端采集用户体征数据,并将所述用户体征数据传输至所述医生端;或者,所述用户端采集用户体征数据,并将所述用户体征数据映射到所述第一虚拟形象中;所述医生端从所述第一虚拟形象中采集所述用户体征数据,并展示。9.一种元宇宙场景下的交互方法,其特征在于,包括:接收用户端创建的第一虚拟形象;根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。10.一种电子设备,其特征在于,所述电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求9所述的元宇宙场景下的交互方法。11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求9所述的元宇宙场景下的交互方法。

技术总结
本发明公开了一种元宇宙场景下的交互系统、方法、设备及存储介质。该系统包括医生端和用户端,所述医生端和用户端通过通信网络进行数据传输,所述用户端创建第一虚拟形象,并将所述第一虚拟形象传输到医生端,所述医生端根据用户的心理类型设置虚拟交互场景,将所述第一虚拟形象导入得到虚拟交互场景中,并获取所述第一虚拟形象在所述虚拟交互场景中的交互数据。通过基于用户心理类型设置虚拟交互场景,为用户提供了更加舒适且个性化的场景,实现了线上和医生的交互,通过虚拟交互场景使用户在不通过现实场景也能实现心理问题的缓解,节省了在现实场景中缓解心理问题所消耗的时间、资金等成本。资金等成本。资金等成本。


技术研发人员:路志鹏 朱涵颖 俞冲 李楠 赵珊珊
受保护的技术使用者:联仁健康医疗大数据科技股份有限公司
技术研发日:2023.05.16
技术公布日:2023/8/9
版权声明

本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

飞行汽车 https://www.autovtol.com/

分享:

扫一扫在手机阅读、分享本文

相关推荐