一种基于多元信息融合技术的虚拟仿真展示系统及平台的制作方法

1.本发明涉及虚拟仿真展示技术领域，具体为一种基于多元信息融合技术的虚拟仿真展示系统及平台。


背景技术：

2.信息多元化指信息的种类多,信息的来源渠道多，多维空间，是指由4条或者更多条维度组成的空间。多维空间定义“维”是一种度量，在三维空间坐标上，加上时间，时空互相联系，就构成四维时空，信息时代是以信息传输作为媒介，极大提高了信息的传播速度，并且也丰富了对产品的介绍，为了更加突出展示产品的功能性，借助互联网的便捷性能够极大的提高客户对产品的认识度，在现有的产品展示系统中，往往都是通过视频对产品进行三维展示，但这种展示不能通过顾客的肢体动作进行图像交互，在对产品展示时过于单调，对于图像展示时的空间环境不便于进行协同更改处理。


技术实现要素：

3.本发明的目的在于提供一种基于多元信息融合技术的虚拟仿真展示系统及平台，以解决上述背景技术中提出的问题。
4.为实现上述目的，本发明提供如下技术方案：一种基于多元信息融合技术的虚拟仿真展示系统，包括展示视频录入单元、展示音频录入单元、展示产品录入单元、展示点扫描单元、展示定位单元、渲染模块、仿真场景模拟空间、展示互动单元、语言互动单元、动作交互单元和人员动作判断模块，所述展示视频录入单元的输出端与展示音频录入单元的输入端通讯连接，所述展示音频录入单元的输出端与展示产品录入单元的输入端通讯连接，所述展示产品录入单元的输出端与展示点扫描单元的输入端通讯连接，所述展示点扫描单元的输出端与展示定位单元的输入端通讯连接，所述展示定位单元的输出端与渲染模块的输入端通讯连接，所述渲染模块的输出端与仿真场景模拟空间的输入端通讯连接，所述仿真场景模拟空间的输出端与展示互动单元的输入端通讯连接，所述展示互动单元与语言互动单元双向连接，所述展示互动单元的输出端与动作交互单元的输入端通讯连接，所述动作交互单元的输出端与人员动作判断模块的输入端通讯连接；
5.所述展示视频录入单元用于对需要进行展示的视频素材进行录入处理；
6.所述展示音频录入单元用于将与视频素材配对的音频进行录入处理；
7.所述展示产品录入单元用于对需要展示的产品三维模型进行录入处理；
8.所述展示点扫描单元用于多维全息展示空间进行扫描处理；
9.所述展示定位单元用于对需要展示的位置进行定位处理；
10.所述渲染模块用于对根据展示图像的位置进行图像渲染处理；
11.所述仿真场景模拟空间用于对选定的空间进行多维全息展示处理；
12.所述展示互动单元用于对参与展示图像互动的人员进行识别；
13.所述语言互动单元用于与人员之间进行语言互动处理；
14.所述动作交互单元用于对人员做出的动作进行识别捕捉处理；
15.所述人员动作判断模块用于对人员做出的动作对展示图像的反应进行判断处理。
16.作为优选，所述展示点扫描单元包括空间扫描模块、空间模型建立模块和展示位置框选模块，所述空间扫描模块的输出端与空间模型建立模块的输入端通讯连接，所述空间模型建立模块的输出端与展示位置框选模块的输入端通讯连接；
17.所述空间扫描模块用于对展示的空间位置进行扫描处理；
18.所述空间模型建立模块用于对扫描后的图像进行空间模型建立处理；
19.所述展示位置框选模块用于对空间模型中需要展示的范围进行选择处理。
20.作为优选，所述展示定位单元包括位置填充模块、三维展示参数调节模块和多维展示参数调节模块，所述位置填充模块的输出端与三维展示参数调节模块的输入端通讯连接，所述三维展示参数调节模块与多维展示参数调节模块双向连接；
21.所述位置填充模块用于对投影展示位置进行选定填充处理；
22.所述三维展示参数调节模块用于对展示的三维图像参数进行调节处理；
23.所述多维展示参数调节模块用于对展示的多维图像参数进行调节处理。
24.作为优选，所述展示定位单元双向连接有展示调节单元，所述展示调节单元用于对展示的图像进行调节处理，所述展示调节单元包括图像拉伸模块和显示调节模块，所述图像拉伸模块与显示调节模块双向连接；
25.所述图像拉伸模块用于对展示的图像进行位置拉伸调节处理；
26.所述显示调节模块用于对显示图像的亮度和色彩饱和度进行调节处理。
27.作为优选，所述仿真场景模拟空间双向连接有多维投影模块，所述多维投影模块用于对图像进行多维投影展示处理。
28.作为优选，所述展示互动单元包括互动人员监控模块、人员信息验证模块和用户视角采集模块，所述互动人员监控模块的输出端与人员信息验证模块的输入端通讯连接，所述人员信息验证模块的输出端与用户视角采集模块的输入端通讯连接；
29.所述互动人员监控模块用于对展示时出现的人员进行监控处理；
30.所述人员信息验证模块用于对出现互动时对人员的个人信息进行验证处理；
31.所述用户视角采集模块用于对人员互动的视角进行模拟图像采集处理。
32.作为优选，所述动作交互单元包括人体动作识别模块和动作捕捉模块，所述人体动作识别模块与动作捕捉模块双向连接；
33.所述人体动作识别模块用于对人员做出肢体动作时进行识别处理；
34.所述动作捕捉模块用于对人员做出的肢体动作进行实时动态捕捉处理，依据人员动作进行展示图像变更处理。
35.作为优选，所述人员动作判断模块双向连接有联动展示单元，所述联动展示单元用于依据人员做出的肢体动作对多维全息展示进行联动变更处理。
36.作为优选，所述联动展示单元双向连接有视频联动模块，所述联动展示单元双向连接有音频联动模块，所述联动展示单元双向连接有产品联动模块；
37.所述视频联动模块用于依据人员的肢体动作对展示视频进行联动处理；
38.所述音频联动模块用于依据人员的肢体动作对音频进行联动处理；
39.所述产品联动模块用于依据人员的肢体动作对展示产品进行联动处理。
40.一种基于多元信息融合技术的虚拟仿真展示平台，包括展示服务器以及至少一个如权利要求1－9中任一权项所述的多维全息展示系统，所述多维全息展示系统与所述展示服务器通信连接。
41.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
42.与现有技术相比，本发明的有益效果是：通过对展示视频、音频和产品三维模型的录入处理，更好的将产品融入至视频和音频内，在展示时使人更加投入，对展示效果进行提升，通过展示定位单元，实现了对展示位置的获取，并对适合展示位置的多维展示参数进行调节处理，使得展示更加的稳定，通过加入了展示互动单元，实现了对展示时互动人员进行监控，对人员信息进行验证，并根据人员的观察视角对图像进行模拟采集处理，对展示效果进行提升。
附图说明
43.为了更清楚地说明本发明的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引申获得其他的实施附图。
44.图1为本发明系统框图；
45.图2为本发明展示点扫描单元系统框图；
46.图3为本发明展示定位单元系统框图；
47.图4为本发明展示调节单元系统框图。
具体实施方式
48.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置的例子。
49.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
50.实施例1：
51.参见图1至图4所示，本发明实施例的一种基于多元信息融合技术的虚拟仿真展示系统，包括展示视频录入单元、展示音频录入单元、展示产品录入单元、展示点扫描单元、展示定位单元、渲染模块、仿真场景模拟空间、展示互动单元、语言互动单元、动作交互单元和人员动作判断模块，展示视频录入单元的输出端与展示音频录入单元的输入端通讯连接，展示音频录入单元的输出端与展示产品录入单元的输入端通讯连接，展示产品录入单元的输出端与展示点扫描单元的输入端通讯连接，展示点扫描单元的输出端与展示定位单元的输入端通讯连接，展示定位单元的输出端与渲染模块的输入端通讯连接，渲染模块的输出端与仿真场景模拟空间的输入端通讯连接，仿真场景模拟空间的输出端与展示互动单元的
输入端通讯连接，展示互动单元与语言互动单元双向连接，展示互动单元的输出端与动作交互单元的输入端通讯连接，动作交互单元的输出端与人员动作判断模块的输入端通讯连接；
52.展示视频录入单元用于对需要进行展示的视频素材进行录入处理；
53.展示音频录入单元用于将与视频素材配对的音频进行录入处理；
54.展示产品录入单元用于对需要展示的产品三维模型进行录入处理，通过对展示视频、音频和产品三维模型的录入处理，更好的将产品融入至视频和音频内，在展示时使人更加投入，对展示效果进行提升；
55.展示点扫描单元用于多维全息展示空间进行扫描处理，对需要展示的空间进行扫描处理，建立空间模型并对需要展示的位置进行范围框选；
56.展示定位单元用于对需要展示的位置进行定位处理，通过展示定位单元，实现了对展示位置的获取，并对适合展示位置的多维展示参数进行调节处理，使得展示更加的稳定；
57.渲染模块用于对根据展示图像的位置进行图像渲染处理；
58.仿真场景模拟空间用于对选定的空间进行多维全息展示处理；
59.展示互动单元用于对参与展示图像互动的人员进行识别，通过加入了展示互动单元，实现了对展示时互动人员进行监控，对人员信息进行验证，并根据人员的观察视角对图像进行模拟采集处理，对展示效果进行提升；
60.语言互动单元用于与人员之间进行语言互动处理；
61.动作交互单元用于对人员做出的动作进行识别捕捉处理；
62.人员动作判断模块用于对人员做出的动作对展示图像的反应进行判断处理。
63.实施例2：
64.其中，展示点扫描单元包括空间扫描模块、空间模型建立模块和展示位置框选模块，空间扫描模块的输出端与空间模型建立模块的输入端通讯连接，空间模型建立模块的输出端与展示位置框选模块的输入端通讯连接；
65.空间扫描模块用于对展示的空间位置进行扫描处理；
66.空间模型建立模块用于对扫描后的图像进行空间模型建立处理；
67.展示位置框选模块用于对空间模型中需要展示的范围进行选择处理，对需要展示的空间进行扫描处理，建立空间模型并对需要展示的位置进行范围框选。
68.其中，展示定位单元包括位置填充模块、三维展示参数调节模块和多维展示参数调节模块，位置填充模块的输出端与三维展示参数调节模块的输入端通讯连接，三维展示参数调节模块与多维展示参数调节模块双向连接；
69.位置填充模块用于对投影展示位置进行选定填充处理；
70.三维展示参数调节模块用于对展示的三维图像参数进行调节处理；
71.多维展示参数调节模块用于对展示的多维图像参数进行调节处理，通过展示定位单元，实现了对展示位置的获取，并对适合展示位置的多维展示参数进行调节处理，使得展示更加的稳定。
72.其中，展示定位单元双向连接有展示调节单元，展示调节单元用于对展示的图像进行调节处理，展示调节单元包括图像拉伸模块和显示调节模块，图像拉伸模块与显示调
节模块双向连接；
73.图像拉伸模块用于对展示的图像进行位置拉伸调节处理；
74.显示调节模块用于对显示图像的亮度和色彩饱和度进行调节处理，将展示的视频图像进行拉伸调节，并对显示亮度和色彩饱和度进行调节处理。
75.其中，仿真场景模拟空间双向连接有多维投影模块，多维投影模块用于对图像进行多维投影展示处理。
76.其中，展示互动单元包括互动人员监控模块、人员信息验证模块和用户视角采集模块，互动人员监控模块的输出端与人员信息验证模块的输入端通讯连接，人员信息验证模块的输出端与用户视角采集模块的输入端通讯连接；
77.互动人员监控模块用于对展示时出现的人员进行监控处理；
78.人员信息验证模块用于对出现互动时对人员的个人信息进行验证处理；
79.用户视角采集模块用于对人员互动的视角进行模拟图像采集处理，通过加入了展示互动单元，实现了对展示时互动人员进行监控，对人员信息进行验证，并根据人员的观察视角对图像进行模拟采集处理，对展示效果进行提升，在模拟空间内对人员的动作进行监控，监控时对人员的身份信息进行验证。
80.其中，动作交互单元包括人体动作识别模块和动作捕捉模块，人体动作识别模块与动作捕捉模块双向连接；
81.人体动作识别模块用于对人员做出肢体动作时进行识别处理；
82.动作捕捉模块用于对人员做出的肢体动作进行实时动态捕捉处理，依据人员动作进行展示图像变更处理，根据捕捉的人体肢体动作对展示图像进行联动处理。
83.其中，人员动作判断模块双向连接有联动展示单元，联动展示单元用于依据人员做出的肢体动作对多维全息展示进行联动变更处理。
84.其中，联动展示单元双向连接有视频联动模块，联动展示单元双向连接有音频联动模块，联动展示单元双向连接有产品联动模块；
85.视频联动模块用于依据人员的肢体动作对展示视频进行联动处理；
86.音频联动模块用于依据人员的肢体动作对音频进行联动处理；
87.产品联动模块用于依据人员的肢体动作对展示产品进行联动处理，根据捕捉的人体肢体动作对展示的视频、音频和产品三维模型进行联动处理。
88.实施例3：
89.一种基于多元信息融合技术的虚拟仿真展示平台，包括展示服务器以及至少一个如权利要求1－9中任一权项的多维全息展示系统，多维全息展示系统与展示服务器通信连接。
90.实施例4：
91.将需要展示的视频、音频和产品进行录入，并对需要展示的空间进行扫描处理，建立空间模型并对需要展示的位置进行范围框选，将视频、音频和产品与空间模型进行填充，并对三维展示参数和多维展示参数进行调节，将展示的视频图像进行拉伸调节，并对显示亮度和色彩饱和度进行调节处理，对仿真场景模拟空间进行建立，并在模拟空间内对人员的动作进行监控，监控时对人员的身份信息进行验证，并根据捕捉的人体肢体动作对展示的视频、音频和产品三维模型进行联动处理。
92.尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
93.本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本技术旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围由下面的权利要求指出。

技术特征：
1.一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，包括展示视频录入单元、展示音频录入单元、展示产品录入单元、展示点扫描单元、展示定位单元、渲染模块、仿真场景模拟空间、展示互动单元、语言互动单元、动作交互单元和人员动作判断模块，所述展示视频录入单元的输出端与展示音频录入单元的输入端通讯连接，所述展示音频录入单元的输出端与展示产品录入单元的输入端通讯连接，所述展示产品录入单元的输出端与展示点扫描单元的输入端通讯连接，所述展示点扫描单元的输出端与展示定位单元的输入端通讯连接，所述展示定位单元的输出端与渲染模块的输入端通讯连接，所述渲染模块的输出端与仿真场景模拟空间的输入端通讯连接，所述仿真场景模拟空间的输出端与展示互动单元的输入端通讯连接，所述展示互动单元与语言互动单元双向连接，所述展示互动单元的输出端与动作交互单元的输入端通讯连接，所述动作交互单元的输出端与人员动作判断模块的输入端通讯连接；所述展示视频录入单元用于对需要进行展示的视频素材进行录入处理；所述展示音频录入单元用于将与视频素材配对的音频进行录入处理；所述展示产品录入单元用于对需要展示的产品三维模型进行录入处理；所述展示点扫描单元用于多维全息展示空间进行扫描处理；所述展示定位单元用于对需要展示的位置进行定位处理；所述渲染模块用于对根据展示图像的位置进行图像渲染处理；所述仿真场景模拟空间用于对选定的空间进行多维全息展示处理；所述展示互动单元用于对参与展示图像互动的人员进行识别；所述语言互动单元用于与人员之间进行语言互动处理；所述动作交互单元用于对人员做出的动作进行识别捕捉处理；所述人员动作判断模块用于对人员做出的动作对展示图像的反应进行判断处理。2.根据权利要求1所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述展示点扫描单元包括空间扫描模块、空间模型建立模块和展示位置框选模块，所述空间扫描模块的输出端与空间模型建立模块的输入端通讯连接，所述空间模型建立模块的输出端与展示位置框选模块的输入端通讯连接；所述空间扫描模块用于对展示的空间位置进行扫描处理；所述空间模型建立模块用于对扫描后的图像进行空间模型建立处理；所述展示位置框选模块用于对空间模型中需要展示的范围进行选择处理。3.根据权利要求2所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述展示定位单元包括位置填充模块、三维展示参数调节模块和多维展示参数调节模块，所述位置填充模块的输出端与三维展示参数调节模块的输入端通讯连接，所述三维展示参数调节模块与多维展示参数调节模块双向连接；所述位置填充模块用于对投影展示位置进行选定填充处理；所述三维展示参数调节模块用于对展示的三维图像参数进行调节处理；所述多维展示参数调节模块用于对展示的多维图像参数进行调节处理。4.根据权利要求3所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述展示定位单元双向连接有展示调节单元，所述展示调节单元用于对展示的图像进行调节处理，所述展示调节单元包括图像拉伸模块和显示调节模块，所述图像拉伸模块与
显示调节模块双向连接；所述图像拉伸模块用于对展示的图像进行位置拉伸调节处理；所述显示调节模块用于对显示图像的亮度和色彩饱和度进行调节处理。5.根据权利要求4所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述仿真场景模拟空间双向连接有多维投影模块，所述多维投影模块用于对图像进行多维投影展示处理。6.根据权利要求5所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述展示互动单元包括互动人员监控模块、人员信息验证模块和用户视角采集模块，所述互动人员监控模块的输出端与人员信息验证模块的输入端通讯连接，所述人员信息验证模块的输出端与用户视角采集模块的输入端通讯连接；所述互动人员监控模块用于对展示时出现的人员进行监控处理；所述人员信息验证模块用于对出现互动时对人员的个人信息进行验证处理；所述用户视角采集模块用于对人员互动的视角进行模拟图像采集处理。7.根据权利要求6所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述动作交互单元包括人体动作识别模块和动作捕捉模块，所述人体动作识别模块与动作捕捉模块双向连接；所述人体动作识别模块用于对人员做出肢体动作时进行识别处理；所述动作捕捉模块用于对人员做出的肢体动作进行实时动态捕捉处理，依据人员动作进行展示图像变更处理。8.根据权利要求7所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述人员动作判断模块双向连接有联动展示单元，所述联动展示单元用于依据人员做出的肢体动作对多维全息展示进行联动变更处理。9.根据权利要求8所述的一种基于多元信息融合技术的虚拟仿真展示系统，其特征在于，所述联动展示单元双向连接有视频联动模块，所述联动展示单元双向连接有音频联动模块，所述联动展示单元双向连接有产品联动模块；所述视频联动模块用于依据人员的肢体动作对展示视频进行联动处理；所述音频联动模块用于依据人员的肢体动作对音频进行联动处理；所述产品联动模块用于依据人员的肢体动作对展示产品进行联动处理。10.一种基于多元信息融合技术的虚拟仿真展示平台，其特征在于，包括展示服务器以及至少一个如权利要求1－9中任一权项所述的多维全息展示系统，所述多维全息展示系统与所述展示服务器通信连接。

技术总结
本发明公开了一种基于多元信息融合技术的虚拟仿真展示系统及平台，包括展示视频录入单元、展示音频录入单元、展示产品录入单元、展示点扫描单元、展示定位单元、渲染模块、仿真场景模拟空间、展示互动单元、语言互动单元、动作交互单元和人员动作判断模块，本发明的有益效果是：通过对展示视频、音频和产品三维模型的录入处理，更好的将产品融入至视频和音频内，在展示时使人更加投入，对展示效果进行提升，通过展示定位单元，实现了对展示位置的获取，并对适合展示位置的多维展示参数进行调节处理，使得展示更加的稳定，通过加入了展示互动单元，实现了对展示时互动人员进行监控，对人员信息进行验证。员信息进行验证。员信息进行验证。


技术研发人员：石敏 李维
受保护的技术使用者：广州市大迈文化传播有限公司
技术研发日：2023.04.21
技术公布日：2023/7/20