用于在车辆的环境中由车辆向移动终端提供基准点的方法和设备与流程

1.本发明涉及一种用于在车辆的环境中由车辆向移动终端提供基准点的方法以及相应地设立的车辆和移动终端。


背景技术：

2.如今，数据眼镜在研究阶段是已知的，它们通过透明显示器而允许佩戴者感知周围环境并且同时提供信息的插入。这些信息可以如此被插入，使得它们对于数据眼镜的佩戴者显现在周围环境中的期望地点上，这通常称为“增强现实”。增强现实描述通过包括不透明显示器的数据眼镜也是可能的。在这种情况下在显示器上也映射周围环境，并且附加地录入要被描述的信息。
3.为了以地点正确的方式将信息定位，以便达到增强现实，在数据眼镜的周围环境中已知标记，即所谓的基准点。这借助于相机和配属的图像处理来实现，它们被数据眼镜一起包含在内。用于通过数据眼镜识别基准点的典型算法在此在数据眼镜的处理容量方面是相当耗费计算的，所以需要相应地适配对此的算法。
4.存在将数据眼镜也应用在车辆中的考虑，以便例如向车辆的驾驶员借助于增强现实来提供关于车辆的周围环境的信息。在此存在以下情形：车辆的周围环境对于数据眼镜的相机不是完全可见的，而是被车辆的车身(在此也包括诸如内后视镜、外后视镜、玻璃刮擦器等等部件)部分地遮挡。这种遮挡导致，数据眼镜不能通过相机拍摄和识别处于周围环境中并且被遮挡的基准点。这意味着，由数据眼镜的算法针对被遮挡的基准点花费的计算容量、计算时间和为此消耗的在电池中存储的能量被不必要地使用。


技术实现要素：

5.因此，对于本领域技术人有而言，提出任务，将数据眼镜的计算容量、计算时间和能量消耗在识别基准点时和在应用在车辆中时进行优化。
6.所述任务通过按独立权利要求的方法和设备解决。有利的实施方式在从属权利要求中限定。
7.按照本发明的第一方面，一种用于在车辆的环境中由车辆向移动终端、尤其是数据眼镜提供基准点的方法，所述车辆包括用于对车辆的周围环境的区域进行拍摄的相机、电子计算装置和通信装置，所述移动终端包括通信装置、电子计算装置和相机，所述方法包括以下步骤：借助于车辆的相机拍摄车辆的环境；在拍片中识别基准点；将一些或全部基准点从车辆传递给移动终端。车辆的相机尤其是集成在车辆的车身的外部区域中，以拍摄区域或者视角朝外，使得车辆相机的视线仅仅无关紧要地被车身的部件限制。
8.在此也建议，使用车辆的相机，以便针对基准点检查车辆的周围环境。这些识别的基准点然后传递给数据眼镜。数据眼镜因此实现在车辆的环境中的基准点的认识，这些基准点能够由车辆的相机识别，并且因此能够在没有被车辆的车身部件遮挡的情况下识别。
按照这种方式，数据眼镜实现能被识别的基准点的位置的认识并且可以考虑这些基准点的可能的被车身部件遮挡。
9.有利的是，在所述方法中规定，在识别基准点时考虑关于已经事先由移动终端传递给车辆的基准点的信息，尤其是关于要被识别的基准点的类型的信息；和/或考虑关于预先确定的基准点的信息。在数据眼镜与车辆之间的这种交换用于，通过数据眼镜和通过车辆寻找相同的基准点。按照这种方式更好地保证，由车辆识别的基准点能够被数据眼镜进一步利用。
10.在所述方法中可以规定，仅仅传递基准点的子集，或者所述子集被如此标记。这降低在车辆与数据眼镜之间的传递需求，并且所述传递可以限制于对于数据眼镜重要的基准点，或者说允许由数据眼镜标识所述子集。
11.另外，基准点的子集可以与车辆的车身部件的几何结构相关地选择，尤其是相关于与车辆的前玻璃邻接的车身部件的几何结构地选择。借助于车身的几何结构对要被传递的基准点的选择由车辆选择。在此可以考虑，周围环境的哪些区域对于移动终端的相机而言被车身部件遮挡，哪些区域恰好被与车辆的前玻璃邻接的车身部件——例如在驾驶员朝前的视线中的a柱——遮挡。
12.优选地，被遮挡区域的确定借助于车身部件的几何结构和移动终端在车辆中的位置实施，并且尤其是借助于移动终端的相机在车辆中的位置来实施。因此计算移动终端的相机的具体视线和被车身部件的引起的遮挡(通过车辆或移动终端来计算)。
13.在此，移动终端的位置可以假设为典型地预定义的位置，或者与座椅、镜子和/或方向盘的设定相关地确定，或者通过移动终端和通过移动终端的相机的拍片从车辆的对于移动终端已知的内室来确定(从车身部件的拍片反算移动终端的位置)。
14.现在，为了传递，可以不选择在周围环境的被遮挡区域中的基准点，或者但是可以仅仅选择对于移动终端的相机从车辆出来可见的、即可拍摄的基准点。必要时，也可以选择所有基准点，并且它们相应地设有信息：它们对于移动终端是可见的，还是不可见的。
15.在具有数据眼镜的系统中，所述方法包括以下步骤之一：通过移动终端识别基准点，在识别时从一开始就排除对已事先由车辆传递的那些基准点的识别；或者通过移动终端识别基准点，在识别时至少优先搜索(或者仅仅搜索)已事先由车辆传递的那些基准点。因此，数据眼镜不再搜索或者总是不优先搜索被数据眼镜已知的基准点，使得它们已经是完全不可识别的。这允许计算时间和计算容量的节约并且改进增强现实的描述。
16.本发明的另一方面包括一种车辆，其包括用于对车辆的周围环境的区域进行拍摄的相机、电子计算装置和通信装置，所述车辆构造成用于实施上述方法之中的任一方法。
17.本发明的另一方面涉及一种用于通过移动终端确定基准点的方法，所述移动终端包括相机、电子计算装置和通信装置，所述方法包括以下步骤：确定关于基准点、尤其是关于要被识别的基准点的类型、和/或关于预先确定的基准点的信息；将所述信息传递给车辆；从车辆接收基准点；通过移动终端识别基准点，其中，要么在识别时从一开始就排除对已事先由车辆传递的那些基准点的识别，要么在识别时至少优先搜索或者仅仅搜索已事先由车辆传递的那些基准点。所述方法允许由数据眼镜更快地并且必要时在品质上更高价值地识别基准点，并且因此允许增强现实描述的质量的改进。
18.所接收的基准点可以是按上述方法中任一方法传递的基准点。
19.另一个方面涉及一种移动终端，其包括相机、电子计算装置和通信装置，所述移动终端构造成用于实施两种刚刚提及的方法之中的任一方法。
附图说明
20.图1显示按一种实施例的系统的应用。
具体实施方式
21.图1显示按一种实施例的系统的应用。驾驶员处于具有相机50的车辆中，所述相机拍摄车辆的周围环境，并且驾驶员使用具有电子处理装置和相机(未描述)的数据眼镜20。数据眼镜20用于描述关于车辆的周围环境的增强现实内容，为此需要识别在车辆的周围环境中的基准点。相机50和数据眼镜20的视野分别通过虚线表示。
22.在此示例性地并且示意性地描述，在车辆的周围环境中有树木和房子，它们的相应的一部分对于数据眼镜20的相机是不可见的，因为相机朝周围环境的视线被车辆的车身(车顶、a柱、前舱盖)限制。在树木上和在房子上有基准点41、42。基准点42不仅对于车辆的相机50而且对于数据眼镜20的相机可见。基准点41仅仅对于车辆的相机50可见，但是对于数据眼镜20的相机不可见，因为这些基准点41被车辆的车身遮挡。
23.在车辆中有电子处理单元60，其与相机50连接并且经由无线的无线电连接(例如蓝牙、wifi等等)也与数据眼镜20连接。电子处理单元60用于接收和处理相机50的拍片以及从拍片中识别基准点。
24.数据眼镜20经由无线的无线电连接与处理单元60连接，并且经由无线的无线电连接(例如移动无线电)与数据库70连接。数据库70对于在世界中的不同位置存储可检测的基准点。数据眼镜20也包括gnss接收器(例如gps、glonass、galileo)，以便能够确定自身的位置。借助于被确定的位置，所述数据眼镜20在数据库70中查询在该位置上可检测的基准点。
25.在运行中，数据眼镜20向处理单元60发送在当前位置可检测的基准点，即在图1中全部的附图标记41和42。相机50和处理单元60实施用于识别被接受的基准点的相应算法。处理单元60也从车辆接收驾驶员座椅的座椅设定参数并且由此计算数据眼镜20在车辆内室中的位置。另外，所述处理单元60借助于车辆车身的已知的几何结构来计算，周围环境的哪些区域对于数据眼镜的相机可见，以及哪些区域不可见。处理单元60现在检验，所识别的基准点之中的哪些基准点对于数据眼镜20可见，在此为具有附图标记42的点，并且将基准点42的该子集传递给数据眼镜20。
26.数据眼镜20现在执行在车辆的环境中的基准点的识别，为此仅仅搜索基准点42。基准点42的数量小于从数据库70接收的基准点的数量，并且因此，与在搜索所有基准点的情况下相比，数据眼镜20识别基准点更快地结束。这尤其是因为，搜索不可识别的(因为被遮挡的)基准点需要相当多的计算容量和计算时间。更快地检测基准点对于由数据眼镜描述增强现实的质量是有利的。

技术特征：
1.一种用于在车辆的环境中由车辆向移动终端、尤其是数据眼镜提供基准点的方法，所述车辆包括用于对车辆的周围环境的区域进行拍摄的相机、电子计算装置和通信装置，所述移动终端包括通信装置、电子计算装置和相机，所述方法包括以下步骤：借助于车辆的相机拍摄车辆的环境；在拍片中识别基准点；将一些或全部基准点从车辆传递给移动终端。2.根据权利要求1所述的方法，其中，在识别基准点时考虑关于已事先由移动终端传递给车辆的基准点的信息、尤其是关于要被识别的基准点的类型的信息，和/或关于预先确定的基准点的信息。3.根据上述权利要求中任一项所述的方法，其中，所述方法还包括以下步骤：选择基准点的子集；其中，仅仅传递基准点的子集，或者所述子集被标记为选出的。4.根据权利要求3所述的方法，其中，所述基准点的子集与车辆的车身部件的几何结构相关地选择，尤其是相关于与车辆的前玻璃邻接的车身部件的几何结构地选择。5.根据权利要求3或4所述的方法，其中，在选择子集时考虑，对于移动终端的相机而言，周围环境的哪些区域被车身部件遮挡，尤其是被与车辆的前玻璃邻接的车身部件遮挡。6.根据权利要求5所述的方法，其中，所述被遮挡的区域借助于车身部件的几何结构以及借助于移动终端在车辆中的位置、尤其是移动终端的相机在车辆中的位置确定。7.根据权利要求6所述的方法，其中，所述移动终端的位置假设为典型地预定义的位置，或者与座椅、镜子和/或方向盘的设定相关地确定，或者通过移动终端和通过移动终端的相机的拍片从车辆的对于移动终端已知的内室来确定。8.根据权利要求5至7所述的方法，其中，不选择在周围环境的被遮挡区域中的基准点。9.根据权利要求3至7所述的方法，其中，对于基准点的子集，仅仅选择对于移动终端的相机从车辆出来不可见、即不可拍摄的基准点。10.根据上述权利要求中任一项所述的方法，所述方法还包括以下步骤：通过移动终端识别基准点，在识别时，从一开始就排除对已事先由车辆选择的那些基准点的识别；或者将已事先由车辆选择的那些基准点包含在识别之中；或者通过移动终端识别基准点，在识别时，至少优先搜索或者仅仅搜索已事先由车辆传递的那些基准点。11.一种车辆，其包括用于对车辆的周围环境的区域进行拍摄的相机、电子计算装置和通信装置，所述车辆构造成用于实施根据上述权利要求中任一项所述的方法。12.一种用于通过移动终端确定基准点的方法，所述移动终端包括相机、电子计算装置和通信装置，所述方法包括以下步骤：确定关于基准点、尤其是关于要被识别的基准点的类型、和/或关于预先确定的基准点的信息；将所述信息传递给车辆；从车辆接收基准点；通过移动终端识别基准点，其中，要么在识别时从一开始就排除对已事先由车辆传递的那些基准点的识别，要么在识别时至少优先搜索已事先由车辆传递的那些基准点。
13.根据权利要求12所述的方法，其中，所接收的基准点是按照权利要求1至10中任一项所述的方法传递的基准点。14.一种移动终端，其包括相机、电子计算装置和通信装置，所述移动终端构造成用于实施根据权利要求12或13所述的方法。

技术总结
本发明涉及一种用于由车辆向移动终端、尤其是数据眼镜提供基准点的方法，所述车辆包括用于对车辆的周围环境的区域进行拍摄的相机、电子计算装置和通信装置，所述移动终端包括通信装置、电子计算装置和相机，所述方法包括以下步骤：借助于车辆的相机拍摄车辆的环境；在拍片中识别基准点；将一些或全部基准点从车辆传递给移动终端。传递给移动终端。传递给移动终端。


技术研发人员：R
受保护的技术使用者：宝马股份公司
技术研发日：2022.01.13
技术公布日：2023/8/13