用于观测牙齿情况的方法技术

用于观测牙齿情况的方法。本发明专利技术涉及一种用于观测牙齿情况的方法，其中将患者面部的图像记录且存储为面部数据记录（1）；借助于面部辨识方法自动地辨识所述面部数据记录（1）内的特征点（3）；基于所述特征点（3）自动地辨识位于嘴唇之间的口部区域（4）；基于所述特征点（3）自动地辨识所述面部数据记录（1）中所述面部的位置和所述面部数据记录（1）中所述面部的定向的三维方向（5）；所述牙齿情况的虚拟牙齿数据记录（2）是根据所述面部的所述定向的所述三维方向（5）而定向且根据所述面部相对于所述面部数据记录（1）的所述位置而定位；所述牙齿数据记录（2）部分叠加和/或叠加于所述面部数据记录（1）内的所述口部区域上和/或所述面部数据记录（1）内的所述口部区域由所述牙齿数据记录（2）替代且将结果作为观测数据记录显示。

A method of observing the situation of the teeth

A method of observing the situation of the teeth. The present invention relates to a method for observing the situation of a tooth, in which the image of the patient's face is recorded and stored as a face data record (1); a feature point (3) within the face data record (1) is automatically identified by the face identification method, and the mouth between the lips is automatically identified based on the feature point (3). A section area (4); based on the feature point (3) automatically identifies the position of the face in the face data record (1) and the directional three-dimensional direction (5) of the face described in the face data record (1); the virtual tooth data record (2) of the tooth condition is described according to the Orienteering of the face. A three-dimensional direction (5) is directed and positioned according to the position described by the face relative to the face data record (1); the tooth data record (2) is partially superimposed and / or superimposed on the mouth region and / or the face data record (1) within the face data record (1). The tooth data record (2) is substituted and the result is recorded and displayed as observation data.

【技术实现步骤摘要】
【国外来华专利技术】用于观测牙齿情况的方法
本专利技术涉及用于观测牙齿情况的方法，其中牙齿情况的虚拟牙齿数据记录是可用的且其中将患者面部的图像记录且存储为面部数据记录。
技术介绍
用于观测牙齿情况，例如用于观测患者面部上所计划的假牙的效果的先前方法通常展示患者面部的冻结或至少可旋转图像，通过适当定向和定位将虚拟牙齿情况并入到所述图像中。已知用于观测牙齿情况的方法例如来自DE202008014344U1、DE102013102421A1或US2012/0095732A1。已知用于自动地辨识面部图像中面部的特性或面部的特征点的各种方法例如来自D.Vukadinovic和M.Pantic的“使用基于Gabor特征的升压分类器的自动面部特征点检测（AutomaticFacialFeaturePointDetectionusingGaborFeatureBasedBoostedClassifiers）”（2005）关于系统、人类和控制论的IEEE国际会议；来自M.Dantone等人的“使用条件性回归森林的实时面部特征检测（Real-timeFacialFeatureDetectionusingConditionalRegressionForests）”（2012）关于计算机视觉处理和图案辨识的IEEE会议；或来自US2010/030578A1。本专利技术的目标是进一步开发和改进现有技术。
技术实现思路
本专利技术的主题为一种用于观测牙齿情况的方法，其中将患者面部的图像记录且存储为面部数据记录，其中借助于面部辨识方法自动地辨识所述面部数据记录内的特征点，其中基于所述特征点自动地辨识位于嘴唇之间的口部区域，其中基于所述特征点自动地辨识所述面部数据记录中面部的位置和所述面部数据记录中面部的定向的三维方向，其中所述牙齿数据记录根据面部的所述定向的所述三维方向而定向且根据面部相对于所述面部数据记录的所述位置而定位，其中所述面部数据记录内的所述口部区域部分重叠和/或重叠和/或由所述牙齿数据纪录替代，且将结果作为观测数据记录显示。请注意，所述牙齿情况可为任何牙齿情况，涉及一个牙齿或多个牙齿以及完整一组牙齿的图像。其例如可为完全虚拟计划的数据记录或其可为借助于扫描由模型产生的所计划假牙的数据记录。其还可为例如借助于相机产生的实际牙齿情况的数据记录。举例来说，后者可补充有假牙部分或围绕假牙部分对其进行操控例如以展示畸齿矫正治疗的计划结果。常常也被称作面部特征点（facialfeaturepoint；FFP）或生物统计特征点的特征点为在二维或三维面部辨识方法的框架内面部中可以自动地辨识，即借助于计算机而不用与用户进行互动的点；例如，鼻尖、嘴角、眼睛等等。根据本专利技术的方法的一个优点是可为患者或治疗医师或牙科技师观测患者面部内的所计划牙齿情况。表示现实的当前数据与虚拟数据的组合常常被称作扩增现实。具体来说，通过将所计划牙齿情况完整叠加到当前牙齿情况上或由所计划牙齿情况替代当前牙齿情况而展现所计划牙齿情况的效果。可通过将所计划牙齿情况部分叠加到当前牙齿情况上而同时显示所计划牙齿情况和当前牙齿情况。举例来说，所计划牙齿情况和当前牙齿情况，即口部区域内面部数据记录的范围可以不同颜色且透明地显示。因此，例如当准备当前牙齿情况时，可验证与所计划牙齿情况的一致性或偏离。有利的是，面部数据记录为二维或三维的。二维数据记录易于产生或可借助于例如相机的简单装置而产生，而较好质量的观测数据记录可通过三维数据记录而实现。有利的是，牙齿数据记录为三维的。牙齿数据记录因此可易于在适于面部数据记录中面部的定向的定向上与面部数据记录组合或在观测数据记录内显示。有利地以定时间隔对所述方法进行再操作。观测数据记录到面部的更新，即新近记录图像的连续或反复产生会产生面部的一种类型的虚拟镜像。患者可因此转动或移动其头部、张开其口部等等且一致地展示适于当前定向或其面部上的当前表情的其面部的图像，且其中所计划牙齿情况适当地重叠。举例来说，可例如以始终相等的时间间隔自动地执行再操作。然而，还可提供起始再操作的触发器机构。这有可能会导致不同时间间隔。所述时间间隔有利地不超过42ms，其结果是实现用于视频的典型24Hz的帧率且通过其实现实时观测。为了确保正确辨识，有利地自动识别至少四个特征点以用于口部区域的自动辨识。至少一个三维额外数据记录有利地根据面部的定向的三维方向而定向且根据面部相对于观测数据记录的位置而定位，其中观测数据记录中面部数据记录和/或牙齿数据记录部分重叠和/或重叠和/或由额外数据记录替代。以此方式，额外信息可易于在观测数据记录内显示且清晰地呈现给用户。额外数据记录有利地为牙根的图像，与容积数据记录划分开且与关于位置的当前牙齿情况相关；颌部中神经的图像，与磁谐振断层扫描图像划分开且与关于位置的当前牙齿情况相关；下颌关节的图像或钻孔器或钻孔的图像。出于计划或监控的目的，例如钻孔的计划过程或借助于传感器确定的钻孔器的当前位置可在观测数据记录中显示。附图说明本专利技术的设计实例在图式中进行概述。图式展示：图1根据本专利技术的方法的第一实施例的示意性图像，图2经设计用于患者的治疗的假牙的数字数据记录的示意图，图3患者面部的二维数字数据记录的示意图，图4A、B用于确定面部数据记录内的面部的定向的具有特征点的面部数据记录的示意图，以及图5所计划假牙的观测的示意图。具体实施方式在图1中概述根据本专利技术的方法的第一实施例。根据方法步骤S1提供经设计用于患者的假牙的三维牙齿数据记录1。在图2中概述三维牙齿数据记录1的实例。为了展示根据方法步骤S2通过给患者的假牙实现的结果，通过记录患者面部的二维图像而提供一个面部数据记录2，或通过以较短时间间隔记录一系列二维图像而提供一系列面部数据记录2，其中针对所述一系列图像中的每个图像产生一个相应面部数据记录2。可通过使用例如相机记录一个或多个二维图像。可例如通过相机拍摄面部。图3中展示面部数据记录3的实例。借助于面部辨识方法，在方法步骤S3中在面部数据记录2内识别特征点3，即面部的特性点，例如嘴角。在方法步骤S4中，基于经辨识特征点3在面部数据记录2中识别口部或嘴唇。如两个不同定向面部的图4A和4B中所展示，在方法步骤S5中基于特征点3而确定面部数据记录2中患者面部的定向的三维方向5。举例来说，虽然面部的前向定向的定向的方向5垂直于面部数据记录2的图像平面延伸且延伸到图像平面之外，但轮廓中记录的面部的方向5位于图像平面内。在方法步骤S5中，因此由面部的二维图像推论面部的三维定向。如图5中所概述，在方法步骤S4之后的方法步骤S6中，将位于嘴唇之间的区域作为面部数据记录2内的口部区域4划分和切割出。在方法步骤S7中，相对于面部数据记录2的图像平面旋转和定位牙齿数据记录1，以此方式使得牙齿数据记录1的定向与面部的定向的所确定方向5匹配且位置与口部区域4的位置匹配。为此，在方法步骤S8中例如基于图像平面内牙齿数据记录1的定向与面部数据记录2内面部的定向的方向的关系而建立假牙与面部的相对定向。举例来说，可基于将保留的现有牙齿或待替换的牙齿而建立与面部数据记录2中面部的定向的关系。存储相关数据，以使得在方法步骤S7中借助于存储数据和面部数据记录2内面部的所确定定向5自动地进行牙齿数据记录1本文档来自技高网...

【技术保护点】
1.一种用于观测牙齿情况的方法，其中将患者面部的图像记录和存储为面部数据记录（1），其特征在于，借助于面部辨识方法自动地辨识所述面部数据记录（1）内的特征点（3），基于所述特征点（3）自动地辨识位于嘴唇之间的口部区域（4），基于所述特征点（3）自动地辨识所述面部数据记录（1）中所述面部的位置和所述面部数据记录（1）中所述面部的定向的三维方向（5），所述牙齿情况的虚拟牙齿数据记录（2）是根据所述面部的所述定向的所述三维方向（5）而定向且根据所述面部相对于所述面部数据记录（1）的所述位置而定位，所述面部数据记录（1）内的所述口部区域部分重叠和/或重叠和/或由所述牙齿数据记录（2）替代且将结果作为观测数据记录显示。

【技术特征摘要】
【国外来华专利技术】2015.11.18 DE 102015222782.01.一种用于观测牙齿情况的方法，其中将患者面部的图像记录和存储为面部数据记录（1），其特征在于，借助于面部辨识方法自动地辨识所述面部数据记录（1）内的特征点（3），基于所述特征点（3）自动地辨识位于嘴唇之间的口部区域（4），基于所述特征点（3）自动地辨识所述面部数据记录（1）中所述面部的位置和所述面部数据记录（1）中所述面部的定向的三维方向（5），所述牙齿情况的虚拟牙齿数据记录（2）是根据所述面部的所述定向的所述三维方向（5）而定向且根据所述面部相对于所述面部数据记录（1）的所述位置而定位，所述面部数据记录（1）内的所述口部区域部分重叠和/或重叠和/或由所述牙齿数据记录（2）替代且将结果作为观测数据记录显示。2.根据权利要求1所述的方法，其特征在于所述面部数据记录（1）为二维或三维的。3.根据权利要求1或2所述的方法，其特征在于所述牙齿数据记录（2）为三维的。4.根据权利要求1到3中任一项所述的方法，其特征在于以定时间隔对所述方法...

【专利技术属性】
技术研发人员：S施奈德，E德扎普夫，R阿洛尼，
申请(专利权)人：西诺德牙科设备有限公司，
类型：发明
国别省市：德国,DE