[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN101686853B - 用于牙科模型的视频辅助边缘标记 - Google Patents

用于牙科模型的视频辅助边缘标记 Download PDF

Info

Publication number
CN101686853B
CN101686853B CN2008800225972A CN200880022597A CN101686853B CN 101686853 B CN101686853 B CN 101686853B CN 2008800225972 A CN2008800225972 A CN 2008800225972A CN 200880022597 A CN200880022597 A CN 200880022597A CN 101686853 B CN101686853 B CN 101686853B
Authority
CN
China
Prior art keywords
model
video
dental
window
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008800225972A
Other languages
English (en)
Other versions
CN101686853A (zh
Inventor
雅诺什·罗哈利
罗伯特·N·那扎尔
爱德华·K·塔克安
伊利亚·A·克里夫斯阔
埃里克·B·帕里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Midmark Corp
Original Assignee
3M Innovative Properties Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 3M Innovative Properties Co filed Critical 3M Innovative Properties Co
Publication of CN101686853A publication Critical patent/CN101686853A/zh
Application granted granted Critical
Publication of CN101686853B publication Critical patent/CN101686853B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C5/00Filling or capping teeth
    • A61C5/70Tooth crowns; Making thereof
    • A61C5/77Methods or devices for making crowns
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C13/00Dental prostheses; Making same
    • A61C13/0003Making bridge-work, inlays, implants or the like
    • A61C13/0004Computer-assisted sizing or machining of dental prostheses
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C13/00Dental prostheses; Making same
    • A61C13/34Making or working of models, e.g. preliminary castings, trial dentures; Dowel pins [4]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • G06T15/205Image-based rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Epidemiology (AREA)
  • Dentistry (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Architecture (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明描述用于制备牙科修复件制备工艺中使用的数字牙科模型的工具,连同描述相关的系统和方法。通过用建模的目标物的静止图像补充三维模型的视图改进牙科建模。在模型扫描期间采集的视频数据提供静止图像的源,该静止图像可随同绘制的三维模型显示,并且可以将两个视图(模型和静止图像)同步,从而得到模型目标物的通用透视图。该方法提供可用的可视信息,以用于在例如标记供修复件所用的制备的牙齿表面的边缘的处理步骤期间消除表面特征的二义性。可以相似地增强交互式建模工具。例如,用于边缘标记的工具可以同步静止图像与模型之间的边缘线的显示,从而用户可与可视表现中的任一者或两者进行交互,并对两个显示中反映的边缘均进行改变。

Description

用于牙科模型的视频辅助边缘标记
相关专利申请的交叉引用
本申请要求于2007年6月29日提交的美国临时专利申请No.60/947012的优先权。
背景技术
1.技术领域
本发明涉及牙医学,更具体地讲,涉及用于在齿列的三维数字模型上标记边缘的工具和技术。
2.相关领域的说明
牙科技术的最新进展已经使得捕集高度准确的数字牙印模成为可能。现有扫描技术概念性地提供足够的分辨率,以直接制备用于多种牙科修复件(例如牙桥、牙冠、等等)、以及牙科矫正器、牙科假体等的物理模型。然而,在获得重要区域(例如制备的牙表面的边缘)周围的准确的三维数据方面,口内扫描存在许多物理障碍。这包括制备的牙齿周围的组织壁的伸缩、以及会积聚并模糊一部分边缘的血液、唾液、等等。在这种情形下,仅仅根据所得的三维模型,不能轻易识别或分辨所得三维扫描中的模糊之处。
需要改进的技术来处理数字牙科模型。例如,需要改进的边缘标记工具来辅助数字制备牙科修复件。
发明内容
通过用建模的目标物的静止图像来补充三维模型的视图,改进了用于牙科修复件的数字制备工艺。在模型扫描期间采集的视频数据提供了静止图像的源,该静止图像可沿着绘制的三维模型显示,并且可以将两个视图(模型和静止图像)同步,从而得到模型目标物的共同的透视图。该方法提供了可用的可视信息,以用于在例如标记供修复件所用的制备的牙齿表面的边缘的处理步骤期间消除表面特征的二义性。可以相似地增强交互式建模工具。例如,用于边缘标记的工具可以使静止图像与模型之间的边缘线的显示同步,从而用户可与可视表现中的任一者或两者交互作用。
在一个方面,本文所公开的图形用户接口包括:视频控制器,其接收用户将多个视频图像中的一个作为工作图像的选择;工作区域,其显示工作图像,并且接收用户对一个或多个点的操纵,该一个或多个点用于在齿列上标记边缘;以及三维视图,其显示齿列的数字模型的三维透视图绘制。
视频控制器可以包括幻灯片窗口,幻灯片窗口显示齿列的多个缩略图像并且接收用户对多个缩略图像中的一个的选择。幻灯片窗口可以显示多个缩略图像中的每一个的立体视图。可以根据相关性选择多个缩略图像。多个缩略图像中的每一个可以包含对多个缩略图像中的一个的取向识别。视频控制器可以包括视频时间轴控制器。视频时间轴控制器可以显示当前视频图像的缩略图。视频控制器可以包括缩略图像的二维阵列。工作区域可以显示工作图像的立体视图。图形用户接口可以包括立体视图内的立体绘制的光标。可以选择立体视图内的光标的深度,使得光标保留在工作区域的三维表面上。图形用户接口可以包括用于将用户注释提供到工作图像和数字模型中的一个或多个的工具。工作区域可以包括识别工作图像的取向的注释。图形用户接口可以包括用户控制器,其用于选择取向,并且响应性地选择和显示基本上从取向提供视图的多个视频图像中的一个作为工作图像。图像增强可以应用于工作区域中显示的工作图像。图像增强可以包括局部自适应对比度增强以及对比度受限的自适应柱状图均衡中的一种或多种。
三维视图可以显示数字模型的立体视图。三维视图还可以包括在数字视图内的立体绘制的光标。图形用户接口还可以包括剖视图,其显示齿列的剖面并且包括一个或多个点中的最近选择的一个。可以对应于用户对工作区域中的一个或多个点的每一次操纵,在三维视图中显示一个或多个对应的三维点。三维视图可以适于接收用户对一个或多个点的操纵,并且为了对其响应而更新工作区域中在齿列上标记边缘的一个或多个点。用户操纵可以包括添加点、选择点、取消选择点、删除点和移动点中的一种或多种。图形用户接口还可以包括用户控制器,其用于操纵数字模型的视点,其中选择新的工作图像来更紧密地对应数字模型的视点。通过由一个或多个可用视频图像和数字模型的组合以生成虚拟视频图像,用户接口可以响应在多个视频图像中的任何一个中未显现的齿列透视图的选择。图形用户接口还可以包括用于选择新工作图像的用户控制器,其中调整数字模型的视点,以使其更紧密地对应新工作图像的视点。数字模型可以是纹理映射的模型。可以通过多个视频图像中的一个或多个重叠视频图像来增强工作图像,从而提供比多个视频图像中的各个视频图像具有更高像素分辨率的图像。
在另一方面,本文所公开的方法包括:在第一窗口中显示得自目标物的视频的静止图像;在第二窗口中显示目标物的三维模型的二维透视图绘制;以及提供用户控制器,以用于操纵第一窗口或第二窗口中的任一个窗口中的目标物的表面上的点,其中,在第一窗口和第二窗口中的另一个窗口中绘制对应点。
方法可以包括接收将多个视频图像中的一个作为静止图像的选择。接收选择可以包括接收用户从视频时间轴控制器的输入。接收选择可以包括接收用户对多个视频缩略图中的一个的选择。接收得自目标物的新透视图的多个视频中的一个新视频的选择,并且从新透视图显示三维模型。方法可以包括提供用户控制器,以用于操纵第二窗口中的目标物的透视图;从用户控制器接收对新透视图的选择;从目标物的视频选择更紧密地对应于新透视图的新静止图像;以及在第一窗口中显示新透视图。用于操纵表面上的点的用户控制器可以包括用于添加点、删除点、选择点、取消选择点和移动点中的一种或多种的控制器。表面上的点可以是由表面上的多个点形成的连续线上的点。连续线可以形成闭环。
本文所公开的一种系统包括:第一窗口,其适于显示得自目标物的视频的静止图像;第二窗口,其适于显示目标物的三维模型的二维透视图绘制;以及用户控制器,以操纵第一窗口或第二窗口中的任一个窗口中的目标物的表面上的点,其中在第一窗口和第二窗口中的另一个窗口中绘制对应点。
系统可以包括用于接收对得自多个视频图像的静止图像的选择的控制器。控制器可以包括视频时间轴控制器。控制器可以包括多个视频缩略图。可以从选择的静止图像的透视图、通过在第二窗口中显示三维模型,使系统响应选择。系统可以包括用户控制器,其用于接收对第二窗口中的目标物的新透视图的选择,系统响应性地从目标物的视频选择更紧密地对应于新透视图的新静止图像,并且在第一窗口中显示新静止图像。用户控制器可以包括用于添加点、删除点、选择点、取消选择点和移动点中的一种或多种的控制器。表面上的点可以是由表面上的多个点形成的连续线上的点。连续线可以形成闭环。
在另一方面,本文所公开的一种系统包括:第一显示装置,其用于在第一窗口中显示得自目标物的视频的静止图像;第二显示装置,其用于在第二窗口中显示目标物的三维模型的二维透视图绘制;以及用户控制器,其用于操纵第一窗口或第二窗口中的任一个窗口中的目标物的表面上的点,其中在第一窗口和第二窗口中的另一个窗口中绘制对应点。
系统还可以包括接收装置,其用于接收将多个视频图像中的一个作为静止图像的选择。接收选择可以包括接收用户从视频时间轴控制器的输入。接收选择可以包括接收用户对多个视频缩略图中的一个的选择。通过从选择的静止图像的透视图在第二显示装置中显示三维模型,接收装置可以响应选择。系统还可以包括第二控制装置,其用于:接收第二显示装置中的新透视图的选择;从目标物的视频选择更紧密地对应于新透视图的新静止图像;并且在第一显示装置中显示新静止图像。用户控制装置可以包括用于添加点、删除点、选择点、取消选择点和移动点中的一种或多种的控制器。表面上的点可以是由表面上的多个点形成的连续线上的点。连续线可以形成闭环。
在另一方面,本文所公开的在计算机可读介质上体现的计算机程序产品包括计算机可执行代码,当计算机可执行代码在一个或多个计算装置上执行时,执行以下步骤:在第一窗口中显示得自目标物的视频的静止图像;在第二窗口中显示目标物的三维模型的二维透视图绘制;以及提供用户控制器,用户控制器用于操纵第一窗口或第二窗口中的任一个窗口中的目标物的表面上的点,其中在第一窗口和第二窗口中的另一个窗口中绘制对应点。
计算机可执行代码可以包括执行以下步骤的代码:接收将多个视频图像中的一个作为静止图像的选择。接收选择可以包括接收用户从视频时间轴控制器的输入。接收选择可以包括接收用户对多个视频缩略图中的一个的选择。计算机可执行代码可以包括执行以下步骤的代码:接收得自目标物的新透视图的多个视频中的一个新视频的选择,并且从新透视图显示三维模型。计算机可执行代码可以包括执行以下步骤的代码:提供用户控制器,用户控制器用于操纵第二窗口中的目标物的透视图;从用户控制器接收对新透视图的选择;从目标物的视频选择更紧密地对应于新透视图的新静止图像;以及在第一窗口中显示新静止图像。用于操纵表面上的点的用户控制器可以包括用于添加点、删除点、选择点、取消选择点和移动点中的一种或多种的控制器。表面上的点可以是由表面上的多个点形成的连续线上的点。连续线形成闭环。
在另一方面,本文所公开的方法包括:在第一窗口中显示得自牙齿表面的视频的静止图像;在第二窗口中显示牙齿表面的三维模型的二维透视图绘制;以及提供用户控制器,用户控制器用于生成第一窗口或第二窗口中的任一个窗口中牙齿表面上的边缘线,其中在第一窗口和第二窗口中的另一个窗口中绘制对应的边缘线。
用于生成边缘线的用户控制器可以连接多个用户选择的点以形成连续曲线段。方法可以包括通过将牙医制备牙齿表面之前和之后的牙齿表面的三维模型进行比较,初始边缘线被自动地生成。方法可以包括通过将牙齿表面的制备之前和制备之后的牙齿体积进行Boolean(布尔逻辑)比较来确定初始边缘线。方法可以包括接收对初始边缘线的手动调整。
本文所公开的在计算机可读介质上体现的计算机程序产品包括计算机可执行代码,当计算机可执行代码在一个或多个计算装置上执行时,执行以下步骤:在第一窗口中显示得自牙齿表面的视频的静止图像;在第二窗口中显示牙齿表面的三维模型的二维透视图绘制;以及提供用户控制器,用户控制器用于生成第一窗口或第二窗口中的任一个窗口中牙齿表面上的边缘线,其中在第一窗口和第二窗口中的另一个窗口中绘制对应的边缘线。
用于生成边缘线的用户控制器可以连接多个用户选择的点以形成连续曲线段。计算机程序产品可以包括执行以下步骤的代码:通过将牙医制备牙齿表面之前和之后的牙齿表面的三维模型进行比较,初始边缘线被自动地生成。计算机程序产品可以包括执行以下步骤的代码:通过将牙齿表面的制备之前和制备之后的牙齿体积进行布尔比较来确定初始边缘线。计算机程序产品可以包括执行以下步骤的代码:接收对初始边缘线的手动调整。
本文所公开的一种系统包括:第一窗口,其适于显示得自牙齿表面的视频的静止图像;第二窗口,其适于显示牙齿表面的三维模型的二维透视图绘制;以及用户控制器,其用于生成第一窗口或第二窗口中的任一个窗口中牙齿表面上的边缘线,其中在第一窗口和第二窗口中的另一个窗口中绘制对应的边缘线。
用于生成边缘线的用户控制器可以连接多个用户选择的点以形成连续曲线段。可以通过将牙医制备牙齿表面之前和之后的牙齿表面的三维模型进行比较,初始边缘线被自动地生成。可以通过将牙齿表面的制备之前和制备之后的牙齿体积进行布尔比较来确定初始边缘线。用户控制器可以接受对初始边缘线的手动调整。
在另一方面,本文公开的一种系统包括:第一显示装置,其用于在第一窗口中显示得自牙齿表面的视频的静止图像;第二显示装置,其用于在第二窗口中显示牙齿表面的三维模型的二维透视图绘制;以及用户控制装置,用户控制装置用于生成第一窗口或第二窗口中的任一个窗口中牙齿表面上的边缘线,其中在第一窗口和第二窗口中的另一个窗口中绘制对应的边缘线。
用户控制装置可以连接多个用户选择的点以形成连续曲线段。系统可以包括生成装置,生成装置通过将牙医制备牙齿表面之前和之后的牙齿表面的三维模型进行比较来自动地生成初始边缘线。可以通过将牙齿表面的制备之前和制备之后的牙齿体积进行布尔比较来确定初始边缘线。系统可包括接收装置,其用于接收对初始边缘线的手动调整。
在另一方面,本文所公开的方法包括:从工作流队列中选择数字牙科模型;使用图形用户接口中的第一工具切削数字牙科模型中的一个或多个模具;将模具中的一个指定为进行操作的牙齿;使用图形用户接口中的第二工具在进行操作的牙齿上标记边缘,从而提供被切削、被标记的数字牙齿模型;以及将被切削、被标记的数字牙科模型传输到远程数据库。
方法可以包括在将被切削、被标记的数字牙科模型传输到远程数据库之前,在进行操作的牙齿上形成沟槽。方法可以包括在将被切削、被标记的数字牙科模型传输到远程数据库之后,在进行操作的牙齿上形成沟槽。方法可以包括通过安全的基于网络的接口访问工作流队列。数字牙科模型可以包括在修复件制备之前和制备之后的牙齿表面的模型。标记边缘可以包括根据修复件制备之前和制备之后的牙齿表面的比较来确定初始边缘。比较可以包括将修复件制备之前和制备之后的牙齿表面的对准模型进行布尔比较。边缘可以被传输到远程数据库,作为数字牙科模型的坐标系中限定的边缘线。切削一个或多个模具可以包括限定与数字牙科模型相关的一个或多个切削平面。切削一个或多个模具可以包括将数字牙科模型分成多个模型,其包括用于一个或多个模具中的每一个的至少一个模型。
在另一方面,本文公开的计算机程序产品包括在计算机可读介质中体现的计算机可执行代码,当计算机可执行代码在一个或多个计算装置上执行时,执行以下步骤:从工作流队列中选择数字牙科模型;使用图形用户接口中的第一工具切削数字牙科模型中的一个或多个模具;将模具中的一个指定为进行操作的牙齿;使用图形用户接口中的第二工具在进行操作的牙齿上标记边缘,从而提供被切削、被标记的数字牙齿模型;以及将被切削、被标记的数字牙科模型传输到远程数据库。
计算机程序产品可以包括执行以下步骤的计算机可执行代码:在将被切削、被标记的数字牙科模型传输到远程数据库之前,在进行操作的牙齿上形成沟槽。计算机程序产品可以包括执行以下步骤的计算机可执行代码:在将被切削、被标记的数字牙科模型传输到远程数据库之后,在进行操作的牙齿上形成沟槽。计算机程序产品可以包括执行以下步骤的计算机可执行代码:通过安全的基于网络的接口访问工作流队列。数字牙科模型可以包括在修复件制备之前和制备之后的牙齿表面的模型。标记边缘可以包括根据修复件制备之前和制备之后的牙齿表面的比较来确定初始边缘。比较可以包括将修复件制备之前和制备之后的牙齿表面的对准模型进行布尔比较。边缘可以被传输到远程数据库,作为数字牙科模型的坐标系中限定的边缘线。
在另一方面,本文所公开的方法包括:从采用口内扫描器采集到的牙科对象的多个图像对获得牙科对象的三维数字模型;识别三维数字模型中的关注的区域;选择与关注的区域相关的多个图像对的集合;以及将多个图像对的集合传输到远程位置。
方法可以包括将三维数字模型传输到位置。远程位置可以为牙科实验室。选择多个图像对的集合可以包括根据图像数据的覆盖和取向中的一个或多个来选择组。
附图说明
通过参照下面的附图,可以理解本发明和下面某些实施例的具体实施方式。
图1示出了牙科图像捕集系统。
图2为用于牙科对象的一般化制备工艺的框图。
图3为牙科对象制造工艺的高级流程图。
图4示出了使用本文所述的工具用于数字牙科模型的一般化工艺。
图5示出了图形模具切削操作。
图6示出了图形模具切削操作。
图7示出了图形边缘标记操作。
图8示出了图形形成沟槽操作。
图9示出了自动边缘标记技术。
图10示出了视觉辅助边缘标记的用户接口。
具体实施方式
本文所述的是根据从口内扫描捕集到的三维数字数据解决用于牙科修复件的边缘的识别、精修、和其它操纵的系统和方法。虽然说明重点放在某些扫描技术和专用于在由这些扫描技术获得的数字牙印模上标记边缘的某些技术,但是应当理解,对于本领域的普通技术人员来说,以下方法和系统的另外的变型形式、适应性改变、和组合(例如没有具体描述的牙科修复件的制造、或下面牙科领域之外的技术的使用)将显而易见。例如,本文所述的技术可以用于精修三维动画模型,其得自扫描物理对象、或机器视觉背景,以标记或评价被扫描的对象。所有这些变型形式、适应性改变、和组合旨在属于本发明的范围内。另外应当理解,本发明所描述的方法和系统可以用于模型的核实和验证、以及任何其它应用,其中可在视频图像和对应的三维模型之间进行有用的比较。
在下面的说明中,术语“图像”通常是指在图像平面内形成对象的二维视图的二维像素集合。术语“图像集”通常是指可分解成三维数据的相关二维图像的集合。术语“点云”通常是指形成由多个二维视图重新构建的对象的三维视图的三维点的集合。在三维图像捕集系统中,多个这样的点云另外可以被对准并且组合成由移动摄像机捕集到的图像构造的聚集点云。因此,应当理解,除非另一个含义被具体说明或从上下文来看是清楚的,否则像素通常是指二维数据,并且点通常是指三维数据。
除非不同的含义被明确规定或从上下文来看是清楚的,否则如本文所用的术语“三维表面表示”、“数字表面表示”、“三维表面映射”、等等旨在是指对象(例如表面数据的点云、二维多边形的集合)的任何三维表面映射、或表示对象表面的全部或一部分的任何其它数据,如可通过捕集和/或处理三维扫描数据获得的。
除非不同的含义被明确规定或从上下文来看是清楚的,否则“三维表示”可以包括上述任意三维表面表示、以及体积表示和其它表示。
通常,术语“绘制”是指例如用于监视器上显示的三维对象的二维形象化。然而,应当理解,存在三维绘制技术,并且其可以有效地被用于本文所公开的系统和方法。例如,本文所述的系统和方法可以有效地采用全息显示、自动立体显示、用立体影片眼镜观看的显示、头戴式立体显示、或任何其它的二维显示和/或三维显示。由此,本文所述的“绘制”应该以广义的方式解释,除非明确提供较狭义的含义或以其它方式从上下文来看是清楚的。
如本文所用,术语“牙科对象”旨在广义地指专用于牙科的目标物。这可以包括口内结构体,例如齿列,更通常是人类的齿列,例如单颗牙齿、象限、全弓、成对的弓(可以是单独或闭合的多种类型)、软组织、等等,以及骨头和任何其它的支承结构体或环绕结构体。如本文所用,术语“口内结构体”是指如上所述口内的天然结构体和口中可能存在的人造结构体(例如任意的下述牙科对象)牙科对象可以包括“修复件”,其通常可以被理解为包括修复现有齿列的结构或功能的组件(例如牙冠、牙桥、镶面、嵌体、高嵌体、汞合金、复合材料)、和多种结构体(例如顶盖等)、以及在制造永久修复件时所使用的暂时修复件。牙科对象也可以包括用可移除结构或永久结构(例如整副假牙、部分假牙、植入物、固位假牙、等等)替代齿列的“假体”牙科对象也可以包括用于校正、对准、或以其它方式暂时或永久地调整齿列的“器具”,例如可移动正畸器具、手术支架、磨牙器具、阻鼾器、间接支架安置器具、等等。牙科对象也可以包括长时间固定到齿列的“硬件”,例如种植体定位器、种植体基牙、正畸托架和其它正畸组件。牙科对象也可以包括牙科制造中的“临时组件”,例如牙科模具(全部和/或部分的)、蜡形、包埋料模、等等,以及托盘、基座、模具、和修复件、假牙等制造中采用的其它组件。牙科对象另外可以被归类为天然牙科对象,例如牙齿、骨头、和上述其它口内结构体或人工牙科对象,例如修复件、假牙、器具、硬件、和上述牙科制造中的临时组件。
例如“数字牙科模型”、“数字牙印模”、等等的术语旨在是指可以用在采集、分析、处方、和制造的多种方面的牙科对象的三维表示,除非不同的含义被以其它方式明确规定或从上下文来看是清楚的。例如“牙科模具”或“牙印模”的术语旨在是指物理模具,例如铸件、印刷的、或以其它方式加工的牙科对象的物理实例。除非被指定,术语“模型”单独使用时可以是指物理模型和数字模型中的任一者或两者。
还应当理解,例如“工具”或“控制”的术语当用于描述用户接口的方面时通常旨在是指:在图形用户接口或其它用户接口内可以采用多种技术来接收用户输入,该用户输入激励或控制处理,包括(但不限于)下拉列表、单选按钮、光标和/或鼠标操作(点选、区域选、拖放操作、等等)、复选框、命令行、文本输入字段、消息和告警、进度条等。因此,在下面的描述中,除非更具体的含义被以其它方式明确规定或从上下文来看是清楚的,否则术语“工具”、“控制”等等应当被广义地理解。
图1示出了图像捕集系统。通常,系统100可以包括扫描仪102,其从目标物104(例如牙科病人)的表面106捕集图像,并且将图像转送到计算机108,其可以包括显示器110以及一个或多个用户输入装置,例如鼠标112或键盘114。扫描仪102也可以包括输入或输出装置116,例如控制输入件(如,按钮、触摸盘、拇指轮等)或显示器(如,LCD或LED显示器),以提供状态信息。
扫描仪102可以包括适用于捕集图像的任何摄像机或摄像机系统,三维点云可以从图像中恢复。例如,扫描仪102可以采用本发明所公开的多孔系统,例如在美国专利申请No.11/530,413(授予Rohály等人)中所公开的多孔系统,其全部内容以引用方式并入本文。虽然Rohály公开了一种多孔系统,但是应当理解,可以相似地采用适用于由多个二维图像重新构建三维点云的任何多孔系统。在一个多孔实施例中,扫描仪102可以包括多个孔(包括沿着透镜的中心光学轴线设置的中心孔),其与任何相关的成像硬件一道提供用于扫描仪102的中心通道。在这类实施例中,中心通道可以提供被扫描的目标物的常规视频图像。在其它实施例中,可以设置单独的摄像机和/或通道,以用于优选地从相同的透视图或从与扫描仪102的透视图具有固定已知关系的透视图实现相同的结果,即与对象的扫描在时间上对应的对象的视频。扫描仪102也可以(或替代地)包括立体、三维视觉或其它多摄像机或其它构造,在这些构造中,多个摄像机或光程彼此保持固定关系,以从多个略微不同的透视图得到对象的二维图像。扫描仪102可以包括合适的处理,以用于从一个图像集合或多个图像集合衍生三维点云,或可以将每一个二维图像集合发送到外部处理器,例如下述计算机108中所包含的处理器。在其它实施例中,扫描仪102可以采用结构化的光源、激光扫描、直接测距、或适用于采集三维数据、或可分解成三维数据的二维数据的任何其它技术。虽然下述技术可以有效地采用通过基于视频的三维扫描系统采集的视频数据,但是应当理解,捕集与三维数据采集同时期出现、或以其它方式同步出现的合适视频数据的视频采集系统可以补充任何其它三维扫描系统。
在一个实施例中,扫描仪102是手持的可自由定位的探测器,其具有至少一个用户输入装置116,例如按钮、控制杆、拨号盘、拇指轮、开关、等等,以用于供用户控制图像捕集系统100来(例如)开始扫描和停止扫描。在实施例中,扫描仪102可以成形并设置尺寸,以用于牙科扫描。更具体地讲,扫描仪可以成形并设置尺寸,从而通过插入成像对象的口中并且以合适的距离经过口内表面106的上方以采集牙齿、牙龈等的表面数据,以用于口内扫描和数据捕集。通过这样连续的采集过程,扫描仪102可以直接地或通过多种中间处理步骤,捕集表面数据的点云,该点云对于制备例如假体、硬件、器具、等等的牙科对象具有足够的空间分辨率和精确度。在其它实施例中,可以从例如牙科假体的牙科模型采集到表面数据,以确保使用此前对应的齿列(例如为牙科假体制备的牙齿表面)扫描进行正确的匹配。
虽然在图1中没有示出,但是应当理解,在图像采集期间可以有效地采用多个补充照明系统。例如,可以用照明目标物104的一个或多个聚光灯来增强环境照明,以加快图像采集并且提高景深(或空间分辨率的深度)。扫描仪102也可以(或替代地)包括频闪观测器、闪光灯、或其它光源,以在图像采集期间补充对目标物104的照明。
目标物104可以为任何对象、对象的集合、对象的一部分、或其它目标物。更具体地讲,关于本文所讨论的牙科技术,对象104可以包括从牙科病人口的口内采集到的人类齿列。扫描可以根据扫描的特定目的捕集齿列中的一部分或全部的三维表示。因此,扫描可以捕集牙齿、牙齿的象限、或包括两个相对的弓的全副牙齿、以及软组织或任何其它相关口内结构体的数字模型。扫描可以捕集多个表示,例如在制备修复件之前或制备修复件之后的牙齿表面。如以下将说明的,可以采用此数据以用于随后的建模,例如设计修复件或确定修复件的边缘线。在扫描期间,扫描仪102或单独的视频系统的中心通道可以从扫描仪的观测点捕集齿列视频。在其它实施例(例如,完成的制造件针对表面制备而被事实上测试装配到一起)中,扫描可以包括牙科假体,例如嵌体、牙冠、或任何其它牙科假体、牙科硬件、牙科器具等。目标物104也可以(或替代地)包括牙科模型、例如牙齿、软组织的筒形石膏夹、蜡形、印模、或负印模、或这些的一些组合。
计算机108可以是(例如)个人计算机或其它处理装置。在一个实施例中,计算机108可以包括双2.8GHz Opteron中央处理器、2GB随机存取存储器、TYAN Thunder K8WE主板、和250GB、10,000rpm硬盘驱动器。在一个当前实施例中,系统可进行操作,以使用本文所述的技术对每个图像实时捕集五千点以上,并且存储几白万个点的集合点云。当然,还可以(例如)通过抽取点云数据或产生对应的表面数据网格,对这种点云进行进一步处理,以使其适应随后的数据处理。如本文所用,术语“实时”意味着通常在处理和显示之间没有能察觉到的等待时间。在基于视频的扫描系统中,实时更具体地讲是指在视频数据帧之间的时间内的处理,而这根据每秒约十五帧和每秒约三十帧之间的特定视频技术而有差别。更一般地讲,计算机108的处理能力可以根据目标物104的尺寸、图像采集的速度、和所需的三维点的空间分辨率而有差别。计算机108也可以包括外围设备,例如键盘114、显示器110、和鼠标112,供用户与摄像机系统100进行互动。显示器110可以是触摸屏显示器,其能够通过与显示器110的直接物理互动来接收用户输入。在另一方面,显示器可以包括能够显示立体图像的自动立体显示器。
计算机108与扫描仪102之间的通信可以使用任何合适的通信链路,包括(例如)有线连接或根据(例如)IEEE 802.11的无线连接(另外称为无线以太网)、蓝牙、或任何其它合适的使用(如)射频、红外、或其它无线通信介质的无线标准。在医学成像或其它敏感应用中,可以确保从扫描仪102到计算机108的无线图像传输。计算机108可以针对扫描仪102产生控制信号,该控制信号除了包括图像采集指令外,还可以包括常规摄像机控制,例如聚焦或缩放。
在三维图像捕集系统100的一般操作实例中,在扫描仪102经过目标物的表面的上方时,扫描仪102可以在一定的视频速率下采集二维图像集合。二维图像集合可以转发到计算机108,以用于衍生三维点云。使用多个不同的技术,每一个新采集的二维图像集合的三维数据可以衍生并配合或“缝合”至现有的三维数据。这种系统采用了摄像机运动估计,从而不需要对扫描仪102位置的独立追踪。这种技术的一个可用实例在2005年11月9日提交的共同拥有的美国专利申请No.11/270,135中有所描述,其全部内容以引用方式并入本文中。然而,应当理解,该实例不是限制性的,并且本文所述的原理可以应用于三维图像捕集系统的广大范围。
显示器110可以包括适用于以与采集到的数据对应的细节水平进行绘制的视频或其它速率的任何显示器。合适的显示器包括阴极射线管显示器、液晶显示器、发光二极管显示器等等。在一些实施例中,显示器可以包括触摸屏接口,其使用(例如)电容式、电阻式、或表面声波式(另外称为色散信号式)触摸屏技术、或用于感测与显示器110的物理互动的任何其它合适的技术。
图2为用于牙科对象的一般化制造工艺的参与者的概念框图。系统200可以从被扫描仪204扫描的病人202开始(例如上述扫描仪102和图像捕集系统100),以获得一个或多个口内结构体的数字表面表示206。这可以包括在制备了表面来接收牙科修复件或其它牙科对象之前和/或之后进行扫描。因此,(例如)预制备扫描可以用于捕集在生成修复件中可用的初始剖析的形状和任何咬合信息,并且制备的表面扫描可以用作生成修复件的基础,并且特别用于将修复件成形为制备表面。与上弓和下弓的取向和/或相对运动相关的咬合架数据另外可以通过对咬合中的弓进行一个或多个扫描获得,或通过其它技术获得,例如弓在多种取向中的静止图像或视频,或从弓直接捕集到的多种维度的测量,或在薄材料片材上捕集到的物理咬合对准。
可以由一个或多个后处理步骤208来处理数字表面表示206。这可以包括多种数据增强处理、质量控制处理、外观检测、转换成适用于快速原型机制造(或其它制造)的格式等。可以在能够对图像文件进行后处理的远程后处理中心或其它计算机设施(可以是(例如)牙科实验室或快速制造设施)执行后处理步骤。在一些情况下,可以由图像捕集系统100本身进行这个后处理。后处理可以涉及任意数量的清洁步骤,包括填充孔、移除无关项等。
数据增强可以包括(例如)平滑、平截、外推法、内推法、填充(如,表面与体积比)和任何其它合适的处理,以提高数字表面表示206的质量,或提高其用于预期目的的适用性。另外,可以使用多种后处理技术来增强空间分辨率。其它增强可以包括对数据的修改,例如事实上通过为每一个弓提供基座,将数字表面表示206形成为封闭的表面,或以其它方式制备用于后续制造步骤的数字表面表示。
在质量控制处理中,可以分析数字表面表示206是否存在不完整或不充分的扫描数据的区域或孔。另外可以自动检查数字表面表示206是否有针对被扫描的弓的不期望的曲率或不对称性、或采集到的数据中是否有其它明显的缺陷。其它质量控制处理可以包含额外的数据。例如,可以将对同一病人的当前扫描与此前扫描做比较。又如,为了评价表面制备的适用性和用于接纳修复件的任何环绕齿列,可以将牙科修复件的选择与制备用于修复件的牙齿表面扫描一起进行分析。更一般地讲,用于相对于数字表面表示206的质量、内部连贯性或预期使用来评价数字表面表示206中的数据的任何处理都可以用在后处理质量控制处理中。
例如通过在显示器上提供点云或采集到的表面数据网格的透视图绘制,也可以显示数字表面表示206,以供人们检测。例如,采集扫描的牙医或其它个人可以选择牙科模型(例如弓或特定牙齿)的一部分用于后续处理步骤中。手动选择模型和/或扫描的一部分可以显著地减少用于特定处理所需的数据量。另外,手动识别模型部分或视频数据中的任一个,然后可以自动过滤数据。例如,一旦牙医选择了用于后续处理的特定牙齿,就可以将与该牙齿不相关的视频数据或一个或多个相邻的牙齿从进一步处理中排除,并且可以(例如)不传输到下游处理,例如下述边缘标记系统。在此时、或后扫描处理的其它时间,用户可以查看数字表面表示206,以标注用于修复件的边缘。以下将更详细地描述该具体处理的细节。
在任何手动或自动后处理之后,如箭头209所示,可以将所得的数字模型传输到快速制造设施216。另外,可以传输任何合适形式的咬合架数据218,以在后续处理步骤、以及用于制造修复件、器具、硬件、等等的处方或其它说明书中使用。快速制造设施216可以为牙科实验室、牙医诊所的内部牙科实验室、或具有用于由数字模型制造物理模型的机械的任何其它设施。快速制造设施216可以(例如)包括铣削系统210、立体光刻系统212、或三维打印机214、或这些的某些组合。铣削系统210可以包括(例如)CNC铣床。铣削系统可以用于取材料块和生成多种输出品,包括全弓模型、模具、蜡形、包埋料室或最终的修复件或器具。这类块可以包括陶瓷基、颗粒板、蜡、金属或多种其它材料。另外可以使用例如得自Nobel Biocare Inc.的Procera和得自Sirona Inc.的Cerec的牙科铣削系统以生成最终的牙科硬件组件。立体光刻系统212可以包括(例如)3D Systems,Inc.的Viper System。三维打印机214可以包括(例如)得自3DSystems的InVision HR打印机。以下将更详细地描述这些制造技术中的每一个。
快速制造设施216可以使用咬合架数据218和数字模型以生成一个或多个牙科对象,例如一个或多个全弓模型220、一个或多个模具222、一个或多个蜡形224、一个和多个包埋料室226、和/或一个或多个最终的修复件或器具228。一些组件(例如模具222和弓220)可以插入咬合架模具234中,例如具有标准基部230或定制基部232的咬合架。牙科实验室可以采用多种这些组件以完成修复件236,其可以返回到牙医以被放置到牙科病人的齿列中/齿列上。
多个合适的快速制造设施在本领域是已知的,并且可以由本文所述的系统和方法来有效地采用。以下通过举例说明的方式而非限制的方式描述多个这类技术。
一种合适的技术是铣削。铣削通常是削减技术,其中材料从块被削减而不是添加。因此,可以有利地采用接近共同铣削形状的预切削的工件,以减少在铣削工作期间必须移除的材料量,这样在铣削加工过程中可以降低材料成本和/或节约时间。计算机化的数字控制的(CNC)铣削是一种合适的技术。用于牙科制造工艺的另一个可用的铣削技术是仿形铣削系统,其允许将三维形式从物理对象手动或自动转换成铣削目标。CNC铣削技术和其它铣削技术可用于制造牙科模型、牙科模型组件、蜡形、包埋料室、和其它牙科对象。另外,存在专用牙科铣削设备,例如得自SironaDental的Cere系统。可以适于本文所述的牙科应用中的所有铣削系统旨在属于本文所述的快速制造设施的范围内。
另一个合适的技术是使用立体光刻设备(SLA)的立体光刻技术。通常,SLA采用激光来顺序地固化聚合物(通常是光致固化型液态树脂)的层,以使其具有限定三维对象的图案。SLA的一个可用的商业实施例是可得自Sony Corporation的SCS-1000HD。立体光刻非常适于牙科模型和模具的高产量生产,这是因为部件可以在机器上进行批处理以进行快速生产。当被优化时,这些部件可以用于替代牙科石膏模型和其它牙科对象。类似技术采用了数字光处理(DLP)以同时固化聚合物的平面剖面,并且另外可以与本文所述的系统有效地使用。
另一种合适的技术为三维印刷。通常,三维打印机在逐层加成工艺中采用了印刷头以涂覆材料,例如可固化光致聚合物或粉末。三维打印机非常适于快速制造小型部件,例如蜡图案或蜡形、以及模具和其它相对小的牙科对象。适用于三维牙科印刷应用的一个商业系统是得自3D Systems的InVision HR打印机。
应当理解,其它快速原型机制造系统在本领域中是已知的。如本文所用,术语“制造”应理解为是指上述制造技术、以及任何其它的快速原型机制造技术或其它制造技术,其可适于制造定制牙科对象,包括(但不限于)选择性激光烧结(SLS)、熔融沉积建模(FDM)、分层实体制造(LOM)等。相似地,上述技术中的任意技术(单独或组合)都可以作为用于制造、印刷、制备、或以其它方式生成本文所述的牙科对象的装置来操作。应当理解,上述参照特定技术描述的制造步骤之后可以是额外的步骤(例如固化、清洁等),从而得到最终产品。以上所述的制造技术可以以多种方式组合,从而得到多重模态的制造工艺。因此,例如,可以使用CNC铣床以生成用于牙齿的模具,这需要比SLA可提供的细节更多,而SLA可以用于包含模具的牙弓模型。这种多重模态的方法可以在制造技术的不同方面调配多种技术的优点,例如使用立体光刻以用于快速、精密铣削,和三维印刷以用于小型部件的高速制造。
图3为牙科对象制造工艺的高级流程图。该工艺300采用了直接从口内扫描采集的齿列的三维表示,并且可以有利地绕过在常规牙医学中使用的多个处理步骤。
通常,工艺300可以从数据采集开始,如步骤302所示。数据采集可以包括数字表面表示的任何采集、或适用牙科对象制造工艺的齿列的其它三维或其它表示。可以使用(例如)上述参照图1描述的扫描仪102和图像捕集系统来执行数据采集。在某个实施例中,可以采集多个不同的扫描,例如用于创建弓的咬合和咬合架的扫描、或在表面制备之前和制备之后的扫描,这些扫描可以联合使用以生成假体等等。在某些实施例中,扫描可以以不同的分辨率获得,例如用于相对的弓的相对低的分辨率扫描和用于制备的牙齿表面的边缘的相对高的分辨率扫描。
应当理解,虽然下面的说明总体涉及在牙医诊所的外面进行的操作,例如在数字模型上标记了边缘的中心处理位置处或牙科实验室处进行的操作,在扫描时或在将扫描数据传输到远程处理中心之前,本文所述的用户接口、工具、和技术可以以多种方式来有效地采用。
例如,牙医可以采用视频查看工具(单独或与数字模型的同步观看结合),以用于定性地评估特定扫描的适用性。视频图像和/或数字模型的立体绘制可以提供有用的洞察力,临床医生可应用其确定补充扫描或整个新扫描是否合适。
在其它实施例中,在将数据传输到牙科实验室或其它远程部位之前,牙医可以执行边缘标记中的一部分或全部。
在其它实施例中,使用可以与扫描数据传输到远程部位的信息,牙医可以在模型表面上标记视频数据的帧或点。这种能力可以在用于图形用户接口(例如下述用户接口)内设置的注释的工具中体现。这些注释可以包括(例如)处方、边缘信息、边缘标记说明、或与牙科修复件处理中的边缘标记或其它步骤相关的任何其它信息。可以通过选择视频图像或数字模型表面上的点并且进入任何所需的文本、附件、或其它数据或信息来输入该信息。这些注释可以在视觉上显示为标旗或其它可视地标。在一个方面,注释可以设置在视频图像上。在另一方面,注释可以设置在模型上。在另一方面,注释可以设置在一个视图中,并且在两个视图上均显示。
应当理解,其它信息(例如摄像机模型、失真模型、校准数据、等等)可以有效地与处方数据(用于特定病人和/或修复件)一起或作为其一部分来传输。另外,可以传输例如通过扫描仪插入视频数据帧中的标题信息之类的信息。该标题信息(其可以包括特定扫描仪的细节(如,序列号)、用于扫描仪的照明条件、所扫描的齿列区域等)另外可以有效地传输,并且可以用于多种下游用途,例如视频元数据的自动确定(例如当前图像内牙齿的观测(如,面颊、舌面、远中、中间、咬合面等)或识别)。以举例的方式而非限制性的,该信息可以用于标记下述导航技术中所使用的缩略图。在其它实施例中,可以在远程位置处存储摄像机模型(摄像机参数、校准数据、失真数据、等等),其中根据视频元数据中的扫描仪识别来选择特定扫描的摄像机模型。该方法有利地减少了每一次扫描传输的数据量,同时提供全面的信息来表征观测和/或操纵模型的远程位置处的三维模型与视频数据之间的关系。
除了补充上述模型信息之外,牙医或其它扫描创建者可以通过从视频和/或模型数据中移除不需要的材料来制备更紧凑的数据传输。通常,该选择过程应用了一般原理,即,三维模型重建所需的视频数据可以不同于(通常大于)人类视频辅助查看模型或建模操作(例如边缘标记)所需的视频数据。例如,在识别了用于修复件等等的具体牙齿之后,操作者可以删除不需要的视频帧或模型数据,或可以根据什么视频数据与关注的区域相关来引发不需要数据的自动移除。关注的区域可以包括制备的牙齿表面、一个或多个相邻的牙齿、一个或多个相对的牙齿、多个制备的牙齿(例如用于牙桥)等。视频图像和/或对应的模型可以在扫描地点处的用户接口内进行立体绘制,以辅助关注的区域的预传输选择。用户接口可以并入相对于用于边缘标记的用户接口的下述特征的一部分或全部。通常,可以采用多个标准用于选择关注的区域或用于牙科工序(例如边缘标记)的相关图像帧。例如,可以选择视频数据帧用于覆盖图像数据,例如完全覆盖关注的区域或最佳(如,不重叠或重叠预定的量)覆盖关注的区域。相似地,可以根据用于视觉检测或计算出的三维数据的精度中的任一者(或两者)的图像数据取向(例如最佳视角)来选择帧。根据取向的选择还可以包括在每一个表面点或表面区域上具有基本不同的透视图的多帧的选择,以确保或提高每一个表面特征上多个独特透视图的机会。另外应当理解,即使在关注的区域内,扫描仪的视频图像捕集率也可以是只需要少量的视频图像需要用于有意的人类查看。因此,例如,数据减少处理可以自动地每隔一帧消除一个、每五帧消除四个、每十帧消除九个、或被选择以保存足够的视频数据用于本文所述的视频辅助查看的任何其它数量的帧。在手动技术中,用户可以清楚地选择相关的视频图像。在半自动技术中,用户可以从图形上识别关注的点或区域,并且可以处理视频数据以选择满足一个或多个选择标准(例如上述标准)的视频图像。在全自动工序中,用户可以简单地识别相关牙齿或提供处方,并且计算机程序可以处理视频图像,以确定关注的区域并且因此选择视频数据帧。
因此,在一个方面,本文公开了一种技术,其用于通过移除与修复件不相关的视频帧和/或模型数据来减小数字牙科模型的尺寸。在另一方面,本文公开了一种技术,其用于通过移除标记边缘不需要的视频帧和/或模型数据来减小数字牙科模型的尺寸。除了用于所选择区域的详细视频和/或模型数据之外,额外的齿列的较低质量的模型(例如用于物理或实际牙科咬合架中的低质量全弓模型)还可以采用所选择的区域来传输。在另一方面,当在下述用户接口中显示缩略视图时,可以选择视频图像的类似子集。因此,可以选择牙科修复工序(例如边缘标记)中的有意义的图像,以用于在视频导航用户接口(例如下述接口)中显示。这些图像还可以标记有用于例如观测(面颊、舌面、远中、近中等)的用户的取向信息,该取向信息可以通过文本来显示,或通过示例性的图标、示意图、三维罗盘、或任何其它合适的可视化技术来显示。
一旦采集到合适的数据,就可以执行一个或多个建模操作,如步骤304所示。这可以包括建模步骤,例如在数字牙科模型的实际模具中形成沟槽、指定用于处理的牙齿、填充孔或以其它方式校正数据、咬合对准、和/或完全设计修复件、假体、硬件或其它牙科对象、以及牙科环境下可用的任何其它建模或数字模型操纵。使用多种市售的计算机自动设计(CAD)或其它三维建模工具、以及并入以下更详细描述的额外的特征的工具,可以执行建模。
例如,建模可以包括界定表面表示以形成固体,然后在固体内生成空隙空间或空隙空间的集合,这些空隙空间不影响重要的牙科表面,例如齿列或周围的软组织。这可以有利地导致由带空隙的数字模型制造牙科模型所需的材料的大量减少,由此减少了材料成本以及制备牙科模型的时间。建模也可以包括生成或操纵制备的牙齿表面上的边缘。参照以下具体的制造过程来描述多个其它建模步骤。应当理解,如本文所用,术语“建模”可以是指对数字牙科模型的任何处理,包括全自动、半自动、和/或手动处理(例如在整个本说明书中所述的处理)。
如步骤306所示,可以开出处方。这指定了修复件、假体、等等的类型,并且可以包括与制造者、颜色、涂饰剂、模具间距等相关的多种额外的信息。应当理解,可以在建模步骤304之前执行处方步骤306,例如牙医将来自病人的初始数字表面表示与处方一起传输到牙科实验室,并将建模的一部分或全部留给牙科实验室的处理中。
如步骤308所示,可以制造一个或多个牙科对象。可以使用来自上述建模系统中的一个的数据,使用上述制造技术中的任意技术(单独或以多种组合)来进行制造,该数据可以根据需要被重新格式化或修改以用于特定印刷、铣削、或其它制造技术。另外,如从以下实例中的一些将清楚的是,制造可以包括不同制造技术的组合。例如,牙科模型可以以三维的方式印刷有用于模具的空间,并且模具可以由不同的材料铣削而成,以用于随后的加工步骤。因此,如本文所用,除非具体的制造技术被明确指定、或以其它方式从上下文看来是清楚的,术语“制造”旨在是指任何合适的制造技术。以下更详细地讨论了多个具体制造实例。
如步骤310所示,假体或其它牙科对象可以被返回牙医,以用于被放置到病人的齿列中。
应当理解,上述处理、以及下述方法和系统可以通过适用于本文所述的数据采集、建模和制造技术的硬件、软件、或这些的任何组合来实现。这包括在一个或多个微处理器、微控制器、嵌入式微控制器、可编程数字信号处理器或其它可编程装置连同内部和/或外部存储器中的实现。这也可以(或替代地)包括一个或多个具体集成电路、可编程门阵列、可编程阵列逻辑组件、或可以被构造用于处理电子信号的任何其它装置。还应当理解,实现可以包括使用结构化编程语言(例如C)、面向对象的编程语言(例如C++)、或任何其它高级或低级编程语言(包括汇编语言、硬件描述语言、以及数据库编程语言和技术)产生的计算机可执行代码,这些代码可以被存储、编译或翻译以运行上述装置中的一个、以及处理器的异质组合、处理器结构、或不同硬件与软件的组合。同时,可以以多个方式在整个装置(例如摄像机、和/或计算机、和/或制造设备、和/或牙科实验室)上分布该处理,或所有的功能可以集成到专用的独立式装置中。所有这类排列和组合旨在属于本发明的范围内。
另外应当理解,用于执行与上述处理相关的步骤的装置可以包括上述参照图1描述的图像捕集系统100的任何合适的组件,连同适用于控制其操作的任何软件和/或硬件。用于执行本文所公开的处理的所有这类实现方式和装置旨在属于本发明的范围内。
图4示出了使用本文所述的工具用于数字牙科模型的一般化处理,并且更具体地讲,示出了用于制备在牙科修复件(例如牙冠)的制造中使用的模型的一般化处理。
在用户接口、命令行接口、等等中,用户(例如牙科技术人员)可以从数字模型的工作队列中选择模型,如步骤402所示。这可以是(例如)存储在本地系统上的队列、或用于牙科实验室或其他牙科专业人员通过基于网络的入口可以访问的远程位置处存储的队列。应当理解,虽然队列通常包括用于将建模项目分配到系统化基地(例如文件服务器、内容管理系统、等等)上的一个或多个用户,但是数字牙科模型和附随的数据另外可以只是表示为位于本地计算机目录中的文件(或文件组)或在网络上接收的文件(或文件组)。模型可以包括(例如)相关扫描,例如在用于修复件的病人的牙齿表面的制备之前和制备之后采集的数字牙印模。也可以有效地包括其它信息,例如用于指导用户的牙科处方信息和在用于获得数字牙印模的扫描期间采集的视频数据。后者的数据可以用作(例如)边缘标记的辅助,如以下更详细所述。
在选择了具体模型之后,用户可以在模型内标记模具,如步骤404所示。通常,分隔成模具使得在随后的物理(和数字)处理中能够更容易地操纵进行操作的牙齿,并且各个模具将被制造为在牙科实验室中使用的单片。切削成模具可以包括向用户呈现模型连同供用户控制模型显示(如,旋转取向、缩放、平移等)的工具以及供用户在模具内限定一个或多个模具的工具。在一个实施例中,模具切削工具可以使用户能够限定穿过分隔在弓的牙齿的位置处的模型的垂直平面。以下在图5至图6中描述了该操作的实例。
在将模型分隔成模具之后,用户可以标记边缘以用于修复件,如步骤406所示。用户可以被提示以识别需要边缘标记的一个或多个模具。一旦已经指定了一个或多个模具,用户接口就会提供指定模具中的一个的三维绘制,并且可以提供用于在用户接口内沿着预期边缘标记点的图形工具。再者,接口可以包括用于控制模型显示(例如旋转取向、缩放、平移等)的工具,从而用户可在标记期间在模型周围便利地导航。接口中的边缘标记工具可以使得能够沿着模型表面选择点,并且可以通过任何合适的算法来形成边缘线,以用于在牙齿表面上将点连成连续的闭环。该工具可以使得能够添加点、删除点、和/或移动点。该工具另外可以使得能够选择和/或放弃选择点以供组操作,例如连成边缘线、删除、移除等。以下更详细地描述了用于辅助边缘标记的多个可用的接口特征。
一旦已经标记了边缘,就可以在模具中形成沟槽,如步骤408所示。通常,该操作伴随着边缘线下面的模具部分的移除,使得在后续操纵步骤中能够更容易地识别边缘线。可以通过处理模型以移除边缘线下面的材料(或改造只使用了模型的表面表示的表面)来自动地进行沟槽形成步骤。手动形成沟槽另外可以通过使得能够移除模型材料的用户接口工具来支持。另外可以采用自动技术和手动技术的组合。
一旦切削了模具、标记了边缘、以及形成了沟槽模型,模型可以被保存用于进一步处理,如步骤410所示。然后,用户可以返回到工作队列以选择另一个模型,如步骤402所示。更一般地讲,模型及其多个部件(如,模具)可以在处理的任何阶段中存储,从而用户可以保存任何当前的工作并且在随后的时间返回到所保存的项目。虽然没有具体示出,但是应当理解,在完成此前所选择的模型之前,用户可以从工作队列中选择新的模型(步骤402),从而用户可以根据进度安排的需要、个人喜好、或任何其它标准,在完成的多个阶段保持任意数量的模型。
应当理解,上述操作可以在数字牙科工作流程中涉及的多个位置当中被分配。例如,模型可以初始地由牙医使用数字扫描仪(例如上述扫描仪中的任何扫描仪)来生成。被扫描的模型可以通过数据网络(连同处方信息和任何其它的可用数据)传输到中央存储库,其存储扫描数据并且为下游用户提供安全接口。可以通过在牙科实验室或其它设施处的牙科技术人员如上所述以工作队列方式从存储库选择模型,并且牙科技术人员可以根据需要来切削和标记模型。然后,技术人员可以应用任何合适的沟槽形成操作,或切削和标记后的模型可以被返回到中央存储库或一些其它后处理位置,以用于自动形成沟槽。一旦返回到中央存储库,就可以向快速制造设施提供(再次通过安全接口)其它数据,快速制造设施可以制备对应的牙科对象并且将其转发到牙科实验室用于整理。虽然这是有效地根据能力和性能来分配处理步骤的工作流程的一个实例,但是应当理解,许多其它的布置是可以的,并且可以有效地用于本文所述的系统和方法的范围内。
在一个方面,上述方法可以用于制备用于快速构造等等的模型,导致由已被切削、标记(在边缘上)、和形成沟槽的模具的数字模型制造物理模型,如以上一般所述。在一个方面,本文所述方法包括:选择数字牙科模型;从数字牙科模型切削至少一个模具,从而提供模具模型;在模具模型上标记边缘,从而得到标记的模型;在被标记的模型上形成沟槽,从而提供形成沟槽的模型;以及由已形成沟槽的模型制造物理模型。该方法可以包括将形成沟槽的模型传输到远程数据库、传输到牙医用于查看、或传输到快速制造设施用于生成物理模型。
图5和图6示出了可以在用于操纵数字牙科模型的用户接口中采用的图形模具切削操作。如图5所示,通过由所需的透视图绘制模型502,可以在用户接口500中以图形方式示出模型502,例如牙弓的扫描。应当理解,虽然示出了单弓,但是模型502可以包括多重弓,包括相对的弓,或可以包括弓的一部分,例如关注的一个或多个牙齿。如图6所示,图形工具可以使得用户能够在模型502内指定一个或多个切口602,以将模型分成一个或多个部分604,包括一个或多个模具或各个牙齿,其亦称为进行操作的牙齿(用于例如牙桥的修复件,模具可以包括不止一个牙齿)。然后,每一个部分604可以根据需要被单独地处理。虽然切口602被示出为穿过合适取向的模型的线,但是图形切削工具可以采用多个不同的技术以用于分割模型502,其包括线(可限定垂直平面)、平面、等等。凡是平面用于限定模型502的部分604的,工具可以在用户接口内提供平面的任何合适的图形表示,并且可以使得用户能够添加、移除、或调换平面。工具另外可以(根据需要)使用户能够使平面偏离垂直方向,以实现模型502的所需的分段。应当理解,将数字牙科模型切削成区段(例如模具)可以使用多个用户接口工具来执行,并且可以使用多种技术进行数字表示。例如,模型可以被分隔成用于初始模型的每一个区段的多个单独的表面模型,或用于限定区段的切削平面可以与初始模型相关,以表现其多个部分。适用于将初始模型的分割以数字方式表示成多个区段(例如模具)的任何技术可以与本文所述的系统和方法一起使用。
图7示出了可以在用于操纵数字牙科模型的用户接口中采用的图形边缘标记操作。如图7所示,通过从所需的透视图绘制模具702,可以以图形方式在用户接口700中示出上述得自数字牙科模型中的一个的模型702(例如模具)。通过在模型702表面(凡是修复件应符合制备的牙齿表面的)上选择一个或多个点706并且将点706连接成连续闭环的边缘线704,可以在模型702内生成边缘线704。用户接口700可以提供用于控制用于绘制模型702的透视图或视点(例如用于旋转、平移、缩放、等等)的工具。在下面的说明中,术语(例如透视图或视点)可交换地用于指描述由其观测目标物的位置和取向的数据。在三维空间中,这通常包括x坐标、y坐标、和z坐标以及在三个轴上旋转的取向。用户接口700另外可以提供工具以用于操纵点706,例如用于生成、删除、或移动点、以及用于选择和/或取消选择点以用于组操作,例如移动或删除。工具可以包括撤销特征,以用于撤销一个或多个此前的操作。点706可以自动地或手动地连接,或这些方式的某种组合,例如通过使没有手动连接的所有点自动互连的接口700中的工具、或根据对现有点的外推法或内推法建议下一点的工具来连接。边缘线704可以表示为线、线段集、点集、或可以在模型702的坐标系中(并根据扩展,在图5和图6的模型的坐标系中,或由其获得进行操作的牙齿模型的任何其它数字模型)限定的任何其它合适的数据集。通常,虽然在这些附图中示出了二维用户接口,但是本文所述的系统和方法的用户接口700可以采用任何合适的二维绘制技术或三维绘制技术,包括本文所述的多种立体三维接口。
图8示出了在用于操纵数字模型的用户接口800中可以采用的沟槽形成操作图形。一旦已经为模具804限定了边缘线802,就可以手动地或自动地进行模具沟槽形成操作,从而得到牙基806以方便操纵牙科实验室所使用的所得的物理模型,以生成修复件,并制成数字模型和物理模型中更容易看到的边缘线。采用正确制定的边缘线802,模具沟槽形成操作可修正到很高的自动化程度。用户接口800仍然可以提供工具用于指定多种沟槽形成参数(深度、材料移除量等)并用于检测所得的形成沟槽的模具。用户接口800另外可以提供工具以用于手动形成沟槽、和/或用于精修自动形成沟槽的模具。在使用了高度精细的牙科模型的情况下,例如自动形成可以有利地在数字数据中心(例如上述远程数据库)处执行。
图9示出了自动化边缘标记技术。自动化边缘标记的一个可用技术采用了在修复件的制备之前和制备之后牙齿表面的直接比较。如图9所示,在剖视图中,在制备修复件902之前的牙齿表面的模型可以与在制备修复件904之后的牙齿表面的模型对准,其中,预制备模型902包括后制备模型904的体积、以及额外的牙齿结构体。形成在对准模型的外边缘上的线906(在剖面的左边缘和右边缘处,该线上只有两个点在图9中是可见的)限定了用于制备的牙齿表面的边缘线。可以使用对准模型的表面或体积的布尔XOR、或使用多个其它合适的边缘发现技术中的任何技术在算法上识别线906。
例如,可以应用轮廓评价来在算法上识别三维上的后制备模型904(或相关的预制备模型)上的边缘。相似地,可以将边缘发现技术应用于静止视频图像,并且使用(例如)本文所述的技术将结果映射到三维模型。在另一个实施例中,二维技术和三维技术可以与平均或以其它方式结合的结果结合使用,以衍生单个边缘线。在半自动化的实施例中,可以单独应用基于图像的技术和基于模型的技术,并且可以使用户能够选择哪一个结果用于边缘线,或可以使用户能够从每一个结果中选择边缘线的部分。
图10示出了用于视觉辅助边缘标记的用户接口。上述多个处理对于自动化或计算机辅助建模技术来说是相对简单和可修正的。然而,由于用于边缘的临界扫描区域周围的血液、唾液、或取代的软组织造成在齿列的数字表面扫描中可能存在严重错误,导致边缘标记存在特别的困难。下面的接口通过用扫描期间获得的视频图像补充三维模型的显示,解决了这些困难。该接口特别适于基于视频的扫描技术,例如包括用于捕集视频的中央通道的多孔摄像机,如以上一般所述。
用户接口1000可以包括(例如)视频图像窗口1010、剖视图窗口1020、模型视图窗口1030、和视频控制窗口1040。这些窗口1010-1040中的一个或多个可以被立体绘制,或以其它方式使用可用的数据(例如三维模型、视频图像对、和/或可以被打包从而得到合适的立体图像序列)以三维显示。模型视图窗口1030和剖视图窗口1020采用根据三维模型的二维绘制,所以在这些窗口中的立体绘制是已知立体技术的相对简单的应用。凡是提供了多孔或多摄像机图像序列的,视频图像窗口1010中的静止图像另外可以根据立体图像对、等等中编码的深度信息来立体绘制。在一个方面,可以根据中心通道图像(在可用的情况下)、重建的3D模型、和提供图像与对象空间之间的映射的摄像机模型来合成该立体图像。在一个方面,用户可以在采集的立体图像对与合成的立体图像之间切换,以允许对三维数字模型的定性的评价和/或验证。
视频图像窗口1010可以由目标物的视频来显示静止图像。可以在三维扫描期间已经采集了视频,例如从多孔摄像机的中心通道、或从相对于扫描装置在附近、固定、和已知的位置中的视频摄像机采集了视频。通常,已知多种手持扫描仪采用了用于获得三维图像的多种技术,包括结构化照明或激光技术、渡越时间技术、单摄像机视频技术、多摄像机、多孔或分光瞳技术等。虽然有例外情况,但是这些技术很大程度上依靠三维重建算法,其在处理扫描数据期间需要摄像机路径数据作为输入或衍生摄像机路径数据。换句话讲,对于在扫描期间获得的每一个视频图像,都存在基本上对应的、已知的、同时存在的摄像机位置,其包括相对于被扫描目标物的摄像机位置和旋转取向。因此,对于视频图像窗口1010中显示的静止图像,可以确定图像内容上的扫描仪的透视图或视点--在这种情况下,目标物是制备的牙齿表面。如以下更详细所述,该信息可用于将视图与透视图窗口同步。凡是采用了非视频扫描技术的,可以用同时存在的二维视频来补充数据,该二维视频提供静止图像以补充边缘标记和其它工序(如本文一般所述)。
可以在视频图像窗口1010内(或以其它方式与之相关地)有效地显示取向信息。例如,为了用齿列环境内的图像取向辅助用户,视频图像窗口1010可以显示当前图像的视点(如,面颊、舌面、远中、近中等)和/或距离,而视点和距离中的任一个可以(如上所述)由扫描期间获得的扫描仪位置数据来确定。还可以设置用户控制用于取向的直接选择。例如,用户可以以文本或图形方式选择观察当前牙齿或牙齿表面所需的取向。用户接口可以响应地选择包含目标物取向(最接近地对应于所选择的取向)的图像,并且将该图像在视频图像窗口1010中显示。另外,下述视频控制窗口1040可以响应地更新,例如选择在所选择的牙齿表面上具有多种不同透视图、或具有多个预定的毗邻取向的缩略图1042的组。
在另一方面,多种图像增强技术可以应用于视频图像窗口1010中显示的工作图像,以增强所显示图像的可视质量。例如,显示可以采用局部自适应对比度增强或对比度受限的自适应柱状图均衡、或任何其它合适的技术。显示器也可以(或替代地)采用其它信息,例如与光源的距离或从对应的三维模型得到的信息,以控制用于改进静止视频图像的可视显示的颜色、强度、等等。例如通过掩盖边缘周围的区域或强调高空间对比度的区域,另外可以有利地采用伪着色。应当理解,本文所述的增强技术可以用于辅助边缘标记或其它牙科手术,以及在扫描期间或在扫描之后立即作为扫描操作者的视频观察的辅助方式。
如下所述,在一个方面,系统操作以同步视频图像窗口1010和模型视图窗口1030中目标物的视点或透视图。可以采用多种技术以保持用户接口1000的多个窗口当中的一致的可视信息。例如,视频图像可以不失真,以更接近地匹配立体绘制三维模型中的深度信息表观。在一个实施例中,三维模型精确地反映物理、三维配对物并且并入任何校准数据、摄像机参数、失真模型、等等,所以优选的技术应当用于使视频图像不失真,因此用于使显示不失真。作为显著的优点,该方法允许视频图像控件与数字模型控件之间映射的简单针孔投影表征,其可显著地减少用于在两个表示之间的映射的计算时间。然而,在某些情况下,可能并且会是有利地的是使得三维模型失真,以在空间上对应于立体绘制的视频图像。在任一种情况下,一般可以通过映射用于由视频数据生成三维模型的整个摄像机模型的数据、校准数据、等等来实现空间对应。该调整可以包括用于摄像机系统的失真模型,其可以说明摄像机系统的一个或多个通道中x因变量、y因变量、和/或z因变量失真、以及例如视角等等的情景参数。
用于在多种显示器中贴合图像的其它技术包括:例如通过将视频数据纹理映射到模型上,或包裹、组合或以其它方式处理现有的图像对来合成与模型视图对应的透视图,来将静止图像的显示适应于模型视图中选择的透视图。
多个点1012(可以是用户设置的点或计算机设置的点)在视频图像窗口1010内限定了边缘线1014中的一些或全部(以举例的方式(而不是限制的方式)示出了部分边缘线)。可以由例如光标的用户接口工具连同任何的下拉菜单、列表、滚动条、键击、或适用于添加、删除、和移动点1012的其它控制器来控制点1012。另外,点1012可以被选择或取消选择,以用于组操作,例如连接点的组(以形成边缘中的一些或全部)、移动点的组、删除点的组或、调整点的组以生成较为平滑的边缘线,或根据曲率分析、关于未制备的牙齿表面的数据、或结合本领域已知的多种技术的任何其它可用信息,在算法上将点移动至更可能的边缘位置。另外可以提供其它更处理密集型功能,例如推荐环绕当前光标位置的区域内的点位置、根据一个或多个用户选择的点来完成闭环的边缘线、或在限定边缘线的当前点集中寻找可能的无关项。凡是视频图像窗口1010被立体绘制的,另外可以设置三维光标,以适应绘制的三维空间内的用户导航。可以在采用立体绘制技术或其它三维绘制技术的窗口1010、1020、1030、1040中任一个中相似地采用该三维光标。
多个可用的特征可以并入三维光标。例如,三维光标可以有效地作用,就好像它附接到成像的模型(或立体视频图像)的表面一样,从而二维平面内的用户运动(例如采用鼠标的运动)被投影到立体坐标系中立体绘制图像表面相关的对应图像位置上。该技术很好地用于上述系统,其中视频和模型显示包含用于每一个屏幕位置(例如像素等等)独特的表面位置的投影。然而,在某些实施例中,可以设置未附接到投影表面的额外的三维功能。这可以包括(例如)模型和/或立体图像的验证、根据立体视频图像来编辑模型等。在这类情形下,可以采用例如鼠标滚轮之类的额外的控制,从而得到用于用户输入的额外的自由度。
虽然三维输入可以允许光标在立体绘制的三维空间内无约束地移动,但是第三用户输入(如,滚轮)另外还可以适用于本文所述的边缘标记操作。例如,使用本文所述接口、工具、和三维光标,用户可以直接编辑模型视图窗口1030中的数字模型,例如在视频图像与三维模型之间生成更好的协议。对于这种编辑而言,可以存在许多原因。例如,参照视频,用户可以识别视场内的人造对象,例如腱、唾液、血液等。又如,基于视频的立体绘制和基于模型的立体绘制可以看起来不同。这会出现在如下的情况下:例如,立体视频直接由扫描期间获得的图像对衍生,而使用摄像机模型(如,摄像机参数、校准数据、失真数据、等等)来衍生模型。通过选择立体绘制的模型(或视频图像)表面上的点并且沿着三维自由地移动点,用户可以处理这些变量。例如,滚轮可以控制屏幕z轴内或沿着与表面正交方向的表面点的移动。用户还可以控制环绕点跟随移动的程度。另外可以采用该技术使边缘变得清晰,其中,模型上的边缘看起来被过度倒圆,或以其它方式偏离视频图像(或提供更清晰可视内容的暂时相邻的图像)中示出的边缘。在一个方面,这些工具使得能够直接操纵数字模型和/或立体绘制的视频图像。在另一方面,这些工具能够通过直接与源图像数据进行比较来验证数字模型。在任一种情况下,用户设置的模型修正可以用于修正模型对视频图像的映射,使得在任何后续的模型操作中始终保留用户的改变。另一个可用的应用是分段各个牙齿,其中模型看起来在整个邻间的间隙上以物理的方式连接或桥接相邻的牙齿。
剖视图窗口1020可以包括在用户接口1000内,以辅助用户识别牙齿表面的轮廓,并且特别用于更精确地对边缘进行手动定位。剖视图:该视图示出了当前所选的编辑区域点的剖面,以有助于识别高曲率区域。窗口1020可以显示(例如)在当前编辑点1024(其可以是视频图像窗口1010中显示的点1012中的任何点)处的目标物的剖面1022中的一个或多个剖面、或在包括当前编辑点1024的平面剖面处开始的数字模型1026透视图、或这些的某些组合。穿过目标物的平面剖面的取向可以有差别,但是为了区别轮廓的目的,可以适当选择具有最陡峭或最大差别的取向。另外可以有效地采用与边缘线正交的平面。点(例如当前编辑点1024或边缘线的其它点、以及对其的改变)可以与视频图像窗口1010和/或模型视图窗口1030中显示的点同步,如以上一般所述。
模型视图窗口1030可以包括在用户接口1000内,从而得到更紧密地基于目标物的数字模型1032中的三维数据的边缘标记环境。模型视图窗口1030可以(连同工具和/或控制器)提供数字模型的二维绘制或三维绘制,例如上述用于添加、删除、或以其它方式操纵点1034和/或点的组以在牙齿表面上标记边缘线1036的工具和/或控制器。如上所述,对点1034的每一个改变连同对所得的边缘线1036的改变可以用于更新用户接口1000的其它窗口1010、1020、1040中的点和/或边缘线的显示。
视频控制窗口1040可以包括在用户接口1000内,从而得到用户选择视频图像窗口1010中显示的静止图像,或更一般地讲,用于由摄像机系统捕集的视频流内的导航。使用视频控制窗口1040,用户可以酌情在视频序列内导航,以生成、检查、并且验证边缘线。视频序列可以是得自用于获得用于扫描目标物的三维数据的摄像机系统的视频序列,或是得自相对于摄像机系统和/或扫描目标物具有基本已知关系的相关摄像机的视频序列。
在一个实施例中,控制器可以包括多个缩略图像1042,其示出在扫描期间得自多种摄像机位置的图像。其它视觉提示可以具有缩略图像1042。例如,可以设置箭头1044、或其它突出标记特征,以示出缩略图1042中的哪一个包含模型视图窗口1030中可视的表面区域、或缩略图1042中的哪一个包含边缘线的可视部分。缩略图像1042也可以(或替代地)采用取向信息来显示。例如,通过使用每一个缩略图所包含或相邻显示的文本、图标、或其它视觉提示的注解,缩略图像1042可以提供取向细节(如,面颊、舌面、远中、近中)或距离。视频图像窗口1010中显示的当前视频图像另外可以使用突出标记1046或其它可视标记来识别。虽然在窗口1040的左手侧示出了当前图像,但是当前图像可以替代地位于缩略图像1042的中心或任何其它合适的位置处。应当理解,通常可以根据相关性来选择缩略图像1042和/或将其分组,以协助用户。例如,可以选择缩略图像1042,从而得到当前牙齿的多种视图、或当前编辑的边缘线的一部分。凡是牙医(或其它扫描者)已经识别多个牙齿的,将缩略图分组,使得只有当前牙齿的图像特别有助于下游的技术人员。
虽然在图10中示出了一维缩略图阵列,但是应当理解,许多其它的技术在本领域中是已知用于视频时间轴控制,并且可以与本文所述的系统适当使用。以举例的方式(而不是限制的方式)来说,视频控制窗口1040可以显示二维阵列(即,2×5、3×5、或任何其它合适的维度)。视频控制窗口1040也可以(或替代地)包括滑动器或其它控制器,用于用户沿着整个视频序列导航。在另一方面,缩略图像1042可以是暂时相邻视频数据的帧,或可以以合适的间隔(例如每五帧数据、每十帧数据、等等)分隔开。缩略图像1042也可以(或替代地)包括从可用于边缘标记的多个视点得到的合成图像。在本文所述的视频控制窗口1040内可以有效地采用这些变型和其它变型。
在一个方面,在视频图像窗口1010和模型视图窗口1030之间,透视图或视点可以被同步。例如,用户可以操作视频控制窗口1040内的控制器,以选择用于在视频图像窗口1010中显示的视频图像。为响应对目标物的视频图像的选择,模型视图窗口1030可以由相同的视点或透视图来绘制目标物(根据目标物的数字模型)。为此,用于扫描仪/摄像机的位置数据(例如x位置、y位置和z位置(在参照目标物的任何坐标系中)和旋转取向)可以从扫描期间采集到的数据获得。然后,可以采用该位置数据来合适地绘制数字模型。
用户也可以(或替代地)控制模型视图窗口1030中的数字模型透视图,如以上一般所述。在这种情况下,可以更新视频图像窗口1010,从而得到更紧密地对应模型视图窗口1030中用户所选透视图的视频图像。可以适当采用多个技术以用于从模型视图窗口1030到视频图像窗口1010的同步。例如,用于改变模型视图窗口1030的透视图的用户控制器会受限制,从而用户只可沿着用于得到三维数据的摄像机路径来移动透视图。在该实例中,可以提供平移或缩放的有限的能力以用于留在当前视频图像环境内的视点变型形式。另外,视频图像可以被包裹、修改尺寸、或以其它方式操纵,以适应旋转取向等等中的微小变型形式。又如,通过在整个视频序列(或整个视频序列的一部分)内找到最紧密地对应于用户选择的视点的视频图像,可以选择用于在视频图像窗口1010中显示的新的视频图像。这可以(例如)根据新的用户选择视点和与视频序列内的图像相关的视点的位置和/或旋转取向之间的任何合适距离或其它定量比较来确定。又如,可以使用视频数据、摄像机系统失真模型、三维数字模型数据、和任何其它可用数据来合成新的视频数据,该新的视频数据几乎或精确对应于用户选择的透视图。这可以包括(例如)将视频纹理数据映射到三维模型上,或组合得自多个不同视频图像的视频数据,连同合适的包裹、标度、对准、等等。
在另一个实施例中,系统可以提供单向的同步。即,模型视图可以通过由选择的透视图绘制来响应静止图像的选择。可以随后操纵模型视图从而得到任何合适的透视图,以用于编辑或验证边缘,而视频图像窗口1010中的静止图像保持不变。用户可以设置有复位控制器,以将模型视图返回到静止图像的透视图,并且模型视图可以通过由新图像的透视图重新绘制模型来继续响应新图像选择。因此,视频图像窗口1010中的视图可以控制模型视图窗口1030中的绘制。然而,改变模型视图窗口1030的透视图对视频图像窗口1010中显示的静止图像没有影响。
在另一方面,视频图像窗口1010中的点1012的显示可以与模型视图窗口1030中的点1032的显示同步。因此,用户操纵视频图像窗口1010中的点1012可以用于更新模型视图窗口1030中的同一点1032,并且用户操纵模型视图窗口1030中的点1032可以用于更新视频图像窗口1010中的同一点1012。应当理解,在任一种情况下,用户可以在二维中(对应于用户接口)选择点,并且通过将点的x坐标和y坐标投影到模型的表面或静止图像上来确定点的三维位置。在任一种情况下,可以采用有关摄像机系统的信息(例如用于摄像机通道的失真模型)来精确地转化用于两个窗口1010、1030之间的点的空间信息。更一般地讲,这些窗口1010、1020、1030、1040中的某些或全部可以包括用于操纵点和/或边缘线的工具,并且在所有窗口中任何改变都被更新。应当理解,可以提供许多其它的布置方式。例如,可以可选地在视频控制窗口1040或剖视图窗口1020中不显示点和/或边缘线。又如,可以只在窗口中的一个或两个(例如视频图像窗口1010和模型视图窗口1030)中设置用于控制点的工具。
使用上述用户接口1000和工具,可以采用宽阵列的反复和/或交互式边缘标记处理。现在,以举例的方式(而不是限制的方式)描述了一种这样的操作。用户可以通过选择用于在工作区域(例如视频图像窗口1010)中显示(作为“工作图像”)的视频控制窗口1040中的缩略图像1042来引发边缘标记处理。然后,用户可以使用鼠标在视频图像窗口1010中沿着边缘线来选择点。边缘标记系统可以通过用户接口1000接收这些二维选择,并且将其关联到三维模型的三维空间。使用用于选择的图像的位置/旋转数据,系统另外可以在模型视图窗口1030中绘制数字模型的对应视图,连同在工作区中选择的任何对应点。用户可以查看模型视图窗口1030中的点选择和对应的边缘线。另外,用户可以操纵模型视图,从而在模型上得到任意数量的可用透视图,以用于视觉上验证其所选择的边缘或点。然后,用户可以选择另一个缩略图以获得新的工作图像,并且反复地继续下去,直到已经识别到足够的点来衍生完整的闭环边缘线。
在另一方面,可以设置工具以用于操纵数字模型(通过与模型视图窗口1030中的模型、视频图像窗口1010中的视频图像、或这些的组合进行交互)。例如,上述三维光标技术可以更一般地应用于处理视频图像(根据单个图像对)与模型视图(根据图像对的复合)之间的可能的变型形式。变型形式可以是在目标物清晰度方面的图像-图像变型形式、或由许多不同图像对的合成所引起的模型范围的变型形式引起。另外,上述技术可以用于校正源自初始操作扫描仪的人的错误。例如,皮瓣等等阻碍了边缘的一部分,或颗粒等等在边缘线上产生不连续,这些缺陷可以通过外推法、内推法、或以其它方式合成其它可用的表面数据(自动地、半自动地、或手动地使用上述交互式模型编辑工具)来处理。
虽然已经结合某些优选实施例描述了本发明,但是本领域的普通技术人员可以理解其它实施例,并且本文涵盖其它实施例。

Claims (8)

1.一种图形用户接口,用于在齿列上进行的计算机辅助的边缘标记,所述接口包括:
视频控制器,所述视频控制器接收用户将多个视频图像中的一个作为工作图像的选择;
工作区域,所述工作区域显示所述工作图像和显示通过比较牙齿表面的制备之前和制备之后齿列中的所述牙齿表面的三维模型而生成的初始边缘线,并且接收用户对一个或多个点的操纵,所述一个或多个点用于在所述齿列上标记边缘;和
三维视图,所述三维视图显示所述齿列的数字模型的三维透视图绘制。
2.根据权利要求1所述的图形用户接口,其中所述视频控制器包括幻灯片窗口,所述幻灯片窗口提供所述齿列的多个缩略图像并且接收用户对所述多个缩略图像中的一个的选择。
3.根据权利要求2所述的图形用户接口,其中所述幻灯片窗口显示所述多个缩略图像中的每一个的立体视图。
4.根据权利要求2所述的图形用户接口,其中所述多个缩略图像根据相关性被选择。
5.根据权利要求2所述的图形用户接口,其中所述多个缩略图像中的每一个包含对所述多个缩略图像中的所述一个的取向识别。
6.根据权利要求1所述的图形用户接口,其中所述视频控制器包括视频时间轴控制器。
7.根据权利要求6所述的图形用户接口,其中所述视频时间轴控制器显示当前视频图像的缩略图。
8.根据权利要求1所述的图形用户接口,其中所述视频控制器包括缩略图像的二维阵列。
CN2008800225972A 2007-06-29 2008-06-27 用于牙科模型的视频辅助边缘标记 Expired - Fee Related CN101686853B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US94701207P 2007-06-29 2007-06-29
US60/947,012 2007-06-29
PCT/US2008/068584 WO2009006303A2 (en) 2007-06-29 2008-06-27 Video-assisted margin marking for dental models

Publications (2)

Publication Number Publication Date
CN101686853A CN101686853A (zh) 2010-03-31
CN101686853B true CN101686853B (zh) 2013-05-08

Family

ID=39865434

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800225972A Expired - Fee Related CN101686853B (zh) 2007-06-29 2008-06-27 用于牙科模型的视频辅助边缘标记

Country Status (6)

Country Link
US (2) US20100281370A1 (zh)
EP (2) EP3527167A1 (zh)
JP (1) JP2010532681A (zh)
CN (1) CN101686853B (zh)
ES (1) ES2724115T3 (zh)
WO (1) WO2009006303A2 (zh)

Families Citing this family (148)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11026768B2 (en) 1998-10-08 2021-06-08 Align Technology, Inc. Dental appliance reinforcement
US7555403B2 (en) 2005-07-15 2009-06-30 Cadent Ltd. Method for manipulating a dental virtual model, method for creating physical entities based on a dental virtual model thus manipulated, and dental models thus created
US11315307B1 (en) 2006-12-28 2022-04-26 Tipping Point Medical Images, Llc Method and apparatus for performing rotating viewpoints using a head display unit
US11275242B1 (en) 2006-12-28 2022-03-15 Tipping Point Medical Images, Llc Method and apparatus for performing stereoscopic rotation of a volume on a head display unit
US10795457B2 (en) 2006-12-28 2020-10-06 D3D Technologies, Inc. Interactive 3D cursor
US11228753B1 (en) 2006-12-28 2022-01-18 Robert Edwin Douglas Method and apparatus for performing stereoscopic zooming on a head display unit
US8738394B2 (en) 2007-11-08 2014-05-27 Eric E. Kuo Clinical data file
US8108189B2 (en) 2008-03-25 2012-01-31 Align Technologies, Inc. Reconstruction of non-visible part of tooth
US9492243B2 (en) 2008-05-23 2016-11-15 Align Technology, Inc. Dental implant positioning
US8092215B2 (en) 2008-05-23 2012-01-10 Align Technology, Inc. Smile designer
US8172569B2 (en) 2008-06-12 2012-05-08 Align Technology, Inc. Dental appliance
US20100077289A1 (en) * 2008-09-08 2010-03-25 Eastman Kodak Company Method and Interface for Indexing Related Media From Multiple Sources
US8152518B2 (en) 2008-10-08 2012-04-10 Align Technology, Inc. Dental positioning appliance having metallic portion
US8292617B2 (en) 2009-03-19 2012-10-23 Align Technology, Inc. Dental wire attachment
US8765031B2 (en) 2009-08-13 2014-07-01 Align Technology, Inc. Method of forming a dental appliance
US9035744B2 (en) 2009-10-01 2015-05-19 Blackberry Limited Method and apparatus for monitoring and controlling a medical device using a wireless mobile communication device
US9934360B2 (en) * 2010-02-10 2018-04-03 Biocad Medical, Inc. Dental data planning
US8457772B2 (en) * 2010-02-10 2013-06-04 Biocad Medical, Inc. Method for planning a dental component
WO2011118839A1 (ja) * 2010-03-24 2011-09-29 株式会社アドバンス 歯科用補綴物計測加工システム
US9211166B2 (en) 2010-04-30 2015-12-15 Align Technology, Inc. Individualized orthodontic treatment index
US9241774B2 (en) 2010-04-30 2016-01-26 Align Technology, Inc. Patterned dental positioning appliance
US20110304542A1 (en) * 2010-06-10 2011-12-15 Isaac Calderon Multi purpose remote control with display
US10776533B2 (en) * 2010-07-12 2020-09-15 3Shape A/S 3D modeling of a dental restoration using textural features
ES2848157T3 (es) 2010-07-19 2021-08-05 Align Technology Inc Procedimientos y sistemas para crear e interactuar con modelos virtuales tridimensionales
WO2012083960A1 (en) * 2010-12-22 2012-06-28 3Shape A/S System and method for scanning objects being modified
CN103391747B (zh) 2011-02-22 2016-02-24 3M创新有限公司 3d数据采集中的空间雕刻
WO2012115863A2 (en) * 2011-02-22 2012-08-30 3M Innovative Properties Company Hybrid stitching
JP5808146B2 (ja) * 2011-05-16 2015-11-10 株式会社東芝 画像処理システム、装置及び方法
US9403238B2 (en) 2011-09-21 2016-08-02 Align Technology, Inc. Laser cutting
US9375300B2 (en) 2012-02-02 2016-06-28 Align Technology, Inc. Identifying forces on a tooth
US9220580B2 (en) 2012-03-01 2015-12-29 Align Technology, Inc. Determining a dental treatment difficulty
US9414897B2 (en) 2012-05-22 2016-08-16 Align Technology, Inc. Adjustment of tooth position in a virtual dental model
DE102012210758A1 (de) * 2012-06-25 2014-01-02 Sirona Dental Systems Gmbh Verfahren zur Überprüfung von Zahnstellungen
FR2994076B1 (fr) * 2012-07-31 2016-12-30 Guillaume Champleboux Procede et dispositif de preparation a la pose d'un implant dentaire
US8948482B2 (en) 2012-11-01 2015-02-03 Align Technology, Inc. Motion compensation in a three dimensional scan
JP5837522B2 (ja) * 2013-02-15 2015-12-24 株式会社コアデンタルラボ横浜 アバットメントの設計方法、及びアバットメントの製造方法
WO2014144373A1 (en) * 2013-03-15 2014-09-18 James R. Glidewell Dental Ceramics, Inc. Method and apparatus for shape analysis, storage and retrieval of 3d models with application to automatic dental restoration design
US20140308623A1 (en) * 2013-04-12 2014-10-16 Mun Chang Computer fabrication of dental prosthetics
US20150289954A1 (en) * 2014-04-11 2015-10-15 Mun Sun Chang Computer fabrication of dental prosthetics
US20150029204A1 (en) * 2013-07-26 2015-01-29 Shao-Yang Wang Dynamic localized contrast enhancement method for image and computer readable medium of the same
JP6835587B2 (ja) * 2014-02-19 2021-02-24 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 医用4dイメージングにおける動き適応型可視化
US9703770B2 (en) * 2014-03-19 2017-07-11 International Business Machines Corporation Automated validation of the appearance of graphical user interfaces
KR20160138174A (ko) * 2014-03-21 2016-12-02 바이오레이즈, 인크. 치과 레이저 인터페이스 시스템 및 방법
WO2015149043A1 (en) 2014-03-28 2015-10-01 Dorin Panescu Quantitative three-dimensional imaging and printing of surgical implants
WO2015149046A1 (en) * 2014-03-28 2015-10-01 Dorin Panescu Quantitative three-dimensional imaging of surgical scenes from multiport perspectives
US11266465B2 (en) 2014-03-28 2022-03-08 Intuitive Surgical Operations, Inc. Quantitative three-dimensional visualization of instruments in a field of view
JP6938369B2 (ja) 2014-03-28 2021-09-22 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 定量的な3次元イメージングに基づく触覚フィードバックを用いる手術システム
KR102397254B1 (ko) 2014-03-28 2022-05-12 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 수술 장면의 정량적인 3차원 영상
KR101635998B1 (ko) * 2014-04-16 2016-07-06 (주)로봇앤드디자인 치아모델의 제조방법
DE102014207667A1 (de) * 2014-04-23 2015-10-29 Sirona Dental Systems Gmbh Verfahren zur Durchführung einer optischen dreidimensionalen Aufnahme
US9510757B2 (en) 2014-05-07 2016-12-06 Align Technology, Inc. Identification of areas of interest during intraoral scans
SE1400260A1 (sv) * 2014-05-22 2015-11-23 Arrangeman och metod för tillverkning av individuellt utformade objekt såsom dentala restaurationer
CN106575114A (zh) * 2014-05-27 2017-04-19 奥西里斯生物医学3D有限责任公司 医学3d打印快运容器
EP3486815A1 (en) * 2014-07-31 2019-05-22 Hewlett-Packard Development Company, L.P. Model data of an object disposed on a movable surface
US9610141B2 (en) 2014-09-19 2017-04-04 Align Technology, Inc. Arch expanding appliance
US10449016B2 (en) 2014-09-19 2019-10-22 Align Technology, Inc. Arch adjustment appliance
US10743968B2 (en) 2014-09-24 2020-08-18 3Shape A/S Creating a digital restoration design
US9744001B2 (en) 2014-11-13 2017-08-29 Align Technology, Inc. Dental appliance with cavity for an unerupted or erupting tooth
US10504386B2 (en) 2015-01-27 2019-12-10 Align Technology, Inc. Training method and system for oral-cavity-imaging-and-modeling equipment
US10108269B2 (en) * 2015-03-06 2018-10-23 Align Technology, Inc. Intraoral scanner with touch sensitive input
US9451873B1 (en) * 2015-03-06 2016-09-27 Align Technology, Inc. Automatic selection and locking of intraoral images
US9922459B2 (en) * 2015-03-09 2018-03-20 D4D Technologies, Llc Real-time detail highlighting on 3D models
FR3047165B1 (fr) * 2016-02-03 2021-03-05 Lyra Holding Dispositif de parure dentaire amovible
BR112018002815B1 (pt) 2015-08-10 2020-11-24 Lyra Holding modelo para restauração dentária cosmética e dispositivo de joia dentária
FR3039986B1 (fr) * 2015-08-10 2021-01-22 Lyra Holding Maquette pour restauration dentaire esthetique
US11554000B2 (en) 2015-11-12 2023-01-17 Align Technology, Inc. Dental attachment formation structure
US11931222B2 (en) 2015-11-12 2024-03-19 Align Technology, Inc. Dental attachment formation structures
US11596502B2 (en) 2015-12-09 2023-03-07 Align Technology, Inc. Dental attachment placement structure
US11103330B2 (en) 2015-12-09 2021-08-31 Align Technology, Inc. Dental attachment placement structure
US10564628B2 (en) * 2016-01-06 2020-02-18 Wiivv Wearables Inc. Generating of 3D-printed custom wearables
WO2017205095A1 (en) 2016-05-27 2017-11-30 3M Innovative Properties Company Coating compositions having hydrophilic and hydrophobic particles for use in intraoral scanning methods
WO2017205144A1 (en) 2016-05-27 2017-11-30 3M Innovative Properties Company Coating compositions having particles with differing refractive indices for use in intraoral scanning methods
WO2017218951A1 (en) 2016-06-17 2017-12-21 Align Technology, Inc. Orthodontic appliance performance monitor
EP3471599A4 (en) 2016-06-17 2020-01-08 Align Technology, Inc. INTRAORAL DEVICES WITH SENSOR
US10909761B1 (en) * 2016-07-07 2021-02-02 Google Llc 2D video with option for projected viewing in modeled 3D space
KR102443088B1 (ko) 2016-07-27 2022-09-14 얼라인 테크널러지, 인크. 치아 진단 기능이 있는 구강 내 스캐너
US10507087B2 (en) 2016-07-27 2019-12-17 Align Technology, Inc. Methods and apparatuses for forming a three-dimensional volumetric model of a subject's teeth
CN113648088B (zh) 2016-11-04 2023-08-22 阿莱恩技术有限公司 用于牙齿图像的方法和装置
US20200015936A1 (en) * 2016-11-30 2020-01-16 Carestream Dental Technology Topco Limited Method and system for braces removal from dentition mesh
US11026831B2 (en) 2016-12-02 2021-06-08 Align Technology, Inc. Dental appliance features for speech enhancement
US11273011B2 (en) 2016-12-02 2022-03-15 Align Technology, Inc. Palatal expanders and methods of expanding a palate
US11376101B2 (en) 2016-12-02 2022-07-05 Align Technology, Inc. Force control, stop mechanism, regulating structure of removable arch adjustment appliance
WO2018102811A1 (en) 2016-12-02 2018-06-07 Align Technology, Inc. Methods and apparatuses for customizing rapid palatal expanders using digital models
US10467815B2 (en) 2016-12-16 2019-11-05 Align Technology, Inc. Augmented reality planning and viewing of dental treatment outcomes
US10548700B2 (en) 2016-12-16 2020-02-04 Align Technology, Inc. Dental appliance etch template
US10695150B2 (en) 2016-12-16 2020-06-30 Align Technology, Inc. Augmented reality enhancements for intraoral scanning
FR3062741B1 (fr) * 2017-02-08 2020-03-27 Universite Clermont Auvergne Procede d'inspection d'une surface
US10779718B2 (en) 2017-02-13 2020-09-22 Align Technology, Inc. Cheek retractor and mobile device holder
US20200058384A1 (en) * 2017-03-07 2020-02-20 Sony Olympus Medical Solutions Inc. Medical information management apparatus, medical information management method, and medical information management system
JP7254025B2 (ja) * 2017-03-17 2023-04-07 トロフィー エスアーエス 動的歯列弓マップ
JP7108627B2 (ja) * 2017-03-20 2022-07-28 3シェイプ アー/エス 手持ちスキャナを有する3dスキャナシステム
WO2018183358A1 (en) 2017-03-27 2018-10-04 Align Technology, Inc. Apparatuses and methods assisting in dental therapies
US10613515B2 (en) 2017-03-31 2020-04-07 Align Technology, Inc. Orthodontic appliances including at least partially un-erupted teeth and method of forming them
US11045283B2 (en) 2017-06-09 2021-06-29 Align Technology, Inc. Palatal expander with skeletal anchorage devices
US11996181B2 (en) 2017-06-16 2024-05-28 Align Technology, Inc. Automatic detection of tooth type and eruption status
US10639134B2 (en) 2017-06-26 2020-05-05 Align Technology, Inc. Biosensor performance indicator for intraoral appliances
US10885521B2 (en) 2017-07-17 2021-01-05 Align Technology, Inc. Method and apparatuses for interactive ordering of dental aligners
US11419702B2 (en) 2017-07-21 2022-08-23 Align Technology, Inc. Palatal contour anchorage
CN116327391A (zh) 2017-07-27 2023-06-27 阿莱恩技术有限公司 用于通过光学相干断层扫描术来处理正畸矫正器的系统和方法
CN115462921A (zh) 2017-07-27 2022-12-13 阿莱恩技术有限公司 牙齿着色、透明度和上釉
US11648095B2 (en) 2017-08-10 2023-05-16 D4D Technologies, Llc Intra-oral scanning device
US20190046297A1 (en) * 2017-08-11 2019-02-14 Align Technology, Inc. Devices and systems for creation of attachments for use with dental appliances and changeable shaped attachments
WO2019035979A1 (en) 2017-08-15 2019-02-21 Align Technology, Inc. EVALUATION AND CALCULATION OF BUCCAL CORRIDOR
WO2019036677A1 (en) 2017-08-17 2019-02-21 Align Technology, Inc. SURVEILLANCE OF CONFORMITY OF DENTAL DEVICE
US10813720B2 (en) 2017-10-05 2020-10-27 Align Technology, Inc. Interproximal reduction templates
EP3700458B1 (en) 2017-10-27 2023-06-07 Align Technology, Inc. Alternative bite adjustment structures
CN111295153B (zh) 2017-10-31 2023-06-16 阿莱恩技术有限公司 具有选择性牙合负荷和受控牙尖交错的牙科器具
US11096763B2 (en) 2017-11-01 2021-08-24 Align Technology, Inc. Automatic treatment planning
WO2019100022A1 (en) 2017-11-17 2019-05-23 Align Technology, Inc. Orthodontic retainers
US11219506B2 (en) 2017-11-30 2022-01-11 Align Technology, Inc. Sensors for monitoring oral appliances
WO2019118876A1 (en) 2017-12-15 2019-06-20 Align Technology, Inc. Closed loop adaptive orthodontic treatment methods and apparatuses
US10980613B2 (en) 2017-12-29 2021-04-20 Align Technology, Inc. Augmented reality enhancements for dental practitioners
JP2019128641A (ja) * 2018-01-22 2019-08-01 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
KR20200115580A (ko) 2018-01-26 2020-10-07 얼라인 테크널러지, 인크. 구강 내 진단 스캔 및 추적
EP3527163B1 (en) * 2018-02-20 2020-07-08 Ivoclar Vivadent AG Computer implemented method for modifying a digital three-dimensional model of a dentition
US11120179B2 (en) * 2018-03-22 2021-09-14 James R. Glidewell Dental Ceramics, Inc. System and method for performing quality control
US11210788B2 (en) * 2018-03-22 2021-12-28 James R. Glidewell Dental Ceramics, Inc. System and method for performing quality control
US11334977B2 (en) * 2018-03-22 2022-05-17 James R. Glidewell Dental Ceramics, Inc. System and method for performing quality control of manufactured models
US11937991B2 (en) 2018-03-27 2024-03-26 Align Technology, Inc. Dental attachment placement structure
WO2019200008A1 (en) 2018-04-11 2019-10-17 Align Technology, Inc. Releasable palatal expanders
CN108961419B (zh) * 2018-06-15 2023-06-06 重庆大学 微装配系统的显微视觉系统的显微视场空间数字化方法及系统
KR20210022691A (ko) 2018-06-21 2021-03-03 쓰리세이프 에이/에스 치아의 적어도 일부의 3d-표현에 적어도 하나의 추가 2d-이미지를 상관시키기 위한 방법, 디바이스, 및 시스템
US11395717B2 (en) * 2018-06-29 2022-07-26 Align Technology, Inc. Visualization of clinical orthodontic assets and occlusion contact shape
EP3636202B1 (de) * 2018-10-09 2022-06-15 Ivoclar Vivadent AG Dentales fuehrungssystem zur zahnpraeparation
CN109411095A (zh) * 2018-10-10 2019-03-01 谢妮娜 数字乳牙结构剖析方法及病理分析系统
US10935958B2 (en) * 2018-10-23 2021-03-02 Ormco Corporation Systems and methods for designing and manufacturing an orthodontic appliance
KR20200075623A (ko) * 2018-12-18 2020-06-26 (주)제노레이 2차원 의료 영상 및 3차원 의료 영상의 정합을 이용한 치과 치료 계획 장치 및 방법
EP3673863A1 (en) * 2018-12-28 2020-07-01 Trophy 3d printing optimization using clinical indications
WO2020167042A1 (ko) * 2019-02-15 2020-08-20 주식회사 메디트 스캔 과정 재생 방법
KR102311389B1 (ko) * 2019-02-15 2021-10-13 주식회사 메디트 스캔 과정 재생 방법
US11744681B2 (en) * 2019-03-08 2023-09-05 Align Technology, Inc. Foreign object identification and image augmentation for intraoral scanning
DK3705080T3 (da) * 2019-03-08 2021-08-23 Exocad Gmbh Computerimplementeret modellering af en patientindividuel tandprotesedel
DE102019119080A1 (de) * 2019-03-11 2020-09-17 Zebris Medical Gmbh Zahnschiene und Verfahren zu deren Herstellung
AU2020274179A1 (en) * 2019-05-16 2022-01-06 Alta Smiles, Llc Analysis and prediction model for orthodontic treatment
KR102196147B1 (ko) * 2019-06-25 2020-12-29 오스템임플란트 주식회사 마진 라인 자동 생성 장치 및 그 방법
US11995839B2 (en) 2019-09-04 2024-05-28 Align Technology, Inc. Automated detection, generation and/or correction of dental features in digital models
US11735306B2 (en) 2019-11-25 2023-08-22 Dentsply Sirona Inc. Method, system and computer readable storage media for creating three-dimensional dental restorations from two dimensional sketches
JP7248599B2 (ja) 2020-01-15 2023-03-29 株式会社モリタ製作所 情報処理装置およびデータ処理方法
TWI712396B (zh) * 2020-01-16 2020-12-11 中國醫藥大學 口腔缺陷模型之修補方法及口腔缺陷模型之修補系統
US10945812B1 (en) * 2020-07-24 2021-03-16 Oxilio Ltd Systems and methods for planning an orthodontic treatment
KR102418810B1 (ko) * 2020-08-06 2022-07-12 오스템임플란트 주식회사 마진라인 포인트 선택 방법 및 이를 위한 덴탈 캐드 장치
US11361490B2 (en) 2020-08-18 2022-06-14 Here Global B.V. Attention guidance for ground control labeling in street view imagery
US11995808B2 (en) 2020-09-04 2024-05-28 Abova, Inc Method for X-ray dental image enhancement
US11361524B1 (en) 2021-03-25 2022-06-14 Dentsply Sirona Inc. Single frame control view
CN113284385B (zh) * 2021-05-08 2023-02-10 中山大学附属口腔医院 一种教学平台设置方法、装置、设备及计算机存储介质
KR102591976B1 (ko) * 2021-06-24 2023-10-23 주식회사 메디트 구강에 대한 마진 라인 정보를 제공하는 방법 및 그를 수행하는 전자 장치
WO2024039547A1 (en) * 2022-08-17 2024-02-22 Align Technology, Inc. Augmentation of 3d surface of dental site using 2d images
US20240268938A1 (en) * 2023-02-13 2024-08-15 Exocad Gmbh Closing holes in a three-dimensional digital preparation model

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1852685A (zh) * 2003-07-14 2006-10-25 德固萨有限责任公司 显示牙科对象以及制造假牙的方法

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5417210A (en) * 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US5371778A (en) * 1991-11-29 1994-12-06 Picker International, Inc. Concurrent display and adjustment of 3D projection, coronal slice, sagittal slice, and transverse slice images
US6701011B1 (en) * 1997-01-20 2004-03-02 Canon Kabushiki Kaisha Image processing apparatus and image processing method and storage medium
US6160907A (en) * 1997-04-07 2000-12-12 Synapix, Inc. Iterative three-dimensional process for creating finished media content
US6093019A (en) * 1997-12-23 2000-07-25 Integra Medical Dental imaging system with digital motion video
AU4076999A (en) * 1998-05-13 1999-11-29 Acuscape International, Inc. Method and apparatus for generating 3d models from medical images
US6201987B1 (en) * 1998-05-26 2001-03-13 General Electric Company Error compensation for device tracking systems employing electromagnetic fields
WO1999060916A2 (en) * 1998-05-28 1999-12-02 Mckinley Optics, Inc. Multiple magnification stereo video telescope objective lens system
US8790118B2 (en) * 1998-11-03 2014-07-29 Shade Analyzing Technologies, Inc. Interactive dental restorative network
US7013191B2 (en) * 1999-11-30 2006-03-14 Orametrix, Inc. Interactive orthodontic care system based on intra-oral scanning of teeth
US7234937B2 (en) * 1999-11-30 2007-06-26 Orametrix, Inc. Unified workstation for virtual craniofacial diagnosis, treatment planning and therapeutics
EP1272122A4 (en) * 1999-12-29 2007-10-03 Ormco Corp METHOD AND DEVICE FOR FORMING PERSONALIZED ORTHODONTIC DEVICE
US6358251B1 (en) 2000-03-21 2002-03-19 University Of Washington Method and apparatus for forming a cavity in soft tissue or bone
WO2001074268A1 (en) * 2000-03-30 2001-10-11 Align Technology, Inc. System and method for separating three-dimensional models
US6947038B1 (en) * 2000-04-27 2005-09-20 Align Technology, Inc. Systems and methods for generating an appliance with tie points
US6364660B1 (en) * 2000-10-25 2002-04-02 Duane Milford Durbin Method and system for imaging and modeling dental structures
US7072501B2 (en) * 2000-11-22 2006-07-04 R2 Technology, Inc. Graphical user interface for display of anatomical information
US20020064759A1 (en) * 2000-11-30 2002-05-30 Durbin Duane Milford Method and system for viewing, altering and archiving digital models of dental structures and computer integrated manufacturing of physical models of dental structures
US7401351B2 (en) * 2000-12-14 2008-07-15 Fuji Xerox Co., Ltd. System and method for video navigation and client side indexing
US8021147B2 (en) * 2001-04-13 2011-09-20 Orametrix, Inc. Method and system for comprehensive evaluation of orthodontic care using unified workstation
US7717708B2 (en) * 2001-04-13 2010-05-18 Orametrix, Inc. Method and system for integrated orthodontic treatment planning using unified workstation
EP1539019B1 (en) * 2002-07-22 2012-05-30 Cadent Ltd. A method for defining a finish line of a dental prosthesis
EP1435623B1 (en) * 2002-12-30 2008-06-04 STMicroelectronics S.r.l. Stabilisation method of the drain voltage in non-volatile multilevel memory cells and relating memory device
US6882894B2 (en) * 2003-01-06 2005-04-19 Duane Milford Durbin Method and system for automated mass manufacturing of custom tooth die models for use in the fabrication of dental prosthetics
US7333874B2 (en) * 2004-02-24 2008-02-19 Cadent Ltd. Method and system for designing and producing dental prostheses and appliances
US7695275B2 (en) * 2004-06-02 2010-04-13 Fuel Management, Inc. Air:fluid distribution system and method
WO2005119505A2 (en) * 2004-06-04 2005-12-15 Stereotaxis, Inc. User interface for remote control of medical devices
DE602005004332T2 (de) * 2004-06-17 2009-01-08 Cadent Ltd. Verfahren zum Bereitstellen von Daten im Zusammenhang mit der Mundhöhle
US7720315B2 (en) * 2004-11-12 2010-05-18 Cognex Technology And Investment Corporation System and method for displaying and using non-numeric graphic elements to control and monitor a vision system
US7605817B2 (en) * 2005-11-09 2009-10-20 3M Innovative Properties Company Determining camera motion
JP5237106B2 (ja) * 2005-11-30 2013-07-17 3シェイプ アー/エス 歯の修復物の製作のための印象スキャニング
US7912257B2 (en) * 2006-01-20 2011-03-22 3M Innovative Properties Company Real time display of acquired 3D dental data
US7819591B2 (en) * 2006-02-13 2010-10-26 3M Innovative Properties Company Monocular three-dimensional imaging
JP4892249B2 (ja) * 2006-02-15 2012-03-07 株式会社ジーシー 作製支援装置
US20100009308A1 (en) * 2006-05-05 2010-01-14 Align Technology, Inc. Visualizing and Manipulating Digital Models for Dental Treatment
US8442283B2 (en) * 2006-08-30 2013-05-14 Anatomage Inc. Patient-specific three-dimensional dentition model
US20080094398A1 (en) * 2006-09-19 2008-04-24 Bracco Imaging, S.P.A. Methods and systems for interacting with a 3D visualization system using a 2D interface ("DextroLap")
US8366445B2 (en) * 2010-02-26 2013-02-05 Vuillemot William C Method for dental restoration and related kit

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1852685A (zh) * 2003-07-14 2006-10-25 德固萨有限责任公司 显示牙科对象以及制造假牙的方法

Also Published As

Publication number Publication date
ES2724115T3 (es) 2019-09-06
US20160302895A1 (en) 2016-10-20
CN101686853A (zh) 2010-03-31
US10667887B2 (en) 2020-06-02
JP2010532681A (ja) 2010-10-14
EP2164424A2 (en) 2010-03-24
US20100281370A1 (en) 2010-11-04
EP2164424B1 (en) 2019-02-27
EP3527167A1 (en) 2019-08-21
WO2009006303A3 (en) 2009-10-29
WO2009006303A2 (en) 2009-01-08

Similar Documents

Publication Publication Date Title
CN101686853B (zh) 用于牙科模型的视频辅助边缘标记
CN105096372B (zh) 视频数据和三维模型数据的同步视图
EP1979877B1 (en) Visualization of three-dimensional data acquisition
EP2588021B1 (en) 2d image arrangement
US8457772B2 (en) Method for planning a dental component
EP2678830B1 (en) Hybrid stitching for 3d reconstruction
US8332186B2 (en) Method and apparatus for generating a model of an object
EP3813027A1 (en) Methods and systems for creating and interacting with three dimensional virtual models
US20220233287A1 (en) Dental restoration assessment using virtual model
CN102438545A (zh) 用于有效计划、可视化和优化牙修复体的系统和方法
WO2004008981A2 (en) A method for defining a finish line of a dental prosthesis

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20190702

Address after: ohio

Patentee after: Midmark Company

Address before: American Minnesota

Patentee before: 3M Innovation Co., Ltd.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130508

Termination date: 20200627

CF01 Termination of patent right due to non-payment of annual fee