上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China
上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China
上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China
上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China
上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China 上海应用技术大学 机械工程学院(上海 201418), School of Mechanical Engineering, Shanghai Institute of Technology, Shanghai 201418, P. R. China 复旦大学附属上海市第五人民医院 口腔科(上海 200240), Department of Stomatology, Shanghai Fifth People's Hospital, Fudan University, Shanghai 200240, P. R. China
式中:
为各波峰所对应的增益,
为各个峰对应的平均值,
为各个峰对应的标准偏差。
由于患者在拍摄时上下颌为咬合状态,对冠状MIP进行阈值过滤后,可以得到牙齿的掩膜图像。然后,掩膜图像经过水平方向投影后得到牙齿的分布情况。通过上述方法拟合高斯曲线来确定波峰和波谷,即牙齿咬合处、牙齿与上下牙槽骨的交汇处的切片值。最后,利用上述咬合处和交汇处的切片生成轴向MIP。
基于下颌和无牙冠的轴向MIP计算相应牙弓曲线的过程,如 图3 所示。首先,将皮质骨强度作为阈值过滤轴向MIP得到下颌的掩膜图像。在掩膜图像中提取最大面积轮廓(见 图3a ),并使用膨胀腐蚀法进行处理,去除轮廓空洞和毛刺(见 图3b )。然后,本文在使用细化算法对轮廓进行处理 [ 21 - 23 ] 的基础上,加入了8领域的分叉端点模板比对骨架线,记录骨架中的分叉和端点结构,方便进行分支统计和去叉处理(见 图3c )。最后,为了减少计算量,本文在骨架线上以相等的间隔选择13个插入点 [ 24 ] (见 图3d ),生成非均匀三次B样条曲线来拟合牙弓。另一方面,针对不同类型的牙齿和齿根在空间中的倾斜程度不同,本文提出了通过对比下颌和去牙冠的轴向MIP所生成的骨架线,计算牙弓线进行等距离变换的参数,得到多条牙弓线(见 图3e )。通过此方法找到关键的弯曲MPR,可以更加详细地显示口腔内部情况,也不会增加过多的计算量。
The processing of contour images and the extraction and transformation of dental arch curves
轮廓图像的处理与牙弓曲线提取和变换过程
a. 轮廓图像;b. 处理后轮廓;c. 骨架线;d. 三次样条曲线拟合;e. 等距变换后牙弓曲线
a. contour image; b. contour image after expansion and corrosion; c. skeleton line; d. cubic spline fitting; e. the dental arch curve after equidistant transformation
在弯曲MPR图像生成过程中,需要对牙弓曲线进行等距变换来保证曲线的一致性,以便进行图像融合。针对全景图像中不同组织区域强度的分布不均问题和金属种植体在成像时对其他组织的强度压缩问题,本文通过提取多个弯曲MPR中不同强度分布的感兴趣区域,并扩增其强度的分布,得到增强图像
,从而减少金属种植体的影响并抑制非感兴趣组织和区域。最后,图像的对比度还可以通过前、后景方面来调整,在融合过程中将原始的全景图像作为后景,通过高斯模糊处理后与增强图像融合,加强感兴趣区域与其他区域在空间上的对比效果,以增加最终全景图像
的对比度。计算公式如下所示:
其中,
α
表示种植体的强度调整系数,
β
表示感兴趣区域的强度调整系数,
A
、
B
和
C
分别表示从冠状MIP直方图中得到的牙齿、软组织和种植体的强度值。
N
为弯曲MPR的图像个数。
为弯曲MPR图像集中第
n
幅图像的第
i
行
j
列值。
γ
是用于控制前景的权重系数,
γ
= 0.85。
G
表示高斯滤波函数。
为验证所提出方法的有效性,本文收集了来自复旦大学附属上海市第五人民医院的50例临床口腔CBCT数据,CBCT数据由Newtom VGi和Planmeca ProMax 3D Max口腔扫描仪获取。其中单层CBCT切片的大小为776*776,像素大小为0.2 mm*0.2 mm,切片之间的距离为0.2 mm。所有的数据均为匿名收集。
本文实验所使用的计算机配置为Intel Xeon E-2136 CPU@3.30 GHz处理器。使用计算机的语言为Python 3.7。在CBCT数据读取后开始记录重建时间,每例数据重建成全景图像的平均计算时间为2.9 s。
本文在对比实验中,选择了目前常见的口腔CBCT数据后处理软件eXam Vision与本文所提出的重建方法进行质量评价。重建时使用相同的牙弓曲线以保证图像内容的一致性。对于口腔全景图像中的像素特征而言,全景图像像素首先需要较好的亮度表现才可以清晰地显示各个组织区域的情况,其次全景图像上普遍包含多种组织结构,所以图像中的像素分布越离散越能更好地展示各个组织结构,同时图像的细节与纹理的变化一定程度上可以反映图像的清晰度。本文在评估全景图像像素特征时,图像的亮度、像素离散程度和细节与纹理的变化分别由如下公式计算:
其中,
H
和
W
分别表示图像
P
的高和宽,
表示图像的均值,
和
分别表示像素
在水平
x
和垂直
y
方向的一阶差分。
在全景图像内部场景特征方面,本文使用BRISQUE图像质量评价方法 [ 25 ] 来评估图像的多尺度特征并进行分数预测。通过多方面的评价方法来综合评估两种方法所重建的全景图像质量。最后,将两种方法的评价数值进行归一化后计算平均值,得到相应的分数,并统计各分数的平均值作为总分。全景图像的客观评估结果如 图4 所示,图中显示了两种方法所得到的亮度分数、离散程度分数、清晰度分数、BRISQUE评估分数和总分。结果显示本文方法在清晰度上有少量损失之外,在另外三个评价标准上均优于软件方法。
为了对比软件与本文方法的重建效果,本文使用了包含金属种植物的CBCT数据,在相同牙弓曲线上重建得到两种方法的全景图像如 图5 所示。这些CBCT数据包含了牙冠修复、种植体、填充治疗以及多种病例混合等常见的口腔种植治疗类型,并且金属种植物的位置基本包括了所有的常见治疗区域。在全景图像中,牙齿区域和接受治疗区域都具有较为均匀的亮度表现。为了更好地展示金属种植物周围的情况, 图6 分别展示了软件和本文两种方法所重建的全景图像中种植物周围的局部结构放大图,其中显示的内容为 图5 中红色框内区域。 图5a ~c展示了不同位置信息的种植体治疗全景图像,可以发现本方法重建图像在保留上下颌种植体的方向和深度信息的基础上,对于种植体附近的牙齿和骨组织均保持了足够的亮度和对比度(见 图6a ~d),可以清楚地区分治疗区域与周围组织,并且可以在图像中看到不同的层。另一方面, 图5c ~d也展示了从尖牙到磨牙位置的牙冠修复图像。在牙冠修复的高亮度下,本文方法所重建的全景图像仍保持治疗区域、牙齿区域和周围组织之间的对比度均衡,不需要用户调整窗口宽度和窗口水平以观察口腔组织信息。因此,本文方法有效地减少了口腔金属种植物对图像的影响,使得牙齿区域和治疗区域都有更好的亮度和对比度表现。
Experiment result
实验结果
a. 磨牙区种植体;b. 尖牙区种植体;c. 尖牙区种植体和牙冠修复;d. 磨牙区牙冠修复
a. implants in the molar area; b. implants in the cusp area; c. dental implant and crown restoration in the cusp area; d. dental crown restoration in molar area
从口腔CBCT数据中自动生成全景图像是医疗图像后处理的一个重要功能。在全景图像重建过程中,弯曲MPR图像增加得越多可以加入更多的感兴趣信息,但同时也会加入其他非必要的内容而影响全景图片中感兴趣区域的对比度和图像质量,并且加入更多的数据也会影响全景图像的生成速度。本文针对此问题,首先通过找到牙弓厚度中对牙根和种植体影响比较关键的几幅图进行重建,并提出一种MPR图像的感兴趣区域信息提取方法,以及构造新的传递函数和系数,最后通过较少的数据合成来验证该方案的实用性。后续的使用可根据场景和具体需要来增加合成图像数量和调整参数达到理想效果,这也是最终生成全景图像的关键。另一方面,新的增强和融合方法主要目标是减少金属种植体对整体图像的影响。当患者口腔中存在如种植体这类的金属植入物,会对其他组织在强度上产生较大的压缩,导致最终的全景图像整体变暗。这是因为金属物的X射线吸收程度较高,使得金属物的强度值较高,并且有较宽的分布范围。这样在重建图像时,其他的组织处于低亮度区域,导致强度直方图分布不均匀。所以本方案基于强度和直方图的角度,将口腔中的牙齿和骨骼进行增强,调整其分布情况,以改善映射到最终图像时的效果。近些年有相关研究通过滤波和相关算法对医学图像进行增强和改善 [ 26 - 29 ] ,后续研究可以在全景图像合成过程中,针对不同的组织或感兴趣区域添加、改变传递函数中的系数,或是构造新的传递函数,来增强其中的感兴趣区域,从而有效提高全景图像的质量。
本文提出了一种基于口腔CBCT的全景图像自动重建方法。该方法首先计算CBCT中各个组织结构的强度值,并生成不同切片范围的轴向MIP。然后根据MIP图像和强度值,通过细化算法和等距变换拟合多条牙弓曲线。最后,基于牙弓曲线生成的弯曲MPR图像集进行图像增强和融合,得到最终的全景图像。经过实验验证,该方法可以有效改善含有金属种植体数据重建的全景图像,提高全景图像的质量。
重要声明
利益冲突声明:本文全体作者均声明不存在利益冲突。
作者贡献声明:张建国和姜逸川负责方法设计、算法设计及论文撰写,高飞和赵晟负责资料收集和数据整理,宋亮负责实验评估及论文审校。
伦理声明:本研究通过了复旦大学附属上海市第五人民医院医学伦理委员会的审批[批件号:(2019)伦审第(065)号]。
上海市自然科学基金(19ZR1455100)