基于单目实时三维重建系统的研究与实现

来源 :青岛大学 | 被引量 : 0次 | 上传用户:ogldfish
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维重建(3D Reconstruction)通过建立数字化模型反映各种测量方法获取到的真实空间中物体的结构和纹理信息,涉及增强现实、机器人导航、医学CT诊断等多个领域。早期,三维重建技术采用接触式测量方式获取物体的信息。随着传感器技术的发展和相关理论的研究,以相机和激光雷达等设备进行非接触式测量的信息获取方式成为三维重建技术的主流。深度相机面世以来,特别是即时定位与建图算法的成熟应用,基于深度相机的实时三维重建满足了人们对实时交互的需求。然而由于功耗、体积和成本等因素,深度相机不适合应用于有效载荷和功率有限的设备。因此本文对基于单目相机的实时三维系统展开了研究,研究的主要内容如下:(1)针对深度图生成耗时较多的问题,提出了一种基于局部立体匹配的深度估计算法。首先在GPU上执行高度并行的降采样随机初始化和棋盘迭代传播,获得粗糙的低分辨率的深度图。经匹配损失滤波器和最小联通区域剔除去除噪声深度之后,升采样并平滑深度图获得原始分辨率大小的深度图。使用慕尼黑工业大学提供的RGBD数据集对提出的算法进行了实验,算法能够以每秒25帧的速度生成分辨率为640x480的深度图,生成的深度图具有较高的完整度和较低的相对误差。实验结果表明,本文提出的深度估计算法在速度和质量两个方面均能满足实时三维重建系统的需求。(2)针对连续深度图导致的点云冗余问题,提出了一种基于体素块增量更新的TSDF融合算法。算法通过将世界坐标系划分为体素块和体素方块的二级树结构以便于快速更新体素方块,采用基于哈希表访存体素块的方式扩展可重建范围,使用视锥体筛选减少体素块的更新数量和体素块增量更新算法提高体素块的更新速度,通过空间雕刻移除无效体素块降低内存占用。实验结果表明,与Open Chisel库相比本文提出的TSDF融合算法速度更快、噪点更少。在重建系统中可以采取缩小更新视野或增大体素方块的措施实现实时的融合深度图。(3)设计并实现了基于单目相机的实时三维重建系统,该系统分为图像发布、位姿计算、深度估计和表面重建四个模块。图像发布模块畸变矫正相机获取的图像后发布,位姿计算模块使用修改过的ORB_SLAM系统计算相机位姿,深度估计模块采用本文提出的深度估计算法生成深度图并通过时序传播和时序滤波优化深度图,表面重建模块使用基于体素块增量更新的TSDF融合算法和Marching Cubes算法生成网格模型。在台式机上搭建了本文设计的重建系统,针对单目相机移动范围受数据线限制的问题,引入了可移动的笔记本电脑作为从机。从机仅负责图像发布模块,台式机作为主机负责计算量较大的位姿计算、深度估计和表面重建模块。搭建的系统在真实环境中进行了实验,实验结果表明,系统可以较好的恢复场景中的纹理和结构信息并且能够实现实时交互。
其他文献
目的探究健康管理网络平台对急性冠状动脉综合征(Acute coronary syndrome,ACS)并发心力衰竭(Heart failure,HF)病人预后的干预性研究。通过健康管理网络平台的干预性指导下,比较患者在干预前与干预后不同指标的相关性变化,探索其在ACS并发心力衰竭病人的临床意义以及预后情况,旨在提高ACS并发心衰患病人群的生存周期,使得病人的生存质量得到好转,以及使患者后续诊治及预
背景:乳牙龋是儿童时期最常见的慢性疾病之一,其发生发展是多因素作用的结果。乳牙早期发育缺陷被认为是龋坏的重要危险因素,乳牙的发育从母亲妊娠期开始至儿童2岁半左右乳牙全部萌出而结束。母亲妊娠期营养缺乏如维生素A、D及K、钙缺乏,都会对子代牙齿的发育和矿化产生不利影响。研究发现,母亲妊娠期缺铁性贫血是导致婴儿早期铁不足不可忽视的重要因素,而且患有缺铁性贫血的儿童较无缺铁性贫血儿童患乳牙龋率更高。目的:
我国农产品资源丰富,坚果种类众多,随着生活水平的提高,坚果已成为人们日常生活中必备的保健营养食品。目前在坚果检测方面,多数工业现场还采用人工或单一设备进行检测,检测出来的坚果品质参差不齐,且效率低下。为了获取质量等级较高的坚果,本研究以核桃坚果为例,设计出基于机器视觉的坚果尺寸与缺陷分类在线检测系统。该系统设计的主要目的在于如何使用机器视觉技术深入完善和改进对坚果尺寸和缺陷分类的检测方法,从而快速
目的:探讨CT影像组学模型预测磨玻璃结节型肺腺癌浸润性的效能。材料与方法:收集2017年1月到2018年4月290例经病理证实为肺腺癌且具有完整的临床资料和胸部CT平扫薄层图像的磨玻璃结节。290例中男性73例,女性217例,年龄26-80岁,平均年龄为56.61±10.06岁。据病理结果将290例患者分为三组,即浸润前病变组(88例),微浸润肺腺癌组(91例),浸润性肺腺癌组(111例)。根据分
目的:探讨白细胞计数(White cell count,WBC),C 反应蛋白(C-reactive protein,CRP)和降钙素原(Procalcitonin,PCT)早期预测结直肠术后吻合口漏(anastomotic leakage,AL)的临床价值,并构建个体化预测AL发生风险的列线图预测模型(Nomogram)。研究方法:本研究为回顾性病例对照研究,研究对象为青岛大学附属医院普通外科诊
目的:胃癌(Gastric Cancer,GC)在我国发病率较高,由于其早期缺乏特异性临床症状,且用于胃癌筛查的肿瘤标志物特异性、灵敏度不高等问题,导致大多数患者发现时已进展至晚期,因此,发现新型肿瘤标志物用于胃癌的早期诊断显得尤为重要。lncRNA(long non-coding RNA)具有广泛的生物学功能,它的异常表达是影响肿瘤发生发展的重要因素。本研究通过RNA高通量测序(RNA sequ
目的炎症性牙根外吸收是外伤及正畸最常见的并发症,若不及时治疗,最终导致牙齿无法保留。目前,通过停止加力可以控制正畸性牙根外吸收,然而外伤、根尖周炎等导致的炎症性牙根外吸收只有根管治疗可以减缓吸收的进程,尚无明确的治疗方案可停止牙根外吸收。国内外学者对于炎症性牙根外吸收的发生发展机制尚无明确定论。本实验收集临床上牙根外吸收患牙的根尖周组织,通过免疫组织化学法及实时荧光定量PCR(RT-PCR)分别在
世界卫生组织国际癌症研究机构2020年最新统计,乳腺癌已经超过肺癌,成为全球最常见的癌症,跃居全球女性癌症发病率和死亡率第一位,对乳腺癌发病机制的深入研究已成为乳腺癌研究的热点。第10号染色体缺失的磷酸酶及张力蛋白同源的基因(phosphatase and tension homolog deleted on chromosome ten,PTEN)是重要的抑癌蛋白,是人类癌症最常发生的突变基因之
新课程改革的核心理念提出“以学生发展为中心,重视学生的主体地位。”然而在传统的教学模式中,学生缺乏自主学习与自我评价的条件和机会,因此其主观能动性和独特的个人品质难以获得充分发展。翻转课堂教学模式顺应了目前教育改革的发展需求,在社会发展背景的支持下应运而生。它为学生的自主建构、合作学习提供了平台。但是通过文献研究和实际调查发现,翻转课堂教学模式因其自身复杂性在实践层面的应用仍存在诸多有待解决的问题
研究目的:肝脏肿瘤,特别是肝母细胞瘤,是多发生于小儿中的最常见的肿瘤之一,严重威胁着患儿的生命健康。根治肝脏肿瘤的主要方法是手术切除,术后的残肝体积不足会引起肝脏相关的术后并发症。因此,进行肝脏手术时需要对患者肝体积进行分析以评估术后残肝是否足够维持正常肝脏功能。在小儿中,肝脏体积随生长发育变化,不同年龄的小儿肝脏体积差异大。同时,小儿的肝母细胞瘤生长迅速,体积较大,经常压迫正常肝组织。因此,对于