基于智能手机摄像头的实时3D模型与实景融合系统

专利主权项内容

1.基于智能手机摄像头的实时3D模型与实景融合系统，其特征在于，所述系统包括：摄像头，配置用于获取实景图像；实景图像建模单元，配置用将实景图像建模成高维数据结构，实景图像中每个物体被表示为高维度特征向量；光线处理单元，配置用于针对实景图像中的每个像素进行逆向光线投射以确定该像素的光线路径，将光线路径映射到高维空间，形成一个高维坐标系；每个光线路径被映射为一个高维点，对于每个光线路径的高维点，通过匹配最相似的场景中物体的特征向量来确定其所属物体，通过插值方法，在高维空间中对光线路径进行插值，以获得采样点位置；融合单元，配置用于根据插值得到的采样点位置，计算每个采样点的能量分布，通过在高维空间中移动光线路径的高维点，以模拟光线的传播，对于每个光线路径的高维点在高维空间中计算能量汇聚值，通过将能量汇聚值反投射回二维图像空间，获得每个像素位置的融合颜色值，将反投射得到的融合颜色值显示在3D模型中，实现3D模型与实景融合。