高效匹配对选择和影像特征匹配直接决定无人机影像运动恢复结构(structure from motion,SfM)的效率。联合词汇树的倒排和正向索引结构,提出无人机影像匹配对选择和特征匹配加速算法。首先,利用词汇树的单词-影像倒排索引结构,基于影像...
详细信息
高效匹配对选择和影像特征匹配直接决定无人机影像运动恢复结构(structure from motion,SfM)的效率。联合词汇树的倒排和正向索引结构,提出无人机影像匹配对选择和特征匹配加速算法。首先,利用词汇树的单词-影像倒排索引结构,基于影像相似性的空间分布特征,设计了自适应阈值的词汇树检索算法;然后,利用词汇树的影像-单词正向索引结构,将显式最近邻描述子搜索简化为词汇树单词映射,设计了词汇树引导匹配算法。4组无人机影像的试验结果表明,所提的自适应阈值词汇树检索算法能够有效地筛选匹配对,避免传统固定阈值或比例算法导致的匹配对数量过多或不足的问题;在保证匹配精度的前提下,词汇树引导匹配算法的加速比达到156~228,并在无人机影像SfM空三中取得与经典最近邻搜索匹配相当的精度。
随着元宇宙概念的兴起,以6自由度(six degree of freedom,6DoF)视频为代表的新一代交互式媒体技术得到产业界和学术界的广泛关注。6DoF视频隶属于多媒体通信领域,通过计算重构的方式向用户提供包括视角、光照、焦距和视场范围等多个维...
详细信息
随着元宇宙概念的兴起,以6自由度(six degree of freedom,6DoF)视频为代表的新一代交互式媒体技术得到产业界和学术界的广泛关注。6DoF视频隶属于多媒体通信领域,通过计算重构的方式向用户提供包括视角、光照、焦距和视场范围等多个维度的媒体交互与内容变化,能使千里之外的用户有身临其境、千人千面之感,与元宇宙具有的感知、计算、重构、协同和交互等技术特征具有高度重合性。因此,6DoF视频涵盖的技术体系可作为实现元宇宙的替代技术框架。本文提出了6DoF视频10个方面的40个问题,并将6DoF视频端到端技术链条归纳为生成、分发和呈现3个宏观阶段,随后围绕这3个技术阶段分别从内容采集与预处理、编码压缩与传输优化以及交互与呈现等方面阐述国内外研究进展。其中,在内容采集与预处理阶段,阐述了多视点联合采集、多视点与深度联合采集、深度图与点云预处理;在视频压缩与传输阶段,阐述了多视点视频编码、多视点+深度视频编码、光场图像压缩、焦栈图像压缩、点云编码压缩、6DoF视频传输优化;在交互与显示阶段,阐述了解码后滤波增强和虚拟视点合成。最后,本文围绕该领域当下的挑战,对未来趋势进行了讨论。
暂无评论