基于Kinect的实时3D视频通信系统及其实现方法

专利申请号：CN201310146580.0

公 开 号：CN103220543A

发 明 人：张冬冬 刘典 叶晨 王昕 薛敏峰 臧笛 

代 理 人：叶凤

代理机构：31216 上海天协和诚知识产权代理事务所

专利类型：发明申请

申 请 日：20130724

公 开 日：20130425

专利主分类号：H04N13/00(20060101)

关 键 词：视频信息 两路 彩色视频 场景视频 音频信息 实时传输协议RTP 视频会议系统 视频通信系统 摄像头同步 解码 技术实现 深度信息 视频场景 视频合成 同步采集 网络传输 虚拟视点 压缩处理 音频压缩 优化处理 编码器 多线程 滤波 视差 右眼 重构 双目 采集 场景 

摘      要：本发明基于Kinect的实时3D视频通信系统及其实现方法。利用KINECT摄像头同步采集彩色视频信息、深度视频信息和音频信息，并对深度信息进行滤波优化处理。利用x264对两路视频信息进行压缩处理，利用MP3编码器进行音频压缩，并利用多线程技术实现三路信息的同步采集。利用实时传输协议RTP进行网络传输。系统在接收到三路信息后，对两路视频信息进行解码，获得彩色视频信息和深度视频信息，并进行虚拟视点场景的重构，得到符合人眼视差的左眼场景视频和右眼场景视频。根据双目3D成像原理，将两路视频合成得到3D视频场景，与音频信息同步后利用DirectX播放，构成3D视频会议系统。