一种基于时间卷积网络的多模态人群密度预测方法

专利申请号：CN202310557004.9

公 开 号：CN116682056A

发 明 人：钟竞辉 刘伟恒 

代 理 人：黄月莹

代理机构：广州粤高专利商标代理有限公司

专利类型：发明专利

申 请 日：20230901

公 开 日：20230517

专利主分类号：G06V20/52

关 键 词：人群 时间序列数据 视频信息模块 密度预测 时间卷积 多模态 子区域 多模态信息 监控摄像头 摄像头 低信噪比 获取图像 计数模型 融合模块 行程计划 行程信息 预测结果 融合 预测 向量 网络 图像 响应 

摘      要：本发明公开了一种基于时间卷积网络的多模态人群密度预测方法，包括以下步骤：视频信息模块从监控摄像头中获取图像，获得的图像经过人群计数模型进行人群计数，获得各个摄像头每个时刻的人群密度，并组织成时间序列数据；人群密度的时间序列数据经时间卷积网络分别为每个子区域提取出当前时刻的隐向量；行程计划模块从行程计划表提取相应的行程信息用于多模态预测；将融合模块与视频信息模块的特征进行融合，得出各个子区域未来多时刻的人群密度预测值。本发明融合多模态信息的模型能够进提高模型的预测精度，在面对低信噪比的数据时能够给出平稳的预测结果，并且在人群密度突发变化时也能够及时作出响应。