基于混合现实的机器人体感随动预测

人工智能学院

Robot Motion Follow-up Forecasting Based On Mixed Reality

在混合现实环境下，基于深度学习的3D姿态实时估计方法，机器通过对人类行为的感知和理解来预测未来人体行为，并重构虚拟人体3D模型来预见未来人体行为。主要探讨的方向有：单人姿态估计、人体姿态跟踪以及3D人体姿态估计。计划解决问题有：复现人体姿态估计模型、实现2D到3D人体姿态转换模型、复现动作预测模型、模型集成与优化（集成人体姿态估计、2D到3D人体姿态转换模型、和动作预测）、实现MR动态显示人体3D姿态序列、虚拟交互。