清华大学资讯工程系胡敏君教授团队,在国科会的支持下,开发「AI运动影像分析与VR沉浸式训练平台」,可透过AI影像分析技术,提供运动员动作指引,或者给予战术的建议。而该平台只需透过智慧手机就可以操作,并结合VR头戴式设备,给予更具现场体验的沉浸式影像训练。该研究成果已陆续发表於多个国际顶尖会议与重要国际期刊,也获得2021年台湾运动科技发展协会运动科技应用奖银奖与优选。
|
清大资工团队展示结合AI辨识的VR技术运动训练平台。左为清华大学资讯工程系胡敏君教授 |
胡敏君教授表示,此AI运动影像分析技术,可即时从影片中即时侦测重要事件(如投篮、上篮、灌篮等),并即时标注出关键的球员。而该系统也可以分析运动员的动作技巧与采用的战术,让球员与训练团动有效率地标注比赛影片内容,并破解对手的策略。
此外,也可从比赛影片中重建场景和物件的三维(3D)资讯,以任意视角重播赛事的内容,帮助运动员打造沉浸式的VR模拟训练环境,协助强化技巧与战术的认知,进而改善运动技能。
另一方面,透过分析大量赛事影片,团队也研发出各种生成式模型,以篮球为例,除了即时根据进攻者的移动轨迹生成对应的防守者移动轨迹,亦可根据运动员所设定的对手分析其过去的比赛影片,进而生成该对手采取各种动作时所对应的3D动画,让运动员在VR环境进行训练时,更能模拟真实比赛会发生的情况。
为了让AI技术可落地到运动场域让一般大众都能使用,胡教授也与清大资工系朱宏国教授共同带领学生将所研发之技术延伸成立新创公司(NeuinX),团队更针对行动装置所拍摄的移动视角篮球影片,研发精准且即时的物件追踪与投篮事件分析技术,篮球爱好者可上传或串流自己拍摄的比赛影片,即时产生投篮事件精彩剪辑与投篮热点分布。
除了篮球项目,团队也与清华大学运动科技中心之跨校研发团队合作,将相关技术进一步扩散应用於辅助桌球、棒球、拳击、射箭等运动项目之情搜与训练。
胡敏君教授表示,希??能透过AI技术提升运动训练的效率与品质,并将此技术推广至偏乡地区,弥平偏乡学生在运动训练上的资源落差。