动作识别工程师做什么

问题：摄像头看到的画面，怎么变成游戏能用的数据

体感和互动运动类游戏依赖摄像头捕捉玩家动作，但摄像头本身只输出像素画面，把画面转化成"玩家做了投篮动作"这样的可用信息，是动作识别工程师的核心工作。

岗位：感知问题的主要负责人

这个岗位主要对应研发流水线里的INPUT阶段中的视觉输入部分，处理的是感知问题，和负责决策问题的AI对手工程师属于不同的技术方向。

职责：日常工作内容

训练和调优人体关键点识别模型；处理遮挡、光线变化、多人场景等边缘情况带来的识别误差；和Gameplay团队对接，确定识别结果应该以什么形式传递给游戏逻辑使用；评估识别延迟对整体体验的影响，配合优化处理速度；参与训练数据的采集和标注策略设计，包括评估合成数据是否适合补充特定动作的训练样本。

技能：需要什么基础

需要图像处理和机器学习相关基础，熟悉常见的姿态识别方法和评估指标（准确率、召回率、延迟）。工程实现能力同样重要——模型能在实验室环境下工作是一回事，能在实时互动场景下稳定运行是另一回事，这中间涉及大量工程优化工作。

作品证明：入门项目方向

一个简单的动作分类小项目是常见的起点：比如识别"举手"和"跳跃"两种简单动作，说明数据采集方式、模型选择理由、准确率和延迟的实测数据，以及在什么条件下识别效果会下降。诚实说明局限性，比只展示"识别成功"的演示视频更有说服力。

和游戏AI工程师的区别

需要特别说明，动作识别工程师解决的是感知问题（"玩家做了什么动作"），游戏AI工程师解决的是决策问题（"虚拟角色该做什么动作"），两者技术路线和评估标准都不同，求职时不应该混淆这两个方向的准备内容。