Keep团队近日在arXiv平台公开运动健康大模型评测基准MoveBench的预印本论文，同时开源首批80道中文题目及评测工具，并启动“MoveBench运动健康专家团”公开招募。
随着大模型逐步进入健身指导、运动数据分析等垂直场景，用户常向AI询问“该怎么练”，并要求其生成训练计划。MoveBench重点评估模型生成的训练建议是否专业、安全、适合具体用户且具备可执行性，旨在为行业提供统一、可量化的评测标准。
该基准覆盖训练课程生成、运动数据解读和专业知识问答三类场景，完整评测集包含809道题目和5012条评分细则，题型涵盖单选、多选及开放题，涉及13类学科。题库构建参考真实用户的BMI、年龄、伤病比例等统计分布，数据题使用脱敏后的真实运动日志，共有23位内外部领域专家参与开发，并引入安全红线机制对存在运动风险的建议进行负向评分。
首批公开的80道题目包括50道开放题和30道选择题，开发者可通过GitHub获取题目及评测工具并提交答案。Keep同时招募健身教练、体能教练、运动队教练、康复治疗师、运动营养师及运动科学、体育教育领域研究者，参与题目设计、审核、标准制定与标注校对，相关工作采用远程协作方式。
💬 评论