chovxyy (@huxinlei) 在 【北京】【字节跳动】Agent / 大模型评测【算法实习生】 ( ai data ) 中发帖
团队与方向
我们是 AI 数据与安全(AI Data & Safety)下的数据研究团队,支持 Seed(基模)与 Flow(豆包等)的评测业务。
职位描述
参与大模型的评测分析:构建自动化分析能力,涵盖能力画像、轨迹分析、模型弱点分析等,把评测结果转化为可解释信号,帮助研发团队明确模型优化方向;
参与数据飞轮建设:研究如何将评测问题转化为数据、训练信号、benchmark,驱动“评测-数据-模型迭代”飞轮在真实场景中落地;
跟踪评测分析、自进化、长程自主研究(autoresearch)等方向的最新研究成果,探索新方法并落地为团队可复用的能力。
职位要求
计算机科学与技术、数学、统计学、人工智能等相关专业,硕士及以上学位,博士或有相关领域突出成果者优先;
在模型评测、数据合成、模型训练等方向中至少一个有较深入的实战经验,或对该方向有非常强的兴趣与自驱力,愿意持续跟进前沿、快速学习、...