LLM Evaluation算法实习生-基模当面告知
上海米哈游网络科技股份有限公司
2027-02-05 16:47:24
博士28届29届实习硕士
岗位详情
地区：
北京
·
上海
专业要求：
人工智能计算机科学与技术
岗位职责：
1. 对大语言模型评估结果做深入数据分析，理解不同评估指标与用户体验、需求之间的关联，对模型训练迭代提供指导意见
2. 研发可靠的大语言模型评估管线，制定针对角色扮演、创意写作等能力的自动或人工评测准则与方法，构建对应的评测数据集
3. 紧扣偏好对齐目标，分析和清洗奖励模型数据，研发不易被reward hack、偏好有深度的奖励模型
招聘要求：
1. 计算机科学、人工智能或相关领域的在读硕士或博士
2. 对大语言模型评测体系有较深入的理解，并能构建评估方法以改进模型性能，掌握LLM as Judge技术
3. 对大语言模型的工作原理有较深入的理解，熟悉BT reward model训练和SFT训练，熟悉RL训练更佳
4. 有良好的中英文阅读和鉴赏能力，有良好的沟通合作能力
加分项：
1. 在ACM/ICPC，NOI/IOI，TopCoder等编程大赛上有获奖
2. 在模型评估方向有NeurIPS/ICML/ACL/EMNLP顶级论文发表，积极追踪大模型方向前沿进展和应用
3. 参与过有影响力的LLM应用项目，有交互界面设计、数据标注相关经历
4. 具备良好的文学素养，对游戏、影视、小说等人文和娱乐内容有浓厚兴趣
公司介绍
上
上海米哈游网络科技股份有限公司
上海米哈游网络科技股份有限公司，成立于2012-02-13，位于上海，法定代表人：刘伟，登记状态：存续，注册资本31716.6663万人民币，公司类型：民营/私企
公司信息:公司名称:上海米哈游网络科技股份有限公司公司类型:网络游戏公司性质:1000-4999人公司地点:公司规模:--涉及领域:--公司网址: