**********************
大语言模型(LLM)评测与数据专家
  • 收藏职位
  • 分享职位
12-24万 上海 研究生 0-3年 招聘 1 人 预计佣金 35.3K 一个月前发布
迅致直营
JD基本信息
岗位职责
1、 负责⼤语⾔模型的评测与分析⼯作,与模型训练团队配合,不断优化提升模型效果,⼯作内容主要包括: ① 结合业务需求痛点,构建和实施全流程的评测⽅案,包括建⽴和维护考察维度和标签体系,优化语⾔模型+⼈⼯的评测⽅法,维护和更新评测数据集等; ② 深⼊分析模型能⼒,形成客观认知,为模型训练迭代提供指导意⻅; ③ 洞察前沿进展,积极主动地学习和探索新的评测分析⽅法和技术。 2、 负责训练数据的制备,与模型训练团队和数据标注团队配合,完善和优化模型效果,⼯作内容主要包括: ① 参与数据制备流程设计; ② 深⼊理解⻩⾦数据的特征,维护⼀套兼具全⾯性和具体性的⻩⾦标准; ③ 亲⾃参与数据标注,同时指导和监督数据标注团队按批次产出数据,记录数据特性和版本; ④ 在开发团队和数据标注团队之间起桥梁沟通作⽤,为标注质量负责,及时汇报沟通。
任职要求
1、 有海量 pre-train 数据、SFT指令跟随数据、RLHF偏好对⻬数据的收集、清洗、 标注、管理经验,能够以数据驱动的⽅式优化模型效果。 2、 具有丰富的数据标注项⽬实施经验。 3、 了解⼤语⾔模型的评测⽅式和各类评估指标,具有丰富的⼤模型评测经验。 4、 擅⻓写 Python 脚本,擅⻓Excel应⽤,掌握基础 SQL 语句。 5、 具备出⾊的阅读理解能⼒和优秀的⽂字和⼝头表达能⼒。
所属行业:
计算机软件
职能分类:
算法工程师
工作城市:
上海,招聘1人,详细地址:延吉
职位要求
学历要求:
研究生
工作年限:
0-3年
技能/证书:
-
薪资福利
年薪范围:
12-24万*12薪
薪资福利:
五险一金 定期体检 年终奖带薪年假 员工旅游 节日福利
团队架构
所属部门:
-
下属人数:
-
部门架构:
-
汇报对象:
-
职级职称:
-
面试信息
面试轮次:
3轮
面试流程:
第一轮是HR; 第二轮部门负责人; 第三轮老板.
视频面试:
可以接受