AI大模型评估专家(写作方向)-AI数据与安全
字节跳动
北京校招字节跳动社会招聘(社招)
岗位职责
1、负责大语言模型写作方向的评测工作,与产品研发协同迭代人工评估的流程和标准,通过交付高质量的评测/众测/AB实验报告,发现模型问题,为模型优化提供牵引;
2、持续探索自动评估的思路和方法,搭建自动评估的体系,提升自动评估与人工评估的一致率,提高模型评估的吞吐量和效率;
3、从用户端到端体验和模型理想态出发,构建迭代人工和自动评估题库,推动评估与用户需求对齐。
任职要求
1、本科及以上学历,计算语言学、中文、编剧、社会学、新闻学或人工智能、计算机等专业,有理工和人文交叉背景优先;
2、AI产品的深度用户,对AI写作和大语言模型有高度热情,掌握基础的提示词工程,会搭建Workflow和Agent优先,掌握基础的代码能力优先;
3、有很好的内容品味,对某几类体裁有较深度的理解和认知,包括但不限于论文/文案/公文/教案/诗歌/小说等;
4、具备出色的项目管理能力,能与产品、研发、数据等多部门协同,对齐需求并推动多项任务高质高效交付;
5、拥有出色的逻辑思维和问题解决能力,沟通表达清晰,学习能力强,细心严谨,有责任心。