AI模型评测(AI分身方向)-大模型数据服务中心
字节跳动
北京校招字节跳动社会招聘(社招)
岗位职责
1、负责LLM大语言模型赋能在抖音AI分身方向应用的效果评测,与产品/运营/模型算法等团队充分沟通协作深入理解评估需求;
2、参与各类业务调研分析、评估方案制定、评估体系搭建与迭代并组织评估,能借助数据分析等方式对问题进行拆解分析,定位各类体验问题,输出有价值的分析报告辅助业务迭代优化,并通过引入自动化流程辅助评测提效;
3、深度理解抖音社区生态(如直播/短视频/图文/虚拟形象)用户诉求,能准确判断用户对AI互动体验的满意,并对应拆解出问题定位。
任职要求
1、本科及以上学历优先,英文语言能力加分;
2、了解基础AI技术(如NLP/LLM/提示词/Prompt编写等,有通过扣子等其他平台搭建Agent/Workflow经验者优先),特别是对AI产品在互动娱乐方向的表现上有了解和探索;
3、有大模型评测经验,有独立负责评估项目经验、有团队沟通和横向协调能力经验优先;
4、逻辑思维清晰,对于复杂高难度任务能有规划地独立统筹安排,积极自驱乐于主动思考/表达和总结改进,数据敏感度高基于数据能发现问题总结规律。