职位描述:
-负责大型语言模型(主要以问答、文创、信息处理等)的评估标准制定,形成具有公信力的行业标准
-高质量评估,并对评估结果进行深入分析洞察,指导模型及系统策略优化
-与产品经理、工程架构、算法研发深度配合,共同推动产品迭代
-跟进市场动态,深入进行竞品分析、评估方案调研
-设计评估工具、自动评估等相关辅助产品,持续提升产品评估效率
职位要求:
-有用户行为研究、商业分析等经验优先,有很好的文字品味,洞察能力强,并具有较强的规律总结能力
-对大模型、深度学习、机器学习有较深的认知,对技术敏感
-具有较强的结构化思维能力和良好的表达能力、协作意识、执行力
-国内重点院校本科、研究生毕业,有大模型、对话机器人、NLP等相关方向实习经验、科研项目经历优先
招聘部门:
百度 TPG
工作地点:
北京市
面试建议:
百度TPG部门正在招聘的大模型评估产品经理岗位,是一个技术深度与产品思维并重的特殊职位。这个岗位最核心的要求是能够制定具有行业公信力的大模型评估标准,这需要你不仅具备传统产品经理的分析能力,还要对深度学习技术有足够深度的理解。面试官会特别关注你在评估体系设计方面的经验,以及如何将技术理解转化为可量化的评估指标。 在准备面试时,建议你重点准备三个方面的内容:首先是大模型评估案例,可以准备1-2个你参与过的评估项目,详细说明评估标准制定的思路和方法论;其次是技术理解,虽然不要求你亲自写算法,但要能清晰解释transformer架构、prompt工程等关键概念;最后是行业洞察,百度期待这个岗位能推动行业标准制定,所以你需要展示对国内外大模型发展现状的深刻理解。特别提醒,这个岗位非常看重结构化思维,在回答问题时建议采用’背景-问题-方案-结果’的框架来组织语言。