工作职责:

工作职责
1. 构建大模型安全方向人工及自动评估方案：运用创新工作范式，打造全面精准的大模型自动评测基准测试体系，覆盖复杂场景与多样任务，实现对大模型性能的多维度评估及安全能力洞察。持续追踪行业动态，优化完善基准测试，确保其领先性与实用性，为模型迭代提供可靠依据。​
2. 大模型安全策略效果提升：通过深度评测模型，全面分析模型在各项任务和场景中的表现，精准定位模型的弱点与不足。基于此，结合基准测试结果，与算法团队紧密协作，针对性地设计 RL 训练环境，制定切实有效的训练策略。通过参数调整、算法优化等方式，在设计的训练环境中对模型进行强化训练，不断提升模型在薄弱环节的表现，增强模型的整体性能与泛化能力。​
3. 数据收集与分析：主导大模型安全策略相关数据收集，制定标准流程保障数据质量。运用先进工具深入分析数据，提取有价值信息，为基准测试优化和模型训练策略调整提供数据支持，及时解决模型训练与应用中的问题。​
4. 跟踪行业动态：密切关注大模型领域技术发展与行业趋势，分析竞争对手情况，为产品策略优化提供参考，推动创新方案落地。​
5. AI 工具深度应用：熟练运用各类 AI 工具，结合业务场景探索其在基准测试构建、模型训练辅助及数据处理中的创新应用，提升工作效率与质量，推动流程智能化升级。

任职要求:

1. 学历与专业背景：本科及以上学历，计算机科学、人工智能、数学、统计学等相关专业优先。​
2. 工作经验：3 年以上产品经理经验，至少 1 年大模型、人工智能领域策略产品相关工作经历，熟悉大模型原理、架构及训练流程，特别的需要对于大模型安全领域有实际项目参与经验。​
3. 技能要求​
-精通大模型安全领域相关的人工和自动评测技术，熟悉评测指标与方法，能独立设计实施基准测试方案，可根据模型特点与业务需求定制评测策略。​
-深入理解强化学习原理，熟悉其在大模型训练中的应用，能运用相关工具制定优化训练策略。
-熟练掌握 Python 等数据分析工具，具备强大数据分析能力，能从海量数据中提取关键信息，基于数据驱动决策。​
-具备出色的 AI 工具使用能力，能灵活选择组合各类主流 AI 工具，借助其优化工作流程、提升效率与分析深度。​
-具备系统架构思维，能将基准测试体系及模型训练工作视为有机整体，从系统角度规划设计，保障其稳定性、可扩展性与高效性。​
4. 其他要求：对大模型技术有热情，学习意愿与自我驱动力强，能快速适应行业变化，具备良好问题解决能力与抗压能力，有创新精神。​