大模型审核策略分析专员

岗位职责

1. 全链路质量监控与评估：
   • 对大模型审核Agent完整工作流进行日常质检与效果评估；
   • 制定并执行质检标准与抽样方案，评估准确率、召回率、误杀率等指标。
2. 深度问题诊断与归因分析：
   • 精准定位问题根源（模型能力、Prompt设计缺陷、策略规则不合理等）；
   • 分析不同内容场景（文本/图片/视频等）表现差异，识别薄弱环节与潜在风险。
3. 策略优化与流程改进：
   • 提出优化建议（Prompt优化、规则调整、工作流节点改进等）；
   • 协同算法工程师与产品经理推动落地并验证效果。
4. 数据分析与报告：
   • 定期输出质检分析报告，呈现趋势、风险点与改进成果；
   • 具备一定数据分析能力。
5. 简单执行与闭环验证：
   • 处理复杂案例进行最终校准，确保结果正确；
   • 参与构建与维护高质量标注数据集，用于持续训练与评估。

任职资格

1. 学历：本科及以上学历，神学、基督教、佛学等相关专业优先；
2. 经验：2年以上内容审核、风控安全或互联网社区治理相关经验；
3. 行业精通：同时具备机审与人审实践经验，熟悉内容安全策略与审核标准；
4. 场景经验：覆盖社交/电商/直播/广告等场景，对涉黄/涉政/暴恐/违禁品/引流等内容高敏感；
5. 大模型基础：了解LLM原理、优势与局限；有Prompt工程或评估经验优先；
6. 核心能力：问题发现与逻辑分析能力强，能从复杂现象定位核心问题；
7. 沟通协作：沟通清晰，能与技术团队高效配合。