10月14日,字节跳动Seed宣布,为近日成立的Alignment & Preparedness部门,在全球范围内招募10位顶尖研究员,共同突破前沿模型可持续发展过程中最具挑战性的未知难题。工作地点为北京、上海、圣何塞。
Seed表示,AGI的意义不只在于获得更高智能水平,更在于让先进智能真正、持续地服务于人。随着模型能力越来越强,安全与对齐能力已不再只是风险防范,而是决定模型能否规模化应用的核心能力。
该部门的工作围绕三大方向展开:
一是完善安全基础体系和工作流程,制定模型行为规范与安全准则,建立科学的安全评估体系,提升模型对风险的感知和防御能力。
二是推动安全能力持续迭代,探索预训练、中训练、SFT、RL各阶段更有效的安全与对齐训练方法,通过模型间自动攻防,持续增强安全能力。
三是建立面对未知风险的全面安全体系,探索更泛化的安全训练方法,提升模型的正向判断能力,完善未知风险的监控、阻断与归因机制
#互联网大厂 #大厂 #字节跳动 #Seed #AGI #AI安全
