公开英文机构资讯翻译整理 - 网站地图

字节跳动Seed设立安全与对齐部门,加强AI前沿风险防控

时间:2026-10-22 05:47:54 来源:数字安全观察 作者:数字安全观察 阅读:926次

文|南都记者 汪陈晨

文章主题示意图
主题配图,非事件现场。摄影:panumas nikhomkhai / Pexels

字节跳动Seed近期通过内部邮件公布,将组建“Seed Model-Alignment&Preparedness”部门,由严林担任负责人,并向Seed负责人吴永辉汇报。原有的Responsible AI团队以及部分Chat团队成员将调整至该新部门。

南都记者了解到,这一部门的成立是为了加大对安全与对齐方向的投入力度。对齐的关键在于使模型行为与人类意图及安全约束相吻合,进而增强Agent Model(智能体模型)的安全能力,并预防CBRN(化学、生物、放射、核)等前沿能力带来的风险。

当前,大模型安全风险愈发突出,智能体逃逸导致的网络攻击等事件屡有发生。在此之前,国内大模型研究团队的安全与对齐工作多数归入公司整体安全合规体系,而字节跳动Seed则成为国内首个单独设立安全与对齐部门的前沿AI实验室。

Seed团队内部认为,伴随模型能力持续提升、应用场景日趋复杂,安全与对齐已不仅是风险防范手段,而是决定模型能否实现规模化应用的核心能力。

据悉,Seed安全与对齐部门将围绕模型规范制定、安全评估体系建设、对齐训练、防护系统搭建和风险监控等方向不断投入,同时加强同外部研究机构及第三方评测的公开合作,最终让前沿模型在安全与授权约束下有效完成任务,并在模型能力和自主性增强的过程中,持续减少滥用及行为偏离风险,构建应对未知风险的全面安全体系。

声明:本文来自AI前哨站,版权归作者所有。文章内容仅代表作者独立观点,不代表安全内参立场,转载目的在于传递更多信息。如有侵权,请联系 anquanneican@163.com。

来源:安全内参安全资讯;原文日期:2026-10-12。内容经中文改写,请以原文为准。

(责任编辑:数字安全观察)

相关内容
  • 人工智能系统安全风险评估与持续治理方法
  • 人工智能安全争议下的规制前景
  • 网络靶场十年发展:标准由谁制定
  • 人工智能系统安全风险评估与持续治理方法
  • AI截图时意外将公司机密上传至公网
  • 鱼缸插排遭入侵致整缸鱼死亡,智能设备正为黑客打开家门
  • 人工智能系统安全风险评估与持续治理方法
  • AI让黑客经验可复制粘贴 漏洞进入工业化生产阶段
推荐内容
  • CISA紧急将7个在野漏洞列入黑名单 黑客借LiteLLM窃取大模型密钥
  • 鱼缸插排遭入侵致整缸鱼死亡,智能设备正为黑客打开家门
  • 网络靶场十年发展:标准由谁制定
  • Fable 5.1发布数小时即遭泄露,27万字提示词暴露AI行业核心短板
  • 三名被OpenAI解雇的安全研究员发联名公开信披露内幕
  • CISA紧急将7个在野漏洞列入黑名单 黑客借LiteLLM窃取大模型密钥