字节跳动 Seed 单独设立大模型安全与对齐部门
字节跳动 Seed 近日发出内部邮件,字节宣布将成立“Seed Model-Alignment&Preparedness”部门,跳动由严林负责,单独大模汇报给 Seed 负责人吴永辉。设立原 Responsible AI 团队及部分 Chat 团队成员将转入新部门。型安
据悉,全对齐部该部门的字节设立旨在加强安全与对齐方向的投入,对齐的跳动核心是让模型的行为与人类意图和安全约束保持一致,从而提升 Agent Model(智能体模型)安全能力,单独大模以及防范 CBRN(化学、设立生物、型安放射、全对齐部核)等前沿能力风险。字节
大模型安全风险正日益凸显,跳动智能体逃逸引发的单独大模网络攻击等事件频繁发生。此前,国内大模型研究团队的安全与对齐工作大多被纳入到公司整体的安全合规体系中,字节跳动 Seed 则是国内首家单独成立安全与对齐部门的前沿 AI 实验室。
Seed 团队内部判断,随着模型能力越来越强、应用场景越来越复杂,安全与对齐已不只是风险防范,而是决定模型能否规模化应用的核心能力。
据了解,Seed 安全与对齐部门将围绕模型规范制定、安全评估体系建设、对齐训练、防护系统搭建和风险监控等方向持续投入,并加强与外部研究机构和第三方评测的公开合作,最终使前沿模型在安全与授权约束内有效完成任务,随着模型能力和自主性增强,持续降低滥用及行为偏离风险,建立面对未知风险的全面安全体系。
雷峰网 雷峰网(公众号:雷峰网)
- ·AI能否跑进干线物流,卓驭磐行给出商用车新解法
- ·郑州一公交车长礼让行人 老人鞠躬回报
- ·2026泰康健康心享A款(庆典版)医疗保险(费率可调)怎么样?咋买?
- ·2022年安徽中小企业营业收入2.96万亿
- ·东至县尧渡镇:新型文化空间“涵养”文明新风
- ·半个月不充电 腾势Z9S续航1100公里
- ·“通过镜头,让更多团圆被铭记”
- ·兴源环境:任钱波出任总经理
- ·万级长续航vivo Y600正式开售,国补到手价1699元起
- ·亚运会|第20届亚洲运动会在日本名古屋闭幕
- ·停车7天692元 火车站西广场收费咋这么贵?
- ·曾经的“米黑”罗永浩,公开夸赞小米18 Fold,并称无商业合作
- ·苹果Mac Studio顶配卖到22.9万元!能买三辆比亚迪秦PLUS
- ·“通过镜头,让更多团圆被铭记”
- ·10岁男孩拿父亲丧葬费打赏主播 平台:正办理退款
- ·超能继承者2国庆专属礼包兑换码一览
