立即注册  找回密码
 立即注册
CeraNetworksBGVM服务器主机交流会员请立即修改密码Sharktech防护
查看: 70|回复: 6

字节跳动大模型训练被实习生攻击,涉事者已被辞退

[复制链接]

字节跳动大模型训练被实习生攻击,涉事者已被辞退

[复制链接]

260

主题

1665

回帖

6139

积分

论坛元老

积分
6139
气味

260

主题

1665

回帖

6139

积分

论坛元老

积分
6139
2024-10-19 11:41:43 | 显示全部楼层 |阅读模式
10月18日,多个微信群流传一则消息:“某头部大厂的大模型训练被实习生入侵,注入了破坏代码,导致其训练成果不可靠,可能需要重新训练。据称遭到入侵的代码注入了8000多张卡,带来的损失可能超过千万美元。”

界面新闻从知情人士处获悉,该头部大厂为字节跳动。此事发生在今年6月,起因是某高校的博士在字节跳动商业化技术团队实习,因对团队资源分配不满,使用攻击代码破坏团队的模型训练任务。

界面新闻向字节跳动方面求证此事,截至目前,官方未进行回应。

传闻显示,该田姓实习生利用了HF(huggingface)的漏洞,在公司的共享模型里写入破坏代码,导致模型的训练效果忽高忽低,无法产生预期的训练效果,而且AML团队无法核查原因。但传闻曝出之后,该实习生还在某微信群里辟谣称,自己发完论文后就从字节跳动离职,这个当口有另一个人钻漏洞改模型代码,把锅扣到自己头上。

界面新闻从知情人士处了解到,字节跳动内部已经调查明确此事为田姓实习生所为。目前,该实习生已被辞退,字节跳动同时把此事同步给阳光诚信联盟和企业反舞弊联盟,以及该实习生所在的学校。但这名实习生被辞退后到处“辟谣”甩锅,称是其他人所为。

但该实习生攻击的并不是豆包大模型,而是商业化技术团队的模型训练任务,影响了该技术团队的一些业务进展,但整体对公司造成的损失并没有传闻中的超过千万美元那么大。

一位技术安全专家告诉界面新闻,HF漏洞产生肯定是单一性集中训练,此事暴露了字节跳动技术训练存在安全管理问题。公司既没做权限隔离,也没有做好共用代码的审计。正常情况下,每次大的代码变动必须做审计,无论谁做操作都有痕迹记录,一个人想动代码是不可能的。

上述技术安全专家表示,目前行业通用的做法是做三级隔离导向性部署,每一级只有镜像,每次先扫描。调用按次算、必须密钥。每一级完成后,才能进入下一级,而上一级自动删除,进行分级训练。
回复

使用道具 举报

2

主题

171

回帖

518

积分

高级会员

积分
518
piping

2

主题

171

回帖

518

积分

高级会员

积分
518
2024-10-19 12:50:51 | 显示全部楼层
你说这个,我又想起前几年字节跳动用openai来训练自家ai。
回复

使用道具 举报

9

主题

472

回帖

1441

积分

金牌会员

积分
1441
Romeoiii

9

主题

472

回帖

1441

积分

金牌会员

积分
1441
2024-10-19 12:18:53 | 显示全部楼层
不关心,我用Chatgpt和Claude
回复

使用道具 举报

85

主题

427

回帖

1957

积分

金牌会员

积分
1957
喵酱文晓依

85

主题

427

回帖

1957

积分

金牌会员

积分
1957
2024-10-19 12:21:07 | 显示全部楼层
那我就只能去看看千问了
回复

使用道具 举报

6

主题

733

回帖

1860

积分

金牌会员

积分
1860
karson

6

主题

733

回帖

1860

积分

金牌会员

积分
1860
2024-10-19 12:30:21 | 显示全部楼层
出了事就濑实习生,实习生能有机会碰这些代码?

回复

使用道具 举报

12

主题

122

回帖

428

积分

中级会员

积分
428
PPGod

12

主题

122

回帖

428

积分

中级会员

积分
428
2024-10-19 12:33:17 | 显示全部楼层
不关心,我用Chatgpt和Perplexity
回复

使用道具 举报

4

主题

182

回帖

694

积分

高级会员

积分
694
wps

4

主题

182

回帖

694

积分

高级会员

积分
694
2024-10-19 12:46:54 | 显示全部楼层
无所谓,我用Gemini
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|小黑屋|HS2V主机综合交流论坛

GMT+8, 2024-11-22 02:25 , Processed in 0.091552 second(s), 2 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表