今年暑期有消息稱字節跳動某位實習生,因爲對團隊資源分配不滿,利用漏洞破壞GPU集羣代碼,導致大模型訓練受到影響,字節方面在10月19日已經證實確有實習生“投毒”破壞大模型,目前已將其辭退,並且向全行業公開了這位實習生的信息。
事情發生在今年的6月份,字節內部負責大模型訓練的某技術團隊,遭遇了一次內部技術攻擊時間,最後查明原來是一名田姓實習生所爲,這位實習生利用HF平臺的漏洞,在公司的共享模型中寫入了破壞代碼,導致大模型訓練效果忽高忽低非常不穩定,始終無法產生預期的訓練結果。
這位實習生因爲團隊領導將資源調度分配給了其他團隊,心生恨意於是決定搞破壞,輸入到GPU集羣的攻擊代碼最初看起來是debug,利用Hugging Face的load ckpt函數的漏洞注入代碼,修改模型參數梯度的方向,同時這名實習生還長期潛伏在團隊羣中,有針對性地對訓練過程進行破壞。
字節內部花了差不多兩個月才查明真相,這位實習生一開始還在狡辯,一位字節相關人員在Github上吐槽這位田姓實習生,“你在長達2個月的時間裏對集羣代碼進行惡意攻擊,對公司近30位各級員工造成巨大傷害,讓你的同事近一個季度的工作白費。所有的記錄和審查都證明這是不容狡辯的事實!”
字節證實這位田姓實習生來自國內TOP2某高校的在讀博士生,在21年9月起就在字節實習,這位實習生所在團隊今年還和王立威團隊一起推出了新一代VAR視覺自迴歸模型,在圖像生成質量、推理速度等多方面超越了DiT,目前這位實習生已經被字節辭退,同時個人詳細信息也向大模型行業聯盟公開,未來永不錄用。
大模型相關:
深度學習入門——圖靈獎AI三巨頭
阿爾法狗之父——從遊戲設計師,到化學諾獎得主!
AI編年史——深度學習的發展史(收藏向)
AI編年史2——GPT是如何誕生的?
AI學術巨佬——何愷明,從遊戲中獲得論文靈感
AI諾獎得主——辛頓,AI教父的成長史!
AI領軍人物——孫劍,重劍無鋒的經典之作
AI傳奇巨佬——湯曉鷗,中國人工智能領袖人物!
AI女神李飛飛——從成都七中,到頂級AI科學家!
山姆·奧特曼——從遊戲編程,到OpenAI之父!
張益唐——黎曼猜想,華人數學家再創重大突破!
B站大學——線代不掛科,MIT傳奇教授的最後一課!
微軟免費AI課程——18節課,初學者入門大模型!
百度——蘿蔔快跑出圈,自動駕駛的發展史!
機器學習——科學家周志華,成爲中國首位AI頂會掌門人!
機器學習入門——數學基礎(積分篇)
機器學習入門——數學基礎(代數篇)
機器學習入門——數學基礎(貝葉斯篇)
更多遊戲資訊請關註:電玩幫遊戲資訊專區
電玩幫圖文攻略 www.vgover.com