字节跳动P0级事故:实习生删除GB以下所有模型,直接上了今日头条......
今日推薦
來(lái)源:codingsky.com/news/2021-06-24/114315.html
大家好。
曾經(jīng)我招過(guò)一個(gè)實(shí)習(xí)生,他曾經(jīng)干過(guò)一件讓我感到匪夷所思的事:
我當(dāng)時(shí)忙,讓他把服務(wù)器重啟,他直接來(lái)了個(gè)電源重啟。
最近脈脈上有網(wǎng)友爆料,字節(jié)跳動(dòng)一位實(shí)習(xí)生刪除了公司所有輕量級(jí)別的機(jī)器學(xué)習(xí)模型
圖片圖片什么是lite模型?
該樓主表示,lite模型就是公司內(nèi)幾乎所有GB大小以下的機(jī)器學(xué)習(xí)模型,且全部被刪除了,實(shí)習(xí)生直接刪除的是父目錄且加了 skip trash (刪除文件時(shí)臨時(shí)禁用回收)操作,導(dǎo)致被刪除模型無(wú)法被恢復(fù)。
圖片當(dāng)晚全公司通報(bào),直接被列入 P0 事故等級(jí)(嚴(yán)重事故):
圖片據(jù)樓層討論,光是處理問題的群就進(jìn)了接近三百人,其殃及業(yè)務(wù)之廣可想而知:
圖片大家都在討論這位實(shí)習(xí)生的去留,我們搜了一下,據(jù)說(shuō),“只要不是主觀故意的”就不會(huì)被開除:
圖片所以說(shuō)一定要穩(wěn)住別慌,問題不大。
網(wǎng)友熱議
有網(wǎng)友表示這是實(shí)習(xí)生給你們這幫人出了一道hard題,不過(guò)沒有標(biāo)準(zhǔn)答案,考驗(yàn)?zāi)銈兘忸}能力的時(shí)候到了。
圖片還有網(wǎng)友表示實(shí)習(xí)生不能有權(quán)限操作這么重要的東西,這鍋80%應(yīng)該判給管理者,實(shí)習(xí)生反倒是暴露了問題,換個(gè)角度來(lái)看,實(shí)習(xí)生立功了。
圖片我們知道,字節(jié)跳動(dòng)最出名的文化之一,就是扁平化管理。實(shí)習(xí)生與正式員工有同樣的文檔權(quán)限,這也是字節(jié)能夠在與BAT等大廠競(jìng)爭(zhēng)中保持靈活高效的秘訣,從這個(gè)角度上來(lái)說(shuō),說(shuō)實(shí)習(xí)生立功倒也不能算錯(cuò)。
圖片而別的對(duì)手就權(quán)限不一了。
圖片圖片到底刪除了多少模型?
根據(jù)字節(jié)網(wǎng)友后來(lái)發(fā)到網(wǎng)上的疑似截圖顯示,被刪除的只是:“Lagrange Lite 全量 Batch模型的備份”,且顯示為「被誤刪」。
圖片又有字節(jié)的工程師網(wǎng)友表示刪除的都是離線數(shù)據(jù),影響不大。
該樓主好像對(duì)此事非常熱衷,全程在線跟帖,表示“確實(shí)影響不大但是麻煩,重新訓(xùn)練模型和延遲上線理論上都會(huì)對(duì)指標(biāo)有負(fù)向只是不那么明顯了”。
圖片實(shí)習(xí)生“立大功”
2018年據(jù)英國(guó)《金融時(shí)報(bào)》報(bào)道,谷歌內(nèi)部一位實(shí)習(xí)生無(wú)意中犯下一個(gè)“小”錯(cuò)誤,導(dǎo)致一則沒有意義的廣告投放到“大量”網(wǎng)頁(yè)和應(yīng)用中,持續(xù)了大約為45分鐘,相關(guān)費(fèi)用和清理成本達(dá)到1000萬(wàn)美元,真可謂小手一抖,千萬(wàn)元沒有。
字節(jié) AI
字節(jié)都有什么出名的機(jī)器學(xué)習(xí)產(chǎn)品?
字節(jié)跳動(dòng)最早是以今日頭條來(lái)闖蕩江湖,在今日頭條以及后來(lái)的抖音和火山等產(chǎn)品上肯定用到了不少機(jī)器學(xué)習(xí)推薦算法,這就先不提了。
此外,在抖音這款“有毒”的產(chǎn)品上,也時(shí)不時(shí)見到各種運(yùn)用 AI 算法來(lái)做人臉變化的技術(shù)應(yīng)用,比如最近的在抖音上比較火的重返3歲的AI特效等等。
圖片據(jù) AI科技評(píng)論 所知,字節(jié)還開源過(guò)一個(gè)名為L(zhǎng)ightSeq的序列推理引擎,它對(duì)以 Transformer 為基礎(chǔ)的序列特征提取器(Encoder)和自回歸的序列解碼器(Decoder)做了深度優(yōu)化,早在 2019 年 12 月就已經(jīng)開源,應(yīng)用在了包括火山翻譯等眾多業(yè)務(wù)和場(chǎng)景。
據(jù)了解,這應(yīng)該是業(yè)界第一款完整支持 Transformer、GPT 等多種模型高速推理的開源引擎。
圖片LightSeq 可以應(yīng)用于機(jī)器翻譯、自動(dòng)問答、智能寫作、對(duì)話回復(fù)生成等眾多文本生成場(chǎng)景,大大提高線上模型推理速度,改善用戶的使用體驗(yàn)。
相比于目前其他開源序列推理引擎,LightSeq具有如下幾點(diǎn)優(yōu)勢(shì):1. 高性能;2. 支持模型功能多;3. 簡(jiǎn)單易用,無(wú)縫銜接Tensorflow、PyTorch等深度學(xué)習(xí)框架。
據(jù) AI科技評(píng)論 所知,字節(jié)跳動(dòng)AI Lab最近計(jì)劃要開源「新版訓(xùn)練加速引擎」,可以讓模型訓(xùn)練加速3倍以上。
最后,據(jù)這次的誤刪除事件來(lái)看,1GB 的模型其實(shí)不算大,大概只有幾億的參數(shù)量級(jí),反觀現(xiàn)在 AI 江湖動(dòng)則千億萬(wàn)億起步的模型,1GB以下的模型真的不算大,算不上是決定性的模型。
或許此次事件對(duì)字節(jié)只是一件不痛不癢的小事,字節(jié)的高層或許壓根不知道此事,畢竟這又不是刪庫(kù)跑路。
圖片雖說(shuō)如此,但程序里的bug是個(gè)玄學(xué),有時(shí)哪怕某個(gè)小bug產(chǎn)生的影響往往也是難以預(yù)料的,有時(shí)會(huì)牽一發(fā)而動(dòng)全身,若是趕巧也可能影響整個(gè)產(chǎn)品線。
推薦文章1、一款高顏值的 SpringBoot+JPA 博客項(xiàng)目2、超優(yōu) Vue+Element+Spring 中后端解決方案3、推薦幾個(gè)支付項(xiàng)目!4、推薦一個(gè) Java 企業(yè)信息化系統(tǒng)5、一款基于 Spring Boot 的現(xiàn)代化社區(qū)(論壇/問答/社交網(wǎng)絡(luò)/博客)總結(jié)
以上是生活随笔為你收集整理的字节跳动P0级事故:实习生删除GB以下所有模型,直接上了今日头条......的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 真香,写代码神器!32寸曲面显示器免费送
- 下一篇: 开工大吉,先送一波福利~