馬斯克 硬核遷移服務(wù)器
原文鏈接：https://weibo.com/1727858283/NkRTyymTQ
馬斯克傳里面有一個(gè)故事，去年底馬斯克接手 Twitter 后為了省錢，要將薩克拉門托的服務(wù)器搬到波特蘭，IT 經(jīng)理跟馬斯克匯報(bào)說要 9 個(gè)月，馬斯克覺得這時(shí)間太長(zhǎng)了，一個(gè)月就能搞定，但 IT 經(jīng)理堅(jiān)持不妥協(xié)，于是他親自跑到機(jī)房拔電源租卡車搬服務(wù)器。
《伊隆?馬斯克親自搬運(yùn)服務(wù)器，彰顯他在 X 公司（此前為 Twitter）的 “狂熱緊迫感”》
* 此內(nèi)容改編自 Walter Isaacson 本月出版的傳記《伊隆?馬斯克》。
“這個(gè)時(shí)間表看起來像是我會(huì)認(rèn)為勉強(qiáng)可以接受的嗎？” 馬斯克問道。“顯然不是。如果計(jì)劃時(shí)間長(zhǎng)，那就是錯(cuò)的。”
那是 12 月 22 日深夜，位于 X 公司 10 樓的會(huì)議室，馬斯克正在與兩名基礎(chǔ)設(shè)施經(jīng)理進(jìn)行緊張的交談。他們之前與他的接觸并不多，尤其是在他心情不好時(shí)。
其中一人試圖解釋問題。位于薩克拉門托的一家數(shù)據(jù)服務(wù)公司允許 X 公司延長(zhǎng)其服務(wù)器租約，以便在 2023 年有序遷出?！暗裉煸缟稀?，這名顯得有些緊張的經(jīng)理告訴馬斯克，“他們回來告訴我們說這個(gè)計(jì)劃不再適用，因?yàn)樗麄冋J(rèn)為我們?cè)谪?cái)務(wù)上不再穩(wěn)健?！?/span>
這個(gè)設(shè)施每年花費(fèi) X 公司超過 1 億美元。馬斯克想通過將服務(wù)器遷移到 X 公司在俄勒岡州波特蘭的其他設(shè)施來節(jié)省這筆費(fèi)用。另一位經(jīng)理表示這項(xiàng)工作不能立即進(jìn)行。她平靜地說：“我們至少需要六到九個(gè)月的時(shí)間，因?yàn)樗_克拉門托仍然需要服務(wù)流量。”
多年來，馬斯克經(jīng)常面臨著他認(rèn)為的必要與別人告訴他的可能之間的選擇。結(jié)果幾乎總是一樣的。他沉默了幾秒鐘，然后宣布：“你們有 90 天時(shí)間來完成這項(xiàng)任務(wù)。如果你們做不到，你們可以辭職?！?/span>
這名經(jīng)理開始詳細(xì)解釋遷移服務(wù)器到波特蘭的障礙。“機(jī)架密度不同，電力密度也不同，” 她說。“所以機(jī)房需要進(jìn)行升級(jí)?！?她開始詳細(xì)介紹更多，但被馬斯克打斷。
“這讓我的大腦感到壓抑，” 他說。
“對(duì)不起，我沒有這個(gè)意思，” 她平穩(wěn)地回答。
“你知道頭爆炸的表情符號(hào)嗎？” 他問她?！拔业哪X袋現(xiàn)在就是這個(gè)感覺。真是一堆屁話。波特蘭明顯有大量的空間，從一個(gè)地方遷移到另一個(gè)地方簡(jiǎn)直小菜一碟。”
當(dāng) X 公司的經(jīng)理們?cè)俅卧噲D解釋時(shí)，馬斯克打斷了他們?！澳銈兡懿荒苋ノ覀兊姆?wù)器中心，然后給我發(fā)視頻？” 他問。
那是圣誕節(jié)前的三天，經(jīng)理承諾一周后提供視頻。“不，明天，” 馬斯克命令?！拔以?jīng)自己建設(shè)過服務(wù)器中心，我可以判斷是否還可以放更多的服務(wù)器。這就是為什么我問你們是否真的去過那些設(shè)施。如果你們沒有去過，那你們說的就是胡說八道?！?/span>
SpaceX 和 Tesla 的成功是因?yàn)轳R斯克不懈地推動(dòng)他的團(tuán)隊(duì)更加敏捷、有創(chuàng)造力，并發(fā)起突擊沖刺以解決所有障礙。這就是他們?nèi)绾卧诟ダ锩商乜焖俳M裝汽車生產(chǎn)線，并在得克薩斯州的沙漠中建立試驗(yàn)設(shè)施，以及在卡納維拉爾角使用舊零件建造發(fā)射場(chǎng)。
“你們需要做的就是將服務(wù)器遷移到波特蘭，” 他說?！叭绻^ 30 天，我會(huì)很震驚?！?他停頓了一下，重新計(jì)算?！罢乙患野峒夜?，運(yùn)輸電腦需要一個(gè)星期，然后再花一個(gè)星期來連接它們。兩周。就應(yīng)該這樣?！?/span>
所有人都默不作聲。但馬斯克仍在發(fā)火。“如果你們租了一個(gè) U-Haul （一家租車公司），你們可能自己就能完成?！?兩位 X 公司的經(jīng)理看著他，試圖判斷他是否是認(rèn)真的。馬斯克的兩位親密助手 Steve Davis 和 Omead Afshar 也在場(chǎng)。他們多次看到過他這樣，知道他可能真的這么認(rèn)為。
“為什么我們現(xiàn)在不去做？”James Musk 提議。
James 和他的弟弟 Andrew，是馬斯克的小堂弟，12 月 23 日，也就是那次令人沮喪的關(guān)于如何遷移服務(wù)器的基礎(chǔ)設(shè)施會(huì)議的次日，與他一同從舊金山飛往奧斯汀。他們?cè)?jì)劃去塔霍度過圣誕節(jié)，但那天伊隆邀請(qǐng)他們?nèi)W斯汀。
James 有點(diǎn)猶豫，他精疲力竭，不想再加重壓力，但 Andrew 說服他們應(yīng)該去。所以他們最后坐在飛機(jī)上聽伊隆抱怨服務(wù)器的事。
當(dāng)飛機(jī)飛過拉斯維加斯時(shí)，James 提出了一個(gè)建議，他們現(xiàn)在就可以移動(dòng)服務(wù)器。這是馬斯克喜歡的那種沖動(dòng)、不切實(shí)際的建議。盡管已經(jīng)是深夜，但他讓飛行員轉(zhuǎn)向，他們重新返回薩克拉門托。
他們著陸后能租到的唯一一輛車是豐田 Corolla。他們不確定晚上如何進(jìn)入數(shù)據(jù)中心，但一個(gè)名為 Alex 的來自烏茲別克斯坦的 X 員工還在那里。他欣然讓他們進(jìn)入，并帶領(lǐng)他們參觀。
這個(gè)設(shè)施也為許多其他公司提供了服務(wù)器存放空間，非常安全，進(jìn)入每個(gè)金庫都需要進(jìn)行視網(wǎng)膜掃描。烏茲別克斯坦的 Alex 幫助他們進(jìn)入了 X 公司的金庫，那里有大約 5200 個(gè)冰箱大小的機(jī)架，每個(gè)機(jī)架有 30 臺(tái)電腦。
“這些東西看起來并不難移動(dòng)，” 伊隆宣布。這是一個(gè)扭曲現(xiàn)實(shí)的說法，因?yàn)槊總€(gè)機(jī)架重約 2500 磅，高 8 英尺。
“你們需要雇傭承包商來抬起地板面板，”Alex 說。“它們需要用吸盤來抬起?！?他說，還需要另一組承包商去拆除電纜和地震桿。
馬斯克轉(zhuǎn)向他的保安，借了一把小刀。使用它，他能夠抬起地板上的一個(gè)通風(fēng)口，這讓他可以撬開地板面板。然后他爬到服務(wù)器下面，用小刀撬開了一個(gè)電箱，拔掉了服務(wù)器插頭，等著看會(huì)發(fā)生什么。沒什么異常發(fā)生。服務(wù)器已經(jīng)準(zhǔn)備好遷移。
“這看起來并不難，” 當(dāng)他這么說時(shí)，Alex 和其他人都目瞪口呆地看著他。此刻的馬斯克完全興奮起來。他大聲笑說，這就像是《碟中諜》的薩克拉門托版。
第二天 —— 圣誕前夜，馬斯克召集了增援。Ross Nordeen，與他的朋友 James 在 Tesla 工作，從舊金山驅(qū)車而來。他在聯(lián)合廣場(chǎng)的 Apple Store 花了 2000 美元，買下了所有的 AirTags，這樣服務(wù)器在遷移過程中就可以被跟蹤。然后他去了家得寶，花了 2500 美元買了扳手、斷線鉗、頭燈和擰下地震螺栓所需的工具。
Steve Davis，馬斯克的忠誠副手，找人租了一輛半掛車，并安排了搬家車。其他來自 SpaceX 的援助隊(duì)員也已到達(dá)。這些服務(wù)器機(jī)架都有輪子，所以團(tuán)隊(duì)能夠斷開其中四個(gè)并將它們推到待命的卡車上。這表明，這五千兩百多個(gè)服務(wù)器可能在幾天內(nèi)全部移動(dòng)。“伙計(jì)們干得好！” 馬斯克興高采烈地說。
該設(shè)施的其他工作人員帶著混合的驚奇和恐懼看著。馬斯克和他的團(tuán)隊(duì)在沒有用箱子包裝或用防護(hù)材料包裹的情況下，直接推動(dòng)服務(wù)器，然后使用店里買來的綁帶固定它們?cè)诳ㄜ嚿??！拔覐奈囱b載過半掛車，”James 承認(rèn)。Ross 稱其為 “令人恐懼”。這就像清理衣櫥，“但里面的東西都是至關(guān)重要的。”
下午 3 點(diǎn)，當(dāng)他們把四臺(tái)服務(wù)器裝到卡車上后，這一消息傳到了擁有并管理數(shù)據(jù)中心的 NTT 公司的高層。他們下令馬斯克的團(tuán)隊(duì)停止行動(dòng)。馬斯克的表情中混雜著歡樂和憤怒，這是他經(jīng)常伴隨著他的狂熱激進(jìn)時(shí)出現(xiàn)的情緒。他給存儲(chǔ)部門的 CEO 打電話，CEO 告訴他，在沒有專家的情況下，是不可能移動(dòng)服務(wù)器機(jī)架的。“屁話，” 馬斯克反駁?！拔覀円呀?jīng)裝了四臺(tái)到半掛車上了?！?/span>
這位 CEO 隨后告訴他，一些地板承受不了超過 500 磅的壓力，所以滾動(dòng)一個(gè) 2000 磅的服務(wù)器會(huì)造成損壞。馬斯克回應(yīng)說，服務(wù)器有四個(gè)輪子，所以任何一個(gè)點(diǎn)上的壓力只有 500 磅?！斑@家伙數(shù)學(xué)真的不太行，” 馬斯克告訴他的隊(duì)友。
在破壞了 NTT 管理層的圣誕前夜，并使他們?cè)诿髂昕赡軗p失超過 1 億美元的收入后，馬斯克表示同情，并說他會(huì)暫停遷移服務(wù)器兩天。但他警告說，圣誕節(jié)后他們會(huì)繼續(xù)。
圣誕節(jié)后，Andrew 和 James 返回薩克拉門托，看看他們還能移動(dòng)多少服務(wù)器。他們沒有帶足夠的衣服，所以去了沃爾瑪買了牛仔褲和 T 恤。
NTT 希望他們使用的搬運(yùn)承包商收費(fèi)是每小時(shí) 200 美元。所以 James 在 Yelp 上找到了一個(gè)名為 Extra Care Movers 的公司，他們只需要十分之一的費(fèi)用。這家看起來有些亂七八糟的公司將低成本的理念發(fā)揮到極致。老板曾在街上流浪，后來有了孩子，他正在試圖重整旗鼓。他沒有銀行賬戶，所以 James 使用 PayPal 支付給他。
第二天，工作團(tuán)隊(duì)希望付現(xiàn)金，所以 James 去銀行從他的個(gè)人賬戶中取出了 13,000 美元。兩名團(tuán)隊(duì)成員沒有身份證明，這使得他們很難進(jìn)入設(shè)施。但他們用勤奮彌補(bǔ)了這一點(diǎn)?！懊慷嘁苿?dòng)一臺(tái)服務(wù)器，你們可以得到一美元的小費(fèi)，”James 在某個(gè)時(shí)刻宣布。從那時(shí)起，每當(dāng)他們將新的服務(wù)器裝到卡車上，工人們都會(huì)問他們現(xiàn)在裝了多少。
服務(wù)器上有用戶數(shù)據(jù)，James 最初并沒有意識(shí)到，出于隱私原因，它們?cè)谶w移前應(yīng)該被徹底擦除?！爱?dāng)我們知道這個(gè)時(shí)候，服務(wù)器已經(jīng)被拔掉并推出去，所以我們不可能再推回去，插入，然后再擦除，” 他說。此外，擦除軟件也不能工作?！翱浚覀?cè)趺崔k？” 他問。伊隆建議他們鎖住卡車并進(jìn)行追蹤。
所以 James 派人到家得寶買了一些大的掛鎖，他們將組合代碼發(fā)送到波特蘭，以便卡車可以在那里被打開?！拔液?jiǎn)直不敢相信它起作用了，”James 說?！八麄兌及踩氐竭_(dá)了波特蘭?！?/span>
到這周結(jié)束時(shí)，他們已經(jīng)使用了薩克拉門托所有可用的卡車。盡管該地區(qū)受到了雨的襲擊，他們?cè)谌靸?nèi)移動(dòng)了 700 多個(gè)機(jī)架。該設(shè)施之前的記錄是一個(gè)月移動(dòng) 30 臺(tái)。這仍然留下了大量的服務(wù)器在設(shè)施中，但這群人已經(jīng)證明了它們可以被快速移動(dòng)。其余的部分在 1 月份由 X 公司的基礎(chǔ)設(shè)施團(tuán)隊(duì)處理。
這一切聽起來都很激動(dòng)人心和鼓舞人心，對(duì)吧？這是馬斯克大膽和有創(chuàng)意的方法的一個(gè)例子！但與所有關(guān)于馬斯克的事情一樣，這也并非那么簡(jiǎn)單。這也是他魯莽、對(duì)反駁的不耐煩和他恐嚇人們的一個(gè)例子。一個(gè)星期前，X 公司的基礎(chǔ)設(shè)施工程師在那次令人頭疼的會(huì)議中試圖解釋為什么快速關(guān)閉薩克拉門托中心會(huì)有問題，但他打斷了他們。他在忽略否定者時(shí)有很好的記錄。但并不完美。
在接下來的兩個(gè)月里，X 公司不穩(wěn)定。服務(wù)器的缺乏導(dǎo)致了多次系統(tǒng)崩潰，包括當(dāng)馬斯克為總統(tǒng)候選人 Ron DeSantis 主持 Twitter Spaces 時(shí)。到 2023 年 3 月，馬斯克會(huì)承認(rèn)：“回頭看，整個(gè)薩克拉門托的關(guān)停是一個(gè)錯(cuò)誤。有人告訴我我們的數(shù)據(jù)中心有冗余。我不知道的是，我們有 70,000 個(gè)硬編碼的引用指向薩克拉門托。由此導(dǎo)致的問題至今仍然存在?！?/span>
在 Tesla 和 SpaceX，他最有價(jià)值的助手已經(jīng)學(xué)會(huì)了如何避開他的壞主意，并給他逐漸透露不受歡迎的信息，但 X 公司的老員工不知道該怎么處理他。也就是說，X 公司還活著。薩克拉門托的事件向 X 公司的員工展示了，當(dāng)他談到需要狂熱的緊迫感時(shí)，他是認(rèn)真的。
Walter Isaacson 是 CNBC 的撰稿人，他還寫過關(guān)于伊隆?馬斯克、Jennifer Doudna、Leonardo da Vinci、Steve Jobs、Albert Einstein、Benjamin Franklin 和 Henry Kissinger 的傳記。他在 Tulane 大學(xué)教授歷史，曾是 Time 雜志的編輯和 CNN 的 CEO。
相關(guān)鏈接：
-
https://twitter.com/thecat/status/1705860673149059115 -
https://www.cnbc.com/2023/09/11/elon-musk-moved-twitter-servers-himself-in-the-night-new-biography-details-his-maniacal-sense-of-urgency.html
往期推薦
-
小孩也能學(xué)會(huì)的 Kubernetes 繪本教程
-
優(yōu)秀的 Shell 運(yùn)維腳本鑒賞 -
阿里 Nacos 高可用集群部署 -
神器 Nginx 的學(xué)習(xí)手冊(cè) ( 建議收藏 ) -
K8S 常用資源 YAML 詳解 -
DevOps與CI/CD常見面試問題匯總
-
我會(huì)在Docker容器中抓包了！ -
19 個(gè) K8S集群常見問題總結(jié)，建議收藏 -
9 個(gè)實(shí)用 Shell 腳本，建議收藏！ -
詳解 K8S Helm CI/CD發(fā)布流程 -
一臺(tái)服務(wù)器最大能支持多少條TCP連接？ -
K8S運(yùn)維必知必會(huì)的 Kubectl 命令總結(jié)
-
16 張圖硬核講解 Kubernetes 網(wǎng)絡(luò)
-
史上最全 Jenkins Pipeline流水線詳解 -
主流監(jiān)控系統(tǒng) Prometheus 學(xué)習(xí)指南
點(diǎn)亮，服務(wù)器三年不宕機(jī) 