如何從0到1建設(shè)一個(gè)數(shù)據(jù)平臺(tái)

注：這篇文章沒(méi)什么技術(shù)內(nèi)容，基本都是在談經(jīng)驗(yàn)。

為什么會(huì)寫(xiě)這篇文章？是因?yàn)樽隽艘欢螘r(shí)間的企業(yè)數(shù)字化工作，發(fā)覺(jué)不是所有的地方，都已經(jīng)做好了一個(gè)數(shù)據(jù)平臺(tái)，等你來(lái)大展身手。

更多的時(shí)候，你是來(lái)到了一片荒漠之中，把過(guò)去那些已經(jīng)做的比較成熟的事情，重新的再做一遍，就像游戲開(kāi)荒那樣。因此，如果快速度過(guò)0-1的過(guò)程，從1開(kāi)始發(fā)揮自己的價(jià)值，就顯得很有必要，這是一個(gè)戰(zhàn)略問(wèn)題。

其實(shí)，數(shù)據(jù)在沒(méi)有積累到一定程度時(shí)，是很難發(fā)揮出它的智能價(jià)值的，也就是數(shù)據(jù)平臺(tái)的發(fā)展，繞不過(guò)“看數(shù)”的階段。只要業(yè)務(wù)成熟到一定程度，數(shù)據(jù)才能發(fā)揮出它的增值潛力。

就像石油，我們都知道它是“工業(yè)的血液”，但中古時(shí)期的人們，除了戰(zhàn)爭(zhēng)，就無(wú)法有效的利用石油。但數(shù)據(jù)積累到了一定程度，就不能只玩數(shù)據(jù)本身。還是石油，能夠分練出很多的有效產(chǎn)品，寫(xiě)很多的論文，但如果不能用在汽車(chē)、飛機(jī)上，就不能發(fā)揮出它的最大價(jià)值。

因此，在戰(zhàn)略上，我們首先要重視0-1的過(guò)程，就要像軍事那樣籌備一場(chǎng)場(chǎng)的戰(zhàn)役：“打仗，打的就是錢(qián)糧；數(shù)據(jù)，比的就是人力和機(jī)器成本?！比绾卧谧疃虝r(shí)間內(nèi)，把石油精煉的體系給做出來(lái)，保證工廠能夠長(zhǎng)期穩(wěn)定運(yùn)行，是首要的目標(biāo)。

畢竟，不論是做數(shù)據(jù)行業(yè)的人，還是用到的大規(guī)模機(jī)器，都是一筆不小的開(kāi)支。

其實(shí)大多數(shù)的從業(yè)者，都心心念的希望能夠做一個(gè)比較不錯(cuò)的項(xiàng)目，能夠幫助客戶(hù)或者用戶(hù)挖掘出數(shù)據(jù)背后的價(jià)值，但現(xiàn)實(shí)卻是，我們面臨的往往是基礎(chǔ)性的工作：看數(shù)。

所謂的“看數(shù)”，大體就是一個(gè)數(shù)據(jù)產(chǎn)品的雛形，包括非常多維的數(shù)據(jù)分析、下鉆等功能，再配合幾個(gè)簡(jiǎn)單的分析模式，成型了。

但，做好一個(gè)數(shù)據(jù)平臺(tái)，僅僅依靠自己的力量是不夠的，還需要跟前端、運(yùn)營(yíng)、算法、分析師等崗位結(jié)合，把數(shù)據(jù)炮彈送給前方，仗才有的打。

例如缺少了前端，平臺(tái)的體驗(yàn)肯定是個(gè)問(wèn)題；缺少了運(yùn)營(yíng)，平臺(tái)推廣不出去，直接價(jià)值就產(chǎn)出不來(lái)；缺少了分析師，指標(biāo)體系做的就只是個(gè)空殼子；缺少了算法，智能肯定就談不上了…… 所以，數(shù)據(jù)平臺(tái)，更像是搭了個(gè)場(chǎng)子，歡迎大家都來(lái)使用，發(fā)揮群策群力的力量。

這就決定了，幾乎沒(méi)有什么平臺(tái)，是一開(kāi)始就做好了，都是先隨著業(yè)務(wù)跑起來(lái)，再逐步的把基建夯實(shí)。但因?yàn)闃I(yè)務(wù)總是做不完的，平臺(tái)也不會(huì)覆蓋所有的case，因此最后都將邁向做業(yè)務(wù)的終極目標(biāo)：提效降本。

所謂：提效降本，簡(jiǎn)單講，就是把盡可能多的業(yè)務(wù)過(guò)程，自動(dòng)化掉，把人均能做的工作量、運(yùn)營(yíng)背負(fù)的KPI，用數(shù)據(jù)工程的力量，來(lái)提升一個(gè)檔次。同時(shí)，我們所消耗的資源，不論是人力還是機(jī)器，要盡可能的小。

既然所有的價(jià)值，都要回歸到“提效降本”上，其實(shí)是說(shuō)明，這世界上本就沒(méi)有那么多的價(jià)值去做，基礎(chǔ)科學(xué)不突破，地球艦隊(duì)再龐大，終歸不是水滴的對(duì)手。

講完了戰(zhàn)略，再講策略，就是我們到底要做什么？

做什么，最好要有個(gè)參照物，假如你是一家互聯(lián)網(wǎng)公司，阿里云就提供了大數(shù)據(jù)三件套：Dataphin + Quick BI + Quick Audience，這個(gè)是官網(wǎng)能夠搜得到的。

這三件套中，Dataphin用作數(shù)據(jù)開(kāi)發(fā)與建模，Quick BI用于報(bào)表產(chǎn)品搭建，Quick Audience則是最基礎(chǔ)的用戶(hù)增長(zhǎng)的產(chǎn)品化方案。

所以，既然是從0-1，那么這個(gè)參照物，就把數(shù)據(jù)從采集、加工、分析、應(yīng)用的全過(guò)程，提煉的比較完整了。當(dāng)然，如果是其他的行業(yè)，或者是策略有差異，那么也可以參照一些其他的參照物。

早年我們把美國(guó)的商業(yè)模式搬到中國(guó)，稱(chēng)之為“C2C”，今天的參照物，不過(guò)是進(jìn)一步細(xì)化了“C2C”，把商業(yè)模式的借鑒，下放到了產(chǎn)品設(shè)計(jì)中。

因?yàn)楫a(chǎn)品設(shè)計(jì)，尤其是像數(shù)據(jù)產(chǎn)品，并不像商業(yè)模式那樣，能夠直接產(chǎn)生經(jīng)濟(jì)價(jià)值，因此對(duì)軟件領(lǐng)域PAAS層的借鑒或者說(shuō)是抄襲，就不會(huì)像SAAS那樣敏感，甚至樣子都可以一模一樣，基本上不會(huì)對(duì)外的。

有了參照物，接下來(lái)，就可以著手把數(shù)據(jù)平臺(tái)的樣子，畫(huà)一張草圖出來(lái)了。這張草圖里，一定要有如下的這么幾個(gè)部分：

• 開(kāi)發(fā)工具；
• 研發(fā)規(guī)約；
• 協(xié)作流程；
• 質(zhì)量保證；
• 報(bào)表工具。

五個(gè)注意事項(xiàng) + 3個(gè)參照物平臺(tái)，一個(gè)數(shù)據(jù)平臺(tái)的框架，就清晰可見(jiàn)了。掌握了這些能力，搭建出一個(gè)可靠好用的數(shù)據(jù)平臺(tái)，就只是時(shí)間問(wèn)題了。

很多人會(huì)有一種誤區(qū)，即做數(shù)據(jù)，我們要把整個(gè)流程都自己做，其實(shí)不是的。就像維度建模理論，能夠把企業(yè)數(shù)據(jù)的“總線(xiàn)架構(gòu)”給勾勒出來(lái)，但這并不代表你能夠應(yīng)對(duì)種種其他類(lèi)型的需求，業(yè)務(wù)性的邏輯，還是交給工程組更合適一些。

因此，給數(shù)據(jù)平臺(tái)劃定一個(gè)研發(fā)的邊界，是很有必要的，避免團(tuán)隊(duì)資源投入到大量無(wú)效的需求中去。或許1-100的過(guò)程里，個(gè)性化的需求需要去支持，但這絕對(duì)不是0-1應(yīng)該考慮的。團(tuán)隊(duì)的研發(fā)協(xié)作，是有慣性的，如果一開(kāi)始就掉進(jìn)了需求陷阱里，就很難爬出來(lái)了，或者要退一層皮。

其實(shí)近年來(lái)，數(shù)據(jù)研發(fā)的崗位，招聘越來(lái)越難，一方面因?yàn)閿?shù)據(jù)分析/算法崗太火，吃掉了絕大多數(shù)的增量從業(yè)者；另一方面，也是因?yàn)閿?shù)據(jù)研發(fā)越來(lái)的越貼近業(yè)務(wù)，對(duì)于技術(shù)的要求有一種一言難盡的說(shuō)法。要說(shuō)面試造火箭吧，算法、架構(gòu)都少不了，但實(shí)際的工作中，這些能力都被平臺(tái)“賦能”了。

因此，越往上走，就要求對(duì)業(yè)務(wù)的貢獻(xiàn)越大，對(duì)業(yè)務(wù)的理解也就要求越深，技術(shù)長(zhǎng)期不用，能力自然會(huì)退化掉。

但這只是1-100過(guò)程中，所必須面臨的問(wèn)題。在0-1的過(guò)程里，需要的東西還是很多的。

講完了策略，也就是數(shù)據(jù)平臺(tái)目標(biāo)的樣子，接下來(lái)就是具體做事的方法了。簡(jiǎn)單講，就是“輕重緩急”的選擇。

如果我們畫(huà)出完整的架構(gòu)圖，它大概是如下的樣子：

在輕重緩急上，大體遵循：離線(xiàn)-->實(shí)時(shí)；模型-->報(bào)表；鏈路流程-->穩(wěn)定性保障；單一工具-->多工具服務(wù)整合…… 這么幾個(gè)原則。先做出可以使用的成果，在此基礎(chǔ)上，再將架構(gòu)圖中缺失的部分一點(diǎn)點(diǎn)補(bǔ)充上，直到完成平臺(tái)應(yīng)有的樣子。

這個(gè)過(guò)程要做的事情，其實(shí)是很多的，對(duì)抗“熵增”的具體技巧，就是工作經(jīng)驗(yàn)所賦予我們的。

從這個(gè)角度上看，有兩個(gè)“熵增”的最重要影響因素，需要控制住，即開(kāi)發(fā)過(guò)程中的規(guī)范、維護(hù)需求迭代的協(xié)作方法。如何把規(guī)范做好，減少后期需要返工的工作量，同時(shí)控制需求不能無(wú)序增長(zhǎng)，就是平臺(tái)初建最重要的考量因素，而這些其實(shí)都與管理能力相關(guān)。

接下來(lái)，考量的是團(tuán)隊(duì)的分工，從框架、質(zhì)量和建模等不同的角度入手，把整體框架搭建起來(lái)。這時(shí)候技術(shù)能力就很重要，例如實(shí)時(shí)能力選擇什么技術(shù)方法，例如建模如何評(píng)價(jià)好壞，例如穩(wěn)定性和質(zhì)量如何在高速迭代中保持，等等。

當(dāng)然，做過(guò)的東西，都要有所沉淀和輸出，讓后人理解我們這么設(shè)計(jì)的原因，同時(shí)遵循已經(jīng)形成的規(guī)范，最好把影響力擴(kuò)展到團(tuán)隊(duì)之外，吸引更多的人才加入。

所以，數(shù)據(jù)開(kāi)發(fā)人才的三種能力：管理能力、技術(shù)能力（包括架構(gòu)、代碼能力）、溝通協(xié)作能力，就是具體需要學(xué)習(xí)的做事方法。

講了這么多，從“提效降本”，到“參照物+規(guī)約工具流程”，再到需求的“輕重緩急”，基本上把0-1的過(guò)程講述清楚了。

走完1之后，真正的挑戰(zhàn)剛剛開(kāi)始。今天我們大多數(shù)人倒騰的事情，也許只有本公司能用一下，一些業(yè)務(wù)看上去有價(jià)值，做起來(lái)是一坨屎，維護(hù)的人更是不想管它。

但，這都是表象。大公司的探索，是企業(yè)發(fā)展過(guò)程中都會(huì)遇到的問(wèn)題，就像維度建模、數(shù)據(jù)治理、企業(yè)數(shù)字化這些理念，都是從大公司開(kāi)始，擴(kuò)散到了中小公司，最后普及到全行業(yè)。

這也就是說(shuō)，大公司的探索，會(huì)成為日后小公司借鑒的經(jīng)驗(yàn)。從這個(gè)角度看，我們折騰的各種東西，各種不靠譜的產(chǎn)品，其實(shí)都是在為這個(gè)行業(yè)的未來(lái)提供借鑒的經(jīng)驗(yàn)。

所以，與其把過(guò)多的精力放在需求合不合理上，不如多思考這些需求背后的考量。

比如做一款企業(yè)決策型產(chǎn)品，大多數(shù)人會(huì)抱怨領(lǐng)導(dǎo)需求多么不靠譜、領(lǐng)導(dǎo)怎么又變需求了。但如果深入進(jìn)去，你會(huì)發(fā)現(xiàn)，企業(yè)決策產(chǎn)品，其實(shí)跟“炒股軟件”很像。

炒股軟件如何支持你做決策？大致有這么幾個(gè)功能：資訊提供、交易功能、自選行情及實(shí)時(shí)變動(dòng)。對(duì)應(yīng)到數(shù)據(jù)平臺(tái)上，大體就是報(bào)表展示、自助分析、實(shí)時(shí)更新，以及一些管理功能，比如一鍵溝通對(duì)應(yīng)的數(shù)據(jù)負(fù)責(zé)人。

所以，做企業(yè)決策平臺(tái)久了，轉(zhuǎn)向其他的決策類(lèi)平臺(tái)，就很容易。

從這個(gè)角度上講，扎根一個(gè)業(yè)務(wù)場(chǎng)景，其實(shí)是數(shù)據(jù)從業(yè)者拔高自己的關(guān)鍵，也是對(duì)抗35歲陷阱的基礎(chǔ)能力。如果卷算法能力、編碼能力，我們也許永遠(yuǎn)都卷不過(guò)年輕人，但要論行業(yè)經(jīng)驗(yàn)、專(zhuān)家解讀，這些小孩就稚嫩的很。

數(shù)據(jù)開(kāi)發(fā)，只是我們從業(yè)的能力，而從業(yè)所積累的專(zhuān)業(yè)經(jīng)驗(yàn)，才是我們的核心競(jìng)爭(zhēng)力。

共勉。

更多關(guān)注：

?

?