開源的底色，易觀數(shù)科的誕生

在數(shù)字化進程加速的當下，互聯(lián)網(wǎng)也已經(jīng)從流量時代進入留量時代。流量時代是一個增量時代，“互聯(lián)網(wǎng)的滲透率還未飽和，還有人口紅利，大家總覺得永遠會有新用戶”。而留量時代則是一個存量時代，幾乎沒有新的增量。兩者最大的變化在于“老的流量時代是一個增量思維，新的留量時代是一個存量思維”。易觀 CEO 于揚表示，“在新的留量時代，對每個企業(yè)而言，如何構建和運營好自己的核心數(shù)字用戶資產(chǎn)，我覺得這是最大的挑戰(zhàn)，也是最大的機會。”因此，對易觀來說，當前最主要的是用好數(shù)據(jù)，幫企業(yè)解決問題，抓住機會。而過去，它們只是幫企業(yè)發(fā)現(xiàn)問題，指出行業(yè)發(fā)展趨勢。

在 10 月 23 日的“A10 數(shù)據(jù)智能峰會”上，易觀戰(zhàn)略全新升級，正式公布兩大業(yè)務線：聚焦數(shù)字用戶洞察的易觀分析，專注智能用戶運營的易觀數(shù)科。簡言之，易觀分析是幫企業(yè)發(fā)現(xiàn)問題，指出發(fā)展趨勢，而易觀數(shù)科則是幫企業(yè)解決問題，抓住機會。易觀 CEO 于揚表示，“易觀的使命是讓數(shù)據(jù)能力平民化。易觀數(shù)科更希望通過技術、產(chǎn)品和解決方案來賦能企業(yè)，提供工具和優(yōu)質(zhì)服務，再加上客戶至上的服務態(tài)度去幫助客戶在數(shù)字化升級中做好數(shù)據(jù)驅動?！?/span>

從幫助企業(yè)發(fā)現(xiàn)問題到幫企業(yè)解決問題，這對易觀數(shù)科來說是個不小的挑戰(zhàn)！

易觀大數(shù)據(jù)成立于 2012 年，雖然從成立第一天起，就是一個產(chǎn)品和技術驅動的科技公司，當時的主要業(yè)務還是業(yè)務咨詢和行業(yè)分析。因此真正去幫企業(yè)解決問題時，你要跟客戶的業(yè)務流程和業(yè)務系統(tǒng)打通第一個挑戰(zhàn)就是技術。對于這個話題，郭煒是最有話語權的。他 2016 年加入易觀，此時易觀主要做業(yè)務咨詢和行業(yè)分析。

當時，易觀有一款分析產(chǎn)品，叫易觀千帆。它通過與眾多數(shù)據(jù)合作伙伴的合作，構建了基于統(tǒng)計算法的大數(shù)據(jù)分析平臺，分析 APP 用戶活躍度。據(jù)郭煒介紹，易觀千帆最初月活只有 1000 多萬，但業(yè)務發(fā)展快，數(shù)據(jù)量快速增加，很快逼近兩億。而此時，公司的技術狀況“堪憂”，總共有 30 多個技術人員，產(chǎn)品主要依賴阿里云，使用 Apache Hadoop。但是，問題在于整個 Apache Hadoop 生態(tài)的技術門檻很深，“很多東西要花兩三個月修改，才能把它做好”。他說：“我們當時在 Apache Azkaban 上有幾千個任務，經(jīng)常在晚上死掉，我們被折磨得不行了，后來開始自研?！?/span>

總之，平臺非常不穩(wěn)定，不僅宕機，還老出各種問題。

“天天加班，回不了家，好不容易回了家，任務在半夜又掛了。那時，我天天晚上三四點被叫起來處理問題，沒法睡覺。”郭煒補充說。以至于，團隊用上自研的 Apache DolphinScheduler 后流行幾句話——工具選得好，下班回家早；調(diào)度用得對，半夜安全睡。

剛到易觀的第 6 個月，郭煒過生日，“這一天，老于（于揚）把我叫到辦公室，說你來了六個月，很感謝你的工作，但你看我們現(xiàn)在這個平臺還是不穩(wěn)定”。

技術團隊感覺壓力非常大，為了改善現(xiàn)狀，做了這么幾件事。

首先，對 30 多人的技術團隊進行大幅調(diào)整，只剩 8 個人，然后，進行了團隊重組?！坝袝r候，團隊成員還不夠快，有的技術人員跟不上，就需要重新調(diào)整團隊”。

其次，在技術路線上，始終堅持 Apache 生態(tài)。在郭煒看來，當時的技術路線第一是擁抱開源，擁抱 Apache 生態(tài)。他說：“Apache 的東西跑起來不行，當然，你也可以用商業(yè)版，比如 Cloudera，用完就能解決問題，但有兩個問題：一是它有商業(yè)版權，如果要用，需要付費；另一個是與我們公司的理念相沖突，我覺得擁抱開源才能進一步提升我們自己的技術人員能力。”并且，在他剛到易觀時，公司主業(yè)還是業(yè)務咨詢和行業(yè)分析，因此如何積累自己的技術能力和技術實力也就成為郭煒考慮的重要因素。

因此，易觀技術團隊不僅基于 Apache Hadoop 生態(tài)研發(fā)了一些性能優(yōu)化的東西，而且自研了 Apache DolphinScheduler。這樣，平臺的性能和穩(wěn)定性得到不斷提高，為現(xiàn)在的技術平臺奠定了基礎。

隨著團隊技術人員成長了起來，而且積累了不錯的技術實力，這才有易觀現(xiàn)在的技術，易觀數(shù)科才有可能出現(xiàn)。同時，為打造更穩(wěn)定、更可靠的平臺，易觀也從公有云轉向混合云。

2015 年到 2016 年時，易觀使用公有云（阿里云）。后來，易觀開始采用混合云，”把它變成實體機，用 Apache 的框架給跑起來，用了 Pivotal Greenplum，加上 Hadoop 去解決一些業(yè)務上的問題”。在這一年，易觀先后遷移了兩次：

先從阿里云遷到自建的混合云，他們找到一家供應商，買了一根光纖，從阿里云連到 UCloud。后來，UCloud 推出自己的混合云，易觀租用它的機房，將自己的機器搬進去，又做了一次遷移。兩次遷移結束后，平臺基本穩(wěn)定下來，“一直到現(xiàn)在，6.8PB 大數(shù)據(jù)平臺都在 UCloud 的混合云里”。郭煒對 InfoQ 記者指出，易觀這樣既可以使用公有云的彈性擴展能力，也能充分利用物理機的穩(wěn)定性。

遷移兩次，雖然問題不少，但是也鍛煉了團隊，把易觀數(shù)科的技術做起來了，“我們做的 Hadoop 集群非常穩(wěn)定”。正是各種踩坑和磨練，讓易觀數(shù)科逐漸積累起自己強大的技術能力。易觀數(shù)科的核心技術能力源自易觀的大數(shù)據(jù)平臺，6.8PB 大數(shù)據(jù)平臺中大量的計算引擎的優(yōu)化，大量的調(diào)度，還有從中孵化出的 Apache DolphinScheduler?！鞍言瓉韮?nèi)部使用的技術，以產(chǎn)品的形式打包，變成一種商業(yè)化的產(chǎn)品，比如易觀方舟，最終賦能我們的用戶“。

對易觀而言，這只是邁過了技術關。接下來，他們需要把自己對業(yè)務的理解和技術相結合變成客戶能使用的產(chǎn)品，因此易觀數(shù)科需要跨越產(chǎn)品關。這就帶來兩大挑戰(zhàn)：第一，私有化部署。很多人在過去認為大數(shù)據(jù)平臺越大越好，但是，一旦到了私有化部署，優(yōu)化的方向就有所不同。實際上，這個技術門檻挺高?！拔覀冏龅搅?，但很多友商費了半天勁也沒做出來，因為這不僅要對底層橫向的平臺進行優(yōu)化，而且對計算的性能要求很高”。

第二，適配場景。易觀原來的產(chǎn)品主要供內(nèi)部的數(shù)據(jù)分析師使用，場景比較固定。但是，當產(chǎn)品向外提供，如何去支撐客戶的業(yè)務場景？據(jù)郭煒介紹，他們通過產(chǎn)品抽象出 12 大模型，賦能客戶?！白铋_始，我們調(diào)研了一圈，提出一個很重要的架構，叫 IOTA 架構”。從 IOTA 架構中，從里面核心抽象出三個主要數(shù)據(jù)模型，被稱之為主謂賓模型，即主語、謂語和賓語?；谶@些模型，去適配易觀跟用戶相關的所有場景，“它是通用的”。基于模型之外，根據(jù)客戶的需求去適配，系統(tǒng)將客戶的場景歸到哪一種或模塊下?！叭绻疾缓线m，我們再新建一個模塊去適配它。當然，我們的模型也會變，有時候增，有時候減，逐步去適配我們客戶的使用”。

最重要的一點是易觀數(shù)科有著開源和云化的基因，因此產(chǎn)品的開放性很高。據(jù)悉，某頭部股份制商業(yè)銀行使用易觀數(shù)科的產(chǎn)品，融合到系統(tǒng)中非常順利，受到雙方一致好評。郭煒稱，“我們的最終目標是賦能客戶，即把我們的系統(tǒng)融合成客戶系統(tǒng)的一部分，賦能客戶的業(yè)務部門，一起把這個事做好?！?/span>

當然，僅僅過了技術關和產(chǎn)品關還不夠，還差落地。怎樣把技術、產(chǎn)品與服務相結合，應用到行業(yè)客戶的業(yè)務場景中，真正解決客戶的業(yè)務問題，這是關鍵。“最終，只有解決了業(yè)務問題才是王道”。

易觀 CEO 于揚認為，“我們相信，不會是普適性的產(chǎn)品，不會僅有技術就能解決客戶的業(yè)務問題，一定是技術、產(chǎn)品加上服務組成的解決方案，來解決客戶的業(yè)務問題?！痹谛袠I(yè)解決方案上，易觀有一個很大的優(yōu)勢——易觀分析多年來深耕行業(yè)的數(shù)字化?！斑@給我們第二個業(yè)務品牌——易觀數(shù)科在行業(yè)解決方案上提供了很好的助力”。

換句話說，易觀數(shù)科有先進的技術和產(chǎn)品能力，加上易觀分析多年來對行業(yè)業(yè)務場景的洞察，最后可以幫助易觀數(shù)科拿出更好的行業(yè)解決方案，去真正解決客戶的痛點。

簡言之，易觀數(shù)科更懂業(yè)務。

十幾年的行業(yè)咨詢和分析，讓易觀對行業(yè)客戶有著深入的理解。以銀行為例，銀行的信用卡業(yè)務一直有個難點：有信用卡的人很多，但是信用卡的活躍度不高。顯然，在今天移動支付無所不在的情況下，信用卡已經(jīng)退到支付的后面，微信和支付寶成為人們的首選支付工具。

那怎樣讓消費者在這些支付場景中想到綁定某個銀行的信用卡？對銀行而言，它們首先要接入更多的場景，比如餐飲、娛樂、機酒火車、商城、生活繳費等。其次，銀行需要深度運營這些場景。

于揚說：“易觀有一套解決方案，可以通過多場景、持續(xù)不斷的深入運營，讓銀行卡的用戶有更多的激活，更多的人使用信用卡，這對銀行的信用卡業(yè)務就意味著更多的收入?！?/span>

對酒店來說，今年受疫情沖擊比較大，不僅商旅出差減少，而且大型會議活動幾乎全部停止。但是，酒店歷史上有大量的用戶和客戶的數(shù)據(jù)，怎么通過數(shù)字化的方式把沉淀在酒店 CRM 系統(tǒng)中的客戶數(shù)據(jù)激活，讓用戶重新與酒店發(fā)生關系。這就顯得極其重要。

“這個又能用到易觀數(shù)科的智能用戶運營。首先，你要建立一個數(shù)字觸點，把這些數(shù)據(jù)采集回來，再跟后臺的 CRM 數(shù)據(jù)拉通，判斷哪些客人歷史上是高價值客人。有沒有可能在公域把它激活，持續(xù)的推出一些活動，比如婚宴、生日宴和親子活動等。甚至跟當?shù)氐木包c搞一些短途 / 主題旅行，激活酒店的住宿和餐飲。“他說。

無論是信用卡，還是酒店，現(xiàn)在各行各業(yè)的核心都是怎么更好的促活，更好的增加黏性，怎樣提升復購，延伸用戶生命周期。

據(jù)悉，除了銀行和酒店，易觀還有不少的快消品客戶，比如相宜本草?！巴瑯邮谴倩?，不同的行業(yè)，它的解決方案是不一樣的”。銀行的信用卡怎么促活？酒店怎么促活？化妝品怎么促活？...... 實際上，這都需要針對性的解決方案。于揚表示，“這又發(fā)揮了易觀歷史上的優(yōu)勢，即我們更懂業(yè)務。同時，我們的咨詢和分析團隊，可以跟產(chǎn)品結合在一起提供優(yōu)質(zhì)的服務?！?/span>

更懂業(yè)務的調(diào)性，加上開源的技術路線，讓易觀的解決方案能發(fā)揮更大的價值。業(yè)務要落成產(chǎn)品，它要求這個技術有很高的開放性。它要能快速適配，比如汽車和金融，這是兩個完全不同的行業(yè)，“可能產(chǎn)品形態(tài)都不同，但我們只有一個產(chǎn)品團隊，怎么更好的適配它們。因為我們有開放的組件、開放的 API，因此可以快速組裝一些小模塊去適配不同的行業(yè)解決方案?！惫鶡樥f。

在他看來，只有懂行業(yè)才能更好的落地，才能有的放矢。“尤其是技術類的純算法，它沒有辦法去解決業(yè)務問題，它一定是在某個固定的場景中，對行業(yè)有了深入了解，才能發(fā)揮算法的作用”。

2016 年，于揚花了 6 個月的時間通過各種角度和郭煒溝通，最終達成幾個共識：開源、云化和生態(tài)，并請郭煒加盟易觀擔任 CTO。某種意義上，開源是于揚和郭煒共同的信仰。他們有一種觀念：不認為商業(yè)軟件是應該蓬勃發(fā)展的，反而堅信開源這種“我為人人、人人為我”的精神。

在面對開源和閉源的兩種技術路線時，于揚和郭煒堅定地選擇了開源，“我們堅定地認為開源是一個更有擴展性、更有連接性和更有生態(tài)包容性的一個方向”。特別是當今地緣政治沖突的背景下，基于開源生態(tài)的自主、安全、可控的云服務，不僅對國家安全至關重要，也對行業(yè)客戶的風險控制至關重要。試想，如果采用了閉源的不友好國家的商業(yè)組件，我們將如何避免斷供、停更、數(shù)據(jù)泄露、后門操控這些風險呢？

今天，易觀數(shù)科的開源生態(tài)正在茁壯成長，社區(qū)和開發(fā)者群體不斷壯大，Argo、DolphinSchedulur 等產(chǎn)品的開發(fā)者，累計已超過一萬人。

據(jù)易觀數(shù)科介紹，如今的 Apache DolphinScheduler 社區(qū)有近三千五百人，Argo 社區(qū)也有一千五百人，使用 DolphinScheduler 的企業(yè)接近 400 家，使用 Argo 的企業(yè)也有 200 多家。并且，DolphinScheduler 已經(jīng)成為 Apache 基金會孵化器項目，預計明年年初從 Apache 畢業(yè)。

郭煒說：“我們有兩個技術基本價值觀：一是開源，二是云化。一直到現(xiàn)在，團隊規(guī)模變這么大，我們還是這兩個價值觀。我們的使命是讓數(shù)據(jù)能力平民化，我們會在里面投入很多的精力，通過開源或免費的方式讓大家用起來?！?/span>

郭煒強調(diào)，自己非常堅信 Apache 的這種開源生態(tài)，“我們做完后，愿意把我的東西貢獻出去，開源出去，貢獻給社區(qū)，比如 Apache DolphinScheduler“。這里還有一個小故事，有一天郭煒找到于揚說，我們?nèi)绻_源的話，所有的代碼都要貢獻給基金會，畢竟這是公司花費很多成本開發(fā)的，我們是否想清楚了。于揚看著郭煒的眼睛說：“雖然我們還沒想清楚如何變現(xiàn)，但這個方向還是我們一直堅持的，咱就這么干吧“。這是一種信仰。

實際上，在擁抱 Apache 生態(tài)的過程中，易觀數(shù)科的技術團隊也是受益匪淺。比如，在開發(fā)流程上，國際上的開發(fā)流程，“像 Code Review、自動化的 CI/CD 跟我們不一樣。原來，我們的開發(fā)流程比較粗糙一些，這就過不了 Apache 的流程”。于是，易觀數(shù)科的技術團隊按照 Apache 的流程實施，并要求其他項目也跟 Apache 的流程靠齊。舉個例子，在做 Code Review 時，有很多國外技術專家替易觀的技術人員 Review 一些代碼，這給他們帶來很大的提升。“我覺得開源的好處之一是讓你的團隊快速和國際大牛的團隊去接軌，你貢獻這些代碼，再經(jīng)過大牛的打磨，這讓你的團隊能快速成長，得到快速提高”。

對郭煒而言，接下來需要進一步擴大社區(qū)，吸引更多的開發(fā)者參與進來。目前，Apache DolphinScheduler 社區(qū)已經(jīng)進入一個比較良性的自發(fā)展階段。它現(xiàn)在的每個版本大概有 30%-40% 的功能都不是易觀開發(fā)出來的，是由社區(qū)其他成員貢獻出來的。而談到易觀 Argo，他想讓用戶能更快地上手。打個比方，Argo 產(chǎn)品有點像高射炮，但一般用戶的目標是打蚊子，所以上手有點重。郭煒表示，后續(xù)會從產(chǎn)品功能迭代上降低其上手難度，調(diào)一調(diào)產(chǎn)品調(diào)性，讓它更加平民化，比如通過文檔、視頻和案例的方式，再加上運營的手段。

從業(yè)務咨詢分析、行業(yè)分析再到智能運營的產(chǎn)品和技術及解決方案，易觀一直在進化。而易觀數(shù)科的出現(xiàn)，則讓進化之路更清晰：幫助企業(yè)建立以數(shù)字用戶資產(chǎn)為核心的數(shù)字化商業(yè)能力，通過深耕行業(yè)場景的智能用戶運營的解決方案，助力企業(yè)快速實現(xiàn)面向用戶的數(shù)字化升級。