菜鳥作為國內物流行業(yè)的領軍企業(yè)，業(yè)務線覆蓋海內外。其業(yè)務特征為勞動力密集，合作企業(yè)眾多，包裹投遞鏈路多樣化且節(jié)點眾多，全鏈路協(xié)同。

菜鳥網絡高級技術專家徐強在ArchSummit全球架構師峰會上，介紹了在菜鳥數據中臺及運營平臺建設歷程中所遇到的挑戰(zhàn)、數據與運營平臺的融合歷程，例如在具體的業(yè)務場景里數據中間件該如何使用，結合一些物流場景案例分享給大家。（以下為演講內容整理）

一、物流業(yè)務概要

一個物品從工廠生產出來后，到被運送到買家手里是一個較長的鏈路，工廠運送到商家，然后通過運輸運送到分撥，再從分撥運輸到下一個節(jié)點的分撥。通常從一個城市到另外一個城市是由兩個分撥來負責的，一個城市負責收貨（集包），一個城市來負責發(fā)送（傳賬）。分撥之后，下放到站點和門店，這時候再由快遞員送到各位手里，或者菜鳥驛站，這就是一條完整的鏈路。在這個過程中，物流企業(yè)要做很多事情。

1.   首先是設計服務產品。比如說，從北京到杭州這條物流線路叫做一個物流的服務產品；

2.   服務產品出來以后，要做出相應的報價，從A點到B點需要多少錢？這個產品定價出來之后，客戶可以去訂購；

3.   接下來就要做相關的訂單管理；

4.   路線的規(guī)劃是一個很有考究的東西，比如從北京到杭州，可以從北京到濟南，然后再到杭州。它決定了物流的效率和物流的成本；

5.   攬收送貨。比如在A點有貨，需要送到B點。首先A點會把貨給到我，做合規(guī)性檢查后，把貨返還給A，再進行派送；

6.   事件管理。在整個過程中會有很多問題出現，大家比較熟悉的包裹丟失的情況，這就是一種事件。那么就對應著一系列的事件管理，比如客訴、實操管理；

7.   運力管理。物流是一個從A點到B點的全鏈路的運貨物流過程，它每一個節(jié)點上面都需要有人和車還有其他相關的物資進行保障的；

8.   財務報表。所有的這一切，都是為了盈利的。

上圖是一個物流企業(yè)的業(yè)務領域分析圖，通常稱它為戰(zhàn)略地圖。數據產品要協(xié)助的業(yè)務目標一般分成8大塊，包含財務、客戶層面，過程管理和資源管理等4個方面：

1.   財務層面，包含2個大的目標。生產力目標，分析物流公司整個操作環(huán)節(jié)的成本結構，然后提高資產利用率。營收增長率目標，增加收入機會，提高客戶價值；

2.   客戶層面。我們向客戶售賣的是什么樣的物流服務產品？目標客戶有什么樣的價值主張？我們和客戶之間的關系如何維系？這些東西，都是可以通過數據來量化的；

3.   過程管理。包含運營管理和銷售管理，投遞取出、維護實操。對于找什么樣的客戶來使用產品，以及怎么樣能獲得更多的客戶，有一系列的銷售管理；

4.   資源管理。最底層是支撐上面這一切的基礎。分為人力資源管理、實操的物料管理，信息資源。整個企業(yè)文化的管理，都要盡力把它數字化起來，才能讓物流企業(yè)擁有比較透明的管理權。

二、配送數據平臺 & 運營平臺面臨的挑戰(zhàn)

下面重點講一下配送全鏈路業(yè)務，是指從商家倉出來一直到用戶手上的這段派送履約鏈路，它包含4個主要的實操流程，分別是分撥實操、運輸實操、站點實操和快遞員實操。把4種實操管理放到三個系統(tǒng)里面，這三個系統(tǒng)分別是分撥管理、運輸管理、末端站點實操管理。

用戶一般有體感是在末端，也就是說去柜子里面取包裹這個環(huán)節(jié)。以上這些是整個數據平臺或者數據中臺在物流領域的數據來源的基礎。

數據平臺和運營平臺，面臨的最大挑戰(zhàn)是什么？干了多少活，花了多少錢，用了多少人？就三個基礎問題，看起來好像很簡單。但是這三個基礎問題對應到物流這個場景下，它所面臨的問題是非常復雜的。一般來說對應三個具體的運營動作，分別是運營管理、考核管理和經營管理。

這些問題在數據層面可以進一步細化，首先是包裹引擎，包裹引擎會針對到每一秒鐘處理的包裹數量，下一步就是預測需要多少車，以及未來可能會發(fā)多少貨。進一步推演就是全鏈路仿真系統(tǒng)。

全鏈路仿真系統(tǒng)是什么？首先在物流工廠里面，特別是在小促或者大促期間，在供應鏈那一側會有大量的數據推送過來，我們大概能預測到在某一個時間點，某一個環(huán)節(jié)大概要發(fā)多少貨。我們把這個數據推到一個模仿物流的仿真系統(tǒng)里，在這種仿真系統(tǒng)里做計算，最終達到優(yōu)化全鏈路和整個快遞網絡的效果。優(yōu)化結果會產出一個決策系統(tǒng)，這個決策系統(tǒng)目前仍然在建設中。

那么整個業(yè)務產品是怎么實現的？

1.   人工運營。首先是有基層的實操人員，分撥經理、調度主管和站長，也就是經?？吹降牟锁B驛站或者快遞網點，他們都是在這一層進行管理的。

2.   第2層是物流鏈路，傳統(tǒng)的物流管理方式，很大部分仍然需要有中層人員來進行領導，這些中層人員他們會做很多運營的事情。但不是針對全網，比如說運輸管運輸，分撥管分撥。這是傳統(tǒng)物流的管理方式，這三個鏈路和三個管理是分開的，沒有辦法把他們聚合到一起。而數據和技術的力量，可以讓這些管理人員能在同一個數據平臺或數據中臺里看到所有數據，給他們提供一個全鏈路的管理和協(xié)同工具。技術上要做的就是，把這三個東西變成一張物流網絡，從而實現人工管理。先所有數據收集，然后在數據里做進一步的分析優(yōu)化，然后做進一步的預測。

3.   數字化運營，是指從實操網上的全鏈路的數據統(tǒng)合，然后在此基礎上做數據運營。

數據平臺和運營平臺會碰到什么樣的技術挑戰(zhàn)呢？有一個很經典的場景，如果需要求從A點到B點，路由過程中的聚合的包裹數量以及明細的包裹數量，那么怎么做？最傳統(tǒng)的辦法是做兩張表，一張表作為橫表，列出所有明細來。但是，A點到B點的聚合操作非常困難，計算量也非常大。那么再做一張縱表，把所有的數據都聚合到節(jié)點上，然后去做分析。這時候一般會使用一個OLAP 數據庫，通過circle的能力把這些東西全都統(tǒng)合出來。

這是我們的第一代架構，它的性能不是特別好，速度也非常慢。最大的問題是，這些數據需要通過各層逐一的聚合起來，有數據源、原始數據、明細數據、匯總數據、以及指標數據，但是這些數據是逐層匯集上來的，在物流場景里，匯總的時候會出現一系列問題，那么我們怎么去解決這個問題？

1.   首先，需要單獨為這個場景去做計算引擎和存儲引擎，最先想到的最合適的技術就是泛搜索技術。也就是說把橫表和縱表都存到數據庫里面，這是一個搜索的概念。

2.   我們的查詢性能會大幅度提升，同時所有數據存儲的地點都是一致的，所以整個排查問題以及整個模型升級的速度會非常快。

3.   原始的使用circle這些技術的問題，沒有辦法統(tǒng)一去管理數據和在統(tǒng)一的地方去計算數據，所以這是一個比較大的創(chuàng)新點。

三、配送全鏈路數據平臺建設

這就是全鏈路的物流，它的整體架構分成5層：

分別是數據層，用于挖掘數據，處理層用于數據的預處理，引擎層利用仿真算法對數據進行特殊化處理?？刂茖永飼兄笜酥行?，還有一些算法能力在上面浸透出。最上面就是應用層，比如可以在分撥中心進行包裹的使用，包括數據的使用等。這其中引擎最大的特色在于虛實合一，即把算法的一部分仿真能力也放到引擎中，然后再通過實際數據對整個算法模型進行提升。

在這幾年做物流業(yè)務過程中，最大心得體會就是宏觀、微觀一致性，什么是宏觀？微觀一致性？整個項目流程中有很多業(yè)務方，如運輸業(yè)務方，有分撥中心業(yè)務方等各方需求。阿里的數據體系建設已經很完善了，所以出問題的地方更多是在邏輯部分，也就是我說的數據、你說的數據、我認為的數據和我看到的數據是不一樣的，為什么不一樣？

這是一個非常有趣的事情。運營同學制定一個指標，這個指標會有一個計算口徑，計算口徑與線下的作業(yè)情況可能并不是完全一致的，很多大規(guī)模勞動力密集型的企業(yè)都會存在這樣的問題，為什么呢？因為在一個廠里，可能每一個工作人員扮演的是不同的角色，如果沒有一套強大的計算數據引擎去支撐的話，是根本沒有辦法找到準確數據的。

菜鳥網絡的這套系統(tǒng)剛上線時，數據也是對不上的，需要排查線下和線上設定的是什么目標？這才是數技術真正發(fā)揮用武之地。

整個數據平臺依托于阿里的整個報表系統(tǒng)，這確實是一個比較好的報表系統(tǒng)，它不需要寫circle，而且操作簡單。只要對業(yè)務足夠理解，很快就可以把報表系統(tǒng)搭建起來。我們利用這套報表系統(tǒng)，對各個域進行了封裝。很多這些報表已經不是我們開發(fā)人員做的，全部是由完全不懂得計算機編程知識的業(yè)務方同學自己做的。

四、數據平臺與運營平臺的融合探索

1.  探索

對于數據平臺和運營平臺，我認為未來肯定是可以融合的。在物流這個場景中怎么實現融合呢？

首先我們必須有這幾個比較重要的系統(tǒng)，財務系統(tǒng)、考核系統(tǒng)，然后過程管理、工藝管理。這些系統(tǒng)核心會對應到物流上面某一個實操環(huán)節(jié)，然后對應到我們這里的話，大概是17道環(huán)節(jié)。這是我在一年前整理的，現在也會發(fā)生一些變化。比如說稱重、出庫這些環(huán)節(jié)，會具體到用了多少人，花多少錢。那么，再和這些包裹數量進行結合，就會得到一個對于物流企業(yè)的完整的數據認識。這些不光數據平臺要關心，同時運營平臺也要同樣關心。

2.  數據平臺與運營平臺的融合

接下來談一談，我認為未來數據平臺和運營平臺融合的樣子。

未來數據平臺需要做的首要事情就是管理，讓整體的物流管理和線上所設想的物流管理是一樣的。需要做的事情就是全鏈路的在線化，引用我們另外一個同事說的，5個在線：

1.   組織在線：整個公司不管是誰，整個HR系統(tǒng)需要把他們所有的數據全部線上化；

2.   溝通在線：所有對于工作的協(xié)同和溝通，需要通過系統(tǒng)完成，而不能完全通過打電話；

3.   協(xié)同在線：溝通在線以后協(xié)同才可能在線；

4.   業(yè)務在線：也就是說全鏈路，包括銷售、財務、運營、實操，所有的系統(tǒng)必須得在線化處理，然后再做進一步的模型迭代；

5.   生態(tài)在線：伙伴企業(yè)的數據只要是跟我的業(yè)務掛鉤，那么他跟我相關的業(yè)務系統(tǒng)必須得在線化，否則沒有辦法對他進行監(jiān)控。

有了這些數據之后，下一個可以做的事情就是運營管理。我們現在在做的事情，如智能排班，工作人員的工作量需要根據當天預測到的包裹量進行提前安排。目前中國的勞動力也越來越貴，所以就會有大量的臨時工，這種臨時工的彈性怎么保持？這就需要通過數據的方法計算出來，然后提前來進行排班。以此來保證投入產出比，這屬于運營管理的一個重要環(huán)節(jié)。

有了基礎運營管理以后，我們才能進入到下一個環(huán)節(jié)，叫做數據分析。我認為它的核心在于發(fā)現問題， 具體執(zhí)行是由運營系統(tǒng)來執(zhí)行的，所以這是兩個完全不一樣的工作，但是要很好的協(xié)同在一起。

最后的核心是，公司要有一個比較好的財務報表，通過運營系統(tǒng)和數據系統(tǒng)的合作，同時對應到運營的同學，以及管理更高層的財務同學，他們之間的通力合作，才能得到一個比較好的企業(yè)盈利效果。

作者介紹：

徐強，曾就職于 IBM STG，主要做分布式計算軟件。2016年的時候去了菜鳥，致力于數據技術在菜鳥網絡的應用，以及勞動力密集型產業(yè)的數據平臺和運營平臺的融合建設。