一、航空業(yè)數(shù)據(jù)治理現(xiàn)狀

目前航空行業(yè)數(shù)據(jù)治理已經(jīng)逐步在開展起來，驅(qū)動航空行業(yè)開展數(shù)據(jù)治理工作的因素與證券、銀行、通信領(lǐng)域不同。證券行業(yè)有證監(jiān)會33條規(guī)定，銀行業(yè)有銀監(jiān)會要求在2017年7月份開始實施報送數(shù)據(jù)標準化規(guī)范要求，這些外在監(jiān)管要求促使了證券、銀行必須開展數(shù)據(jù)治理方面的建設(shè)。

促使航空行業(yè)開展數(shù)據(jù)治理的主要因素是客戶倒逼企業(yè)在做，服務(wù)行業(yè)現(xiàn)在都在做客戶精準營銷，航空業(yè)也不例外。這些年航空公司的信息化快速發(fā)展，積累了很多有價值的數(shù)據(jù)。但是擁有數(shù)據(jù)，并不意味著擁有數(shù)據(jù)資產(chǎn)。

那么如何將企業(yè)的數(shù)據(jù)轉(zhuǎn)化為數(shù)據(jù)資產(chǎn)?我們知道企業(yè)在日常運營過程中產(chǎn)生的數(shù)據(jù)，只是一些原材料，存在不可知、不可信、不可取等問題。要想將其轉(zhuǎn)化為數(shù)據(jù)資產(chǎn)，需要借助大數(shù)據(jù)治理打通數(shù)據(jù)和信息的通道。從而為挖掘數(shù)據(jù)價值、業(yè)務(wù)創(chuàng)新提供決策支持，以滿足客戶的個性化服務(wù)的要求。

通過對國內(nèi)兩家大型航空公司數(shù)據(jù)治理項目的實施以及中小航空公司數(shù)據(jù)治理的交流探討，我總結(jié)出航空數(shù)據(jù)現(xiàn)狀總體面臨著散、亂、難問題，數(shù)據(jù)資產(chǎn)分布散、數(shù)據(jù)定義亂、數(shù)據(jù)管理難。這使得航空業(yè)大數(shù)據(jù)治理呈現(xiàn)出三個趨勢。

二、航空業(yè)大數(shù)據(jù)治理的

三個發(fā)展趨勢

趨勢1：集中管理企業(yè)數(shù)據(jù)資產(chǎn)

針對分散在企業(yè)各個系統(tǒng)的數(shù)據(jù)資產(chǎn)，對企業(yè)數(shù)據(jù)資產(chǎn)進行盤點，實現(xiàn)對數(shù)據(jù)資產(chǎn)的統(tǒng)一集中管理。管理的內(nèi)容包DB數(shù)據(jù)資產(chǎn)、接口數(shù)據(jù)資產(chǎn)、報表數(shù)據(jù)資產(chǎn)、指標標準和企業(yè)數(shù)據(jù)模型等。

趨勢2：提升企業(yè)數(shù)據(jù)洞察能力

通過數(shù)據(jù)治理構(gòu)建數(shù)據(jù)洞察能力趨勢，舉個例子說：小張銷售部門的數(shù)據(jù)分析員，現(xiàn)在需要做一個2017年“春運”的市場和銷售情況分析。他知道需要航班日期、起落機場、機型、收入、成本等這些基本數(shù)據(jù)，并且這些基礎(chǔ)數(shù)據(jù)來源于航班運控系統(tǒng)。但是他想分析中加入航油、腹艙貨運，天氣對航班的影響。這些數(shù)據(jù)有沒有?從哪里取?連他這個老員工都不清楚，就更不用說新員工了。通過大數(shù)據(jù)治理，提升企業(yè)對數(shù)據(jù)資產(chǎn)洞察能力，可以快速定位到需要的數(shù)據(jù)。

趨勢3：規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)

數(shù)據(jù)架構(gòu)簡單來說就是“人對企業(yè)業(yè)務(wù)的表達、記錄，并轉(zhuǎn)化為計算機可處理的格式”,是連接數(shù)據(jù)與信息的橋梁，部分航空公司為了適應(yīng)這個趨勢，專門成立了數(shù)據(jù)架構(gòu)部，負責(zé)建立維護管理企業(yè)整體數(shù)據(jù)架構(gòu)。

我們認為企業(yè)的數(shù)據(jù)架構(gòu)，主要有三個組件構(gòu)成。分別是數(shù)據(jù)標準、企業(yè)模型和數(shù)據(jù)存儲結(jié)構(gòu)。如下圖所示

標準在最上層，是總體綱領(lǐng)。企業(yè)模型在中層，最下層是數(shù)據(jù)資源存儲結(jié)構(gòu)。層次是這樣劃分的，但在實際建立的過程中，是一個由下而上的方式。通常是在現(xiàn)有數(shù)據(jù)存儲結(jié)構(gòu)的基礎(chǔ)上，設(shè)計企業(yè)數(shù)據(jù)模型，然后歸并數(shù)據(jù)項，形成數(shù)據(jù)標準。

通過大數(shù)據(jù)治理，可以規(guī)劃統(tǒng)一、標準的數(shù)據(jù)架構(gòu)，為企業(yè)信息化建設(shè)提供規(guī)范和標準，使得在業(yè)務(wù)層和應(yīng)用層之間，做各個操作型應(yīng)用的設(shè)計、開發(fā);在各個操作型應(yīng)用和數(shù)據(jù)層之間，做業(yè)務(wù)系統(tǒng)數(shù)據(jù)結(jié)構(gòu)的設(shè)計以及數(shù)據(jù)集成;在分析型應(yīng)用和數(shù)據(jù)層之間，做數(shù)據(jù)獲取、分析，從而指導(dǎo)規(guī)范企業(yè)信息化建設(shè)。

三、規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)的兩種模式

規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)，通常有兩種典型的模式：

• 模式一：從技術(shù)到業(yè)務(wù)，也可以稱為Bottom-up模式。典型特征是先定義主題域，在從現(xiàn)有操作性數(shù)據(jù)結(jié)構(gòu)出發(fā)，通過調(diào)研和訪談，規(guī)劃數(shù)據(jù)架構(gòu)，實現(xiàn)數(shù)據(jù)到信息的打通。
• 模式二：從業(yè)務(wù)到技術(shù)，也可以稱為Top-Down模式。其特征是以業(yè)務(wù)流程為主線，串聯(lián)業(yè)務(wù)單元、業(yè)務(wù)環(huán)節(jié)、業(yè)務(wù)活動。分析業(yè)務(wù)活動所需的實體、屬性。通過調(diào)研訪談，確認最終業(yè)務(wù)用戶的數(shù)據(jù)需求和KPI績效考核標準。整合在一起，再結(jié)合現(xiàn)有的數(shù)據(jù)結(jié)構(gòu)，規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)，實現(xiàn)數(shù)據(jù)到信息的打通。

兩種工作模式?jīng)]有好壞之分，需要根據(jù)企業(yè)的數(shù)據(jù)現(xiàn)狀，采用適合自身的工作模式。

從技術(shù)到業(yè)務(wù)模式的經(jīng)典案例

借助數(shù)據(jù)治理工具，實現(xiàn)對企業(yè)數(shù)據(jù)資產(chǎn)的盤點，盤點數(shù)據(jù)資產(chǎn)管理的對象包括數(shù)據(jù)從業(yè)務(wù)系統(tǒng)到數(shù)據(jù)倉庫、集市、報表的流轉(zhuǎn)加工關(guān)系。盤點的范圍是以數(shù)倉為核心，構(gòu)建業(yè)務(wù)系統(tǒng)到數(shù)倉、數(shù)倉到數(shù)據(jù)分析應(yīng)用的全鏈路數(shù)據(jù)資產(chǎn)盤點。

在數(shù)據(jù)資產(chǎn)盤點的基礎(chǔ)參考同業(yè)案例或經(jīng)驗，劃分數(shù)據(jù)主題域。在項目中我們借鑒達美航空經(jīng)驗確定了13個數(shù)據(jù)主題域，同時又分析了數(shù)倉的模型中2000多個實體，對現(xiàn)有系統(tǒng)的數(shù)據(jù)結(jié)構(gòu)進行調(diào)研確認，從而構(gòu)建了企業(yè)數(shù)據(jù)模型。

在企業(yè)數(shù)據(jù)模型的基礎(chǔ)上，對數(shù)據(jù)項進行歸并、指標口徑的標準化。抽象出數(shù)據(jù)標準層，形成統(tǒng)一數(shù)據(jù)架構(gòu)，提升數(shù)據(jù)服務(wù)能力。

從業(yè)務(wù)到技術(shù)模式的經(jīng)典案例

模式一以現(xiàn)有企業(yè)信息化系統(tǒng)數(shù)據(jù)結(jié)構(gòu)為基礎(chǔ)。模式二以業(yè)務(wù)流程切入，以業(yè)務(wù)環(huán)節(jié)中的獲取信息為基礎(chǔ)，匯總企業(yè)數(shù)據(jù)項的信息。

下圖是某航空公司飛機運行生命周期管理業(yè)務(wù)流程。從規(guī)劃發(fā)展部做飛機引進計劃，到飛機投入運營，再到飛機退出，每個業(yè)務(wù)環(huán)節(jié)都會產(chǎn)生業(yè)務(wù)數(shù)據(jù)。在梳理的工程中，會從業(yè)務(wù)部門收集業(yè)務(wù)流程的各環(huán)節(jié)涉及的數(shù)據(jù)集和數(shù)據(jù)項信息。

然后對數(shù)據(jù)項進行整合，按照數(shù)據(jù)項使用的熱度，頻率、關(guān)聯(lián)度等，整合數(shù)據(jù)項、代碼、指標度量、維度等，在結(jié)合(國際/國內(nèi))同業(yè)經(jīng)驗，形成某業(yè)務(wù)域的數(shù)據(jù)架構(gòu)。

在構(gòu)建企業(yè)統(tǒng)一數(shù)據(jù)架構(gòu)過程中會遇到各種問題，在關(guān)于設(shè)備主題域數(shù)據(jù)項制定的過程中，就發(fā)現(xiàn)了一個飛機號B5917，卻存在三個不同的叫法，有的系統(tǒng)叫飛機尾號、有的叫飛機號，還有的叫飛機設(shè)備尾號。總之各系統(tǒng)存在數(shù)據(jù)項業(yè)務(wù)含義不統(tǒng)一的地方。在梳理過程中要弄清楚數(shù)據(jù)的來源，來源不***的情況下還要從業(yè)務(wù)角度劃分數(shù)據(jù)的責(zé)任方。最終確定統(tǒng)一的名稱和業(yè)務(wù)含義。

下圖是我們在某航空公司構(gòu)建數(shù)據(jù)標準示例，我們可以看到，航空業(yè)數(shù)據(jù)標準主要包括指標標準、業(yè)務(wù)術(shù)語，基礎(chǔ)編碼和數(shù)據(jù)項。

四、規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)的

三個關(guān)鍵技術(shù)

通過合理規(guī)劃企業(yè)的數(shù)據(jù)架構(gòu)，可以打通數(shù)據(jù)與信息的通道。我這里列出了3個關(guān)鍵技術(shù)，來幫助企業(yè)快速合理地規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)，實現(xiàn)數(shù)據(jù)到信息的轉(zhuǎn)換。

關(guān)鍵技術(shù)1：自動化數(shù)據(jù)資產(chǎn)收集技術(shù)

通過自動化數(shù)據(jù)資產(chǎn)收集，需要完成以下幾件事：

• 梳理全企業(yè)數(shù)據(jù)架構(gòu)，對企業(yè)的數(shù)據(jù)模型、數(shù)據(jù)關(guān)系、數(shù)據(jù)處理有清晰化的認識。
• 對數(shù)據(jù)資產(chǎn)形成統(tǒng)一的自動化管理，形成企業(yè)的元數(shù)據(jù)庫。
• 對企業(yè)數(shù)據(jù)資產(chǎn)形成多種視圖，使數(shù)據(jù)資產(chǎn)能夠?qū)Σ煌脩?，有不同視角的展示?/li>

從一定程度上來說，元數(shù)據(jù)采集的全面性和準確性決定了自動化數(shù)據(jù)資產(chǎn)收集的成敗，是否能夠?qū)Υ髷?shù)據(jù)、數(shù)據(jù)倉庫、關(guān)系型/非關(guān)系型數(shù)據(jù)庫、數(shù)據(jù)模型、主流ETL工具等實現(xiàn)自動化的元數(shù)據(jù)采集是關(guān)鍵。

關(guān)鍵技術(shù)2：數(shù)據(jù)資產(chǎn)自動分類實現(xiàn)技術(shù)

通過元數(shù)據(jù)聚類能力，形成資產(chǎn)密度分類，結(jié)合已有的的模型體系進行歸類和整合。將收集的元數(shù)據(jù)分類歸集到信息模型上，形成多維度的、完整的模型體系，從而貫通業(yè)務(wù)技術(shù)。這里面需要元數(shù)據(jù)產(chǎn)品具備自動化的分類引擎以及可擴展的元模型管理能力。

關(guān)鍵技術(shù)3：數(shù)據(jù)資產(chǎn)質(zhì)量自動監(jiān)控技術(shù)

數(shù)據(jù)資產(chǎn)質(zhì)量自動監(jiān)控，要求能夠從數(shù)據(jù)的準確性、完整性、及時性、一致性等六性的維度，對數(shù)據(jù)資產(chǎn)的質(zhì)量進行管理，從數(shù)據(jù)問題定義、問題發(fā)現(xiàn)、問題處理、問題跟蹤和問題評估統(tǒng)計5個環(huán)節(jié)，構(gòu)建資產(chǎn)質(zhì)量的閉環(huán)管理流程。

五、總結(jié)

航空數(shù)據(jù)現(xiàn)狀總體面臨著數(shù)據(jù)資產(chǎn)分布散、數(shù)據(jù)定義亂、數(shù)據(jù)管理難等常見問題，集中管理數(shù)據(jù)資產(chǎn)、提升企業(yè)數(shù)據(jù)洞察能力、規(guī)劃企業(yè)數(shù)據(jù)架構(gòu)是航空業(yè)應(yīng)用大數(shù)據(jù)治理的三大趨勢。其實，不只是在航空行業(yè)，各個行業(yè)在將企業(yè)數(shù)據(jù)轉(zhuǎn)化為數(shù)據(jù)資產(chǎn)的過程中，打通數(shù)據(jù)與信息的通道都是關(guān)鍵的一環(huán)。通過自動化收集、自動化分類、自動化數(shù)據(jù)質(zhì)量監(jiān)控等技術(shù)手段，可以輔助企業(yè)規(guī)劃統(tǒng)一、標準的數(shù)據(jù)架構(gòu)，最終為數(shù)據(jù)轉(zhuǎn)化為信息(數(shù)據(jù)資產(chǎn))提供可靠、可行的途徑。