何寶宏：大數據正在遭遇成長的煩惱

為期兩天的“2018大數據產業峰會”在北京國家會議中心召開。本次會議由中國信息通信研究院主辦，旨在進一步落實《促進大數據發展行動綱要》和《大數據產業發展規劃(2016-2020年)》，支撐大數據國家戰略落地，展示大數據產業發展成果，探討發展面臨重大問題，推動產業交流與合作。

中國信息通信研究院云計算與大數據研究所所長何寶宏在首日會議上作了題為“預見大數據的2018”主題報告，以下為演講實錄：

大數據遭遇成長的煩惱

從2011年至今約7年的時間，大數據正在遭遇成長的煩惱。歐盟5月份實施GDPR通用數據保護規則，核心是個人隱私數據保護，要求用戶明確同意授予數據的流動權。最近的大數據在殺熟，Facebook遭遇的窘境，包括今日頭條也正遭遇窘境。7年了，大數據必須進行方向性的調整。

這是又一個三角困境，技術上追求很多目標時，目標之間容易出現沖突。尤其數據方面，個人隱私、國家安全、便利性三者不可兼得，只能選擇兩個。2013年奧巴馬講到，不可能既享有100%的安全，又享有100%的隱私，同時沒有絲毫的不便，我們不得不做出選擇。大數據也需要做出選擇，二選一時會發生一些調整。

這些事件意味著什么？短期看，說明一些大數據應用真正落地。如果大數據在用戶畫像及營銷沒有落地，這些事情不會發生。這也反向證明大數據真的已經成功應用，所以才能出現問題。幾年前搞云計算時說可靠性不行，我說恰恰說明是人們開始廣泛使用云計算，要不然不會關心這些問題。中期看，保護個人隱私必然是未來3年或更長時間內的重中之重，全行業必須團結起來，為保護用戶隱私制定規則，這也需要恰當地技術手段提供支持。長期看，最近一系列事件的爆發是不是意味著已經使用20多年的互聯網免費模式宣告終結?？峙逻@是更大的議題，免費模式都是以用戶數據換取用戶服務的便利性。

大數據行業正在回歸理性

個人判斷，行業發展需要調整變化。從過去7年時間強調技術、發展，下一步更多的關注合規、隱私保護、安全。任何產業發展到第二階段必須要強調關注合規性、安全及隱私問題，早期會重點關心技術與發展?，F在，正在從幾年來高估大數據的影響開始轉變為低估大數據的影響，因為人總是會高估技術短期影響，而低估技術的長期影響。我們即將迎來開始低估大數據長期影響的階段，現在進入回歸理性階段，行業正在回歸理性。對大數據以前高估的價值更加理性，以前不太關注的隱私必須補課，這需要3年左右的時間。2021年前后大數據會迎來新一輪的黃金發展期。

從市場看，我們還將繼續維持規模小、增速快的態勢。過去的幾年大數據的主要應用場景是互聯網，未來幾年的核心是大數據與傳統行業、實體經濟的深度融合。十九大報告講的很清楚，我們必將迎來的是傳統行業如何更好使用大數據的過程，因為傳統行業更容易賺錢。

從技術看，開源正在引領各行各業，大數據也不例外。今天上午報告也講到實現在線分析的分布式，下一步需要實現在線處理事物的分布式。OLAP/OLTP的融合是新的趨勢。隨著產業的發展完善，意味著產業的分工越來越細，相互之間的協作會越來越麻煩。反推的結果是我們所做的大數據產品與技術需要標準化、模塊化。因為不可能龐大體量堆在一起，運維需要自動化比較好理解，系統越來越龐大，機器產生的事情只能用機器解決，大數據產生的運維問題只能靠大數據產生的自動化運維解決。

容器化，今天的大數據也需要借助容器的思想封裝交付。幾年前發現軟件開發交付等跟環境關系過于密切，今天看到大數據也是這個問題。大數據遷移時與環境配置的關系過于密切，我們應該發展類似于容器的技術。專用硬件，隨著摩爾定律的減速，越來越多地需要靠一些專用的而不是通用的硬件解決問題。面向特定場景數據處理的專用硬件或軟硬件結合會是重要的發展方向。

從算法看，算法的透明度會成為需要關心的議題。隨著數據越來越多，數據越來越開放，要打破算法黑箱，解決算法的歧視問題、算法殺熟問題和算法疫情。如果算法一樣，尤其金融市場會引發算法共振或算法疫情問題。開放算法是必須要考慮的議題，剛剛討論過網絡中立問題，算法該不該中立？算法該不該透明？算法該不該監管？我想需要。