網易數帆餘利華:全鏈路資料生產力平臺2.0,推動“人人用資料 時時用資料”|資料猿專訪
資料智慧產業創新服務媒體
——聚焦數智 · 改變商業
隨著新一輪科技革命和產業變革興起,大資料、雲端計算、人工智慧等技術日益發展,越來越多的企業開始探尋商業模式創新和商業生態系統重構的途徑與方法,因此越來越多的企業走向數字化轉型之路。 然而企業數字化轉型不是一蹴而就的事情,對於企業本身而言,不僅涉及企業的上層決策,還需要企業對其業務系統進行改造,對文化有所創新; 對技術服務商來說,不僅需要能夠幫助企業融合數字化技術梳理業務轉型需求,還需要深諳企業數字化轉型的需求和行業規律,既能覆蓋千行百業數字化轉型的廣度,又能滿足細分行業不同場景的深度需求。
一直以來 ,為企業提供數字化轉型服務是一條“坡長雪厚”的賽道,當騰訊、阿里、華為等巨頭紛紛在這條賽道滾起B端業務的雪球,隨之而來的還有眾多想要在B端服務佔有一席之地的企業接連佈局,意味著數字化轉型服務已然是一片競爭激烈的戰場。
其中,早已在網際網路行業中名聲大振的網易,如今也在助力企業數字化轉型的道路上越走越穩。 “ 標籤化”是網際網路公司的一大特徵,百度的搜尋、阿里的電商、騰訊的社交,然而在中國網際網路版圖中,似乎還沒有一個標籤適用於網易。 也正因如此,網易形成了自身多元多型的產品與業務線。
網易數帆——專注企業服務賽道
網易於2016年正式進入企業服務市場,迄今先後形成了網易數帆、網易智企、網易靈犀等子業務。 其中,網易數帆聚焦在基礎軟體領域,從提升企業軟體生產力、資料生產力、智慧生產力入手,堅持開源與開放,以軟體技術賦能、服務客戶,幫助客戶提升行 業競爭力,助力其轉型程序。如今已成為網易數帆服務企業級市場的核心戰略。
日前, 網易數字 +大會在杭州召開,網易數帆對外展 示了這些年在企業服務領域的成長過程和成績,同時釋出了新的市場戰略和一系列重磅產品與技術。
網易數帆在會上釋出了有數全鏈路資料生產力平臺2.0,推出了有數DataOps、邏輯資料湖、資料湖引擎、機器學習平臺等在內的最新技術實踐,進一步完善數字治理能力,促進企業數字化轉型升級。 這些全新或升級後的產品將進一步加速大資料技術在企業的落地,助力企業挖掘資料價值,為更多企業的數字化轉型賦能。
一路走來,網易數帆不斷創新,對產品技術進行迭代升級,在企業服務市場佔據了一席之地。 顯然,對於如何更高效助力企業數字化升級,網易數帆也有著一套自己的方法論。
作為今年的重要看點,有數全鏈路資料生產力平臺從1.0到2.0有著怎樣的不同? 其中的創新技術又是如何為企業數字化賦能? 帶著相關問題,資料猿對網易數帆有數產品總經理餘利華進行了深度訪談,圍繞新產品、新技術、新理念,全面瞭解網易數帆企業服務的進階之路。
1.0到2.0,資料生產力平臺跨出了一大步
數字時代企業的生產力,大部分來自於資料生產力。 資料作為數字時代的核心資產要素,在企業在數字化轉型升級中不可或缺,如何高效利用資料,提升企業的資料生產力,是企業數字化轉型的關鍵。 因此,當下的企業更為需要 一種全鏈路提升資料生產力的技術、產品以及服務。
餘利華表示: “企業提升全鏈路資料生產力需要對技術、產品或服務去提升,以資料中臺、資料產品(這裡指無程式碼的資料產品化)為兩大節點, 通過資料中臺匯聚來自業務的資料,再基於資料中臺建設資料產品,為業務系統提供可執行的決策指導, 提升企業大資料決策水平, 在資料中臺、資料產品、業務系統的聯動下,形成企業資料應用閉環, 將資料價值從業務系統中釋放。 ”
過去在1.0的實踐中,有數全鏈路資料生產力的閉環仍然存在一些阻滯,其中資料中臺側,各個系統資料的物理聚合成本越來越高,資料開發的低效拖慢交付應用,同時中臺對於實時資料的處理要求日趨增多,在資料應用側,非結構化資料的理解需要更多的手段支撐。
基於1.0階段的種種痛點,網易數帆釋出了有數全鏈路資料生產力平臺2.0。 餘利華表示,“資料生產力平臺2.0階段,我們提高了自身技術服務能力,從大資料底座、到資料中臺、再到資料應用,每個鏈路都需要更好的打磨才能服務好客戶。 ”
在談到如何讓企業的資料中臺發揮價值,餘利華認為企業 要基於資料中臺開發大量的資料產品,真正做到“人人用資料、時時用資料”,這樣資料生產力才能全面提升。 餘利華還分享了網易雲音樂在資料產品方面的成功實踐,“網易雲音樂的會員運營部門有大幾百張報表,雖然資料都有,但是看資料卻存在困難,主要原因是資料沒有按照分析決策的思路組織起來,是‘散裝’的。 針對這一場景設計一款‘會員運營門戶’資料產品,將資料很好的‘組織’起來,沒有專業資料分析技能的同事也能用好資料。”
資料生產力背後的技術“推手”
在這次全鏈路資料生產力平臺2.0版本中,網易數帆 推出了有數DataOps、邏輯資料湖、資料湖引擎Arctic等最新技術產品, 其中有數DataOps技術代表其資料中臺的重磅升級。 餘利華介紹,有數DataOps技術旨在幫助企業解決資料開發過程中的效率和質量問題,可以說是將DevOps的理念應用於資料開發領域,以縮短洞察週期,推動專案持續整合(CI)和持續部署(CD)。
DataOps 是大資料領域的DevOps,希望利用自動化和工具化手段,比如自動化測試,自動部署, 提升資料研發效率,達到資料價值的持續交付。 餘利華表示,“ 資料開發相比業務系統開發落後太多,很多時候,資料開發工程師連測試環境,自動化測試工具都沒有,直接在線上寫程式碼,手工做測試。 這是資料中臺專案交付效率低,資料質量差的主要原因之一。 網易有數支援DataOps就是為了解決資料中臺的研發交付效率問題。 ”
除了DataOps,過去幾年中,湖倉一體(Lakehouse)作為一種新的資料管理架構,逐步獨立地出現在許多客戶的應用場景中。 對於這樣的資料管理架構,餘利華認為,“資料湖技術強在通用低成本,資料倉庫技術強在元資料管理高效能,湖倉一體能夠兼得兩者的好處,非常有價值,我們也提供這樣的技術。 但是任何一個數據管理系統都不能解決所有的問題,這也是我們提出有數邏輯資料湖的緣由之一。 ”
此外,企業往往認為,通過資料中臺把資料集中到一起,才能充分利用資料價值。 但餘利華指出,“我們在與客戶交流後發現,企業想要構建一個物理上集中的資料中臺非常困難。 在不要求資料遷移的前提下,將資料納入資料中臺管理是很多企業基本訴求。 ”
據介紹,基於邏輯資料湖的資料中臺,是一種物理分散,邏輯統一的資料中臺, 資料中臺可 以建立在Oracle/MySQL/Vertica等7類系統之上,實現資料的統一開發和統一治理。
面向湖倉一體,網易數帆還發布了有數實時資料湖引擎Arctic,不僅實現了流批一體儲存,還支援無縫對接資料中臺資料治理體系,可以說極大地提升了資料中臺的實時能力。特別是對於海量日誌、事件等變更頻繁、實時性高的資料加工等業務場景,有著十分廣闊的技術實踐空間。流批一體儲存的實現對於湖倉一體而言也是解決了一個核心技術難題。
除了以上亮點,網易數帆 還推出了有數機器學習平臺和有數BI資料準備,前者幫助企業理解及處理結構化資料,大幅提升機器學習迭代效率。 後者可以幫助缺乏專業人員的小微企業建立自助式ETL實現輕量級湖倉。
把控制權交給客戶
在這次網易數字+大會上,網易數帆正式釋出兩大戰略主張“技術為體、服務為魄”和“把控制權交給客戶”。 “技術為體、服務為魄”包含三方面,注重成熟的產品和解決方案; 引進行業資深人才,打造懂行業的專家級團隊; 從諮詢規劃、實施交付到知識轉移的數字化轉型全過程服務。 “把控制權交給客戶”指的是技術架構開放,和各類基礎設施均相容; 同時核心開源,優先使用主流選擇的開源軟體。
值得注意的是,“把控制權交給客戶”是網易數帆重要的一條戰略主張,這代表著讓網易數帆讓技術開放透明,不鎖定技術,以使用者為中心,和使用者共同成長。
基於這一理念,網易數帆此次還 釋出了知識分享、培訓和交流平臺——有數學堂, 旨在為使用者提供全方位的學習、培訓和交流平臺,重點包含學習培訓服務、產品問答服務、職業認證服務等內容。 學習培訓方面,有數學堂提供影片課程、幫助文件、大資料基礎技術等產品課程; 產品問答方面,為使用者搭建“有問必答,有答必懂”的社群; 職業認證方面,推出大資料、BI等方向的職業技能服務。
文:Winter / 資料猿
聯絡資料猿
- Docker資料卷(Data Volume)學習
- 三未信安科創板IPO首輪問詢回覆:密碼晶片正在量產,市場份額僅為0.41%
- 浩瀚深度“帶病”衝刺科創板:營收與利潤低速增長、客戶集中度高、供應鏈風險大!
- 推薦一款資料mock框架,無需任何依賴,賊牛逼
- 金色觀察丨資料解讀:“淡定熊”有機會擊敗“無聊猿”嗎?
- 為什麼資料庫不應該使用外來鍵
- 科大訊飛的多賽道佈局,是否“拖後腿”?
- 網宿科技2021年報解讀:戰略佈局“2 3”業務,正在加快轉型之路
- 利潤下滑,競爭加劇,安恆資訊如何突破圍城?
- 最貴新股沒破發,此前棄購7.8個億,背靠華為的這家半導體公司這麼香?
- 利潤大跌66.29%!是什麼導致了深信服營收和利潤的“二元背離”?
- 市值跌去70%!身陷定製泥潭的科大國創,還能贏得資本市場的芳心麼?
- 效能測試告訴你 mysql 資料庫儲存引擎該如何選?
- 營收倍數級增長,利潤卻止步不前!光庭資訊只有一隻腳踏進了智慧電動車風口?
- UiPath中國區陳磊:人手一個機器人的時代已來,RPA讓企業實現了全面自動化 | 資料猿專訪
- RocksDB隨機讀效能是同門SSD近10倍!傲騰持久記憶體實力炸裂
- 受疫情影響,突遭上交所中止發行上市稽核!虧損持續擴大的極飛科技,還能讓農業智慧起來麼?
- 雙非電子專業,大二京東實習,大三上岸位元組大資料開發實習崗,分享一波面經
- IBM深陷雲端計算業務欺詐醜聞,遭股東集體訴訟
- 慕思股份IPO在即,智慧床墊普及距離我們還有多遠?