近日,匯量科技 Mobvista 全面升級 SaaS 產品「一站式云原生大數據AI平臺」——EnginePlus 2.0,并正式上線亞馬遜云科技 AWS Marketplace,助力全球企業實現新一代數據智能開發,解放業務生產力。
隨著企業業務的快速擴展,衍生數據量面臨爆發式增長,企業對數據處理分析的需求日趨迫切。
在此背景下,創新技術與方案成為企業剛需,用以解決數據智能處理的挑戰:快速構建湖倉一體的大規模數據分析平臺,高效實時攝入數據,并通過人工智能模型將數據的價值最大化,從而充分賦能業務。
EnginePlus 2.0 將數據湖、計算分析、人工智能集成在統一平臺上,提供面向多種業務場景的實時數據湖框架 StarLake、機器學習框架 MindAlpha 等自主研發的開源工具,能夠與 Spark 計算框架深度集成。通過開放的產品架構解決開發者上云和數據智能處理挑戰,EnginePlus 2.0 加速企業組織的數字化轉型和業務創新。
EnginePlus 2.0 三板斧:大數據 + AI + 云原生
新一代一站式云原生大數據AI平臺 EnginePlus 2.0 通過將大數據與云計算、人工智能等信息技術融合創新,實現數據攝入、數據計算、模型訓練、在線預測的一站式閉環,幫助客戶有效提升數據處理的效率與精準度。在大規模業務的生產驗證下,EnginePlus 2.0 兼具快速接入、簡單易用、高性能、高穩定性等特點。
1. 開源 數據湖框架 StarLake
作為一種中心數據儲存的容器,數據湖具有高效、快速的特性,但伴隨著的是相當高的復雜度和高昂的計算成本。
為了讓客戶更好地用上這種數據儲存分析方式,Mobvista 自研并開源了數據湖框架 StarLake,實現了大規模數據的實時攝入和更新。
通過行列 upsert 功能、高并發入湖、元數據管理強拓展性、對象儲存 IO 性能深度優化等特性,StarLake 數據湖框架能夠高效構建湖倉一體化分析平臺,相比開源同類數據湖框架具有顯著優勢。
(圖片:StarLake vs. Iceberg 對比測試)
同時,整合了云原生計算平臺 Spark on K8s 的 EnginePlus 2.0 能提供極速資源伸縮,實現資源高效利用,滿足企業超大規模數據請求與高效彈性的需求。
2. 開源機器學習框架 MindAlpha
除了數據湖,對數據進行人工智能建模是挖掘數據背后價值的重要途徑,通過對數據進行算法建模,賦能業務,產生價值。
Mobvista 自研開源機器學習框架 MindAlpha,輕松處理大規模離散特征,與 EnginePlus 2.0 之上的 Spark、StarLake 無縫結合,提供從數據到智能的一體化、一站式的高效體驗。
MindAlpha 的開源 Parameter Server SDK 支持千億級大規模稀疏離散特征,與PyTorch、Spark MLLib 無縫銜接,特征處理與模型推理邏輯和參數能全自動導出至線上 Serving 服務。其實時特征達到毫秒級延遲水平,真正做到實時反饋,快速捕捉用戶行為。同時,其高性能在線 Serving 能進行模型橫向切分,支持萬億參數,具有低延遲、自動彈性伸縮的特性,能進行CPU、GPU 異構混布調度和負載均衡。
(圖片:MindAlpha 架構)
3.基于 SpotMax 的云原生架構
便捷地利用網絡資源,實現管理、業務等方面的數據化轉型,企業上云需求正在爆發。云原生架構也因具備高性能、高可擴展、一致性、符合標準、容錯、易于管理和多云支持等特性,受到企業的青睞。
EnginePlus 2.0 基于 SpotMax 實現云原生架構。SpotMax 云原生體系包括云資源調度優化、容器+服務網格融合、多云及混合云統一管理、無服務平臺等特性。通過 SpotMax 構建的云原生基礎設施,EnginePlus 2.0 支持一鍵快速部署,大幅度降低運維成本。在計算存儲分離下,EnginePlus 2.0 能針對對象存儲系統專門優化。同時,其所有組件均可彈性伸縮,有效加速企業效率,降低構建系統成本。
源于 Mobvista 技術中臺戰略
在 EnginePlus 2.0 一站式云原生大數據AI平臺的背后,是整個 Mobvista 技術中臺。打破業務邊界,Mobvista 技術中臺通過聚合協同作用對外賦能。
2017年,Mobvista 啟動中臺戰略,自主研發以 AI+Big Data 為核心的技術中臺架構。此時正值 Mobvista 旗下移動程序化廣告平臺 Mintegral、數據分析平臺 GameAnalytics 的快速發展,以及集團提出國際化戰略,進一步拓展全球業務。
2018年,多個技術中臺產品成功研發并成功賦能業務,包括數據中臺 Datatory、大數據計算平臺 EnginePlus、大規模機器學習中臺 MindAlpha 以及基于云原生架構開發出的彈性集群管理平臺 SpotMax。Mobvista 將技術中臺產品化,對外發布,旨在以智能技術驅動增長。
從自研走向商業化,Mobvista 技術中臺——這個為全公司各業務提供解決方案的團隊,正在邁出對外賦能的更多步。無論是 Datatory、EnginePlus、MindAlpha 還是已經成為集團二級品牌的 SpotMax,這些產品均來自于 Mobvista 的大規模業務實踐。在深度融合業務需求場景的同時,Mobvista 技術中臺從中沉淀出平臺能力,不斷復用,使之產品化、商業化,對外創造價值。
而這與 Mobvista 所提出的「SaaS 工具生態」戰略相一致?;ヂ摼W的「技術溢出效應」正在加速數字化轉型,Mobvista 正在由技術創新者變為技術輸出者。
市場需求在爆發,數據技術在更迭。對于任何想要加速數字化轉型的企業來說,EnginePlus 2.0 都能通過一體化的產品解決方案,助力企業的數字化進程并實際有效地推動企業的業務發展。
從互聯網廣告、電商行業到金融風控,EnginePlus 2.0 已成功賦能數家國內企業、海外企業的業務發展。
以 Mobvista 旗下程序化互動式廣告平臺 Mintegral 為例,其日均數據量已達 PB 級,需調度數萬 CPU 核心。在使用 EnginePlus 2.0 后,Mintegral 能實時處理用戶行為特征,進行毫秒級反饋。在每天千億次 DNN 模型預測請求下,滿足萬億級排序量的排序業務服務,有效奠定了 Mintegral 在全球的領先地位。此外,在 EnginePlus 2.0 賦能下,某互聯網出海金融公司的業務表現指標迅速提升20%+。
“EnginePlus 2.0 融合了豐富行業套件、開源代碼、數據算法模型,能幫助開發者在數據分析、技術開發、業務發展提供可靠精準的分析應用能力。讓客戶能站在眾人肩膀上,快速建立起從數據攝入、分析到 AI 模型離線訓練、在線預測的一體化能力。”Mobvista 集團副總裁朱亞東博士表示。
“當然,在經歷業務的大規模實踐和可行性驗證下,我們積累了更多經驗和專業知識,為客戶提供部署服務,幫助他們用最低的技術門檻、最低的成本、更小的風險實現數字化轉型、智能化升級。我們希望成為中國版AI加持的Databricks,跨越數據爆發式增長到智能處理之間的鴻溝,構建新一代的基建體系。”
數字化轉型發展前景廣闊。結合多年技術經驗與行業積累,Mobvista 正在為更多企業組織打造 SaaS工具生態,以技術產品、實踐經驗賦能行業的智能化升級。
申請創業報道,分享創業好點子。點擊此處,共同探討創業新機遇!
隨著數字中國戰略的步步落實,大數據已經成為錨定戰略定位、搶得市場先機的重要基礎元素。為彰顯行業發展現狀,遴選、推薦優秀企業,長城戰略咨詢近日在2023中國國際大數據產業博覽會期間,重磅發布《中國大數據獨角獸企業榜單》,根據獨角獸企業國家推薦性標準,篩選出259家2022年中國大數據(潛在)獨角獸企業
作為云計算技術落地的重要基礎設施成果,云服務器近年來獲得的飛速發展有目共睹。云服務器需求量的激增引發行業競爭的加劇,甚至很多服務商將VPS更名為云服務器混淆視聽,濫竽充數。為保證我們互聯網服務的正常創建和運行,優質的云服務器是基礎保障,那么選擇云服務器要考慮哪些因素呢?一、你的網站目標群體你的網站目
2023年6月15日至18日,2023北京健康醫療大數據論壇、醫促會華夏健康數據與數字醫學高峰論壇、第三屆中華預防醫學會腎臟病預防與控制專業委員會學術會議將同期于北京舉行。論壇以“學術引領數智健康”為主題,著眼國家戰略需求,聚焦前沿科技在健康醫療領域的發展與實踐,薈萃全球頂尖學術觀點,促進多方跨界融
4月23日,IDC發布《中國公有云服務市場(2022下半年)跟蹤》,占據前四的分別為阿里云(40.6%)、華為云(11.0%)、騰訊云(11.0%)、中國電信(8.7%)。
把脈中國數據智能化
2023年,幾乎可以被定義為中國互聯網公司的“大模型元年”。ChatGPT的全球爆紅,徹底點燃國內的大模型賽道,曾經的“創業英雄”、如今的商業領袖們親自下場,接連發布生成式人工智能產品與大模型布局。大模型火了,沉寂許久的互聯網行業又有了新的“戰事”。同時,大模型的快速發展也改變了云市場的現狀,企業對
近日,數字化市場研究咨詢機構愛分析發布了《2022愛分析·數據智能廠商全景報告》,愛分析從技術研發能力、服務客戶數量、收入規模等維度對廠商進行了全面專業的評估
2022年11月18日,首個國家級大數據產業創新賽事——2022第一屆中國大數據大賽圓滿落幕。工業和信息化部信息技術發展司數字經濟推進處處長張建倫,中國電子技術標準化研究院副院長孫文龍出席頒獎典禮并致辭
2022年11月17日,在廈門市工業和信息化局的指導下,以“數據確權”為主題的2022數據資產(廈門)論壇在廈門成功舉辦。本次論壇以“數據確權”為主題,由廈門市互聯網域名應用服務產業協會和構信網(公信.中國)聯合主辦
近日,國內知名數字化市場研究咨詢機構愛分析正式發布《2022愛分析·信創廠商全景報告》(以下簡稱“報告”)。報告綜合考慮企業關注度、行業落地進展等因素,遴選出在信創市場中具備成熟解決方案和落地能力的廠商。
10月31日下午,由數博會執委會主辦、數據觀(北京)傳媒科技有限公司承辦、貴陽大數據交易所協辦的第四期數博思享會“實踐先行觀公共數據價值與應用”活動成功舉辦。
近日,由中國國際數字經濟博覽會組委會主辦,中國電子技術標準化研究院、河北省工業和信息化廳承辦的“第一屆中國大數據大賽”(簡稱大數據大賽)正式啟動。
廣州光點信息科技有限公司自主研發的數據中臺產品GI大數據中臺V2.0產品是國內率先推出符合新創標準的中臺產品,基于“大數據+AI”等技術全新打造,集數據采集、融合、治理、服務、管理為一體的旗艦平臺。
廣州光點信息科技有限公司自主研發的數據中臺產品GI大數據中臺V2.0產品是國內率先推出符合新創標準的中臺產品,基于“大數據+AI”等技術全新打造,集數據采集、融合、治理、服務、管理為一體的旗艦平臺