近日，匯量-based科技Mobvista全面升級SaaS產(chǎn)品“一站式云原生大數(shù)據(jù)AI Ping 臺\" —— Engine Plus 2.0”。并正式上線亞馬遜云科技的AWSMarketplace，幫助全球企業(yè)實現(xiàn)新一代數(shù)據(jù)的智能化發(fā)展，解放業(yè)務(wù)生產(chǎn)力。
隨著業(yè)務(wù)的快速擴(kuò)張，派生數(shù)據(jù)量正在經(jīng)歷爆炸式增長，對數(shù)據(jù)處理和分析的需求也越來越迫切。
在這種背景下，企業(yè)解決數(shù)據(jù)智能處理的挑戰(zhàn)恰恰需要創(chuàng)新的技術(shù)和解決方案：快速打造集湖泊、倉庫于一體的大規(guī)模數(shù)據(jù)分析平臺臺，實時高效攝取數(shù)據(jù)，通過人工智能模型實現(xiàn)數(shù)據(jù)價值最大化，從而全面賦能業(yè)務(wù)。
Engineplus2.0將數(shù)據(jù)湖、計算分析和人工智能集成在統(tǒng)一的扁平臺，上，并提供了自開發(fā)的開源工具，如面向各種業(yè)務(wù)場景的實時數(shù)據(jù)湖框架StarLake，以及可與Spark計算框架深度集成的機(jī)器學(xué)習(xí)框架MindAlpha。Engineplus2.0通過開放的產(chǎn)品架構(gòu)解決開發(fā)者云和數(shù)據(jù)智能處理的挑戰(zhàn)，加速企業(yè)組織的數(shù)字化轉(zhuǎn)型和業(yè)務(wù)創(chuàng)新。
Engineplus2.0三軸：大數(shù)據(jù)人工智能云本地
新一代一站式云原生大數(shù)據(jù)AI和臺Engine Plus 2.0通過大數(shù)據(jù)與云計算、人工智能等信息技術(shù)的融合，實現(xiàn)了數(shù)據(jù)攝入、數(shù)據(jù)計算、模型訓(xùn)練、在線預(yù)測的一站式閉環(huán)，幫助客戶有效提升數(shù)據(jù)處理的效率和準(zhǔn)確性。在大規(guī)模業(yè)務(wù)的生產(chǎn)驗證下，Engineplus2.0具有訪問快、使用方便、性能高、穩(wěn)定性高的特點。
1.開源數(shù)據(jù)湖框架StarLake
數(shù)據(jù)湖作為中，數(shù)據(jù)存儲的容器，具有高效、快速的特點，但也伴隨著較高的復(fù)雜性和較高的計算成本。
為了讓客戶更好地利用這種數(shù)據(jù)存儲和分析方法，Mobvista開發(fā)并開放了數(shù)據(jù)湖框架StarLake，實現(xiàn)了大規(guī)模數(shù)據(jù)的實時攝取和更新。
StarLake data lake框架具有行、列升級功能、高并發(fā)入湖、元數(shù)據(jù)管理可擴(kuò)展性強(qiáng)、對象存儲IO性能深度優(yōu)化等特點，能夠高效構(gòu)建湖庫一體化分析平臺臺，較開源同類數(shù)據(jù)lake框架優(yōu)勢明顯。
(圖：StarLakevs。冰山對比試驗)
同時，集成了臺， Sparkon K8s和云，原生計算平臺的Engineplus2.0可以提供快速的資源擴(kuò)展，實現(xiàn)資源的高效利用，滿足企業(yè)對超大規(guī)模數(shù)據(jù)請求和高效靈活的需求。
2.開源機(jī)器學(xué)習(xí)框架MindAlpha
除了數(shù)據(jù)湖，數(shù)據(jù)的人工智能建模是挖掘數(shù)據(jù)背后價值的重要途徑。通過用算法建模數(shù)據(jù)，可以增強(qiáng)業(yè)務(wù)能力并產(chǎn)生價值。
Mobvista自研開源機(jī)器學(xué)習(xí)框架MindAlpha，輕松處理大規(guī)模離散特征，與Engineplus2.0上的Spark、StarLake無縫結(jié)合，提供從數(shù)據(jù)到智能的一體化、一站式、高效體驗。
MindAlpha的開源parameterServerSDK支持1000億規(guī)模的稀疏離散特性，并與pyTorch和SparkMLLib無縫連接。特征處理和模型推理邏輯和參數(shù)可以自動導(dǎo)出到在線服務(wù)。其實時性達(dá)到毫秒級延遲水平，能夠真正實現(xiàn)實時反饋，快速捕捉用戶行為。同時，其高性能的在線服務(wù)(online Serving)可以對模型進(jìn)行水平分割，支持萬億級參數(shù)，具有低延遲和自動彈性擴(kuò)展的特點，可以對CpU和GpU進(jìn)行異構(gòu)混合調(diào)度和負(fù)載均衡。
(圖：MindAlpha架構(gòu))
3.基于SpotMax的云本土建筑
隨著網(wǎng)絡(luò)資源的便捷使用和管理業(yè)務(wù)的數(shù)據(jù)化轉(zhuǎn)型，企業(yè)對云的需求正在爆發(fā)。云原生建筑因其高性能而備受企業(yè)青睞，
Engineplus2.0實現(xiàn)了基于SpotMax的云原生架構(gòu)。spot max 云原生系統(tǒng)包含了云，集裝箱服務(wù)網(wǎng)格集成中資源調(diào)度優(yōu)化、多云統(tǒng)一管理、混合云，和平臺無服務(wù)的特點。Engineplus2.0支持通過SpotMax構(gòu)建的云原生基礎(chǔ)設(shè)施一鍵快速部署，大大降低了運維成本。在計算和存儲分離的情況下，Engineplus2.0可以專門針對對象存儲系統(tǒng)進(jìn)行優(yōu)化。同時，它的所有組件都是靈活的，這有效地加快了企業(yè)的效率，降低了構(gòu)建系統(tǒng)的成本。
中臺戰(zhàn)略源于莫比維斯塔技術(shù)
Engineplus2.0一站式云原生大數(shù)據(jù)AI平板臺背后是整個Mobvista科技中臺打破業(yè)務(wù)邊界，Mobvista科技中臺通過聚合和協(xié)同為外界賦能。
2017年，Mobvista在中，啟動臺戰(zhàn)略，自主研發(fā)了以AI BigData為核心的技術(shù)中臺架構(gòu)。此時，Mobvista的移動編程廣告與臺m integral持平，數(shù)據(jù)分析與臺游戲分析持平，集團(tuán)提出國際化戰(zhàn)略，進(jìn)一步拓展全球業(yè)務(wù)。
2018年，中， 臺，的一些技術(shù)產(chǎn)品成功開發(fā)并獲得授權(quán)。包括數(shù)據(jù)中臺Datatory、大數(shù)據(jù)計算平臺臺Engine Plus、大規(guī)模機(jī)器學(xué)習(xí)中臺mind alpha以及基于云原生架構(gòu)開發(fā)的靈活集群管理在臺manage spot max mob vista生產(chǎn)并在臺，發(fā)布該技術(shù)中，旨在以智能技術(shù)推動增長。
從自研到商業(yè)化，為全公司所有業(yè)務(wù)提供解決方案的團(tuán)隊——摩拜視達(dá)科技中臺——，正在采取更多措施賦能外部世界。無論是Datatory、Engineplus、MindAlpha還是已經(jīng)成為集團(tuán)二等品牌的SpotMax，這些產(chǎn)品都來自于Mobvista的大規(guī)模商業(yè)實踐。在深度整合業(yè)務(wù)需求場景、Mobvista技術(shù)的同時，臺，中，從中，沉淀出臺能力，并不斷重復(fù)利用，使其產(chǎn)品化、商業(yè)化，為外界創(chuàng)造價值。
這與Mobvista提出的“SaaS工具生態(tài)”戰(zhàn)略是一致的。互聯(lián)網(wǎng)的“技術(shù)溢出效應(yīng)”正在加速數(shù)字化轉(zhuǎn)型，Mobvista正在從技術(shù)創(chuàng)新者向技術(shù)輸出者轉(zhuǎn)變。
市場需求正在爆發(fā)，數(shù)據(jù)技術(shù)正在發(fā)生變化。對于任何想要加速數(shù)字化轉(zhuǎn)型的企業(yè)來說，Engineplus2.0都可以通過一體化的產(chǎn)品解決方案，幫助企業(yè)數(shù)字化進(jìn)程，有效推動企業(yè)的業(yè)務(wù)發(fā)展。
從互聯(lián)網(wǎng)廣告、電商行業(yè)到金融風(fēng)險管控，Engineplus2.0成功賦能多家境內(nèi)外企業(yè)業(yè)務(wù)發(fā)展。
以Mobvista的編程交互廣告mIntegral為例，其日均數(shù)據(jù)量已經(jīng)達(dá)到pB級別，需要調(diào)度上萬個CpU內(nèi)核。使用Engineplus2.0后，Mintegral可以實時處理用戶行為特征，并給出毫秒級反饋。每天都有數(shù)千億的DNN模型預(yù)測請求，滿足數(shù)萬億排序量的排序業(yè)務(wù)服務(wù)有效地奠定了Mintegral在全球的領(lǐng)先地位。此外，隨著Engineplus2.0的賦能，一家互聯(lián)網(wǎng)離岸金融公司的經(jīng)營業(yè)績指數(shù)快速增長了20%。
“Engineplus2.0集成了豐富的行業(yè)套件、開源代碼和數(shù)據(jù)算法模型，可以幫助開發(fā)者在數(shù)據(jù)分析、技術(shù)開發(fā)和業(yè)務(wù)開發(fā)中提供可靠、準(zhǔn)確的分析和應(yīng)用能力。讓客戶站在每個人的肩膀上，快速建立從數(shù)據(jù)攝取和分析到AI模型離線訓(xùn)練和在線預(yù)測的集成能力。”莫比維斯塔集團(tuán)副總裁朱亞東，博士說。
“當(dāng)然，經(jīng)過大規(guī)模的業(yè)務(wù)實踐和可行性驗證，我們積累了更多的經(jīng)驗和專業(yè)知識，為客戶提供部署服務(wù)，幫助他們以最低的技術(shù)門檻、最低的成本、較小的風(fēng)險實現(xiàn)數(shù)字化轉(zhuǎn)型和智能化升級。我們希望成為中國家AI加持的Databricks，跨越數(shù)據(jù)爆炸式增長與智能處理的鴻溝，打造新一代基礎(chǔ)設(shè)施體系?！?/p>
數(shù)字化轉(zhuǎn)型發(fā)展前景廣闊。結(jié)合多年的技術(shù)經(jīng)驗和行業(yè)積累，Mobvista正在為更多企業(yè)打造SaaS工具生態(tài)，用技術(shù)產(chǎn)品和實踐經(jīng)驗賦能行業(yè)智能升級。