遊戲
中國大陸
企業/公用部門
“阿里雲EMR Serverless Spark完美契合我們構建於開放生態、彈性資源和可插拔整合之上的雲原生巨量資料架構願景,是鷹角網路為全球遊戲營運擴充資料能力的重要夥伴。”
毛旭輝
進階巨量資料工程師,鷹角網路
關於鷹角網路
鷹角網路成立於 2017 年,總部位於中國上海,以創造兼具挑戰性和美學價值的遊戲為使命。我們熱衷於打造獨特的世界,以邏輯啟迪藝術,以才華激發創意。《明日方舟》是鷹角網路的處女作,是一款塔防手遊。其獨特的世界觀和角色設計贏得了玩家和業界的一致好評,在多個國家和地區位列暢銷榜前列。
我們將繼續探索創意空間,致力於在全球推出更多動漫風格手遊。
挑戰
作為一款長線營運遊戲,明日方舟頻繁推出遊戲內活動,玩法豐富多樣,形成了高頻、潮汐式的資料負載。由此產生的資料需求已不局限於傳統BI報表,而是深度融入遊戲機制和營運決策,對計算引擎的穩定性和效能提出了極高要求。鷹角網路的傳統資料平檯面臨以下局限:
● 缺乏外部Catalog支援,無法與DolphinScheduler等主流調度器整合,導致工作流程各自為政。
● 社區相容性不足,引發引擎穩定性問題。
● 大規模Shuffle操作缺少遠程Shuffle服務,磁碟壓力突出。
● 前供應商支援人員不力,問題響應緩慢,且產品迭代路線圖不明確。
為什麼選擇阿里雲
鷹角網路選擇阿里雲 EMR Serverless Spark,因為它提供了開源相容性、彈性可擴充性和企業級可靠性的完美結合。● 作為全託管的 Spark 相容 Lakehouse 產品,EMR Serverless Spark 整合了 Airflow 和 DolphinScheduler,原生支援 Paimon Catalog 和 Hive MetaStore,並內建 Celeborn Remote Shuffle Service 以消除磁碟瓶頸。
● EMR Serverless Spark 保持 100% Apache Spark 社區相容性,配備高效能 Fusion SQL 引擎,兼顧穩定性和執行速度。
● 阿里雲及時的支援人員和透明的產品路線圖,增強了鷹角網路對長期合作的信心。
架構
鷹角網路以EMR Serverless Spark為核心離線計算引擎,構建了現代化的分層資料架構。資料擷取方面,通過自研埋點SDK進行日誌採集,並藉助Flink CDC實現即時資料庫同步,從而保證資料的時效性和準確性,為下遊分析奠定基礎。在離線調度方面,鷹角網路採用雙編排模式:面向代碼工程師的Airflow和面向分析師的DolphinScheduler,兩者均無縫對接EMR Serverless Spark這一統一批處理計算引擎。作業產物在本地Git倉庫開發,通過CI流水線部署至OSS,並以SQL檔案或JAR作業的形式通過DolphinScheduler原生的ALIYUN_SERVERLESS_SPARK作業類型提交。
內建的Celeborn Shuffle服務解決了大規模Shuffle任務的磁碟瓶頸問題,狀態與調度系統保持一致,無需二次確認。
在即時分析方面,EMR Serverless StarRocks提供即時分析能力,指標通過智能BI儀表板可視化展示,並整合至一體化業務分析平台。Spark Thrift Server支援基於JDBC的即席查詢,具備動態資源分派能力,為營運團隊和資料倉儲流水線提供支撐。
關鍵成果
遷移後,鷹角網路取得了顯著成果:● 關鍵計量計算時間縮減 50%。例如,使用者級寬表處理時間從 30 分鐘縮短至 15 分鐘。
● 核心 SLA 資料流水線交付提前 1.5 小時,顯著增強了資料可用性保障。
● 通過精簡 Spark SQL 會話和 DolphinScheduler 生產調度工作流程,提升了開發效率,成功保障了多場關鍵遊戲活動的資料交付。
● 藉助全託管彈性叢集、多版本管理和快速升級能力,大幅降低營運開銷。
展望未來
隨著合作深入,阿里雲將持續支援鷹角網路的快速擴充。鷹角網路已在阿里雲上為海外遊戲營運構建類似的資料架構,將同樣的效率和可靠性延伸至全球受眾。展望未來,鷹角網路期待 EMR Serverless Spark 以開放優先的方式持續演化 Lakehouse 生態,包括統一目錄管理和更廣泛的探索性分析情境覆蓋。鷹角網路將與阿里雲攜手,共同推動全球遊戲營運的數字化未來。
精選產品
企業級巨量資料平台,基於 Hadoop、Spark、Flink 等開源生態,提供叢集、作業和資料管理。
全託管的 Spark 相容 Lakehouse 計算服務,內建 Celeborn Shuffle 服務、Fusion SQL 引擎和無縫調度器整合。
全託管的雲原生StarRocks服務,專為高效能即時分析打造,以亞秒級查詢延遲為BI儀表板和業務洞察提供支撐。
全託管的雲原生 Serverless Apache Flink 服務,支援即時資料流處理、CDC 同步和事件驅動資料管道。
Auto Scaling、高持久、高性價比的雲端儲存體服務,用於管理的資料湖資產、作業產物和CI/CD產出。
概覽
通過採用EMR Serverless Spark,阿里雲助力鷹角網路實現全球遊戲營運資料架構現代化,計算時間縮短50%,SLA交付提前1.5小時,營運開銷大幅降低。
使用的產品/解決方案
查看更多解決方案
