來源：互聯網

12月17日上午，在中國信息通信研究院主辦的2024第五屆“GOLF+IT新治理領導力論壇”主論壇上，阿里云重磅發(fā)布了全棧AI負載高可用架構，以滿足AI大模型企業(yè)級應用在大規(guī)模參數量、復雜結構和高性能算力背景下，對云服務處理能力可擴展性、服務連續(xù)性、服務質量和故障快速恢復的需求。

以為生成式 AI 打造持續(xù)的卓越用戶體驗為目的，阿里云全棧AI負載高可用架構可達到GPU故障預測準確率92%，千卡規(guī)模集群連續(xù)訓練有效時長大于99%，秒級模型自動保存、分鐘級故障恢復；每分鐘10000個pod擴展，分鐘級自動擴容；核心模型服務99.99%的API SLA，模型應用服務全鏈路可觀測等重要的AI業(yè)務高可用目標，在大規(guī)模數據處理和訓推場景下，實現了對Gen AI應用業(yè)務連續(xù)性、響應速度、穩(wěn)定性和安全性的全面保障。

在論壇上，2025年中國數字化治理領域最新評估結果揭曉，阿里云成為首批通過信通院“企業(yè)用云治理能力成熟度評估”評測的兩家企業(yè)之一，同時獲得該項能力評估最高等級。

阿里云全棧AI負載高可用架構正式發(fā)布

在AI算力需求逐漸超越通用需求的今天，以GenAI為代表的應用場景和技術倍增，云上企業(yè)需要處理和存儲的數據量呈指數增長，AI驅動的應用在高負載情況下，對保障業(yè)務的連續(xù)性、響應速度、穩(wěn)定性和安全性均提出了更高要求。

為此，阿里云在升級云平臺自身的技術服務能力的同時，將GPU、異構算力集群、容器集群、存儲、向量數據庫、機器學習平臺等AI負載高可用全面融入云平臺架構設計，圍繞大模型訓練微調、推理、多模態(tài)數據處理等環(huán)節(jié)，構建具備“高可用模型訓練、靈活彈性的推理資源、數據高可靠”特性的全棧AI負載高可用架構，實現了從通用負載向AI負載的可用性演進，為客戶AI業(yè)務構建提供穩(wěn)定的業(yè)務服務和出色的用戶體驗。

在高可用模型訓練方面，阿里云AI基礎設施高可用能力融入云服務整體架構設計，基于AI算法的故障預測，實現訓推環(huán)節(jié)的性能瓶頸分析和潛在故障分析，GPU故障預測準確率達92%，同時將異常預測接入自愈鏈路，訓練恢復自愈率超90%、千卡規(guī)模集群連續(xù)訓練有效時長大于99%，實現秒級模型自動保存、分鐘級故障恢復；同時，CPFS 高性能存儲集群，在超大集群中 20TB/s 的吞吐能力，支持更大及更加頻繁的 Checkpoint 讀寫，能夠更好地防止數據丟失，并提升訓練的穩(wěn)定性和可靠性。在網絡層面，阿里云自研的高性能網絡，業(yè)界首創(chuàng)雙平面的高可用網絡架構，網絡Link和設備中斷，訓練任務不中斷。

在推理資源方面，阿里云容器計算服務ACS的彈性能力實現每分鐘可以進行10000個pod擴展，分鐘級自動擴容；PAI-EAS模型在線服務，適用于實時推理、近實時異步推理等多種AI推理場景，能感知每個請求的執(zhí)行進度，做到更公平的任務調度，提高擴縮容效率。同時，阿里云將跨區(qū)域的主動式重路由技術運用到數據中心間的通信，從而在跨數據中心推理網絡上，達到跨域帶寬業(yè)界最高的 99.995% SLA，實現秒級內重新路由，提供一個更加穩(wěn)定的網絡通信延遲。

對于在實時語音交互、實時AI搜索等高性能場景有推理需求的客戶，阿里云百煉模型服務平臺，基于預訓練模型為用戶提供模型推理與應用構建托管服務，核心模型服務API達到 99.99% SLA，高性能場景核心用戶用例中的首包延時小于300毫秒，能夠有效解決應用開發(fā)、模型調用等過程中的跨區(qū)域TPM限制、高并發(fā)需求下API響應變慢等問題，提升Gen AI應用推理與構建時的用戶體驗。

在數據高可靠方面，阿里云數據存儲與數據庫服務面向不同計算引擎、多種 AI 框架進行了深度集成，形成承載PB級甚至EB級大規(guī)模數據統(tǒng)一的存儲底座，同城冗余容災，高達99.995% SLA，數據多副本冗余、大文件斷點續(xù)傳、批量和多線程數據操作保障數據服務高可靠，向上支撐面向單AZ, 雙AZ, 三AZ及跨Region的高可用服務，跨Region AI數據的就近讀寫和負載均衡，滿足AI數據多活的強一致性，AI數據冷備、熱備、故障自動切換，解決AI數據故障風險。

AI時代與用戶共建云上的IT新治理

AI時代的浪潮中，企業(yè)對于高可用架構的需求不僅僅停留在節(jié)點的穩(wěn)定性上，而是在更高的層面追求智能化運營。阿里云全棧AI負載的高可用架構已為企業(yè)奠定了堅實的技術基礎，而進一步的挑戰(zhàn)則在于如何提升云上系統(tǒng)的運維管理與治理能力。通過與用戶攜手，阿里云致力于在云環(huán)境中構建一個AI-Native的智能化、自動化和可持續(xù)的IT治理體系，為企業(yè)的創(chuàng)新之路保駕護航。

阿里云根據多年服務客戶的經驗總結為一系列的方法論和架構設計原則，推出了阿里云卓越架構 Well-Architeched Framework，意在幫助企業(yè)在云上構建一個安全、穩(wěn)定、高效的應用環(huán)境。面向AI技術融入帶來的更復雜更大規(guī)模的，根據云計算的彈性、實時交付、自助化等特點，阿里云卓越架構進一步升級了用云企業(yè)運維管理和治理規(guī)則基線的最佳實踐，依靠Well-Architeched云卓越架構來學習-度量-優(yōu)化，落地治理潛在的風險隱患，從安全、穩(wěn)定、效率、成本、性能五大支柱全面提升系統(tǒng)整體韌性和運營效率。