日本精品一区二区三区高清 久久

ITBear旗下自媒體矩陣:

Akamai AI推理方案:時延降60%,分布式架構(gòu)賦能高效AI部署

   時間:2025-05-12 15:06:02 來源:ITBEAR編輯:快訊團隊 發(fā)表評論無障礙通道

Akamai,這家曾以CDN服務聞名的企業(yè),如今已成功轉(zhuǎn)型為全球領(lǐng)先的云服務、安全服務與CDN服務綜合提供商。通過一系列戰(zhàn)略收購,如Linode,Akamai構(gòu)建了全球最分布式的計算平臺,其服務覆蓋全球130個國家,擁有超過1200個運營商網(wǎng)絡(luò)、4000多個邊緣節(jié)點、26個核心云計算節(jié)點及10個分布式節(jié)點。

面對生成式AI應用的井噴式增長,Akamai迅速響應市場,推出了AI推理解決方案。該方案旨在優(yōu)化AI推理工作負載的效率與成本,滿足日益增長的推理需求。Akamai大中華區(qū)總經(jīng)理李昇指出,未來AI推理的計算需求或?qū)⑦h超訓練需求,且大量推理任務將在邊緣端進行。Akamai的高度分布式架構(gòu)設(shè)計,正是應對這一趨勢的理想選擇,能夠助力客戶在更接近用戶的地方部署生成式AI模型。

Akamai亞太區(qū)云計算專家團隊負責人李文濤進一步介紹,Akamai的AI推理服務能夠提升3倍的推理吞吐能力,降低60%的推理時延,相比傳統(tǒng)云計算廠商的基礎(chǔ)設(shè)施,使用成本可降低高達86%。這一方案包括四大組成部分:經(jīng)典計算產(chǎn)品線,提供CPU、GPU及專屬芯片VPU虛擬機,滿足多樣化的AI推理需求;數(shù)據(jù)管理,通過與VastData合作,結(jié)合Akamai的全球分布式邊緣云平臺,實現(xiàn)實時數(shù)據(jù)處理,加速AI推理服務;容器化服務,通過托管式K8s服務LKE企業(yè)版,支持容器化環(huán)境運行推理服務;邊緣云計算和網(wǎng)絡(luò)能力,利用集成的云平臺和骨干網(wǎng),降低最終用戶推理時延,提高吞吐效率,并與Fermyon合作,提供WebAssembly支持,構(gòu)建無服務器應用支持AI推理。

李文濤強調(diào),Akamai的邊緣時延極低,處于互聯(lián)網(wǎng)的最后一跳,能夠很好地解決AI企業(yè)面臨的“最后一公里”時延問題。Akamai還在持續(xù)提升AI模型的安全能力。在今年的RSA Conference上,Akamai發(fā)布了基于AI的防火墻,保護用戶AI模型免受惡意攻擊,如資源消耗型攻擊和惡意Token注入攻擊等。

Akamai在中國的業(yè)務主要聚焦于幫助中國企業(yè)“出海”。李昇表示,Akamai在助力客戶有效執(zhí)行和部署AI戰(zhàn)略的同時,也將確保AI模型的安全性,為客戶提供全方位的服務支持。

舉報 0 收藏 0 打賞 0評論 0
 
 
更多>同類資訊
全站最新
熱門內(nèi)容
網(wǎng)站首頁  |  關(guān)于我們  |  聯(lián)系方式  |  版權(quán)聲明  |  RSS訂閱  |  開放轉(zhuǎn)載  |  滾動資訊  |  爭議稿件處理  |  English Version
 
主站蜘蛛池模板: 四子王旗| 珲春市| 罗江县| 株洲市| 永寿县| 雅江县| 浦江县| 玉树县| 资溪县| 商水县| 清苑县| 夏津县| 芜湖县| 湄潭县| 页游| 嘉义县| 德钦县| 红桥区| 昭觉县| 孙吴县| 永康市| 德州市| 肃北| 侯马市| 富蕴县| 阜城县| 库尔勒市| 武邑县| 会昌县| 乐安县| 南川市| 阜南县| 祥云县| 蚌埠市| 江达县| 昌平区| 霍州市| 洪江市| 靖州| 新郑市| 尼木县|