在即將開展的“中國移動全球合作伙伴大會”上,華為將發(fā)布一款面向運營商電信領域的一站式AI開發(fā)平臺——SoftCOM AI平臺,幫助電信領域開發(fā)者解決AI開發(fā)在數(shù)據(jù)準備、模型訓練、模型發(fā)布以及部署驗證全流程工作中面臨的各種困難。
繼機械化、電氣化、信息化三次工業(yè)革命后,以人工智能為代表的第四次工業(yè)革命正在到來,驅(qū)動人類社會邁向新紀元。就在今年的全聯(lián)接大會上,華為發(fā)布了AI戰(zhàn)略與全棧全場景AI解決方案。華為輪值董事長徐直軍指出,華為人工智能的發(fā)展戰(zhàn)略,是以持續(xù)投資基礎研究和AI人才培養(yǎng)、打造全棧全場景AI解決方案和開放全球生態(tài)為基礎;面向電信運營商,通過SoftCOM AI促進運維效率提升。
運營商所在的電信領域?qū)﹂_發(fā)者業(yè)務知識要求高,且電信場景多樣化、網(wǎng)絡設備復雜,華為推出的這款電信領域AI開發(fā)平臺到底如何幫助開發(fā)者攻克電信領域AI開發(fā)的障礙?我們或可從AI模型開發(fā)生命周期的四個階段“數(shù)據(jù)準備、模型訓練、部署驗證和模型發(fā)布”,來探究一下SoftCOM AI平臺可以給開發(fā)者提供哪些高效、便利的服務。
1、數(shù)據(jù)準備階段
電信業(yè)務涉及端到端網(wǎng)絡不同域設備,業(yè)務相關的完整數(shù)據(jù)往往要跨域多設備收集,導致原始數(shù)據(jù)種類繁多且質(zhì)量參差不齊,這樣的數(shù)據(jù)往往非常難處理。例如數(shù)據(jù)清洗階段,業(yè)務關聯(lián)性強且種類繁多的電信域數(shù)據(jù),要求開發(fā)者要頻繁與不同領域?qū)<矣懻摚拍芙⒖膳袛鄶?shù)據(jù)質(zhì)量好壞的各式各樣規(guī)則,然后根據(jù)對應數(shù)據(jù)質(zhì)量判斷規(guī)則為每一類數(shù)據(jù)手工寫腳本,進行規(guī)模清洗。這樣的方式往往消耗開發(fā)者大量時間成本且效率低下,同理,數(shù)據(jù)的ACD識別和數(shù)據(jù)標注面臨相同的問題,即規(guī)則庫建立困難且缺乏可直接使用的規(guī)模化數(shù)據(jù)處理工具。
SoftCOM AI平臺提供“豐富高質(zhì)量的數(shù)據(jù)服務”。依托華為在電信領域長期積累的業(yè)務經(jīng)驗,形成面向各類電信業(yè)務場景的高質(zhì)量數(shù)據(jù)專家規(guī)則庫。在此基礎上,運用機器學習算法構(gòu)筑一套數(shù)據(jù)處理工具。幫助運營商以及合作伙伴將原始數(shù)據(jù)進行有效的數(shù)據(jù)清洗、識別和準確標識,形成Catalog結(jié)構(gòu)化高質(zhì)量數(shù)據(jù)資產(chǎn)。同時,提供包括數(shù)據(jù)配置維護、應用、查詢等一套數(shù)據(jù)管理機制。使能開發(fā)者隨時調(diào)用有效的高質(zhì)量數(shù)據(jù)進行AI模型的開發(fā)訓練。
?
(配圖說明,一張海量數(shù)據(jù)收納整理的示意圖)
2、模型訓練階段
電信設備種類和廠家包羅萬象,一種設備的標準都是五花八門,這就導致開發(fā)者經(jīng)常要從上千種標準的設備參數(shù)中進行特征提取;此外,電信領域網(wǎng)絡覆蓋范圍廣泛,涉及無線/固定接入網(wǎng)、承載網(wǎng)、核心網(wǎng)、骨干網(wǎng)等,導致電信業(yè)務相關外部參數(shù)上千種,不同外部參數(shù)組合往往匹配不同AI算法。開發(fā)者要從上千種參數(shù)組合中找到對應算法,盲目摸索效率極低。
SoftCOM AI平臺提供“一站式高效模型訓練服務”,在特征提取階段,支持電信領域業(yè)務對象如基站、交換機、路由器等設備的特征處理能力,輔助開發(fā)者快速識別關鍵特性;在模型選擇階段,內(nèi)置的電信領域業(yè)務AI算法(例如異常檢測、根因分析、優(yōu)化控制、業(yè)務預測等等),幫助開發(fā)者縮短模型算法試錯時間。最后,在模型訓練階段,用多模并行訓練計算框架,替代串行訓練計算框架,加快模型訓練速度。從業(yè)務和算力雙向加速AI應用模型開發(fā)。
3、部署驗證階段
AI模型訓練出來后,還需要部署到業(yè)務模擬環(huán)境進行驗證評估調(diào)優(yōu),畢竟在虛機上訓練出來的模型,不拿到業(yè)務模擬環(huán)境運行驗證一把,怎么知道是否有效?萬一訓練出來是個傻子呢?為了保證部署驗證的有效性,要求開發(fā)者構(gòu)筑的業(yè)務模擬環(huán)境盡量精準,然而電信領域業(yè)務一般比較復雜,AI模型部署驗證要涉及幾十種不同軟/硬件資源配套,不同業(yè)務的配套資源還不一樣,開發(fā)者從零開始手工搭建環(huán)境,工作量大、周期長。
SoftCOM AI平臺為開發(fā)完成的模型,提供 “AI模型精準部署驗證服務”。開發(fā)者只需基于統(tǒng)一規(guī)范的應用包格式提供AI模型,再選擇平臺內(nèi)預置的的業(yè)務模擬環(huán)境,即可以進行一鍵部署驗證,極大提升部署驗證效率;同時,SoftCOM AI平臺提供模型部署驗證過程中的業(yè)務效果可視化工具,AI模型的任何改動對業(yè)務系統(tǒng)的影響一目了然;開發(fā)者在進行多個模型部署驗證對比,或新舊模型部署驗證對比時,業(yè)務效果可視化工具可以系統(tǒng)反饋不同模型下業(yè)務性能差異指標,幫助開發(fā)者精準選擇匹配業(yè)務環(huán)境最優(yōu)模型。
4、模型發(fā)布階段
AI模型開發(fā)出來后,開發(fā)者們難以找到可以管理發(fā)布電信領域模型的交易市場,往往無法順利實現(xiàn)商業(yè)變現(xiàn),成為AI開發(fā)者的職業(yè)發(fā)展瓶頸。為了推動電信領域行業(yè)AI發(fā)展,鼓勵更多AI開發(fā)者實現(xiàn)模型的商業(yè)價值變現(xiàn),SoftCOM AI平臺貼心的為電信領域AI開發(fā)者搭建一個“AI模型大賣場”,提供AI模型高效發(fā)布服務,包含認證服務(如模型數(shù)據(jù)安全審核,運行環(huán)境兼容審核等)、上架服務(網(wǎng)站門戶展示,線上計量計費等)、版本迭代管理服務。開發(fā)者只需要在線提供“AI模型/應用”的軟件包和介紹說明文檔,SoftCOM AI平臺即可提供一條龍發(fā)布服務,將AI開發(fā)者的勞動成果推向市場,實現(xiàn)商業(yè)變現(xiàn)。?
電信領域AI開發(fā)任重而道遠,SoftCOM AI平臺在數(shù)據(jù)準備、模型訓練、部署驗證以及模型發(fā)布四個階段,為開發(fā)者提供了一套全生命周期AI開發(fā)服務,協(xié)助開發(fā)者掃除電信領域AI開發(fā)的重重障礙,使能開發(fā)者搭上AI開發(fā)的高效列車。