近日,中國電信聯合清華大學等相關單位制定的《人工智能-大模型預訓練模型-服務能力成熟度評估》標準,順利通過工業和信息化部認證,成為國家級標準,并在工信部人工智能檢驗檢測基礎服務平臺發布。標準為評估大模型能力水平提供了全面的檢測手段,對行業大模型的發展具有重要意義。
標準提出了大模型預訓練服務能力成熟度評估框架,規定了大模型預訓練模型服務的能力要求、成熟度等級及評估方法。
在服務能力方面,預訓練成熟度能力域包括平臺、開發定制、推理及應用等服務,預訓練大模型平臺服務關注大模型開發定制的IT環境,模型開發定制服務關注大模型開發狀態,模型推理及應用域關注大模型的運行狀態。
在成熟度等級方面,模型服務成熟度等級劃分為基礎應用級、協同優化級、自定義生產級三類,對預訓練模型基礎技術、服務復雜度和定制化能力等要求逐步提高。
在評估方法方面,標準對預訓練服務能力進行全面評估,提出各成熟等級應具備的預訓練能力和關鍵性能指標,為大模型預訓練服務能力建設提供指導。
以大模型為代表的新一輪人工智能技術是科技革命和產業變革的重要驅動力。中國電信持續加強核心技術攻關,重點推動基礎通用大模型向垂直行業大模型的縱深演進,圍繞教育、政務、農業、應急等行業領域,預計將發布精準教學大模型、政務服務大模型、神農一號大模型、應急大模型等共計40個行業大模型。