興算力智生長,中興通訊“星云研發大模型”亮相
2023年10月11日-13日,在中國移動全球合作伙伴大會舉辦期間,中興通訊“星云研發大模型”亮相,旨在輔助開發人員進行需求分析、產品設計、編程、測試、版本部署等,全流程助力研發提效。經第三方HumanEval評估,“星云研發大模型”位于編碼類模型第一梯隊,編碼語言種類多樣性能力和中文編碼能力達到業內領先水平。
興算力智生長,中興通訊“星云研發大模型”亮相
直擊痛點,“星云研發大模型”助力研發提效
對程序員多種編程語言的高能力要求、長時間的開發周期,是現代軟件敏捷開發中常見的兩個研發痛點。為解決上述痛點,中興通訊推出“星云研發大模型”,輔助開發人員進行需求分析、產品設計、編程、測試、版本部署以及產品文檔編寫,為開發者提供一站式、智能化的研發體驗,讓每個軟件開發者都有自己的開發助手。
其次,“星云研發大模型”保障研發全流程的安全可控,包括支持白名單機制有效控制使用范圍;代碼特征值識別有效識別敏感代碼片段;敏感詞識別機制可實時監測并攔截敏感內容;完備的后臺審計機制可完整回溯安全事件等。
2023年4月,“星云研發大模型”使用啟動,截至目前,日活人數達1.2萬人, 代碼采納率達40%~45%,編碼提效30%, 整體研發提效10%。
關鍵技術突破,“星云研發大模型”達業內領先
星云研發大模型具有“三全兩一”的特性,“三全”即中興通訊全自研編碼模型;全流程助力研發提效;支持與合作伙伴的全方位合作;“兩一”即“星云研發大模型”位于編碼類模型第一梯隊;助力整體研發提效10%
中興通訊將大量高質量的領域數據、Know-How知識積累、中興通訊多年沉淀的數十萬篇通信領域技術文檔和1000億token的無線/核心網/云代碼語料等注入大模型,進行增量預訓練,使用并行訓練框架。其次,使用高質量精調數據進行模型精調,滿足輔助編程場景應用,提升研發效率。
中興通訊自研部署方案,使用動態batch策略、PagedAttention技術,結合無損模型量化,吞吐量大幅提升,單GPU(A800)達到1500tokens/s,僅使用4張GPU卡(A800)可滿足超千人使用需求。對比業界常規的部署方案,(NVIDIA FasterTransformer和Huggingface Transformer),單GPU吞吐量分別提升10+倍和20+倍;結合int4量化技術,在模型精度不下降情況下,模型大小和顯存使用量均下降一半,能有效降低部署成本。
“星云研發大模型”攜手伙伴,加速演進
大規模預訓練語言模型正以驚人的速度演進,在自然語言處理、計算機視覺、語音識別等領域取得了顯著進展,通用人工智能的前景正日益清晰。面向未來,中興通訊“星云研發大模型”將從模型、算子、語料、算法、平臺等全產品維度,與行業伙伴全方位合作,助力數智化轉型,攜手共赴智能山海,開創智算生長新篇章。
(8364755)
上一篇:重慶尚高智能馬桶維修電話
- 霸州市燃氣灶維修(如何自行解決常見問題)10-13
-
美的定頻空調e3故障(美的定頻空調E3故障解決方案:詳細排查與修復步驟)
2024-08-27
-
施耐德空調售后服務電話(如何聯系施耐德空調的售后服務電話以解決常見問題
2024-08-26
-
Fujitsu空調官方售后(如何聯系Fujitsu空調官方售后服務以解決常見問題和故障?
2024-08-26