小冰數(shù)字員工升級：上線“零樣本”技術(shù)，全新透影音畫傳輸系統(tǒng)質(zhì)量達(dá)運營商級別

量子位的朋友們 2024-07-17 13:50:25 來源：量子位

今日，小冰公司宣布全新的“零樣本”數(shù)字人（Zero-shot Xiaoice Neural Rendering，Zero-XNR）技術(shù)正式上線，并同步推出基于Z-XNR技術(shù)的全新普惠型數(shù)字員工產(chǎn)品，進(jìn)一步豐富小冰AI數(shù)字員工產(chǎn)品線。

新技術(shù)遵循小冰AI數(shù)字員工產(chǎn)品線始終堅持的“數(shù)字人+大模型”路線。與其它現(xiàn)有技術(shù)相比，新技術(shù)依托超千億大模型基座以及基于大模型構(gòu)建的數(shù)字人交互套件，將數(shù)字人所需的訓(xùn)練數(shù)據(jù)壓縮至“秒級”、使定制時間達(dá)到“立等可取”，而且生成的數(shù)字人能夠直接應(yīng)用于實時交互，這在全球尚屬首次。新技術(shù)保持了小冰AI數(shù)字員工產(chǎn)品一貫的超高清標(biāo)準(zhǔn)，高度還原真實人類員工的容貌與聲音，達(dá)到栩栩如生的效果。

小冰數(shù)字人+大模型技術(shù)以及對應(yīng)的數(shù)字員工產(chǎn)品此次迎來三大升級：

1. 全新Z-XNR技術(shù)?；赯-XNR“零樣本”數(shù)字人技術(shù)和TTS語音大模型的融合框架，實現(xiàn)秒級數(shù)據(jù)高質(zhì)量形象聲音復(fù)刻。獨特的數(shù)據(jù)訓(xùn)練和推理算法同時實現(xiàn)數(shù)字人復(fù)刻高質(zhì)量、視覺個性化表達(dá)與立等可取的便捷性。
2. 全新超千億大模型基座與Agent構(gòu)建框架?；诔|大模型基座，升級混合基座架構(gòu)的Agent構(gòu)建框架，搭建完整的交互數(shù)字員工能力構(gòu)建與強化平臺——數(shù)字大腦平臺，使全系列數(shù)字員工配備強大和豐富的職業(yè)交互套件，讓數(shù)字員工更懂客戶，更懂企業(yè)知識與業(yè)務(wù)，讓交互精準(zhǔn)適配商業(yè)場景原生工作流。
3. 全新透影音畫傳輸系統(tǒng)?；趙ebRTC的自研引擎，提供超高清視頻推送能力，通信運營商級別的高質(zhì)量低延遲的音畫傳輸和弱網(wǎng)抗丟包通信能力，精準(zhǔn)的聲音畫面同步。并可搭載透明通道數(shù)據(jù)，支持客戶端實時渲染來豐富擴展應(yīng)用?？梢猿休d端到端的多模態(tài)實時交互和AI對話等場景，提供流暢自然的用戶體驗。

小冰團隊一直走在“數(shù)字人+大模型”產(chǎn)品技術(shù)革新的最前沿，新技術(shù)的上線進(jìn)一步鞏固了小冰在該領(lǐng)域的世界領(lǐng)先地位。產(chǎn)品依托行業(yè)先進(jìn)的全棧大模型與自研AI底層能力，結(jié)合深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)、超級自然語音、NLP、AIGC等技術(shù)，將數(shù)字人的整體自然度提升到與真人難以分辨的程度，同時實現(xiàn)800毫秒級別的端到端超低延時人機實時交互。通過完備的SaaS化平臺工具，用戶可自主管理數(shù)字資產(chǎn)，配置數(shù)字人工作。

隨著“零樣本”技術(shù)的全新上線，小冰AI數(shù)字員工產(chǎn)品體系“高-中-低”搭配日臻完善，廣泛適配企業(yè)不同發(fā)展階段和多樣化的業(yè)務(wù)場景?？蛻舾采w了包括招商局集團、紅杉中國、萬科集團在內(nèi)的國內(nèi)眾多行業(yè)頭部企業(yè)，并在各垂直領(lǐng)域企業(yè)中取得豐富的產(chǎn)業(yè)落地實踐。

“零樣本”數(shù)字人的發(fā)布，為小微企業(yè)、小型商家嘗試數(shù)字人技術(shù)和大模型提供了更加便捷和低成本的路徑，數(shù)字化轉(zhuǎn)型將更加順暢。這一新的數(shù)字人場景選擇，將數(shù)字人的適用范圍拓寬至新的廣度，將加速推動數(shù)字人普及。即日起，用戶通過小冰數(shù)字員工APP的自助服務(wù)，即可輕松暢享全流程自動化的“零樣本”數(shù)字人定制體驗。

小冰團隊堅信技術(shù)創(chuàng)新的力量，致力于推動數(shù)字人普及，持續(xù)引領(lǐng)數(shù)字人產(chǎn)業(yè)發(fā)展趨勢，讓數(shù)字人賦能千行百業(yè)，發(fā)揮技術(shù)進(jìn)步的巨大價值，與用戶共同邁入永不疲倦、安全可靠、穩(wěn)定輸出的數(shù)字人時代。

此前，小冰大模型以及語言模型算法、語音合成算法、數(shù)字人合成算法等技術(shù)均已成功通過國家網(wǎng)信辦備案，標(biāo)志著小冰在技術(shù)能力、專業(yè)性、安全性和合規(guī)性方面擁有堅實基礎(chǔ)，已獲國家權(quán)威級認(rèn)可。

小冰公司前身為微軟（亞洲）互聯(lián)網(wǎng)工程院人工智能小冰團隊，現(xiàn)為完全具有獨立知識產(chǎn)權(quán)的中國人工智能公司，擁有覆蓋自然語言處理、計算機語音、計算機視覺及人工智能內(nèi)容生成的完整技術(shù)框架。依托小冰大模型、神經(jīng)網(wǎng)絡(luò)渲染及超級自然語音等領(lǐng)先技術(shù)，小冰公司已構(gòu)建類型豐富的AI數(shù)字人完整產(chǎn)品體系，成功賦能金融保險、智能車企、地產(chǎn)、文旅、政務(wù)、教育、零售、大消費、互聯(lián)網(wǎng)等十余個垂直領(lǐng)域。