京東云舉辦虛擬數字人專場沙龍 揭秘“元宇宙中的初音未來”
來源：中金在線
?
2021-12-30 14:45:08
在元宇宙概念火熱的當下，虛擬數字人被認為是元宇宙不可缺少的一部分。12月27日，京東云圍繞各方關注的熱點話題舉行了“技術X產業”——虛擬數字人專場沙龍。本次沙龍邀請清華大學新聞學院教授博導、清華大學新媒體研究中心執行主任沈陽、京東科技數字人引擎技術總監王林芳以及京東科技人機交互技術總監陳蒙三位嘉賓，圍繞虛擬數字人與元宇宙、虛擬數字人的技術發展和趨勢、虛擬數字人的產業應用及成果等話題展開探討，揭開了虛擬數字人及多模態人機交互技術的“秘密”。
對于加速“跑入”人們生活的虛擬數字人，沈陽表示：虛擬數字人是現實與元宇宙場景鏈接的重要“媒介”之一。虛擬數字人不僅是元宇宙的原住民，還是自然人在元宇宙中的數字化化身，它將成為我們在元宇宙中自我呈現與形成自我認同的重要方式，并成為人和人、人和物的交互載體。
虛擬數字人、虛擬偶像這些概念并不是新鮮字眼，最早可追溯至計算機動畫技術誕生之初。“2007年Yamaha的以語音合成程序為基礎開發的音源庫，包裝了首個虛擬偶像初音未來，這個二次元少女還舉辦了大量的線下演唱會，從此虛擬偶像風靡一時。”陳蒙介紹道，隨著人工智能和虛擬技術的不斷發展，尤其在2020年因為全球疫情影響，文娛行業加速線上化，也促進了虛擬偶像市場的迅速崛起。
對于當下虛擬偶像井噴的現狀，王林芳從技術上給出了答案：基于人工智能的深度學習、內容生成，語音、視覺識別技術越來越成熟，驅動了今年虛擬數字人整體快速發展；而虛擬偶像是虛擬數字人在文娛行業、消費平臺落地的產物。而京東虛擬數字人強調產業落地，為銀行、政務、商家等行業降本增效，在具體的應用場景中帶來更大的價值。
“知心、走心、關心”技術讓虛擬人越來越有人情味
近年來，隨著我國虛擬偶像公司數量的增加，虛擬數字人的市場正在異軍突起。據悉，虛擬數字人可以分為三個發展方向：一是以虛擬偶像為代表的表演型虛擬數字人；二是服務型虛擬數字人，如虛擬銀行柜員、虛擬客服、虛擬主播等，可幫助企業提高效率；三是未來將逐步走入千家萬戶的個人陪伴型虛擬數字人。
因為人的天性是傾向于融合視覺、聽覺等多種感官交互的過程，多模態人機交互技術就是滿足人對于外界信息獲取逐漸升維的過程，從單純的文本到語音，到現在融合計算機視覺等技術。而多種模態交互的難點在于不斷的高度擬人化，也就是我們常說的讓虛擬數字人具有“人情味”，不僅包括外觀、表情、動作更加逼真、還有從語音、語意、語態、對話的深入理解。依托京東云的前沿AI技術，言犀多模態交互數字人可幫助虛擬人跟自然人建立情感上信賴關系，讓虛擬人看起來像人、聽起來像人，無限接近真人，真正做到“知心、走心、關心”。除了計算機視覺技術之外，“人情味”背后的關鍵是多模態人機交互技術，從感受的角度出發，是“知心、走心、關心”三個層次，背后有一系列人工智能技術予以支撐，包括多模態的感知和理解、知識推理和決策、情感智能、魯棒性語音識別和擬人化合成等。
要實現從“知心”到“關心”的高度擬人化，言犀多模態交互數字人離不開京東云在多模態人機交互技術等前沿科技的不斷探索。京東科技在NeurIPS、CVPR、AAAI、ACL等國際AI頂級會議上共發表相關論文近350篇，2次獲得IEEESignalProcessing最佳論文獎；京東多模態交互數字人技術榮獲多媒體領域的全球頂級盛會ACMMultimedia的最佳演示獎，兩次榮獲世界人工智能大會SAIL-卓越人工智能引領者獎。
虛擬數字人全面深入產業應用
“您好，我是江南農商銀行數字員工小江。請問您想辦理什么業務“、”您請說，如‘交易密碼修改、我要開戶……”
今年12月，江南農商銀行與京東云合作，推出了全國首個業務辦理類數字人“言犀VTM數字員工”。區別于過往咨詢問答式機器人，言犀VTM數字員工可獨立、準確完成銀行交易場景的自助應答、業務辦理等全流程服務。言犀VTM數字員工最大的創新之處，是將應用場景延伸至真實的業務交易辦理環節，而將數字人技術與業務交易場景打通難在在于：首先，數字柜員的擬人化程度要很高、交互體驗要好；第二點，要與銀行的業務系統深度耦合，確保交易的準確性和安全性。最后，數字柜員要能“聽得懂、辦得快”，給不同的客戶帶來同樣便捷、流暢的服務體驗。另外，小江還能精準識別數字連讀和地方口音，同時采用多樣化增強算法降低了噪音對收音的影響，提高了語音識別的魯棒性。
除了小江之外，數字主播小萌已經在今年京東11.11“上崗”，覆蓋3C、家電、母嬰等類型的京東自營店鋪。在AI技術的驅動下，數字人主播能夠結合商品的不同功能，配合做出豐富多樣的動作。?數字主播小萌剛“上崗”一個半月，助力Beats京東自營旗艦店實現直播時長和GMV翻倍增長，獲得官方的大量扶持資源，甚至登上了京東直播商家超級排位賽的冠軍寶座。
據悉，在數字人應用落地方面，言犀除了應用于江南銀行數字柜員、虛擬數字人直播之外，還在政務、金融、交通、物流、零售、制造業等多個行業落地，助力不同行業實現服務和營銷的數智化轉型。
未來可期，未來虛擬人將深入服務社會
基于多模態人機交互的虛擬數字人未來在哪里？
車里的虛擬駕駛員、手機里的虛擬助手、家里的虛擬管家，商場里的虛擬導購、機場、地鐵里的虛擬引導員、餐廳的虛擬服務員。數字人已經出現、或者正在實現不同領域的應用落地。虛擬數字人需要與行業進行深度融合，真正要對社會產生價值。只有真正幫助行業降本增效，虛擬數字人技術才會有持續發展的動力，社會各界才能享受數字化帶來的紅利。
隨著虛擬數字人的不斷應用和經驗積累，相信虛擬數字人將在日常生活中扮演著不可或缺的角色。伴隨元宇宙不斷成熟和完善，我們不僅將擁有元宇宙里的數字化化身，虛擬數字人虛實結合也將徹底顛覆我們對于生活、工作、娛樂的體驗方式，成為人和人、人和物的交互載體。
京東云將不斷深入探索虛擬數字人、多模態人機交互技術，以人工智能、大數據、云計算等技術為基礎，通過數智能力不斷為社會、為政企客戶提供解決行業痛點的虛擬數字人，樹立人機交互發展、應用的新標桿，助力實體經濟高質量發展。
