日前，由浙江省委宣傳部指導、浙江廣電集團謀劃部署、浙江衛視與騰訊互娛公共研發體系下的知幾團隊共同打造的國內首位「宋韻文化推廣虛擬人」谷小雨，華麗亮相宋韻文化節開幕暨南宋德壽宮遺址博物館開館儀式，並擔任主持人。據了解，谷小雨已作為AI虛擬導覽員「常駐」南宋德壽宮遺址博物館，為來訪遊客互動講解暢聊德壽宮歷史文化，傳頌經典宋詞，同時也能指引展廳內的路線導覽。
德壽宮遺址是南宋臨安城內一處重要的宮苑遺址，是江南園林的集大成作，而南宋德壽宮遺址博物館依託遺址原址，以遺址本體及出土文物的保護、研究、收藏和展示為主，同時展示南宋歷史文化和文物遺產。
上任新崗位的谷小雨換了妝容打扮，珍珠面靨、柳葉細眉凸顯出淡雅風格，印花抹胸加直領對襟褙子和百迭長裙還原傳統宋制，窄袖褙子的下擺結合了宋代《梨花春燕圖》中的造型特徵，整體造型既展現宋人含蓄內斂的體態，又盡顯少女婷婷裊裊的靈動，體現了地道的宋韻氣質。一顰一笑，韻律自然，在谷小雨出眾「業務能力」的背後，是騰訊互娛知幾團隊硬核的技術支持。
前沿技術助力虛擬人「擬活」，谷小雨能說會道展宋韻風采
為了使谷小雨能夠與遊客進行實時的語音對話，騰訊互娛知幾團隊運用了多模態AI語音問答技術，通過智能交互技術和AI賦能虛擬人，令谷小雨實現「聽得懂」、「答得出」、「懂得多」三大目標。
具體說來，在「聽得懂」方面，知幾團隊採用了深度學習、自然語言理解等AI技術，疊加由騰訊遊戲語音GVoice和微信智聆語音兩大技術團隊提供的語音識別技術，多管齊下，保證小雨能準確地聽懂遊客的意圖，並進行恰當的回覆。
同時，區別於傳統問答需要人工提前撰寫大量預設的答案，知幾團隊自研的生成式對話算法可基於虛擬人性格背景，智能生成符合人設的回答。實際上，谷小雨在出任導覽員之前，就已經進行了400G開放數據和30億參數量的超大規模語言模型訓練，再加上海量宋韻文獻和由騰訊PGC問答架構團隊提供的百科搜尋引擎的加持，小雨成功掌握了宋韻百科知識，堪稱宋韻文化「百曉生」。
在保證小雨對答如流「答得出」的前提下，知幾團隊還採用了語音驅動口型技術，通過適配各種音色、歌唱、語氣詞等不同類型的音頻輸入，學習種類繁多的情感語音數據，生成韻律自然、情感風格豐富和個性化的高表現力語音，配合靈動準確的面部表情和口型，讓小雨的語音達到可媲美真人合成的效果，使虛擬人小雨真正地「活起來」。
從國內到海外，數字科技賦能千年宋韻
自今年6月首次亮相以來，「宋韻文化推廣虛擬人」谷小雨秀才藝、做科普，登上央視豐收節晚會，不斷拓寬著宋韻文化的傳播面。在文化數位化的賽道上，這個「出生於宋朝」的虛擬人正不斷做出更多積極探索。
除了在國內宣傳推廣宋韻文化，谷小雨也將宋韻文化輸送到了海外。在今年中秋的2022「月是故鄉明」華僑華人中秋晚會上，谷小雨通過大型冰屏在晚會現場從天而降，給海外僑胞和世界各地的觀眾傳遞宋韻之美，送上中秋祝福；在美國加州洛杉磯舉行的亞洲秋慶節上，谷小雨也亮相活動現場，吸引了大量當地的漢服愛好者參與、打卡互動，並將內容上傳至國際社交媒體。谷小雨在用數位化的創新表達，不斷將宋韻文化的金名片傳播至海外。不僅如此，谷小雨還正在參加第十八屆中國國際動漫節，以年輕國潮之力，助力宋韻文化傳播。
在不久的將來，騰訊互娛知幾團隊還將以此為合作契機，聯合騰訊遊戲學堂、浙江衛視以及中國美術學院，整合各方在AI技術、虛擬人技術以及廣電端虛擬製片技術上的領先優勢，深化「藝術」和「技術」合作，共同開展課題研究。在為谷小雨日常運營提供技術支撐的同時，持續對前沿的數字虛擬技術進行深入研發和產品化落地。
從國內到海外，從歷史到未來，谷小雨以數字科技為內核，不斷用現代化手段助力中國文化傳播。