“北京明天的天氣如何？”“速度滑冰女子1000米比賽的場地在哪兒？”冬奧虛擬志愿者“愛加”不僅能進行“面對面”的冬奧賽事、賽程實時互動交流，還能陪你玩一把冬奧知識游戲大PK，周邊交通、文化、旅游等咨詢問答更不在話下。

這背后是科大訊飛提供的語音識別、語音合成、機器翻譯和自動問答等技術(shù)能力支撐。

賽事成績多語種呈現(xiàn)，跨國界交流無障礙，讓視障人士“聽見”文字，讓聽障人士“看見”文字……作為北京冬奧會和冬殘奧會官方自動語音轉(zhuǎn)換與翻譯獨家供應商，科大訊飛為北京冬奧會提供自動翻譯和相關(guān)的多語種語音轉(zhuǎn)換、語音識別以及語音合成等硬核技術(shù)，用技術(shù)說話，助力實現(xiàn)賽場內(nèi)外的溝通交流無障礙。

據(jù)介紹，早在2019年，科大訊飛就組建了北京冬奧會和冬殘奧會示范應用專項團隊，借助先進的機器翻譯和多語言語音轉(zhuǎn)換技術(shù)，圍繞“人和人之間溝通無障礙、人和組織之間溝通無障礙、人和賽事之間溝通無障礙”三大方向，加速應用場景落地。

2年多來，科大訊飛先后研發(fā)了面向冬奧場景的多語種智能語音識別與合成、具有冬奧特征的多語種機器翻譯和基于交互問答的冬奧多語種信息獲取及交互等核心技術(shù)，構(gòu)建了面向冬奧會場景的語音及語言服務平臺，提供語音識別、語音合成、機器翻譯、自動問答等技術(shù)能力，支撐冬奧虛擬志愿者、便攜式終端設備、賽事多媒體辦公和信息發(fā)布系統(tǒng)等產(chǎn)品應用。

為實現(xiàn)“人和人之間溝通無障礙”，科大訊飛的雙屏翻譯機可支持60個語種的在線語音翻譯、16個語種的語音離線翻譯、中英16個垂直行業(yè)的翻譯，翻譯效果好、響應時間快、操作便捷自然。特別是針對冬奧會使用場景，加入了數(shù)十萬專業(yè)詞匯以及行業(yè)術(shù)語，覆蓋各類體育運動和裁判用語，可有效滿足各類人群的跨語言溝通需求。

為保障“人和組織之間溝通無障礙”，科大訊飛面向冬奧辦公與信息發(fā)布應用場景，基于中英文語音轉(zhuǎn)寫及翻譯核心技術(shù)，推出聽見轉(zhuǎn)寫系統(tǒng)，支持現(xiàn)場上屏發(fā)布、媒體采訪等，實現(xiàn)及時的新聞稿發(fā)布，中英文整體轉(zhuǎn)寫準確率可以做到97%以上。

記者采訪了解到，由于自動語音轉(zhuǎn)換與翻譯涉及技術(shù)眾多，難度和挑戰(zhàn)非常大，科大訊飛在為賽事提供技術(shù)支持的過程中，也遇到了不少難點。

在多語種語音語言技術(shù)研發(fā)領(lǐng)域，由于涉及60多個語種的語音識別合成翻譯等技術(shù)研發(fā)，除了中英文之外，針對其他語種（比如瑞典語、波蘭語等）語料比較少的問題，通過源頭核心技術(shù)創(chuàng)新，在端到端建模和無監(jiān)督、弱監(jiān)督訓練方面取得重大突破。例如在多語種語音識別方面，100小時有監(jiān)督數(shù)據(jù)加上大量無標簽語音和文本數(shù)據(jù)可以達到1萬小時有監(jiān)督訓練的效果。這項技術(shù)也在OpenASR國際低資源多語種語音識別挑戰(zhàn)賽的15個語種受限賽道和7個語種非受限賽道系統(tǒng)，全部取得第一名的成績。

在多語種自動問答中，融合了數(shù)字人生成、語音識別、語音合成、自然語言理解等多項技術(shù)，并結(jié)合FAQ問答、文檔集合問答、知識庫問答和基于文本蘊含識別的多源答案驗證等技術(shù)進行知識庫構(gòu)建，最終實現(xiàn)人們可以和冬奧虛擬志愿者“愛加”用6種語言自由互動交流。

越過語言的邊界，打破時間的極限，科大訊飛努力用技術(shù)沖出溝通障礙的重圍，讓文字可以被聽見，聲音可以被看見。站在冬奧會賽場上，科大訊飛在用技術(shù)為世界溫暖賦能，共享冰雪盛會。