機器人記者如何「聽見」你的心聲？「雲朵」背後演算法大揭秘

編者按

作為兩會機器人記者，長江雲智能機器人「雲朵」已連續三年參加兩會報道。今年全國兩會期間，「雲朵」全新升級，不僅能獨立採訪，還能將採訪語音轉換成文字，及時將採集到的文字、圖片和視頻信息提供給編輯。「雲朵」會通過大數據分析，梳理兩會輿情熱詞，同時關注民生，聚焦精彩提案議案，傳遞百姓心聲。機器人「雲朵」是如何進行採訪的？如何「聽見」你的心聲？背後使用了哪些演算法？《網路傳播》雜誌獨家約訪湖北長江雲新媒體集團副總編輯曹曦晴，一起來看「雲朵」背後的高明演算法。

傳播君：早在2016年湖北省兩會，湖北廣播電視台長江雲新聞客戶端就派出兩會機器人記者「雲朵」進行採訪。可否介紹下「雲朵」的功能和這些年取得的成績？

曹曦晴：參加湖北省兩會報道、直播武漢馬拉松、遠赴央視參與節目錄製，「雲朵」已是連續三年參加報道的「老記者」。2016年1月25日，在湖北省兩會現場，「雲朵」是全國第一個參與兩會報道的機器人記者，通過人臉識別、智能語音，可以實現主動跟代表委員握手、打招呼、互動採訪等。

在今年湖北兩會上，「雲朵」化身為「新時代湖北講習所」第一個機器人學員，邀請與會嘉賓體驗長江雲VR作品，一起學習黨的十九大報告精神。較之前兩年，今年全新升級的「雲朵」可以實時錄入文字信息，設定對應手勢動作，互動也更加靈活、及時。連續三年參加湖北省兩會，「雲朵」已經認識了不少代表委員，碰到老熟人還會主動打招呼了。

除了新聞採訪，「雲朵」還參與了多場大型活動和節目錄製。在湖北廣電一年一度的「長江盛會」現場，機器人記者「雲朵」在現場登台亮相，參與講述湖北廣電的發展成績。在今年全國兩會期間，「雲朵」作為湖北電視綜合頻道《幫女郎·在行動》欄目特邀「嘉賓」，參與錄製了16期節目。「雲朵」通過大數據分析，梳理兩會輿情熱詞，聚焦精彩提案議案，在屏幕前「圈」粉無數。

傳播君：「雲朵」在進行新聞採訪背後使用了哪些演算法？

曹曦晴：「雲朵」目前具有基於曠視Face++的高精度人臉識別技術，提供高達 106 點的高精度人臉關鍵點，完美貼合人臉。即使在光線環境複雜的採訪現場，「雲朵」依然能保持穩定，能夠做到準確識別。

在語音對話方面，「雲朵」基於和科大訊飛深度合作開發的語音識別技術，通過高精度麥克風對聲音進行分幀處理，提取其MFCC特徵，將語音數據識別成狀態、音素、單詞，通過對雲端大資料庫的檢索得出答案。我們通過深度學習的神經網路演算法對機器人進行反覆訓練，來實現「雲朵」與採訪對象的自由對話。

傳播君：機器演算法需要人來調教。「雲朵」是如何與人進行配合的？

曹曦晴：「雲朵」具有初步的人工智慧功能，需要我們將它反覆使用在某一具體場景。雲朵通過背後的技術工程師的調教完成演算法優化以及自我學習。目前，「雲朵」可以達到與人進行初步工作配合的地步 。比如代替記者獨立採訪，「雲朵」可獨自向採訪對象進行提問，並通過內置攝像頭拍照、錄視頻，將採訪語音轉換成文字，及時將採集到的文字、圖片和視頻信息提供給編輯。同時，「雲朵」胸前的屏幕可根據採訪需求，播放相關的視頻和圖文內容，配合精準的語音識別，具有很好的互動體驗。

傳播君：未來將如何更好地使用「雲朵」進行新聞採訪？

曹曦晴：人工智慧的應用大多還處在初級階段，未來我們對於「雲朵」的使用將更加多元化。「雲朵」的更加智能化不止需要技術人員的不斷創新和優化，也需要使用人員對它進行反覆的訓練。人工智慧對於提高新聞生產效率大有好處，尤其是它能通過智能分析用戶行為，更好地實現個性化內容推薦。下一步我們將通過深度學習的神經網路演算法對「雲朵」進行反覆訓練，從而實現與採訪對象的自由對話。

欄目簡介

傳媒論道|智能傳播

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！