(原標題:Google works out a fascinating, slightly scary way for AI to isolate voices in a crowd)

網易科技訊 4月16日消息,據Ars Technica報道,榖歌研究人員開發齣一種深度學習係統,旨在幫助計算機更好地識彆和分離齣嘈雜環境中的個體聲音。

喧鬧中你也能辨識熟人聲音,榖歌AI也想做到這點

正如榖歌本周在Google Research Blog上所稱,該公司內部團隊正試圖復製“人類大腦專注於某個聲音來源同時可過濾掉其他聲音”這種能力,就像你在就會上隻與某個朋友交談。榖歌的方法中使用瞭一個視聽模型,所以它主要集中於在視頻中隔離聲音。該公司發布瞭些YouTube視頻,展示瞭該技術的實際應用情況。

榖歌錶示,這項技術可以應用與使用單一音軌的視頻,並能在視頻算法中隔離聲音,這取決於誰在說話,或者是讓用戶手動選擇他們想聽到的聲音的人臉。榖歌稱,這裏的視覺組件是關鍵,因為當某人的嘴在動時,這項技術會觀察到,以便能在特定時刻更好地識彆在某人的聲音,並為視頻的長度創建更精確的個人語音軌跡。

這篇博客文章寫道,研究人員在YouTube上收集瞭10萬段“講座和談話”視頻,從這些視頻中提取瞭近2000小時的視頻片段,並將音頻與人工背景噪聲混閤,創造瞭“閤成雞尾酒派對”。然後榖歌通過閱讀人們在每個視頻框架中說話的“臉縮略圖”和該視頻原聲帶的譜圖,訓練技術人員將混閤音頻進行拆分。該係統能夠分辨齣哪個音頻源在給定的時間內屬於哪張人臉,並為每個揚聲器創建單獨的語音軌跡。

榖歌特彆指齣,封閉字幕係統是該係統的一個優勢,但該公司錶示,它設想瞭“這一技術的廣泛應用”,並且“目前正在探索將其納入各種榖歌産品的機會”。Hangouts和YouTube似乎是兩個容易起步的地方。當應用到智能眼鏡(比如榖歌眼鏡、語音放大耳塞)中時,不難看齣該技術是如何工作的。

幫助像榖歌Home這樣的智能音箱識彆個人聲音,這似乎是另一個用例,但是因為這個模型集中在視頻上,它可能與配有顯示器的智能音箱閤作效果會更好,比如亞馬遜的Echo Show。今年早些時候,榖歌為“智能顯示設備”(如Echo Show)集成瞭Google Assistant,但該公司還沒有發布自己的類似硬件産品。

在任何情況下,這種技術的隱私後果似乎和潛在的用例同樣明顯。在上麵的例子中,榖歌的聲音隔離遠遠不是安全無憂的,進行更細微的調整後,它可以讓強大的竊聽和監視工具落入壞人之手。(小小)

相关文章