每日最新頭條.有趣資訊

Google 打造一個“野生字幕君”,不用聯網,支持所有應用

在剛剛過去的

Google I/O 2019

上,Google 展示了一項名為 Live Caption(實時字幕)的新功能。它內置在 Android Q 中,可以將手機上播放的音頻實時轉化為字幕,適用於播客、視頻網站、語音消息、本地拍攝視頻等場景。

更厲害的是,Live Caption 的處理過程全部都在手機本地完成,不需要上傳到雲端,既保證了速度,又保證了安全。Live Caption 還有哪些強大之處?這篇文章向你完整介紹。

沒網也能用,在本地進行處理

字幕的重要性可能超過了很多人的想象。在一般觀眾眼裡,它是可有可無的選項,而對於聽力障礙者,字幕是他們理解內容的重要工具,Live Caption 正是為他們而設計。在此之前,Google 已經在 YouTube 中加入了自動字幕,然而世界上還有很多沒有字幕的視頻內容,對於聽力障礙者來說,它們就像沒有聲音的默劇。

能不能給手機上的所有音頻添加實時字幕?這成為了 Google 的下一個目標。經過多個團隊的努力,這個方案終於被實現出來。不過在最初,系統需要將音頻上傳到雲端,然後運行一個 2GB 的機器學習模型,過程耗時又不安全。後來,他們在手機終端實現了相同的處理效果,並且只需要運行一個 80M 的模型,它可以在手機聯網時自動更新,然後在沒網狀態下完全離線運行。

Live Caption 的優勢主要有三個:第一,完全在本地運行,適用於所有場景;第二,數據不會上傳到雲端,保證數據安全;第三,內容創作者和應用開發者不需要做任何工作,就可以讓用戶體驗到實時字幕。

系統級的實時字幕,支持所有應用

在 Google 的演示中,Live Caption 可以在直播、視頻網站、播客、拍攝的本地視頻、社交媒體、語音消息等多種場景下使用。打開方式是點擊音量鍵,點擊實時字幕按鈕。

隨著音頻的播放,畫面中央會顯示動態的實時字幕,你可以調整字幕條的顯示大小,拖動它們到任意位置。更神奇的,即使在靜音狀態下 Live Caption 也能正常運行。

雖然 Google 主要強調了 Live Caption 對聽力障礙者的作用,但其實它對普通用戶也十分有用。在看視頻的同時開啟字幕,可以更好地理解內容,Google 將這個功能做到了系統底層,就意味著你可以在任何視頻中開啟字幕。另外在會議和地鐵這樣的特殊場景,你可以在不開啟音頻的情況下理解視頻內容。

今年晚些時候推出

前幾天我們給大家推薦了幾個「自動加字幕」的工具,視頻創作者可以利用它們來減輕工作負擔。不過 Google 的思路顯然更加徹底,他們將實時字幕做成了系統級的功能,內容創作者和應用開發者不需要做任何工作,就能讓用戶隨時體驗到實時字幕。這個功能集成在 Android Q 中,一旦普及就能方便大量用戶。

目前 Live Caption 還無法在 Android Q 系統中進行體驗。Android 團隊的 Brian Kemler 透露,它將在今年晚些時候推出。由於對記憶體和空間有要求,Live Caption 會首先出現在高端的 Android Q 設備上,之後將支持更多設備。

獲得更多的PTT最新消息
按讚加入粉絲團