15個月來Siri正確率提高了13% 仍落後谷歌

　　7 月 25 日消息，5 個月前，市場調研機構 Loup Ventures 進行了一項橫評測試，對象主要是多家科技公司的智能揚聲器產品，一一測試這些產品針對不同問題的表現如何。日前，該機構又進行了一項新的橫評，而這一次測試對象是智能手機的 AI 智能語音助理。雖然 Siri 依然不算最出色的一款，但回到問題的正確率卻得到了顯著提高。

　　為了得到更客觀的結果，Loup Ventures 在測試過程中分別在智能手機上對蘋果 Siri、谷歌 Google Assistant、亞馬遜 Alexa 和微軟 Cortana 問了 800 個問題，並將測試結果與早期 2017 年 4 月的測試進行對比。

　　在最新的測試中，蘋果的人工智能語音助理 Siri 能夠理解 99% 的問題，並正確回答了78.5% 的問題。這是非常明顯的進步，因為在 2017 年 4 月時在類似的以 AI 為重點的測試的中，僅回答正確了 66.1%。

　　Loup Ventures 並沒有將這個成績與今年 2 月的測試對比，他們認為智能音箱和智能手機之間有顯著差異，而這一次是純粹手機平台的比拚。當時針對 HomePod 的測試中，Siri 只有在某些類型的問題回答中表現出色，大量問題仍僅限於能在揚聲器上可執行的操作上。因此在那次針對智能音箱的橫評中 Siri 只能墊底，因為 782 道問題的正確率卻只有 52.3%。

　　Loup Ventures 的評測主要根據兩個指標來對每個智能語音助理評分：“它理解被問的問題嗎？”和“它給出了正確的回答嗎？”。這些問題分為五個類別，包括地點(例如:“最近的咖啡店在哪裡？”)、商務(“你能幫我訂購新的紙巾嗎？”)、導航(“我如何坐公交到達市中心？”)、資訊和命令。

　　關於測試的環境條件，Siri 是運行 iOS 11.4 系統的 iPhone 版，Google Assistant 是 Pixel XL 手機版，Alexa 是 iOS 版本，Cortana 也是 iOS 版。至於結果，在“命令”問題類別中 Siri 表現最出色，90% 的問題都回答正確了，優於所有競爭對手。而其他類別，“地點”問題正確率為 87%、“導航”類別 83%，“資訊”類別 70%，“商務交易”僅 60%。

　　其實 Siri 在“命令”這一問題分類中領先並沒有什麽奇怪的，因為 iOS 是蘋果自家的封閉平台，通過 Siri 控制 iPhone、智能家居、Apple Music 等自然都能完成，而其他第三方 app 如 Cortana 和 Alexa 都有限制。說實話，自家平台做好是應該的，至少確保用戶通過 Siri 能夠順利控制 iPhone 或在 HomePod 上播放音樂，這的確已經是很低的要求了。

　　而除了“命令”類別的問題之外，Google Assistant 在所有類別中都有明顯優勢，正確率最高。Loup Ventures 稱讚谷歌語音搜索的“精選摘要”功能，因為可以通過語音讀取，關鍵是大多數情況下給出的都正好是想要的搜索結果。Alexa 和 Cortana 在測試中表現不佳，畢竟 iOS 平台限制了它們在 iPhone 上的發揮，基本僅限於 app 本身，無法達到 Siri 系統級別的執行任務操作。

　　總的來說，在 800 個問題測試中，Google Assistant 回答問題正確率達到了 85.5%，並且理解所有的問題。Siri 的回答正確率為 78.5%，有 11 個明顯錯誤的回答。Alexa 回答正確率為 61.4%，13 個錯誤。而 Cortana 是最為落後，回答正確率僅為 52.4%，錯誤達到 19 個。

　　Loup Ventures 表示，自 2017 年 4 月以來的 15 個月時間裡，Siri 回答問題的正確率提高了 13 個百分點。當 iOS 12 正式推出之後，伴隨著 Siri 捷徑功能的出世，相信 Siri 將獲得更多功能上的提升。