灰色的 發表於 2018-7-26 18:44:36

主流語音助手測試:Siri有進步 但仍落後谷歌

7月25日消息,5個月前,市場調研機構Loup Ventures進行了一項橫評測試,對象主要是多家科技公司的智能揚聲器產品,測試這些產品針對不同問題的表現如何。
日前,該機構又進行了一項新的橫評,而這一次測試對象是智能手機的AI智能語音助理。雖然Siri依然不算最出色的一款,但回到問題的正確率卻得到了顯著提高。
為了得到更客觀的結果,Loup Ventures在測試過程中分別在智能手機上對蘋果 Siri、谷歌 Google Assistant、亞馬遜 Alexa 和微軟 Cortana 問了800個問題,並將測試結果與早期 2017 年 4 月的測試進行對比。
在最新的測試中,蘋果的人工智能語音助理Siri能夠理解99%的問題,並正確回答78.5%的問題。這是非常明顯的進步,因為在 2017 年 4 月時在類似的以 AI 為重點的測試的中,僅回答正確了 66.1%。
http://news.mydrivers.com/img1.mydrivers.com/img/20180726/S0d3de3df-56ae-450a-ad18-d9569da6b1a0.png
Loup Ventures並沒有將這個成績與今年2月的測試對比,他們認為智能音箱和智能手機之間有顯著差異,而這一次是純粹手機平臺的比拼。當時針對 HomePod 的測試中,Siri 隻有在某些類型的問題回答中表現出色,大量問題仍僅限於能在揚聲器上可執行的操作上。因此在那次針對智能音箱的橫評中 Siri 隻能墊底,因為782道問題的正確率卻隻有52.3%。
Loup Ventures的評測主要根據兩個指標來對每個智能語音助理評分:“它理解被問的問題嗎?”和“它給出了正確的回答嗎?”。
這些問題分為五個類別,包括地點(例如:“最近的咖啡店在哪裡?”)、商務(“你能幫我訂購新的紙巾嗎?”)、導航(“我如何坐公交到達市中心?”)、信息和命令。
關於測試的環境條件,Siri 是運行iOS 11.4系統的 iPhone 版,Google Assistant是Pixel XL手機版,Alexa是iOS版本,Cortana也是iOS版。
至於結果,在“命令”問題類別中 Siri 表現最出色,90%的問題都回答正確了,優於所有競爭對手。而其他類別,“地點”問題正確率為 87%、“導航”類別 83%,“信息”類別 70%,“商務交易”僅60%。
其實 Siri 在“命令”這一問題分類中領先並沒有什麼奇怪的,因為iOS是蘋果自家的封閉平臺,通過Siri控制 iPhone、智能家居、Apple Music 等自然都能完成,而其他第三方app如 Cortana 和 Alexa 都有限制。說實話,自家平臺做好是應該的,至少確保用戶通過 Siri 能夠順利控制 iPhone 或在 HomePod 上播放音樂,這的確已經是很低的要求了。
而除了“命令”類別的問題之外,Google Assistant在所有類別中都有明顯優勢,正確率最高。Loup Ventures 稱贊谷歌語音搜索的“精選摘要”功能,因為可以通過語音讀取,關鍵是大多數情況下給出的都正好是想要的搜索結果。Alexa 和 Cortana 在測試中表現不佳,畢竟 iOS 平臺限制了它們在 iPhone 上的發揮,基本僅限於app本身,無法達到Siri系統級別的執行任務操作。
總的來說,在800個問題測試中,Google Assistant 回答問題正確率達到了 85.5%,並且理解所有的問題。Siri 的回答正確率為 78.5%,有11個明顯錯誤的回答。Alexa 回答正確率為 61.4%,13 個錯誤。而Cortana是最為落後,回答正確率僅為 52.4%,錯誤達到 19 個。
Loup Ventures 表示,自 2017 年 4 月以來的 15個月時間裡,Siri 回答問題的正確率提高了 13 個百分點。當 iOS 12 正式推出之後,伴隨著 Siri 捷徑功能的出世,相信 Siri 將獲得更多功能上的提升。
http://news.mydrivers.com/img1.mydrivers.com/img/20180726/s_f8a3a03d03f24af884857dded6a17a7b.jpg

katchan0481 發表於 2018-7-26 20:16:43

我也來頂一下..  

juny0385 發表於 2018-7-26 20:17:00

非常感謝樓主,樓主萬歲萬歲萬萬歲!  

katchan0481 發表於 2018-7-26 20:53:59

長時間沒來看了 ~~

~Muscle~ 發表於 2018-7-26 20:58:09

不錯啊,沒看過這麼好看的

hillmen 發表於 2018-7-26 21:20:12

我想要`~

nh88 發表於 2018-7-26 21:28:54

這是一篇不錯的帖子

jerrygarry 發表於 2018-7-26 21:39:02

遇到好論壇中的好帖子

maverickhon 發表於 2018-7-26 21:55:34

你你你你 呵呵~~~~別這樣哦...

xdxd125 發表於 2018-7-26 22:08:01

哈哈,看的人少,回一下
頁: [1] 2 3 4 5
查看完整版本: 主流語音助手測試:Siri有進步 但仍落後谷歌