您现在的位置是:首页 >新闻 > 2020-04-26 16:27:06

谷歌助理获得AI IQ测试Siri击败了Alexa和Cortana

今年2月,Loup Ventures对智能语音助手进行了颇具启发性的比较,随后该公司于今日发布了“年度数字助理智商测试”(digital assistant IQ test),追踪四种主要人工智能助手在智能手机上的表现。该公司表示,谷歌的助手、苹果的Siri和微软的小娜在过去一年中都有了改进,但令人惊讶的是,他们声称Siri有了很大的改进,同时表示小娜远远落后于亚马逊的Alexa。

Loup对每个数字助理使用相同的800个问题集,并将它们分散到五个类别:本地、商业、导航、信息和命令。为了更好地反映现代助理的能力,今年的问题是从2017年4月的类似测试中使用的问题修改而来的,这在一定程度上混淆了年度与年度的直接比较。

总的来说,这次测试的明显赢家是谷歌的助手,她的答题正确率为100%,正确率为85.5%。Assistant在五项中赢得四项,仅在测试人工智能执行特定功能能力的“命令”一项上落后于Siri。Loup特别表扬了Assistant在“信息”方面的表现,称它在搜索信息时提供了几个优势:确认搜索正确、找到正确信息、大声朗读答案。

尽管经历了几乎所有人都会形容为惨淡的一年,Siri在测试中仍排名第二。Loup说Siri能理解99%的问题,回答了800个问题中的78.5%。“在早期,每一个被误解的问题都涉及一个专有名词,”Loup说,“通常是一个当地城镇或餐馆的名字。除了那些重要的细节外,报告称,几乎所有的人工智能助手“都会理解你对他们说的一切”。

Siri最大的优势在于回答与音乐相关的问题,以及它在控制手机、智能家居配件和其他功能方面的多功能性,卢普说,这些功能包括在确定用户意图方面更大的灵活性。值得注意的是,与HomePod和Apple TV上的限量版Siri不同,iPhone上的Siri功能齐全,能够在智能音箱测试中获得比之前更高的分数。

亚历克莎和科塔娜落在其他人后面;两者在理解查询方面都有98%的成功率,但是Alexa只能正确回答61.4%的问题,而Cortana只能正确回答52.4%的问题。Loup批评Alexa在回应与商业相关的询问时,经常在一个产品类别中使用“亚马逊的选择”,而不是更广泛的列表,这迫使用户做额外的研究。Cortana的问题是整体表现平平,尤其是在“商务”领域表现不佳,它在这一领域的应对能力非常差——只有20%。

Loup提到,与Alexa和Cortana相比,谷歌和苹果能够将助手直接整合到手机中,这让它们拥有了天然的优势。Alexa和Cortana只在安卓和iOS手机上作为第三方应用程序运行;这将转化为口袋设备的高级导航技能和操作系统级别的更深层次的集成。

由于所有的人工智能助手都在语言处理和多设备支持方面表现出了重大的进步,Loup表示,他们预计人工智能助手在翻译准确性方面不会有进一步的巨大飞跃——相反,人工智能助手将学会做更多的事情,并控制更大范围的设备。Loop预计,Siri快捷键等新服务将让用户为应用程序和功能创建自定义语音命令,从而消除摩擦,而叫车和支付等现有功能将变得无处不在。