小米音箱 +关注 已有6539人关注 +发表新主题
回复

如何评价一款智能音箱?刘锋团队提出的AI服务智商可能是个好办法

发表在 讨论&求助 03-13 18:41:33  来自PC 复制链接 手机看帖扫一扫!手机看帖更爽 11 819

智能音箱在美国市场的成功,以及其作为人工智能、智能家居、语音购物等“风口”落地的核心产品,吸引了包括阿里巴巴、腾讯、百度、京东、小米、联想等在内的中国追随者。例如,阿里巴巴推出了“天猫精灵”,百度推出了“Reven H”,京东联合科大讯飞推出了“叮咚”,小米推出了“小米AI音箱”。

▲ 仅在京东商城即可搜索到30+的智能音箱品牌


数据显示,智能音箱正在成为国内科技爱好者的“新宠”。在小米商城上预订“小米AI音箱”的用户已经超过10万人,数量还在不断增加中。

 

▲ 小米商城小米AI音箱“真心想要”登记人数


智能音箱用户的快速增长,让不同品牌的评价和选择成为了一个值得关注的问题。目前,用户可通过三种途径获取智能音箱的评价:其他用户的评价、测评文章/视频的评价、研究机构的评价。

 

其他用户的评价是最为直接也最为易懂的方式。然而,受限于智能音箱的产品特性,我们需要耗费更多的时间找到自己需要的评价,还需要更多的时间去辨别其真实性。南京工程学院的朱燕燕等对电商平台上智能音箱的评价进行了分析。从报告中,我们可以看到评价分散在硬件、软件、物流、使用体验等多个领域,想要提取出有用的评价需要耗费大量的时间。

▲ 朱燕燕等针对评论制作的热评词词云,引自《智能音箱消费者关注点分析》


测评是科技类媒体、自媒体等,科技爱好者等对电子产品采用的一种集数据分析、实际测验、使用体验等于一身的评价手法,多见于智能手机产品。测评文章/视频能够较好地展现智能音箱之间的对比,以及不同能力的优劣。

 

智能音箱类测评文章/视频的劣势在于时效性较强。一些测评集中于对技能的评测,例如,智能音箱是否具有控制其他智能家居的能力,智能音箱是否具有进行语音购物的能力。而技能的数量会随着产品的日趋成熟而不断增加。亚马逊的alexa在2017年初的时候技能刚刚突破1万种,而到了接近年底即突破了1.5万种。

▲引自某测评文章


作为人工智能的落地产品,智能音箱也获得了研究机构的关注。中国科学院虚拟经济与数据科学研究中心刘锋、石勇、刘颖团队在其提出的“标准智能模型”的基础上,提出了“AI服务智商”的定义,来权衡智能产品在提供服务过程中的智能水平。

▲ 刘锋、石勇、刘颖团队研发的AI服务智商量表


从量表中可以看到,AI服务智商从知识的输入、知识的掌握、知识的反馈以及知识的创新等四个角度对AI的服务能力进行评测。其中一部分的测试内容是目前大多数智能音箱尚不具备的,比如“知识的输入”中“静图识别”等部分。

 

该量表对人工智能创新性(如“知识的创新”中“发现规律”)的关注是许多其他评测不具备的。智能音箱理解用户并提供个性化服务正是其智能的体现,缺乏对创新性的关注就很难真正体现人工智能类产品的优势。

 

刘锋、石勇、刘颖团队基于AI服务智商量表对几款国内智能音箱品牌进行了评测,并已经发布了部分测试结果。(发布内容并未披露每项内容的具体评测标准和分值依据。)

 


▲刘锋、石勇、刘颖团队对国内部分智能音箱品牌服务智商的测量结果


在几种评价方式中,刘锋团队提出的AI服务智商能够更好地体现智能音箱的核心能力,打分机制也能够清晰地体现智能音箱能力之间的差别。


原文作者:观察员 小米新经济研究中心  原文出处

免责声明:本文版权归原作者所有,文中观点不代表小米社区;原文作者若有异议,请联系楼主妥善处理


扫描二维码,手机查看本帖
发表
最新评论 | 正序排列
只看楼主|楼层直达:
回复