如何评测语音助手的智能程度(5):指标权重设计
admin
2021-01-30 16:54:10
0

这是一份前面四篇评测维度介绍文章的总结,同时也是一份清单使用说明书。

如何评测语音助手的智能程度(5):指标权重设计

知己知彼,百战不殆,调研评测其他公司的产品是从业者的日常操作,那么当一个产品放到我们手里的时候,到底看什么呢?看哪些方面呢?专业性不到位的同学怕是无法下手。

而往往具备专业视角的人则游刃有余,他们知道考虑哪些点,结构清晰,主次分明,用解构的方式去理解一款产品,这才是AI从业者专业化思考的表现。

如何评测语音助手的智能程度(5):指标权重设计

如何定义权重

哪位同学问了,这四大维度,什么是重点呢?答案是:基于需求自定义。

定义权重高低,两个维度考量,一个是行业需求,一个是硬件载体。行业需求(出行、教育、医疗、金融、电商、旅游、餐饮、客服等)硬件载体(音箱、耳机、手表、车机、机器人等)

AI智能助手,往往都会解决某个行业领域的特定业务需求。AI智能助手,往往都存在于一个或多个硬件载体上,与人类进行交互行为。跟买房子、招聘员工所考虑的标准非常多一样,你在意什么,就给对应维度,对应指标以高权重。

比如:某产品的定位是用来听歌的,【意图理解】各个模块做得非常好,但是由于版权原因,无法播放,这个对用户而言就非常糟糕,因为满足不了听歌的需求。

再比如:某助手的定位是线下生活服务,比如订外卖或者是电影票,这类往往不具备版权垄断特质,但由于业务流程的复杂,有太多叠加查询条件,自然对【意图理解】有很高的权重要求。

再比如:某个玩具/手办具备语音交互功能,用户非常在意玩具/手办的语音交互是否匹配角色气质,故而对这类用户而言,【人格特质】就是高权重。

大维度自定义权重,同理,每个维度上的指标也基于需求自定义。

如何评测语音助手的智能程度(5):指标权重设计

指标的选择和量化

相关内容