北京邮电大学张镇平:基于在线评论的用户需求感知 | AI研习社77期大讲堂总结

随着在线评论内容的剧增,用户的消费体验变得可感可知,情感分析技术、文本挖掘技术的发展极大地提升了商家感知客户需求并及时提供反馈的能力。

近日,在雷锋网 AI 研习社公开课上,北京邮电大学系统科学专业在读博士张镇平分享了其关于从在线评论中挖掘用户需求的最新工作。公开课回放视频网址:http://www.mooc.ai/open/course/558?=aitechtalkzhangzhenping

张镇平:北京邮电大学系统科学专业在读博士、上海对外经贸大学和意大利巴勒莫大学联合培养项目「基于建模的公共规划、政策制定和管理」在读博士,主要研究方向为系统动力学及其应用。其研究工作曾在 I&M、NetScix 会议、ISDC 会议等发表。

分享主题:基于在线评论的用户需求感知

分享提纲:

1、研究背景和研究问题:激烈竞争市场中的用户需求感知;

2、数据收集和预处理;

3、研究问题一:在线评论的有用性;

4、研究问题二:客户需求建模及分析;

5、研究总结和展望;

AI 研习社将其分享内容整理如下:

今天跟大家分享的是基于在线评论的用户需求感知,这也是我们现在在做的一项工作,这篇文章发表在 Information & Management 上,大家有兴趣的话可以去阅读一下这篇文章。

研究背景和研究问题:激烈竞争市场中的用户需求感知

我们的研究定位在手机市场,这一细分市场的竞争是非常激烈的。我们可以从下面表格中看到,手机市场从 2013 年的第四季度到 2014 年的第一季度就发生了显著的变化,诺基亚、摩托罗拉等 2000 年的手机巨头在这个表格上基本上消失了。那么如何在竞争激烈的市场中快速把握用户需求就成了手机厂商竞争力的关键因素。

传统的用户需求调研方式主要是问卷调研,耗费大量时间,而且对调研人员的要求非常高,涉及到的样本量也很有限。我们考虑到近年来很多用户产生内容,消费者在购买之后发表大量评论,从另一个维度(数据质量)来说,这种在线评论相对于传统调研方法来说,更具可依赖性。

我们研究的出发点是:现在用户的消费路径是从购买到评论,这些内容沉淀在网上,是否能够对产品下一代的设计产生影响?传统用户需求有很多调研方法,如 1984 年这篇文章中涉及到的 KANO 模型,这些调研方法能否和在线评论数据做一个结合?

基于此,我们提出两个研究问题:一是哪些评论对产品设计是有用的;二是我们如何能够将有用的在线评论和经典的调研模型结合起来,来制定产品的优化策略。

我们从三个方面做了研究综述:第一个是评论的有用性分析;第二个是需求的调研;第三个跟本文比较相关,如何挖掘在线评论的内容,包括情感分析、需求的排序、产品属性的优先级排列三个维度。

【关于研究综述的讲解,请回看视频 00:03:35 处,http://www.mooc.ai/open/course/558?=aitechtalkzhangzhenping】

数据收集和预处理

大量的在线评论是文本,而文本是非结构化的内容,如果需要建模,需要将其转化为结构化、可分析、量化的内容。关于数据收集和预处理,我们先进行调研、爬取、词库的构建以及情感分析,然后将其转化为结构化的数据输入到第二个和第三个模块。

【关于数据收集和预处理的详细讲解,请回看视频 00:05:35 处,http://www.mooc.ai/open/course/558?=aitechtalkzhangzhenping】

研究问题一:在线评论的有用性

在线评论的有用性其实已经得到了相对比较充分的研究,由于网上的评论特别多,消费者难以穷尽所有的评论,现有的研究主要是如何帮助消费者找到最有用的评论,以帮助他们做购买决策,而我们这里的有用性是不一样的。

我们的有用性的定义是,这些评论对于产品优化带来的作用是怎样的。所以,我们是从商家或者说产品设计的角度来研究评论的有用性。由于这些值无法直接从网上得到,所以我们对这些评论做了一定的标注。邀请产品设计师打分后,作为训练集训练有用性模型,再利用模型对在线评论进行排序和筛选,得到有用评论输入到下一个模块。

【关于在线评论的有用性的具体讲解,请回看视频 00:10:31 处,http://www.mooc.ai/open/course/558?=aitechtalkzhangzhenping】

研究问题二:客户需求建模及分析

客户需求建模及分析在实践中采用的是比较传统的方法,包括问卷调研、实验等等,现在计算机对评论进行分析,更多地做单纯的统计归类,而比较少做效用方面的建模。

用户需求建模我们看到图片从右到左,分别是用户效用的建模、用户需求的分析,另外我们还做了两个辅助性分析,一个是鲁棒性分析,一个是性能分析,最后是做产品优化策略的制定——结合了经典的 KANO 模型做产品的属性归类。

【关于客户需求建模、分析的具体讲解,请回看视频 00:17:55 处,http://www.mooc.ai/open/course/558?=aitechtalkzhangzhenping】

研究总结和展望

对于这项工作的总结,我们先看一下它是否回答了前面的两个问题:

第一,如何筛选对产品设计有用的在线评论?

我们的结果是建立了一个指标体系,能够很好地筛选在线评论,帮助商家来处理大量的数据、隔离噪音,从而得到有用的产品反馈。

第二,我们如何检测到用户需求,制定有效地产品优化策略?

我们结合已有的研究的权重计算和 KANO 模型,将原来严重依赖于问卷调研和实验的方法应用到大数据当中,可以帮助商家及时了解用户的反馈,然后及时地对反馈制定优化策略。

当然我们的研究也存在一定的不足,比如:

第一,我们的工作只研究了电商网站上的在线评论,而有的用户是不发表评论的,因此我们偏重了发表评论的用户,研究数据具有一定的偏差性。此外,即使将这两类用户都考虑进去了,那没购买过这一产品的用户是否也应该考虑进去呢?这就是数据本身存在的一个缺陷。而我们提出的建议,是通过传统的问卷调研、实验分析来验证不同渠道得到的产品需求调研结果的一致性。

第二,我们用到的模型是比较通用的模型-客户需求权重、客户需求归类,然而在客户关系管理里面有很多其他有用的概念,比如产品的声誉、客户的满意度,这些概念还没有在研究中得到有效的测量。这也是以后研究的一个挑战。

大家有兴趣的话,可以到网上下载这篇文章:Qi, J., Zhang, Z., Jeon, S., & Zhou, Y. (2016). Mining customer requirements from online reviews: A product improvement perspective. Information & Management, 53(8), 951-963。如果大家有什么问题或者想跟我交流,可以通过 robert_zhangzhenping@foxmail.com 这个邮箱与我联系。

以上就是本期嘉宾的全部分享内容。更多公开课视频请到雷锋网AI 研习社社区(https://club.leiphone.com/)观看。关注微信公众号:AI 研习社(okweiwu),可获取最新公开课直播时间预告。

原文发布于微信公众号 - AI科技评论(aitechtalk)

原文发表时间:2018-10-14

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏人工智能头条

专访微软谢幸博士:如何将推荐系统与异构数据巧妙结合

1901
来自专栏程序员的SOD蜜

演进式架构设计在敏捷开发中的使用

在敏捷开发过程中,我们还需要对系统架构进行设计吗?事实上,Martin Fowler在《Is Design Dead?》一文中已经给出了答案,那就是我们同样不能...

3188
来自专栏机器学习原理

关于知识图谱的几个问题

3781
来自专栏hadoop学习笔记

机器学习的趋势和人工智能的未来

每家公司现在是一个数据公司,在一定范围能够使用机器学习在云中部署智能应用程序,这归功于三个机器学习的趋势:数据飞轮,算法经济,和智能云托管。

921
来自专栏PPV课数据科学社区

技术 | R vs Python:R是现在最好的数据科学语言吗?

导读 Sharp Sight Labs 近日在 r-bloggers 上发表了一篇文章,论述了为什么当今的数据科学工作者应该学习 R 语言的原因。为了给大家提供...

4075
来自专栏CDA数据分析师

人工智能与机器学习:两者有何不同?

在过去几年,人工智能和机器学习频繁出现在技术新闻和各种网站上。两者常常被用作同义词,但许多专家认为它们存在微妙且重大的区别。 当然,专家们自己有时对于那些区别到...

2297
来自专栏机器之心

业界 | 提升用户幸福感:快手在AI技术上的探索与应用

1855
来自专栏PPV课数据科学社区

数据分析师职业要求

1. 懂业务 从事数据分析工作的前提就是需要懂业务,即熟悉行业、公司业务及流程,甚至有自己独到见解,若脱离行业认知和公司业务背景,分析的结果只会是脱了线的风筝,...

2834
来自专栏数据观有话说

社会技术时代如何安放企业协作的未来

作者:Jacques Bughin,Michael Chui,Martin Harrysson,Shannon Lijek

1082
来自专栏ATYUN订阅号

【科技】一种新的AI技术可以根据笑容判断出你的性别

AiTechYun 编辑:xiaoshan ? 新的研究详细介绍了男性和女性微笑之间的差异 这项研究让AI可以根据他们的微笑来预测一个人的性别 AI是第一个基于...

3229

扫码关注云+社区

领取腾讯云代金券