表格问答完结篇：落地应用

朴素人工智能

发布于 2020-04-21 14:43:02

2K0

发布于 2020-04-21 14:43:02

Excel Ideas (创意)

不知道大家还记不记得，上一篇文章中的X-SQL和HydraNet都是来自微软的模型。微软作为一个老牌科技公司近年不仅在云计算领域迎头赶上，在AI方面也有很多优秀的技术创新和应用。依托于强大的Excel，他们在表格问答方面也有很好的落地土壤。

MSRA去年底发表了一篇题为智能数据分析技术，解锁Excel“对话”新功能[1]的文章，介绍他们在Excel中如何构建所谓“对话式数据分析”。他们认为这个场景中有下面几个核心问题：

理解和识别表格数据，例如表头、类型等元信息；
表格知识增强，例如实体识别和常识注入；
自然语言理解；
面向分析的渐进式对话，让用户可以用多轮对话进行数据探索（EDA）；
交互能力，这一点和3比较接近。

而NL2SQL应该是覆盖了上面几个领域的集大成者。

对话式数据分析的研究问题[1]

在一个数据驱动的时代，需要分析的数据越来越多。作为一个算法爱好者，我可以熟练地使用pandas之类的工具进行各种复杂的数据分析。但对于大部分人而言，这些工具还是太复杂了。如果真的可以通过自然对话来进行数据探索，那将极大提高生产力。

他们把这个功能包装在了一个叫做Ideas的按钮里（中文叫创意），在英文版的Excel里已经可以体验表格问答，用户可以通过一个问题来让计算机帮助完成一些数据分析的操作。例如下面的动图里，用户问服饰类产品的销量是多少，软件直接给出了分好类条形图，几乎不需要用户了解任何的excel知识。

对话式数据分析样例[1]

下面这个视频[3]里有更多的例子，因为是从Youtube搬运过来的，所以没字幕，大家将就看一下，3分钟开始是表格问答的内容。

比较遗憾的是中文版office 365里面的创意功能只有智能数据分析，暂时不支持提问功能。

机器人平台

之前的文章里谈到表格其实是一种信息密度很高的文档类型，与文章相比，更加适合作为电商、查询场景的知识源，对于业务端的友好性又远好于问答对。国内的几大机器人平台也都意识到了这个情况，已经在陆续上线相关功能。据我所知晓多和百度UNIT已经正式上线表格问答，但由于晓多无法直接体验，今天还是以UNIT为例。

UNIT的表格问答功能刚刚推出不久，目前需要申请才能试用。这个功能我尝试下来总体完成度不高，但也算是这个领域一次值得鼓励的尝试。下面我们以官方提供的样例数据为基础介绍一下UNIT的表格问答功能。

UNIT表格问答的功能介绍

样例数据是一个汽车相关的excel表格，里面共有5张表。其中一张是如下图所示的说明，具体数据放在其他四个表里。

样例数据说明

第一张表叫table，里面就一行，分别是表格中文名和表格英文名。样例数据是一些汽车配置和价格信息，所以表名是汽车。如果针对表名提问，系统将根据所有信息进行回答。

第二张表叫schema，实际是定义了列信息，包括列名、列数据类型和话术模板。

Schema表样例

第三张表是数据，每一行是一个实体，每个实体都有Schema中定义的列。

Data表样例

最后一张表是同义词典，用于输入query的归一化，也是工业NLP系统的常规套路了。

Synonym表样例

根据UNIT提供的数据样例，目前支持的问法有以下几种：

基于表格查实体：有什么汽车推荐？
基于表格查属性：汽车的价格是多少？
基于单个实体查所有属性：帕萨特
基于单个实体查单个属性：帕萨特的价格多少？
基于单个实体查多个属性：哈弗H6的价格和级别？
基于多个实体查多个属性：哈弗H6和帕萨特的价格和座位数？
基于属性查实体：国五的汽车有哪些？价格大于100万的汽车有哪些？

可见UNIT的表格问答功能目前局限在信息的基础查询上，查询的复杂度主要体现在实体和属性的数量上，并不支持对查询结果进行逻辑或者聚合操作。我们也尝试问了几个问题，发现确实无法进行跨实体提问。而且目前只支持单表问答，一个表格问答技能只能绑定一张表。在系统中表格问答技能也只能单独发布，无法整合进机器人中。