德企开发出基于人工智能的新型文本分析技术

新闻门户网站和社会媒体都含有丰富的信息资源,例如对股票市场趋势的预测信息。如今,很多服务提供商允许通过向其搜索引擎输入描述性关键字来搜索大量的文本集。然而关键词往往是高度模糊的,目前的搜索技术常常捉襟见肘。德国的一家企业开发了一种新的文本分析技术,大大提高了利用人工智能技术搜索巨大文本集合的速度。除了搜索之外,这项技术还能协助作者进行研究,甚至能够通过自动提供背景信息帮助编写文本,并给出相关的网站链接建议。

Ambiverse是马普学会信息学院的一家衍生公司。该公司在3月14日到18日的汉诺威CeBIT 2016会议期间展示了这一新技术。生活在商业智能手机和企业聊天室的时代,公司的大部分信息不是通过语言发布的,而是通过电子邮件、分布式数据库,以及内部的新闻门户网站来完成。马普学会情报研究所研究员与Ambiverse公司的创始人Johannes Hoffart表示,根据市场分析公司Gartner的调查显示,目前仅25%的公司在使用自动方法来分析他们的文本信息。Gartner预测到2021年将有65%以上的公司会这样做。这是因为公司的数据量在不断增长,因此保持这些数据的结构化及进行搜索将变得越来越昂贵。他的团队开发了一种新的文本分析技术,用于分析海量文本。在这个背景下,强大的计算能力与人工智能不断“协同思考”来完成任务。

Hoffart表示,对于文本的分析,我们依靠的是非常大的知识图谱。这些图谱有免费的来源,如维基百科或网络上的大型媒体门户网站。这些图谱可以通过领域知识或公司的专业知识进行增强,如产品目录或客户信函。通过使用复杂的算法,这些文本会得到进一步的筛选,并借助语言工具进行分析。他解释说:“随后,我们的软件会将企业和业务领域分配到相应的类别,这使我们能够收集宝贵的意见,指导我们如何在市场中将自己的产品与竞争对手进行对比定位”。特别具有挑战性的是,产品或公司名称在不同的环境中往往有完全不同的含义,导致它们非常难以识别。

这位计算机科学家解释说:“我们的技术可以将单词和短语映射到真实世界的正确目标,从而可以自动解决模糊问题。例如,“巴黎”这个词可以表示光之城和法国首都,也是希腊神话中的一个角色,或是大家耳熟能详的一个具有德国祖先的派对女孩-其真实含义总是依赖于上下文的。只有当名称或概念的不同含义得到正确解决,才可能有效地搜索巨大的文本集合。随着时间的推移,由他的团队开发出的智能搜索引擎会得到不断的学习与提高,从而可以自动将新的文本条目匹配到合适的类别。于是,对利用分析网络媒体或社交网络来衡量产品的知名度或营销活动的成功度的公司来说,这些算法就具有了吸引力。”

原文发布于微信公众号 - 人工智能快报(AI_News)

原文发表时间:2016-05-04

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏大数据文摘

【独家】1号店电商大数据挖掘实践

1534
来自专栏机器之心

访谈 | 跳槽、行业前景、模型等创业者想问的,邓力这样说

机器之心原创 作者:邱陆陆 5 月 25 日晚,刚刚宣布加入 Citadel 的前微软人工智能首席科学家、IEEE Fellow 邓力参加了由中国科大百人会和阿...

3628
来自专栏华章科技

创业公司什么阶段需要数据科学家?

Instacart数据科学副总裁Jeremy Stanley和前LinkedIn数据领导Daniel Tunkelang的这篇文章,可以解答你的所有问题!

631
来自专栏大数据文摘

《大数据时代》引发全球热议,遭美国学者质疑

2427
来自专栏机器之心

重磅 | 今日头条&机器之心联合发布:斯坦福AI指数2017年度报告官方中文版

机器之心发布 机器之心编辑部、今日头条 由斯坦福大学人工智能百年研究(AI100)推出的「人工智能指数」(AI Index)是一个追踪 人工智能行业动态与发展的...

36212
来自专栏灯塔大数据

2017年会成为大数据的扫盲年吗?

过去一年内,我们看到了大数据的井喷式发展,数据处理分析成为热门,大数据行业呈现出信息激进之势。这导致数据科学家、数据应用程序员和商业分析师等大数据方面的人才成为...

2797
来自专栏人工智能头条

【CCTC 2017】人工智能专场纪实

772
来自专栏新智元

【揭秘】微软亚洲研究院机器学习在做什么?(14篇干货)

机器学习(Machine Learning)是研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。它是人...

2586
来自专栏CSDN技术头条

DevOps团队需具备的最佳品质

时下,DevOps已经成为不折不扣的流行词。然而,根据《2015 DevOps状态报告》显示,表现优秀的DevOps团队在技术部署频度上是普通DevOps团队的...

1728
来自专栏大数据文摘

世上本没有数:正解大数据

1796

扫描关注云+社区