【新智元导读】Facebook数据泄露案,影响美国总统大选与英国脱欧,让人们见识了大数据分析公司操纵社交媒体用户心理的手法。现代的脑机接口技术也让人们的意识处在算法的控制下。人们应当警醒:社交大数据分析会被滥用、智能推荐算法存在偏狭陷阱,让人工智能与人类智慧相结合,才能走出大数据的“楚门世界”。(本文首发于3月29日《环球时报》评论版) 近日爆出的Facebook数据泄露案,让大数据分析公司操纵社交媒体用户心理,影响大选结果,进而干涉国际政局的暗黑世界曝光。剑桥分析公司2014年利用一款性格测试程序以2.
选自ACMCSUR 专知编译 参与:左熠昆、Quan 昨天向大家推荐了最新的相关综述论文最新综述文章推荐:自然语言生成、深度学习算法、多媒体大数据分析,今天为大家详细介绍下多媒体大数据分析综述这篇文章。 Samira Pouyanfar, Yimin Yang, Shu-Ching Chen,Mei-Ling Shyu, and S. S. Iyengar. 2018. Multimedia Big Data Analytics: A Survey. ACM Comput. Surv. 51, 1, Art
众所周知,通过计算每时每刻都会产生大量的用户数据。通过社交网络数据库和GPS(全球定位系统),每个人使用某些应用程序时所在的位置,以及他们的行为,观点,兴趣和所有需求都被搜索引擎记录了下来。
随着大数据时代的到来,很多人对大数据产生了浓厚的兴趣,然而,大数据只是一个新概念,很多认识都是不正确的。 大数据产生的背景是整个社会走向数字化,特别是社交网络和各种传感设备的发展。大数据分析拥有自身的特点,与计量经济学既有区别又有联系。当前对大数据的分析存在许多流行观点,但其中很多核心观点都值得商榷。 大数据产生的背景是整个社会走向数字化,特别是社交网络和各种传感设备的发展。云计算和搜索引擎的发展,使得对大数据的高效分析成为可能,核心问题是如何在种类繁多、数量庞大的数据中快速获取有价
昨日,IBM与腾讯达成深度战略合作,成为腾讯体育社交媒体数据分析合作伙伴。双方将针对包括2014巴西世界杯在内的一系列体育赛事报道开展深入的合 作,通过IBM大数据分析、云计算等领先技术能力提供社交和移动等数据分析支持,为用户打造全新的体育观赛体验。双方此次合作是大数据在实际应用层面上的 一次重要落地,同时也是腾讯作为网络媒体在世界杯报道模式上的有效创新。 此次合作中,IBM将根据网友和球迷在腾讯网络媒体平台及社交网络上发布的海量公开信息及数据,进行精准的大数据分析,获得关于球迷话题、球迷类型、球迷个
让我们先把思绪追忆回4年前的南非世界杯,当年给人们留下最深印象的恐怕就是那摧毁人类听觉的助威利器——“Vuvuzela”。这个可以轻松制造出超过140分贝的利器,在容纳五六万人的体育场内同时被吹响,这种“声音”对于全世界的球迷和球员的听觉恐怕都是一种摧残... 四年过去了,时间送走了南非人的“Vuvuzela”,迎来了巴西人的热情桑巴。而在这四年的时间里,技术也在飞速发展,人们已经将各类“声音”成功转移到虚拟世界中,无论你是否身在比赛现场,都可以通过社交网络完全融入到世界杯氛围当中。 据相关数据显示,有
从SGI的首席科学家John R. Masey在1998年提出大数据概念,到大数据分析技术广泛应用于社会的各个领域,已经走过了17年的时间。现在再也没有企业怀疑大数据分析的力量,并且都在竞相利用大数据来增强自己企业的业务竞争力。但是,即使17年过去,大数据分析行业仍然处于快速发展的初期,每时每刻都在产生新的变化。 从概念到实用、从结构化数据分析到非结构化数据分析,大数据分析技术在不断地进化。虽然国内仍然在关注舆情分析,但是记者注意到,在美国,大数据分析的研究已经进入到了一个全新的阶段,“预测分析”技术成为最
从SGI的首席科学家John R. Masey在1998年提出大数据概念,到大数据分析技术广泛应用于社会的各个领域,已经走过了17年的时间。现在再也没有企业怀疑大数据分析的力量,并且都在竞相利用大数据来增强自己企业的业务竞争力。但是,即使17年过去,大数据分析行业仍然处于快速发展的初期,每时每刻都在产生新的变化。
作者简介 张梦溪先生(Simon Zhang):GrowingIO CEO, 中国大数据分析俱乐部理事长,硅谷大数据分析和数据科学的专家,于2015年在硅谷和北京建立了大数据分析公司GrowingIO。 张梦溪先生曾经任职于世界知名社交网络LinkedIn公司,亲自建立了LinkedIn将近90人的数据分析和数据科学团队支撑LinkedIn公司所有与营收相关业务。他也是LinkedIn美国总部级别最高的华人,一直倡导硅谷海外华人团结奋斗,互相帮助,在技术和业务上做到与时具进。另外他也是中国大数据分析俱乐部的
对于海量数据价值的挖掘,需要通过大数据分析来实现,而这些数据由于具有不同于传统数据的新特征,传统的数据分析技术和工具都不能高效的进行处理,因而才有了基于大数据技术平台进行大数据分析的需求。今天,我们以Hadoop框架为例,来看几个大数据分析项目实例。
7月20日下午,海口市举办市委中心组(扩大)学习会暨大数据分析与应用落地专题讲座,腾讯研究院“互联网+”指数团队、政府事务部、SNG社交网络运营部与互联网+合作事业部应邀出席。 ◢ 海口市副处级以
小微导读 从SGI的首席科学家John R. Masey在1998年提出大数据概念,到大数据分析技术广泛应用于社会的各个领域,已经走过了17年的时间。现在再也没有企业怀疑大数据分析的力量,并且都在竞
犀牛鸟学问特别活动 犀牛鸟学问特别活动CCF YOCSEF“社交网络与大数据前沿” 学术报告会将于6月22日周四下午在腾讯北京分公司希格玛大厦举行。 本次报告会邀请到犀牛鸟海外专家CMU Christos Faloutsos 教授,中科院计算所副研究员、微信AI科学顾问罗平博士,清华大学崔鹏副教授畅谈社交网络前沿研究。参与报名请点击底部“阅读原文”。 随着微信、微博、Facebook、Twitter等线上社交平台的普及与广泛应用,用户可以随时随地的在网络上分享内容,进行互动,由此产生了海量的用户数据。用户在
经由与IEEE的战略合作,腾讯公司有幸邀请到数据挖掘领域奠基人之一,卡耐基梅隆大学Christos Faloutsos 教授作为“犀牛鸟海外专家”于6月13日、22日分别访问腾讯深圳总部与北京分公司。Faloutsos 教授为腾讯员工带来了精彩的学术报告,并与多支技术团队开展了深入的讨论与交流。同时,作为特邀演讲嘉宾参与了6月22日在北京举办的“犀牛鸟学问特别活动”- CCF YOCSEF“社交网络与大数据前沿” 学术报告会。 6月12日,深圳迎来了入夏以来的第一次台风“苗柏”的登陆。13日在暴雨的天气中,
当企业迈进大数据时代,信息安全面临多重挑战。数据大集中的安全隐患重重,而大数据不仅被用来找出潜在威胁,也被黑客用来实现更精准的打击。大数据来袭,企业不仅要学习如何挖掘数据价值,使其价值最大化,还要统筹安全部署,以免遭到更强有力的攻击,降低企业风险。 大数据会捅大娄子? 毫无疑问,企业正在拥抱大数据,并且将大数据挖掘和分析能力作为企业核心竞争力的关键。Gartner一个悲观的预测认为:到2015年,超过85%的财富500强企业将无法有效利用大数据带来的竞争优势。Garnter认为,大数据不仅是
作为“CCF 青年工作委员会”合作伙伴,腾讯与2016年青年精英大会紧密合作,将在大会第一天(5月27日)下午组织 “犀牛鸟青年精英论坛”活动。论坛将面向“2016年青年精英大会”全体与会人员开放。 主题:预见 创见 灼见 时间:13:00-17:00 2016年5月27日 (星期五) 地点:宝龙铂尔曼酒店 ( 钻石厅 ) 特邀嘉宾介绍 演讲题目:物体检测与识别 摘要:互联网技术的不断发展给我们带来资源共享便利的同时也带来了很多挑战。网络空间充斥着宣传敏感、有害信息资源,
大数据市场目前的焦点问题是:从社交网络、APP和市场调查等多种数据源收集海量数据容易,但真正产生商业价值的大数据分析项目的实施依然很难。 根据Cloudera提出的大数据三大应用模式Transform、Active Archive和Exploration,大数据分析目前大多处于前两个模式,只有少数企业真正能够进入大数据分析的实质性阶段。 近日,数据挖掘分析专家Shankar根据17年的商业分析经验(服务过的客户包括Home Depot、Best Buy、可口
以前还没有进入大数据时,社会发展相对比较慢,比如工作生活,交通出行,互联网并没有那么的便利,大家都是各顾各的,进入了大数据时代,大家开始相互分享资源,抱团取暖。下面来说说大数据时代的到来,为我们提供了哪些便利之处?
中国计算机学会《社交网络与数据挖掘-学科前沿讲习班》价值1725元门票免费派送(仅2张!) 关注腾讯高校合作独享福利 讲习班时间:2014年8月10-12日 地点:中科院计算所 【抢票结果】 恭喜以下两位朋友获得本次讲习班门票各一张。具体参会方法,请留意手机短信通知。 186******244 153******998 【讲习班详情】 主题 社交网络与数据挖掘 特邀讲者 John Hopcroft 康奈尔大学计算机系教授、图灵奖获得者、美国科学院/工程院/艺术学院院士、计算理论的奠基人之一、Hop
中国计算机学会《社交网络与数据挖掘-学科前沿讲习班》价值1725元门票免费派送(仅2张!) 关注腾讯高校合作独享福利 讲习班时间:2014年8月10-12日 地点:中科院计算所 【抢票方式】 关注“腾讯高校合作”微信公众号 Tencent_UR,回复“抢票”,根据公众号提示,回复个人信息进行抢票; 系统随机抽取,中奖者会收到通知短信,请留意; 抢票时间:7月21日-7月24日 【讲习班详情】 主题 社交网络与数据挖掘 特邀讲者 John Hopcroft 康奈尔大学计算机系教授、图灵奖获得者、美国
大数据分析的使用者有大数据分析专家,同时还有普通用户,但是他们二者对于大数据分析最基本的要求就是可视化分析,因为可视化分析能够直观的呈现大数据特点,同时能够非常容易被读者所接受,就如同看图说话一样简单明了。
一、大数据分析的五个基本方面 1、可视化分析 大数据分析的使用者有大数据分析专家,同时还有普通用户,但是他们二者对于大数据分析最基本的要求就是可视化分析,因为可视化分析能够直观的呈现大数据特点,同时能够非常容易被读者所接受,就如同看图说话一样简单明了。 2、数据挖掘算法 大数据分析的理论核心就是数据挖掘算法,各种数据挖掘的算法基于不同的数据类型和格式才能更加科学的呈现出数据本身具备的特点,也正是因为这些被全世界统计学家所公认的各种统计方法(可以称之为真理)才能深入数据内部,挖掘出公认的价值。另外一个方面也
大数据是眼下非常时髦的热词,同时也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策。近日,“改革进行时——关注大数据产业”走进了位于重庆大渡口区的重庆移动互联网产业园,记者也近距离接触了传说中和大数据打交道的数据分析师。 大数据催生数据分析师 薪酬比同等级职位高20% 随着大数据在国内的发展,大数据相关人才却出现了供不应求的状况,大数据分析师更是被媒体称为“未来最具发展潜力的职业之一”。 大数据分析师是做什么的?阿里巴巴集团研究员薛贵荣就曾表示,“大数
大数据成为时代发展一个必然的产物,而且大数据正在加速渗透到我们的日常生活中,从衣食住行各个层面均有体现。大数据时代,一切可量化,一切可分析。
作者:CDA 数据分析师 基于数据的科学决策正成为趋势,国内外主要公司都在建立用数据说话、洞察、优化与创新的管理机制。如何利用数据、让数据切实产生价值是每一位数据从业人员应该深入学习并不断实现的目标。今天很有幸采访到了《大数据与机器学习:实践方法与行业案例》的作者陈春宝老师,告诉我们大数据究竟应该如何更接地气儿。 嘉宾介绍 陈春宝 📷 上海交通大学工业工程博士,经济学硕士。在银行、信用卡、医药与电信等行业拥有近十年数据挖掘分析与 SAS 建模经验,现就职于商业银行,在数据挖掘、机器学习
2017年6月22日,由大数据产业联合会主办,清数D-LAB承办的《清华大数据思享会》在学研大厦圆满完成,来自中国电信北京研究院灯塔大数据产品线的产品总监钱兵,在会上分享了中国电信在泛娱乐大数据媒体营
综观三大调查研究机构的预测,大家不约而同提及2014年的IT四大天王:云端、移动化、大数据与社交网络,将带来更大的影响。 新的一年开始,我们来看大家是怎么预测2014年的IT发展趋势。 综观Gartner、IDC与资策会MIC等三大调查研究机构的预测,大家不约而同提及2014年的IT四大天王:云端、移动化、大数据与社交网络,将带来更大的影响。 Gartner认为,4大天王之首──云端运算,经过几年发展下来逐渐成熟,进而带动移动化、社交网络与大数据的风行。 云端运算建构了弹性的IT基础设施,可以提供源
电信与媒体市场调研公司Informa Telecoms & Media在2013年的调查结果显示,全球120家运营商中约有48%的运营商正在实施大数据业务。该调研公司表示,大数据业务成本平均占到运营商总IT预算的10%,并且在未来五年内将升至23%左右,成为运营商的一项战略性优势。可见,由流量经营进入大数据运营已成为大势所趋。 电信运营商拥有多年的数据积累,拥有诸如财务收入、业务发展量等结构化数据,也会涉及到图片、文本、音频、视频等非结构化数据。从数据来源看,电信运营商的数据来自于涉及移动语音、固定电话、固
数据分析在电信行业的应用 1 大数据运营已为大势所趋 电信与媒体市场调研公司Informa Telecoms & Media在2013年的调查结果显示,全球120家运营商中约有48%的运营商正在实施大数据业务。该调研公司表示,大数据业务成本平均占到运营商总IT预算的10%,并且在未来五年内将升至23%左右,成为运营商的一项战略性优势。可见,由流量经营进入大数据运营已成为大势所趋。 2 采取大数据运营的原因 第一,数据资源的先天优势。电信运营商拥有多年的数据积累,在掌握用户行为方面有先天优势,主要体现在数据
大数据概念 "大数据"是一个体量特别大,数据类别特别大的数据集,并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。 大数据的4V特点:Volume、Velocity、Variety、Veracity。 "大数据"首先是指数据体量(volumes)大,指代大型数据集,一般在10TB规模左右,但在实际应用中,很多企业用户把多个数据集放在一起,已经形成了PB级的数据量;其次是指数据类别(variety)大,数据来自多种数据源,数据种类和格式日渐丰富,已冲破了以前所限定的结构化数据范畴,囊括了半结构
导 读: 大数据听得耳朵起茧了,但真正能深入了解吗?不一定。在此特分享三个主题,分别是:不一样的大数据框架、不一样的大数据采集平台、神一样的数据产品。整编成一篇文章,与大家一起分享! 一、数据从哪里来
在当今数据驱动的时代,企业对于数据库的需求愈发复杂多样。为了应对各种业务场景,选择和应用合适的数据库变得至关重要。本文将深入探讨6大数据库技术,并为其在7种常见业务场景下的存储提供更优解。
导读: 美国国防部长卡特曾赴硅谷招募顶尖科技人才。近年来的信息大爆炸使得五角大楼不得不将目光聚焦硅谷,以打击反恐。神秘的大数据平台Palantir就是美国CIA、FBI等寻求的合作对象。Palant
在数据统计中,有10个概念与大数据分析密切相关。这10个概念聚焦在数据预测准确性,交互分析等方面。 在之前的帖子中,我曾指出大数据中一个关键问题,即忽略了应用统计学。但是许多应用统计学中犀利的概念确实与大数据分析密不可分。为此,我觉得我得回答我上一贴的第二个问题:“当我们在思考大数据时代时,我们到底理解了哪些统计学概念?” 鉴于网络总是喜欢列“前十名单”,那我也就列出十个概念。不过如果人们感兴趣深入探讨的话,这些概念当然不会止步于十。当然,大家对于我的观点可能会有不同看法,我认为它们普遍来说也不是什么坏事。
作者|Jeff Leek 翻译|任然 校对|罗双英 在数据统计中,有10个概念与大数据分析密切相关。这10个概念聚焦在数据预测准确性,交互分析等方面。 在之前的帖子中,我曾指出大数据中一个关键问题,即忽略了应用统计学。但是许多应用统计学中犀利的概念确实与大数据分析密不可分。为此,我觉得我得回答我上一贴的第二个问题:“当我们在思考大数据时代时,我们到底理解了哪些统计学概念?” 鉴于网络总是喜欢列“前十名单”,那我也就列出十个概念。不过如果人们感兴趣深入探讨的话,这些概念当然不会止步于十。当然,大家对于我的观点
11月25日召开的国家反恐怖工作领导小组专题会议上,公安部部长郭声琨提出,要运用大数据、云计算技术打击恐怖行为。“从海量的人流、物流、信息流、资金流中及时发现涉恐线索,做到预警在先、预防在前、敌动我知、先发制敌。”
贵安新区与上海贝格合作,共建“大数据小镇” 日前,贵州贵安新区与上海贝格数据公司宣布达成战略合作,据悉,上海贝格是一家基于金融大数据的服务供应商,旗下产品包括金融大数据平台、投研管理平台以及大数据金融
来源:腾讯研究院 作者:蔡雄山 李思羽 蔡雄山 腾讯研究院法律研究中心首席研究员 李思羽 腾讯研究院助理研究员 2016年1月6日美国联邦贸易委员会(FTC)发布了一份题为《大数据:包容工具抑或排
作为一个IT人,业内工作者,我们每年都会对过去的一年进行盘点和对新的一年进行展望,有一些趋势和技术是我们2014年必须关注的,无论是高管还是基层员工,或者是媒体从业者,意见领袖都需要对未来进行展望。 今天我从云端、移动、大数据与社交网络等四股IT驱力,所掀起的IT变革进行梳理,希望能给网友们一个明晰的IT趋势图。 云端、移动应用、大数据和社交网络,是Gartner于2013年提出,将改变数字世界未来的4大驱力。在这4大驱力互相交织、影响下,除了对企业、消费端的生态产生影响,也将同时对企业IT预算产生根本的冲
从“互联网+”的角度看,社交网络及“互联网+社交”,是社会化行为的互联网化,因此社交网络在一定程度上反映着线下真实的人类社会构成。社交网络通过各种兴趣将线下的各种圈子搬到线上,陌生人社交让那些在线下不擅言辞的人用文字尽情挥洒他们的喜怒哀乐。一个社交网络,即是一个人们对平常事物及事件的百般简介与评判的集合。 事实上,国内社交网络发展了十几年,速度确实不够快。十年前以QQ为代表的即时通讯开启了社交网络的先河,但是那是的QQ还这是个交流的软件。后来的发展中,QQ几乎发展成为万能的交流软件,直到微博、人人网等
今天,大数据似乎成了万灵药,从总统竞选到奥斯卡颁奖、从web安全到灾难预测,正如那句俗语:“当你手里有了锤子,什么都看上去像钉子。”当IT经理成功部署一套Hadoop系统后,任何事看上去都与大数据有关(事实也是如此)。类似的事情在云计算的普及中也出现过,一开始大家认为所有的IT都可以搬到云端,而现实是我们依然需要虚拟化技术和基础设施。 对于大数据来说,如果IT经理们初期不能正确选择应用领域,有可能会导致达不到期望值,招致麻烦。其实,综合来看,未来几年大数据在商业智能、土木工程和客户关系优化三个领域的应用
《清华金融评论》授权转载,转载请征求版权方同意。 [官网]:http://www.thfr.com.cn 官方微信: thf-review(订阅号) thf_review(服务号) 文/刘新海、丁伟 本文编辑/《清华金融评论》贾红宇 近期,美国互联网金融公司ZestFinance受到国内互联网金融专业人士的热捧,其基于大数据的信用评估模型也越来越受到关注和效仿。本文结合美国的金融环境,对ZestFinance进行简要介绍,分析大数据征信产生的背景,剖析大数据征信技术,并全面客观地阐述了大数据征信技术对于中
作者:丁伟 王题 刘新海 韩涵 感谢丁伟的投稿,大数据文摘对优质内容一向渴求,欢迎大家投稿。 内容提要:手机用户画像是电信运营商实现“数据驱动业务与运营”的重要举措。首先,介绍了手机用户画像过程中对个人隐私保护的方法,然后分析手机用户画像的数据来源与大数据实现技术,最后,通过数据样本实例分析手机用户画像在个人征信中的应用。 ◆ ◆ ◆ 引言 随着计算机网络技术的不断发展,“数据即资源”的大数据时代已经来临。用户画像是电信运营商为了避免管道化风险,实现“数据驱动业务与运营”的重要举措。用户画像与应用
在当今数字化时代,数据已经成为一种珍贵的资源,但要从海量数据中提取有用信息并进行深入分析是一项复杂的任务。为应对这一挑战,数据挖掘工具应运而生。本文将深入探讨数据挖掘的核心概念、常见的数据挖掘工具、应用领域,并提供示例代码,以帮助读者更好地理解和应用数据挖掘工具。
【前言】本文对于大数据征信做了透彻的分析,启示了国内存在非常好的投资机会,本文有很好的借鉴意义。希望本文作者联系我们。 本文编辑/《清华金融评论》贾红宇 近期,美国互联网金融公司ZestFinance受到国内互联网金融专业人士的热捧,其基于大数据的信用评估模型也越来越受到关注和效仿。本文结合美国的金融环境,对ZestFinance进行简要介绍,分析大数据征信产生的背景,剖析大数据征信技术,并全面客观地阐述了大数据征信技术对于中国互联网金融和征信业未来发展的借鉴意义。 ZestFinance简介 ZestFi
近期,美国互联网金融公司ZestFinance受到国内互联网金融专业人士的热捧,其基于大数据的信用评估模型也越来越受到关注和效仿。本文结合美国的金融环境,对ZestFinance进行简要介绍,分析大数据征信产生的背景,剖析大数据征信技术,并全面客观地阐述了大数据征信技术对于中国互联网金融和征信业未来发展的借鉴意义。 ZestFinance简介 ZestFinance,原名ZestCash,是美国一家新兴的互联网金融公司,2009年9月成立于洛杉矶,由互联网巨头谷歌(Google)的前信息总监道格拉斯·梅瑞
大数据文摘作品,欢迎个人转发朋友圈;其他机构、自媒体转载,务必后台留言,申请授权。 编译|丁雪 校对|姚佳灵 席雄芬 尽管本文中提到了在研究中使用的不同方法,许多方法得出了相同的结论。更为深入地洞察顾客及其需求是优先考虑的事,在如何优化销售周期及精简客户服务上获得更精确的信息也是经常要考虑的。最成功的大数据应用案例为我们展示了企业是如何突破限制变得更加关注和响应顾客的需求。 以下给出的是最近的展望与预测综述: wikibon预计大数据市场从2011年到2026年将获得17%年复合增长率,将在2026年达到8
领取专属 10元无门槛券
手把手带您无忧上云