腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

钱塘大数据

专栏作者

1204

文章

1320818

阅读量

141

订阅数

大数据(生于2006，卒于2019)已死！

hadoop 大数据数据库数据可视化 sql

由于关注的重心从我们收集数据的方式转向实时处理数据，大数据时代即将终结。大数据现在是支持多云、机器学习和实时分析这几个新时代的业务资产。

2019-11-27

6940

推荐收藏丨大数据思维的十大核心原理

大数据 hadoop 分布式存储数据分析

大数据时代，计算模式也发生了转变，从“流程”核心转变为“数据”核心。Hadoop体系的分布式计算框架已经是“数据”为核心的范式。非结构化数据及分析需求，将改变IT系统的升级方式：从简单增量到架构变化。大数据下的新思维——计算模式的转变。

2018-09-21

7030

【干货】全球大数据领域顶级开源工具汇总

大数据开源 hadoop apache 分布式

大数据技术领域正被越来越多的公司关注，而开源一直是大数据技术的灵魂。随着一些细分领域对大数据工具提出更高的期望和要求，一批更高效更有针对性的大数据工具先后诞生，以下将为您介绍几大引人注目的开源大数据工

2018-03-06

9090

【升职加薪必备】16个金量最高的大数据认证

hadoop apache https 大数据解决方案

目前，大数据行业面临人才荒的现状，伴随大数据在众多行业中的应用，大数据技术工作能力的工程师和开发人员得到了青睐，同时欢迎的还有数据科学家和数据分析师，这部分人才不仅是人才市场中的抢手资源同时更是获得较高薪资。正因为如此，互联网行业人士如何更好的获得此方面的工作呢，获取大数据认证就是极佳的方式。如今，数据和大数据分析正在逐渐成为企业生命的血液。具有分析大数据所需技术的数据科学家和分析师，以及了解Hadoop集群和其他技术的开发人员在招聘市场中供不应求，很多企业不惜以重金委以重任。在这样的背景下，如果拥

2018-03-06

1.5K0

从底层到应用，数据人必须具备哪些技能？

大数据 hadoop hive spark

1大数据平台目前很火，数据源头，各种炫酷新技术，搭建Hadoop、Hive、Spark、Kylin、Druid、Beam~，前提是你要懂Java，很多平台都是用Java开发的。目前很多企业都把数据采集下来了，对于传统的业务数据，用传统的数据是完全够用的，可是对于用户行为和点击行为这些数据或者很多非结构化的数据，文本、图像和文本类的，由于数据量太大，很多公司都不知道怎么进行存储。这里面要解决的是实时、近实时和离线的大数据框架如何搭建，各数据流之间如何耦合和解耦，如何进行容灾、平台稳定、可用是需要重点

2018-03-06

6270

【大数据投资人必读】中国大数据发展与投资分析报告

大数据存储 hadoop mapreduce

01 中国大数据产业发展现状与前景预测 1. 中国大数据产业发展现状分析大数据产业链建设情况目前，IT产业在发展过程中已经形成了一些层次分布，有做服务器和底层系统的，有做软件的，有做应用的，大数据也需要在原有的架构上加以发展。原来做基础设施的企业，如联想、华为，也要向大数据转型，提供低成本、低能耗的大型存储器，这是大数据产业的基础。中间层是类似Hadoop、MapReduce的数据分析软件，原有的软件产业也要转型，由卖软件转为以数据为中心。再往上就是百度、腾讯、阿里巴巴等大数据应用服务公司，需要增加数

2018-03-05

1K0

【推荐收藏】全球大数据领域顶级开源工具汇总

大数据开源 hadoop apache

大数据技术领域正被越来越多的公司关注，而开源一直是大数据技术的灵魂。随着一些细分领域对大数据工具提出更高的期望和要求，一批更高效更有针对性的大数据工具先后诞生，以下将为您介绍几大引人注目的开源大数据工

2018-03-05

8930

【推荐阅读】大数据技术的最新进展和潜在应用

大数据分布式存储 hadoop

导读：日前，在2016中国大数据技术大会首日全体会议中，星环科技董事长&CTO孙元浩分享了主题为《大数据技术的最新进展和潜在应用》的演讲。大数据技术的软件栈分为分析管理工具、领域级引擎、通用计算引擎、资源管理框架以及分布式存储引擎几项。而Hadoop的发展目前已经有了几大进展：分布式计算已逐渐成为主流计算方式；交互式分析技术日益成熟；数据分析算法逐渐丰富，工具普及化；融合事件驱动和批处理引擎。后Hadoop/Spark时代，新技术在数据量，类型，速度以及价值四个维度上都将加速创新。最后孙元浩表示：2016年

2018-03-05

1.2K0

Spark与Hadoop两大技术趋势解析

大数据 hadoop spark

导读：开源数据集如今深受开发者喜爱，比如谷歌的Images dataset数据集，YouTube-8M数据集等。通过对数据集里的数据进行分析，可以发现许多隐藏信息，比如客户喜好、未知相关性，市场趋势以及其他有用的商业信息。大数据分析对企业降低成本，准确掌握市场趋势，更快完成产品迭代十分有用。说到大数据分析，16年基本被Spark与Hadoop霸屏，到底是什么样的魔力让它们足以引起大数据世界的波动，未来又会如何发展呢 Apache Spark Apache Spark起源于加州大学伯克利分校，对于

2018-03-01

8750

【盘点】数据挖掘师，这十大思维原理你具备吗？

数据挖掘大数据 hadoop 分布式

十大思维原理：1.数据核心原理、2.数据价值原理、3.全样本原理、4.关注效率原理、5.关注相关性原理、6.预测原理、7.信息找人原理、8.机器懂人原理、9.电子商务智能原理、10.定制产品原理。一、数据核心原理从“流程”核心转变为“数据”核心大数据时代，计算模式也发生了转变，从“流程”核心转变为“数据”核心。Hadoop体系的分布式计算框架已经是“数据”为核心的范式。非结构化数据及分析需求，将改变IT系统的升级方式：从简单增量到架构变化。大数据下的新思维--计算模式的转变。例如：IBM将

2018-03-01

7620

全球大数据领域顶级开源工具汇总【推荐收藏】

大数据开源 hadoop apache 分布式

导读：大数据技术领域正被越来越多的公司关注，而开源一直是大数据技术的灵魂。随着一些细分领域对大数据工具提出更高的期望和要求，一批更高效更有针对性的大数据工具先后诞生，以下将为您介绍几大引人注目的开源

2018-03-01

8990

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态