腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

数据科学与人工智能

专栏作者

811

文章

1011402

阅读量

170

订阅数

【动态】区块链、人工智能一个都不能少，谁有胆识做科技界的斜杠青年？

区块链人工智能自动驾驶分布式

区块链与人工智能，可谓是绝代双骄，成了近年来最火热的两个概念。在过去的一年时间里，区块链这一划时代的技术夺目地进入公众视野，被认为是当前最有可能带来颠覆性改变的技术，并受到嗅觉敏锐的风投和资本的热烈

陆勤_数据人网

2018-04-18

5730

数据应用：运营商大数据应用的思考

大数据存储分布式数据处理

作者：中国移动研究院大数据与IT技术研究所的段翔首先大数据我们知道这个时代正在来临，这里有一个调查，随着全球移动互联网和工业和生活数字化的进程，数据现在成为一个比较加速爆炸式增长。我们看这个调查报告

陆勤_数据人网

2018-02-28

1.1K0

【Hadoop研究】YARN：下一代 Hadoop计算平台

hadoop 大数据分布式

Apache Hadoop 是最流行的大数据处理工具之一。它多年来被许多公司成功部署在生产中。尽管 Hadoop 被视为可靠的、可扩展的、富有成本效益的解决方案，但大型开发人员社区仍在不断改进它。最终，2.0 版提供了多项革命性功能，其中包括 Yet Another Resource Negotiator (YARN)、HDFS Federation 和一个高度可用的 NameNode，它使得 Hadoop 集群更加高效、强大和可靠。在本文中，将对 YARN 与 Hadoop 中的分布式处理层的以前版本进行

陆勤_数据人网

2018-02-27

1.1K0

【Hadoop研究】Hadoop分布式文件系统HDFS的工作原理详述

hadoop 分布式

Hadoop分布式文件系统(HDFS)是一种被设计成适合运行在通用硬件上的分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。它能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。要理解HDFS的内部工作原理，首先要理解什么是分布式文件系统。 1、分布式文件系统多台计算机联网协同工作(有时也称为一个集群)就像单台系统一样解决某种问题，这样的系统我们称之为分布式系统。分布式文件系统是分布式系统的一个子集，它们解决的问题就是数据存储。换句话说，它们是横跨在多台计算机上的存储系统。存

陆勤_数据人网

2018-02-27

7600

【数据科学】大数据思维的十大原理：当样本数量足够大时，你会发现每个人都是一模一样的

大数据 hadoop 分布式

大数据思维原理是什么？笔者概括为10项原理。一、数据核心原理从“流程”核心转变为“数据”核心大数据时代，计算模式也发生了转变，从“流程”核心转变为“数据”核心。Hadoop体系的分布式计算框架已经是“数据”为核心的范式。非结构化数据及分析需求，将改变IT系统的升级方式：从简单增量到架构变化。大数据下的新思维——计算模式的转变。例如：IBM将使用以数据为中心的设计，目的是降低在超级计算机之间进行大量数据交换的必要性。大数据下，云计算找到了破茧重生的机会，在存储和计算上都体现了数据为核心的理念。大数据和

陆勤_数据人网

2018-02-27

1.2K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态