首页标签大数据处理套件

#大数据处理套件

可靠安全易用的大数据处理平台

大数据入门:Flink核心概念详解

成都加米谷大数据

在流式计算越来越受到主流青睐的市场状况下,流式计算框架技术的掌握,正在成为大数据学习当中的重要部分。以Flink框架来说,作为新一代的流计算框架,越来越多地出现...

1420

Java大数据:关于分布式、高并发与多线程

成都加米谷大数据

大数据作为Java新一轮的热点方向,越来越多的企业在招聘当中,想要找到懂分布式、高并发的开发人才,而在Java大数据方向上,分布式、高并发、多线程既是重点,也是...

7210

学大数据需要学哪些内容?大数据主流技术栈简介

成都加米谷大数据

被广泛关注的大数据,这几年在国内的发展,可以说是进入了比较平稳的一个时期,基本上企业对于技术开发人员的要求,都开始与大数据接轨。那么学大数据需要学哪些内容,今天...

9530

大数据概念解析之数据仓库简介

成都加米谷大数据

在大数据系统平台当中,数据存储、数据库、数据仓库是非常重要的概念,共同支持大数据存储的实际需求。在大数据处理当中,大数据存储这个环节,数据仓库技术起到重要的作用...

6220

大数据Spark框架:Spark生态圈入门

成都加米谷大数据

在大数据计算引擎当中,Spark不能忽视的一个重要技术框架,Spark继承了Hadoop MapReduce的优势,同时实现了计算效率的提升,满足更加实时性的数...

6730

大数据核心技术之分布式基础入门

成都加米谷大数据

大数据技术的核心,离不开分布式理论。大数据从概念走向落地,也是因为大数据技术的成熟,换句话说,就是大数据技术使得大规模数据处理成为可能,而大数据技术背后的核心,...

8930

腾讯Elasticsearch海量规模背后的内核优化剖析

黄华

Elasticsearch 在腾讯内部广泛应用于日志实时分析、结构化数据分析、全文检索等场景,目前单集群规模达到千级节点、万亿级吞吐,同时腾讯联合 Elasti...

2.1K241

腾讯Elasticsearch海量规模背后的内核优化剖析

黄华

Elasticsearch 在腾讯内部广泛应用于日志实时分析、结构化数据分析、全文检索等场景,目前单集群规模达到千级节点、万亿级吞吐,同时腾讯联合 Elasti...

55941

重磅!知名百度第三方软件Pandownload被查,作者被抓,大厂该注意什么?

终端研发部

今年2月,受害人刘某报案称其下载的“Pandownload”软件会在未授权的情况下,将自己百度网盘的数据共享出去,导致隐私照片和文件泄露。宝应县局网安民警立即开...

9100

Flink双流处理:实时对账实现

皮皮熊

腾讯 · 工程师 (已认证)

更多内容详见:https://github.com/pierre94/flink-notes

85080

Flink状态编程: 订单超时告警

皮皮熊

腾讯 · 工程师 (已认证)

无状态计算实现的复杂度相对较低,实现起来较容易,但是无法完成提到的比较复杂的业务场景:

586111

flink学习笔记

皮皮熊

腾讯 · 工程师 (已认证)

<!--> ![Flink类型分类](./img/introduction-to-type-and-serialization-mechainisms-1.pn...

34140

中科院智能乒乓球桌登上Nature:检测球速跟踪路径,准确找到击球位置

大数据文摘

球类比赛中,经常能看到基于高速摄像头的鹰眼或者VAR(视频助理裁判),这类技术的应用可以避免裁判主观判断引起的争议,提高竞技体育的公平性,但由于成本较高,在小级...

13120

数据同步工具Flinkx的研究与实践

皮皮熊

腾讯 · 工程师 (已认证)

Flink是新型的计算框架,具有分布式、低延迟、高吞吐和高可靠的特性。其支持多种部署方式:local(单机)、standalone模式,也可以基于yarn,me...

1.7K92

快速构建基于Lambda框架大数据业务架构的TBDS Demo指南

Aron 陈豪朗

腾讯 · 大数据AI产品架构师 (已认证)

本文介绍了如何快速的构建一个基于Lambda框架的大数据业务场景的TBDS Demo,用于展示如何利用其对应的工具在腾讯大数据平台上搭建出实时计算、多维分析、离...

73420

解密工业物联网的安全现状与背后原因

广州接点智能

如今,移动技术的应用和增长创造了一个快节奏的社会,人们对即时信息和即时反馈已经习以为常,工业物联网涉及物联网技术在制造工艺和供应链中的应用。除了来自设备和传感器...

21910

Spark 基本概念及 jobs stages tasks 等 解释

大鹅

腾讯 · 后台开发 (已认证)

还有一个是范围的依赖,即RangeDependency,它仅仅被org.apache.spark.rdd.UnionRDD使用。UnionRDD是把多个RDD合...

18940

Spark 与 Hadoop 学习笔记 介绍及对比

大鹅

腾讯 · 后台开发 (已认证)

这篇博客将会简单记录Hadoop与Spark对比,HDFS,MapReduce的基本概念,及Spark架构设计,RDD,运行模式。整理起来一起阅读方便我们理解整...

18620

详解数据服务共享发布

yuanyi928

随着云计算、大数据、物联网等技术兴起,数据朝着多样性、高体量、高速度方向发展,如何将海量数据安全、稳定、高效地数据共享出去成为各企业关注的重点。本次微课堂通过普...

48120

腾讯专有云TBDS规划和自动化部署工具介绍

Aron 陈豪朗

腾讯 · 大数据AI产品架构师 (已认证)

TBDS Autodeploy Tool是一款针对腾讯大数据套件(即TBDS)的规划和自动化部署工具,其基本功能包括:

8.6K460

扫码关注云+社区

领取腾讯云代金券