smartsi

腾讯云

备案控制台

开发者社区

TVP

文章/答案/技术大牛

写文章

LV1

发表了文章 2022-05-012022-05-01 14:25:21

DataX 快速入门

DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP 等各种异构...

smartsi 2022-05-012022-05-01 14:25:21

python

发表了文章 2022-04-232022-04-23 13:35:12

Flink DataStream 类型系统 TypeInformation

Flink DataStream 应用程序所处理的事件以数据对象的形式存在。函数调用时会传入数据对象，同时也可以输出数据对象。因此，Flink 在内部需要能够处...

smartsi 2022-04-232022-04-23 13:35:12

flink，大数据，文件存储，java，scala

发表了文章 2022-04-172022-04-17 11:02:30

Flink Table API & SQL 基本操作

本文主要展示了 Table API 和 SQL 程序的常见结构，如何创建注册 Table，查询 Table，以及如何输出 Table。

smartsi 2022-04-172022-04-17 11:02:30

sql，api，github，git，开源

发表了文章 2022-04-012022-04-01 10:49:24

Apache SeaTunnel 分布式数据集成平台

随着互联网流量爆发式增长，越来越多的公司业务需要支撑海量数据存储，对高并发、高可用、高可扩展性等特性提出了更高的要求，这促使各种类型的数据库快速发展，至今常见数...

smartsi 2022-04-012022-04-01 10:49:24

apache，spark，flink，数据分析，数据库

发表了文章 2022-03-082022-03-08 12:48:31

Flink SourceFunction 初了解

SourceFunction 是 Flink 中所有流数据 Source 的基本接口。SourceFunction 接口继承了 Function 接口，并在内部...

smartsi 2022-03-082022-03-08 12:48:31

unix，flink，编程算法，大数据，文件存储

发表了文章 2022-03-072022-03-07 16:07:31

State Processor API：如何读写和修改 Flink 应用程序的状态

无论是在生产环境中运行 Apache Flink 还是在调研 Apache Flink，总会遇到一个问题：如何读写以及更新 Flink Savepoint 中的...

smartsi 2022-03-072022-03-07 16:07:31

api，flink，大数据，编程算法，windows

发表了文章 2022-03-022022-03-02 08:58:03

Flink State TTL 详解

在某些场景下 Flink 用户状态一直在无限增长，一些用例需要能够自动清理旧的状态。例如，作业中定义了超长的时间窗口，或者在动态表上应用了无限范围的 GROUP...

smartsi 2022-03-022022-03-02 08:58:03

unix，flink，大数据，文件存储

发表了文章 2022-02-222022-02-22 17:48:26

Flink SQL Kafka Connector

Kafka Connector 提供了从 Kafka topic 中消费和写入数据的能力。

smartsi 2022-02-222022-02-22 17:48:26

kafka，node.js，文件存储，编程算法，flink

发表了文章 2022-02-222022-02-22 17:44:24

Debezium 1.9.0.Alpha2 正式发布

我很高兴宣布 Debezium 1.9 系列的第二个版本，1.9.0.Alpha2 正式发布。此版本包含了对 Oracle 21c 的支持、围绕 Redis f...

smartsi 2022-02-222022-02-22 17:44:24

oracle，云数据库 Redis，kafka，编程算法

发表了文章 2022-02-222022-02-22 17:41:09

Flink 1.13 StateBackend 与 CheckpointStorage 拆分

Apache Flink 的持久化对许多用户来说都是一个谜。用户最常见反复提问的问题就是不理解 State、StateBackend 以及快照之间的关系。通过学...

smartsi 2022-02-222022-02-22 17:41:09

flink，大数据，存储，文件存储，api

发表了文章 2022-02-042022-02-04 15:28:32

Debezium 1.9.0.Alpha1 正式发布

我很高兴宣布 Debezium 1.9 系列的第一个版本 1.9.0.Alpha1 正式发布。这是新的一年来的第一个新版本！Debezium 1.9.0.Alp...

smartsi 2022-02-042022-02-04 15:28:32

oracle，编程算法

发表了文章 2022-02-042022-02-04 15:27:36

对流处理的误解

我们花了很多时间来思考流处理。更酷的是：我们也花了很多时间帮助其他人思考流处理以及如何使用流应用解决他们的数据问题。这个过程的第一步是纠正对现代流处理的误解（作...

smartsi 2022-02-042022-02-04 15:27:36

flink，大数据，windows，数据处理，apache

发表了文章 2022-02-042022-02-04 15:26:49

BookKeeper 简介

Apache BookKeeper 是企业级存储系统，旨在提供强大的持久性保证、一致性和低延迟。最初是由雅虎研究院（Yahoo! Research）开发，作为 ...

smartsi 2022-02-042022-02-04 15:26:49

api，存储，apache，zookeeper

发表了文章 2022-01-312022-01-31 14:44:16

Streaming 102:批处理之外的流式世界第二部分

欢迎回来！如果你错过了我之前的博文：Streaming 101:批处理之外的流式世界第一部分，我强烈建议你先花时间阅读这篇文章。在这篇文章介绍的内容是下面介绍内...

smartsi 2022-01-312022-01-31 14:44:16

windows，数据处理，编程算法

发表了文章 2022-01-252022-01-25 13:50:16

Streaming 101:批处理之外的流式世界第一部分

尽管这些业务需求驱动了流式处理的发展，但与批处理相比，现有的流式处理系统仍然相对不成熟，这使得该领域最近产生了许多令人兴奋的发展。在本篇文章将会介绍一些基本的背...

smartsi 2022-01-252022-01-25 13:50:16

windows，编程算法，数据处理，分布式，serverless

发表了文章 2022-01-182022-01-18 14:28:52

Flink 如何现实新的流处理应用第一部分:事件时间与无序处理

流数据处理正处于蓬勃发展中，可以提供更实时的数据以实现更好的数据洞察，同时从数据中进行分析的流程更加简化。在现实世界中数据生产是一个连续不断的过程(例如，Web...

smartsi 2022-01-182022-01-18 14:28:52

flink，大数据，数据处理，unix，编程算法

发表了文章 2022-01-182022-01-18 14:28:11

Kafka 删除 Apache ZooKeeper 的依赖

目前，Apache Kafka 使用 Apache ZooKeeper 来存储元数据，分区位置和主题配置之类的数据存储在 Kafka 之外一个单独的 ZooKe...

smartsi 2022-01-182022-01-18 14:28:11

kafka，zookeeper，tcp/ip，raft，存储

发表了文章 2021-12-272021-12-27 08:43:09

深入理解 Kafka Connect 之转换器和序列化

Kafka Connect 是 Apache Kafka 的一部分，提供了数据存储和 Kafka 之间的流式集成。对于数据工程师来说，只需要配置 JSON 文件...

smartsi 2021-12-272021-12-27 08:43:09

文件存储，json，kafka，数据结构，存储

发表了文章 2021-12-162021-12-16 08:02:10

Hive SORT BY vs ORDER BY vs DISTRIBUTE BY vs CLUSTER BY

在这篇文章中，我们主要来了解一下 SORT BY，ORDER BY，DISTRIBUTE BY 和 CLUSTER BY 在 Hive 中的表现。

smartsi 2021-12-162021-12-16 08:02:09

mapreduce，hive

发表了文章 2021-12-142021-12-14 13:42:46

深入理解 Hive UDAF

用户自定义聚合函数(UDAF)支持用户自行开发聚合函数完成业务逻辑。从实现上来看 Hive 有两种创建 UDAF 的方式，第一种是 Simple 方式，第二种是...

smartsi 2021-12-142021-12-14 13:42:46

mapreduce，hive，hadoop

12 3 4 5 6 7 8...14 下一页

个人简介

暂未填写公司和职称
个人博客：http://smartsi.club/
暂未填写技能专长
暂未填写学校和专业
http://smartsi.club/
暂未填写所在城市

个人成就

影响力总排行第 1865 名
获得 758 次赞同
文章被阅读 364.7K 次

关注了：1关注者：72

smartsi

DataX 快速入门

Flink DataStream 类型系统 TypeInformation

Flink Table API & SQL 基本操作

Apache SeaTunnel 分布式数据集成平台

Flink SourceFunction 初了解

State Processor API：如何读写和修改 Flink 应用程序的状态

Flink State TTL 详解

Flink SQL Kafka Connector

Debezium 1.9.0.Alpha2 正式发布

Flink 1.13 StateBackend 与 CheckpointStorage 拆分

Debezium 1.9.0.Alpha1 正式发布

对流处理的误解

BookKeeper 简介

Streaming 102:批处理之外的流式世界第二部分

Streaming 101:批处理之外的流式世界第一部分

Flink 如何现实新的流处理应用第一部分:事件时间与无序处理

Kafka 删除 Apache ZooKeeper 的依赖

深入理解 Kafka Connect 之转换器和序列化

Hive SORT BY vs ORDER BY vs DISTRIBUTE BY vs CLUSTER BY

深入理解 Hive UDAF

个人简介

个人成就

社区

活动

资源

关于

归档

腾讯云开发者

smartsi

DataX 快速入门

Flink DataStream 类型系统 TypeInformation

Flink Table API & SQL 基本操作

Apache SeaTunnel 分布式数据集成平台

Flink SourceFunction 初了解

State Processor API：如何读写和修改 Flink 应用程序的状态

Flink State TTL 详解

Flink SQL Kafka Connector

Debezium 1.9.0.Alpha2 正式发布

Flink 1.13 StateBackend 与 CheckpointStorage 拆分

Debezium 1.9.0.Alpha1 正式发布

对流处理的误解

BookKeeper 简介

Streaming 102:批处理之外的流式世界第二部分

Streaming 101:批处理之外的流式世界第一部分

Flink 如何现实新的流处理应用第一部分:事件时间与无序处理

Kafka 删除 Apache ZooKeeper 的依赖

深入理解 Kafka Connect 之 转换器和序列化

Hive SORT BY vs ORDER BY vs DISTRIBUTE BY vs CLUSTER BY

深入理解 Hive UDAF

社区

活动

资源

关于

归档

腾讯云开发者

热门产品

热门推荐

更多推荐

深入理解 Kafka Connect 之转换器和序列化