小勇DW3-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

小勇DW3

专栏成员

125

文章

240451

阅读量

28

订阅数

Metrics在Flink系统中的使用分析

大数据编程算法 kafka api 文件存储

Flink 提供的 Metrics 可以在 Flink 内部收集一些指标，通过这些指标让开发人员更好地理解作业或集群的状态。由于集群运行后很难发现内部的实际状况，跑得慢或快，是否异常等，开发人员无法实时查看所有的 Task 日志，比如作业很大或者有很多作业的情况下，该如何处理？此时 Metrics 可以很好的帮助开发人员了解作业的当前状况。 Metric Types

2020-01-27

3.1K0

Flink UDF--Table Functions&Aggregation Functions

编程算法大数据

与标量函数相似之处是输入可以0，1，或者多个参数，但是不同之处可以输出任意数目的行数。返回的行也可以包含一个或者多个列。

2020-01-14

8160

Flink SQL项目实录

api sql 大数据

为Flink最高层的API，易于使用，所以应用更加广泛，eg. ETL、统计分析、实时报表、实时风控等。

2019-12-24

1.1K0

Flume原理分析与使用案例

大数据 javascript jvm

　　flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力。

2019-05-14

7640

基于hadoop分析，了解hive的使用

hive hadoop node.js 大数据 sql

　　Hadoop是一个专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。

2019-04-27

8460

《分布式服务架构：原理、设计于实战》总结

分布式微服务安全大数据 ssh

　　互联网企业对传统技术进行发展和演化，形成一套具有互联网特色的互联网技术，互联网技术以拆分为原则来满足服务于海量用户的需求，从架构上来讲，分布式、服务化( SOA )、微服务得到了深入发展，以拆分和服务化为基础，将海量用户产生的大规模的访问流量进行分解，采用分而治之的方法，达成用户需要的功能指标，并同时满足用户对高可用性、高性能、可伸缩、可扩展和安全性的非功能质量的要求。

2018-09-29

4510

redis中各种数据类型的常用操作方法汇总

云数据库 Redis 大数据 memcached 安全 java

string是redis最基本的类型，你可以理解成与Memcached一模一样的类型，一个key对应一个value。 string类型是二进制安全的。意思是redis的string可以包含任何数据。比如jpg图片或者序列化的对象。 string类型是Redis最基本的数据类型，一个redis中字符串value最多可以是512M

2018-09-29

1.9K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态