首页
学习
活动
专区
工具
TVP
发布

大数据进阶

专栏作者
95
文章
137282
阅读量
19
订阅数
flink etl
这种 join 方式需要去保留两个流的状态,持续性地保留并且不会去做清除。两边的数据对于对方的流都是所有可见的,所以数据就需要持续性的存在state里面,那么 state 又不能存的过大,因此这个场景的只适合有界数据流或者结合ttl state配合使用。它的语法可以看一下,比较像离线批处理的 SQL
yiduwangkai
2021-07-14
1K0
netty(3)-译j2ee interceptingfilter
上下文 表示层请求处理机制接收许多不同类型的请求,这需要各种类型的处理。有些请求只是简单地转发到适当的处理程序组件,而其他请求必须先进行修改,审核或解压缩,然后再进一步处理。
yiduwangkai
2019-09-30
5100
【转】一文看懂JVM内存布局及GC原理
杨俊明,携程云客服平台研发部软件技术专家。从事IT行业10余年,腾讯云+社区、阿里云栖社区、华为云社区认证专家。近年来主要研究分布式架构、微服务、Java技术等方向。
yiduwangkai
2019-09-27
4360
【转】Go 语言函数
Go 语言标准库提供了多种可动用的内置的函数。例如,len() 函数可以接受不同类型参数并返回该类型的长度。如果我们传入的是字符串则返回字符串的长度,如果传入的是数组,则返回数组中包含的函数个数。
yiduwangkai
2019-09-17
6370
【转】string类型和其他类型的值的互转
由于在开发过程中遇到类型转换问题,比如在web中某个参数是以string存在的,这个时候需要转换成其他类型,这里官方的strconv包里有这几种转换方法。
yiduwangkai
2019-09-17
1.4K0
【转】Go语言---strings包(字符串操作)
字符串求长度 求子串 是否存在某个字符或者子串 子串出现的次数(字符串匹配) 字符串分割(切分)成[]string 字符串是否存在某个前缀或后缀 字符或者子串在字符串中首次出现的位置或最后一次出现的位置 通过某个字符串将[]string进行拼接 字符串重复次数 字符串中子串替换 大小写转换 ......................等等一些基本操作。 由于string类型可以看成是一种特殊的slice类型,因此获取长度可以用内置的函数len;同时支持 切片 操作,因此,子串获取很容易。
yiduwangkai
2019-09-17
9400
【转】分布式数据流的轻量级异步快照
本篇翻译自论文:Lightweight Asynchronous Snapshots for Distributed Dataflows,Flink的容错快照模型即来源于该论文。原文地址:https://arxiv.org/pdf/1506.08603.pdf
yiduwangkai
2019-09-17
9270
flink系列(7)-streamGraph
StreamGraph是flink四层执行图中的第一层图,代码在org.apache.flink.streaming.api.graph包中,第一层graph主要做的事情是将所有的stransformation添加到DAG中,并设置并行度,设置slot槽位
yiduwangkai
2019-09-17
8820
awk命令结构/内置变量/获取文本某行或某列
一个awk脚本通常由:BEGIN语句块、能够使用模式匹配的通用语句块、END语句块3部分组成,这三个部分是可选的。任意一个部分都可以不出现在脚本中,脚本通常是被单引号或双引号中,例如:
yiduwangkai
2019-09-17
2.1K0
JVM(2): 逃逸分析和内存分配
我们都知道Java对象都是分配在在堆上的,在过往的认识中,一直是以这样的方式存在的,但是从Java7开始支持对象的栈分配和逃逸分析机制。
yiduwangkai
2019-09-17
5700
dubbo之hessian序列化数据丢失
最近有同事来找我,说同一个model中有一个字段值无法传递到调用方,其它的字段都可以传递过去,什么,还有这样的事,瞬间懵逼了,于是就想着是不是他给到客户端的API和他自己的不一致,是不是没有get和set方法,或者是不是打包的问题,或者是不是TCP传递时,数据发生了丢失等。在找不到原因时,先添加一个字段进行尝试,发现新加的字段是有值的。该字段相较于其它字段较特殊的地方是子类和父类有相同的字段,去掉继承,发现字段能够顺利传递过去了。问题是找到了,但是原因还有找到,于是只能进行baidu
yiduwangkai
2019-09-17
1.6K0
算法导论-插入排序
最近重新翻开算法导论宝典,打算重新温习一下,顺便记录下自己的点滴。导论中都是用的伪代码进行描述,我们这里直接用java代码进行
yiduwangkai
2019-09-17
4050
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档