腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

01二进制

专栏作者

85

文章

127361

阅读量

16

订阅数

Flink反压原理深入浅出及解决思路

flink 大数据数据处理编程算法 java

Apache Flink 是一个分布式大数据处理引擎，可对有限数据流和无限数据流进行有状态或无状态的计算，能够部署在各种集群环境，对各种规模大小的数据进行快速计算。既然是对流式数据进行处理，那么就要面临数据在流动计算时，上下游数据通信以及数据处理速度不一致所带来的问题。本文先从「生产者-消费者模式」的角度介绍了Flink中的数据传输，从而引出了「反压」的概念。接着介绍了Flink在V1.5前「基于TCP的反压机制」以及V1.5后「基于Credit的反压机制」分别如何实现网络流控。最后针对一个反压案例进行分析，介绍了如何进行反压定位和资源调优，并展示了调优结果。希望在阅读完本文后，读者可以深入理解Flink节点反压的概念以及背后的原理，在遇到反压场景时，能够快速定位瓶颈点，并拥有一套基本的调优思路。

2022-12-05

1.2K0

浅谈策略模式在消息转发场景下的应用

背景在上一篇文章中，我们介绍了如何设计一个消息中心，传送门 👉《如何设计一个消息中心》有了承载这些消息的地方后，接下来的问题便是，这些消息从哪里来？通常对于一个内容型产品来说，在其互动体系中，为了增强消息的用户触达，增强用户的互动心智，在互动（评论、点赞等）行为发生后，会将互动消息推送至消息中心，然后根据不同的互动行为类型匹配不同的消息模版。 📷 然而随着互动行为种类的增加（内容的点赞、评论的点赞……），不断的通过 if…else 来根据不同的消息类型生成不同的消息模版会使得业务代码愈发复杂，难以维

2022-12-05

4780

数据检索的玄铁剑——索引

腾讯云开发者社区编程算法数据结构数据库 sql

在如今的开发模式下，服务端程序员离原始数据越来越远，和农夫山泉一样，他们不生产数据，他们只是 DTO 的搬运工。从各种 service 中获取数据，再使用 Lambda 进行拆分组装成为了他们的日常工作。

2022-12-05

3880

网站编程算法

本文是笔者在团队内部做分享整理的资料的一部分，本次分享主要是站在一个服务端开发的视角对（前端）低代码平台的一些调研，已经剔除了一些敏感数据和信息，可放心食用。

2022-12-05

3840

把你的IDE搬进浏览器里——JetBrains Projector 初体验

编程算法 https 网络安全 github 容器镜像服务

对于云端编程，我想大多数人的第一想法应该是微软推出的 VSCode Remote，这个功能基于开源的 VSCode，通过 SSH 远程连接到服务器，开发者可以通过端口转发、SCP 等一系列实用功能快速实现远程开发。我曾体验过这种编程方式，极大减轻了电脑性能的压力，但我认为这并不是云端编程的最终形态，因为我仍然需要在自己的电脑上安装 VSCode 才可以使用这个功能。

2021-05-11

3K0

身份认证之双因素认证 2FA

linux 验证码短信编程算法

这里所说的身份认证，指的是狭义上的在计算机及其网络系统中确认操作者身份的过程，从而确定用户是否具有访问或操作某种资源的权限。

2021-03-16

2.7K0

什么是环境变量？

编程算法 windows java 命令行工具

前言在初学 Java 时，相信大家下载安装完 JDK 后的第一件事就是「配置环境变量」，几乎所有的教程都会告诉你当你在命令行工具中输入了 java 命令和 javac 命令后看到类似如下的结果就说明你的 Java 环境配置好了不知道你有没有思考过这个「环境变量」究竟是什么？为什么配置了之后就会显示这样的内容，为什么不配置，就会提示你一个错误：'javac' 不是内部命令或外部命令，也不是可运行的程序或批处理文件。如果你也有这样的疑问，不要着急，我们今天就来一探究竟。文内相关的演示，均在 Windo

2020-11-11

1K0

想追女神？先学 Synchronized 吧

编程算法 java 其他

Synchronized 用的锁是存在对象头里的，用来表明当前对象所持有的锁。在 Java SE1.6 之前，Synchronized 是作为重量锁出现的，一旦使用了 synchronized，就一定会阻塞到其他线程。而在 Java SE1.6 后，为了减少获得锁和释放锁带来的性能问题，引入了"偏向锁"和"轻量锁"的概念。由此可以得知，在新的 Java 中，锁一共有 4 种状态：无锁状态、偏向锁状态、轻量锁状态和重量锁状态。这几个状态会随着竞争不断升级且只能升级不能降级，即轻量锁只会升级到重量锁而不会降级到偏向锁。

2020-09-22

2970

接口调度者——API 网关

api API 网关 nginx 编程算法 http

我们知道在微服务架构风格中，一个大应用被拆分成为了多个小的服务系统提供出来，这些小的服务他们自成体系，也就是说这些小系统可以拥有自己的数据库，框架甚至语言等，这些小系统通常以提供 Rest Api 风格的接口来被 H5, Android, IOS 以及第三方应用程序调用。

2020-09-14

8980

为什么不建议在 for 循环里捕捉异常？

jvm java 编程算法

在回答标题这个问题之前，我们先试想一下，在没有 try…catch 的情况下，如果想要对函数的异常结果进行判断，我们应该怎么做？

2020-09-02

2K0

你的系统可用性 5 个 9 了吗？

又是一年放榜日，众多考生满怀期待的点开招生网，结果输了信息才发现根本没办法查询——查询人数太多了，直接把系统打挂了！这个时候，还没翻身的码农闰土被问到一个直击心灵的问题：这个系统可用性达到了多少个 9？想要回答这个问题，我们得先有些前置知识。

2020-08-27

3.2K0

敲黑板了，这是新知识点

编程算法云计算

这年头，不管什么应用，仿佛“上云“都成了标配，感觉拥抱了“云”，应用的逼格都上升了。那真的是这样的吗？

2020-08-09

4300

为什么非对称加密比对称加密慢？

数据加密服务编程算法 https 网络安全

这个问题是一个读者面试时遇到的一个问题，准备过面试的人应该都记得，非对称加密与对称加密的区别之一就是非对称加密的速度慢，但是我们做业务开发的时候通常都是直接调用算法，对其原因并没有过多深究，因此如果有面试官问到了这个问题，的确会让人措手不及。正好借着这篇文章来说一说。

2020-07-31

3.7K0

快速适配 Flutter 之语言国际化

flutter ios android 编程算法其他

如果你希望你的APP走出海外，那么就需要你在编写代码时考虑支持不同的语言环境，设置一些“本地化”的值，例如文本/布局。Flutter本身是具备国际化的，在适配方面也较为简单，今天我将会介绍一个名为Flutter Intl的插件快速实现Flutter的语言国际化。

2020-05-13

2.2K0

Flutter主题切换——让你的APP也能一键换肤

flutter ios android 编程算法

为了让你的 App 更美观，主题切换已经是一个必不可少的功能了，但如果想在传统的 Android 和 iOS 上分别适配不同的主题相当繁琐。但这一切，在 Flutter 中都非常容易实现。今天我们就来看看，如何在 Flutter 中给你的 App 添加换肤功能。

2020-04-26

4.5K0

刚完一波蚂蚁金服的面试后，他说他累了

因为学院的安排，我们被要求暑期实习，近期也有各种内推信息发在群里，和大多数人边面试边复习不同，我的这位好友在我们疯狂投简历的时候就一直踏踏实实准备，因为我们会在自己的小群里分享自己的面试经过，他就一直潜水，直到有一天突然告诉我们蚂蚁金服的hr说他通过了我们才知道他已经成功上岸了。这种人，我们一般只能用五个字来形容：闷声发大财。

2020-04-10

4960

聊一聊数据库（MySQL）设计中的数据类型优化

云数据库 SQL Server 编程算法存储 tcp/ip 数据库

良好的逻辑设计和物理设计是高性能的基石，在进行数据库设计时，我们应该要考虑到未来将会执行的查询语句，这就需要对各种因素进行权衡。本文将会聊一聊数据库（MySQL）设计中有关数据类型优化的一些内容。以下内容总结自《高性能 MysQL》。

2020-02-17

8510

Flutter 可能是开发移动应用的最佳解决方案

flutter android ios 编程算法 java

众所周知，Java 和 Objective-C 是开发高质量 Android 和 iOS App 的首选。大多数开发人员通过这些编程语言制作足够健壮的 APP。

2020-02-12

1.8K0

利用 Python 破解 ZIP 或 RAR 文件密码

https 网络安全 python 编程算法

我们经常会从网络上下载一些带密码的压缩包，想要获取里面的内容，往往就要给提供商支付一些费用。想要白嫖其中的内容，常见的做法是百度搜索一些压缩包密码破解软件，但后果相信体验过的人都知道。本文将会利用 Python 破解压缩包的密码，这里以 ZIP/RAR 为例。

2020-02-12

10.3K0

写一款小众的 flutter 图标包

编程算法 flutter ios android json

你需要做的第一件事就是找到一个包含 “.ttf” 文件的开源图标库。那 “.ttf” 是什么文件？

2019-10-24

9700

点击加载更多

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态