学习
实践
活动
专区
工具
TVP
写文章
  • 广告
    关闭

    【玩转 GPU】有奖征文

    精美礼品等你拿!

  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Flink Back Pressure

    什么是 Back Pressure 如果看到任务的背压警告(如 High 级别),这意味着 生成数据的速度比下游算子消费的的速度快。以一个简单的 Source -> Sink 作业为例。 Web 显示 在 Flink WebUI 的作业界面中可以看到 Back Pressure 选项页面。 采样中 表示 JobManager 对正在运行的任务触发堆栈跟踪采样。 对比 Spark streaming Spark Streaming 的 back pressure 是从1.5版本以后引入。在之前版本,只能通过限制最大消费速度。 对比来看,Spark Streaming 的 back pressure 比较简单,主要是根据下游任务的执行情况等,来控制 Spark Streaming 上游的速率。 Flink 的 back pressure 机制不通,通过一定时间内 stack traces 采样,监控阻塞的比率来确定背压的。

    29710

    Flink Back Pressure

    欢迎您关注《大数据成神之路》 什么是 Back Pressure 如果看到任务的背压警告(如 High 级别),这意味着 生成数据的速度比下游算子消费的的速度快。 Web 显示 在 Flink WebUI 的作业界面中可以看到 Back Pressure 选项页面。 采样中 表示 JobManager 对正在运行的任务触发堆栈跟踪采样。 对比 Spark streaming Spark Streaming 的 back pressure 是从1.5版本以后引入。在之前版本,只能通过限制最大消费速度。 对比来看,Spark Streaming 的 back pressure 比较简单,主要是根据下游任务的执行情况等,来控制 Spark Streaming 上游的速率。 Flink 的 back pressure 机制不通,通过一定时间内 stack traces 采样,监控阻塞的比率来确定背压的。

    84220

    关注

    腾讯云开发者公众号
    10元无门槛代金券
    洞察腾讯核心技术
    剖析业界实践案例
    腾讯云开发者公众号二维码

    相关产品

    • 号码认证

      号码认证

      腾讯云号码认证(NVS)集成了三大运营商特有的网关取号、验证能力,自动通过底层数据网关和短信网关识别本机号码,在不泄漏用户信息的前提下,安全、快速地验证用户身份。NVS提供一键登录、本机校验两大功能,实现一键免密注册、登录、校验,可提升用户使用体验。

    相关资讯

    热门标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      扫码关注腾讯云开发者

      领取腾讯云代金券