腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大鹅专栏：大数据到机器学习

从大数据计算到机器学习，你需要了解这些。专注于Hadoop生态 Spark 机器学习深度学习

专栏作者

127

文章

266112

阅读量

46

订阅数

kafka 命令行工具常用命令行操作

kafka zookeeper bootstrap node.js

查看consumer group列表有新、旧两种命令，分别查看新版(信息保存在broker中)consumer列表和老版(信息保存在zookeeper中)consumer列表，因而需要区分指定bootstrap–server和zookeeper参数：

2021-06-16

4.7K0

Spark 查看某个正在执行的或已结束的任务中executor与driver日志

yarn node.js 网站 spark 大数据

如果运行在 YARN 模式，可以在 ResourceManager 节点的 WEB UI 页面根据任务状态、用户名或者 applicationId Search 到应用。

2021-06-16

5.3K0

Spring Boot 创建及使用多线程

javascript node.js 编程算法 spring spring boot

Spring是通过任务执行器(TaskExecutor)来实现多线程和并发编程，使用ThreadPoolTaskExecutor来创建一个基于线城池的TaskExecutor。在使用线程池的大多数情况下都是异步非阻塞的。我们配置注解@EnableAsync可以开启异步任务。然后在实际执行的方法上配置注解@Async上声明是异步任务。

2021-06-16

2.8K0

Kafka入门教程其一消息队列基本概念及常用Producer Consumer配置详解学习笔记

消息队列 CMQ 版 kafka node.js socket编程批量计算

Apache Kafka是基于发布/订阅的容错消息系统，由Scala和Java编写，是一个分布式消息队列，具有高性能、持久化、多副本备份、横向扩展能力。

2021-06-16

6480

HDFS 基本概念及常用操作学习笔记

node.js 存储 hadoop https 大数据

Hadoop 附带了一个名为 HDFS(Hadoop Distributed File System, Hadoop分布式文件系统)的分布式文件系统，基于 Hadoop 的应用程序使用 HDFS 。HDFS 是专为存储超大数据文件，运行在集群的商品硬件上。它是容错的，可伸缩的，并且非常易于扩展。

2021-06-16

4670

Spark Structured Streaming + Kafka使用笔记

jquery node.js kafka spark 批量计算

这篇博客将会记录Structured Streaming + Kafka的一些基本使用(Java 版)

2021-06-16

1.4K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态