首页
学习
活动
专区
工具
TVP
发布

最新最全的大数据技术体系

专栏作者
717
文章
548788
阅读量
35
订阅数
基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(五)FineBI可视化
官方文档:https://help.fanruan.com/finebi/doc-view-363.html
Maynor
2023-10-22
2541
基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(四)实时计算需求及技术方案
逆地理编码:https://lbsyun.baidu.com/index.php?title=webapi/guide/webservice-geocoding-abroad
Maynor
2023-10-22
2560
[已解决]Unable to connect to broker 0
Maynor
2023-10-22
2180
基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(三)离线分析
Maynor
2023-10-17
2320
基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(二)数据源
结果:生成模拟数据文件MOMO_DATA.dat,并且每条数据中字段分隔符为\001
Maynor
2023-10-17
2180
【已解决】Exception in thread “main“ joptsimple.UnrecognizedOptionException: bootstrap-server is not a re
https://blog.csdn.net/weixin_45865428/article/details/121264496
Maynor
2023-10-17
4950
基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(一)案例需求
Maynor
2023-10-17
2210
学习笔记:StructuredStreaming入门(十二)
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-6wtQxLP6-1626354186973)(/img/image-20210506154426999.png)]
Maynor
2022-11-30
1.7K0
实时即未来,车联网项目之原始终端数据实时ETL【二】
文章目录 Flink 将报文解析后的数据推送到 kafka 中 实时ETL开发 原始数据的实时ETL设置 开发的流程 开发的类名 —— KafkaSourceDataTask 设置 checkpoint 中 statebackend 数据积压和反压机制 抽象 BaseTask 用于处理数据流和读取kafka数据 Flink 将报文解析后的数据推送到 kafka 中 步骤 开启 kafka 集群 # 三台节点都要开启 kafka [root@node01 kafka]# bin/kafka-server-s
Maynor
2022-09-27
5120
Flink史上最简单双十一实时分析案例
上期带大家用StructredStreaming做了双十一实时报表分析,没看过的朋友可以看看,
Maynor
2022-05-08
6030
物流项目中Oracle 数据库的使用及OGG是如何同步
使用OGG中间件(框架)实时采集Oracle数据库表的数据,同步到Kafka分布式消息队列中。 OGG 是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志:online log或归档日志:archive log获得数据的增删改变化(数据量只有日志的四分之一左右);
Maynor
2022-05-08
6870
今日指数项目之FlinkCEP入门案例
需求: 有一个业务系统,用户要使用该业务系统必须要先登陆 过滤出来在2秒内连续登陆失败的用户
Maynor
2022-05-08
2650
物流项目中Oracle 数据库的使用及OGG是如何同步
使用OGG中间件(框架)实时采集Oracle数据库表的数据,同步到Kafka分布式消息队列中。 OGG 是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志:online log或归档日志:archive log获得数据的增删改变化(数据量只有日志的四分之一左右);
Maynor
2022-05-08
6000
今日指数项目之FlinkCEP入门案例
需求: 有一个业务系统,用户要使用该业务系统必须要先登陆 过滤出来在2秒内连续登陆失败的用户
Maynor
2022-05-07
2680
今日指数项目之板块任务开发【十二】
板块描述:板块分为概念板块、行业板块和地域板块,行情业务是按照行业划分的板块,比如:电子、房地产、银行等。每一个板块下又细分为很多的个股,所以板块实时行情能够反映行业下的个股行情概况。本节板块开发内容是针对沪市个股数据开发的沪市板块个股行情数据。 板块行情业务处理内容包含: 1.秒级行情(5s) 2.分时行情(60s) 3.分时行情备份 4.板块K线(日、周、月) 这里我们先处理前3个业务点。
Maynor
2022-05-01
3080
快速入门RabbitMQ
两种方式各有优劣,打电话可以立即得到响应,但是你却不能跟多个人同时通话。发送邮件可以同时与多个人收发邮件,但是往往响应会有延迟。
Maynor
2022-03-30
3270
❤️大数据开发必备:推荐7款大数据开发神器工作效率提升1000%【推荐收藏】
manor学习大数据开发满打满算也有一年了,其中也发现不少好用的大数据开发提升效率的软件,推荐给刚入门/入行的你:
Maynor
2022-02-25
9430
学了1年大数据,来测测你大数据技术掌握程度?大数据综合复习之面试题15问(思维导图+问答库)
时隔一年,终于把主流的大数据组件全部学完了,学成之时,便是出师之日, 那为师便来考考你学的如何:
Maynor
2021-12-30
3350
对于一般大数据物流项目的面试题(问题+答案)
1、数据采集如何完成 OGG 不要涉及,Oracle DBA完成 Canal数据采集,一定知道高可用HA集群模式 2、数据量大小 Kafka topic 数据存储生命周期(多久) 7天
Maynor
2021-12-07
3050
大数据开发岗常见面试复习30天冲刺 - 日积月累,每日五题【Day05】——Kafka3
•step1:构建消费者连接对象:KafkaConsumer –需要配置对象:管理配置,例如连接地址:Properties •step2:消费者需要订阅Topic –KafkaConsumer:subscribe(List) •step3:消费数据 –KafkaConsumer:poll:实现拉取消费数据 –ConsumerRecords:拉取到的所有数据集合 –ConsumerRecord:消费到的每一条数据 •topic:获取数据中的Topic •partition:获取数据中的分区编号 •offset:获取数据的offset •key:获取数据中的Key •value:获取数据中的Value
Maynor
2021-12-07
2190
点击加载更多
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档