腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
大数据成神之路
专注大数据领域的一切技术~
专栏作者
举报
636
文章
1286836
阅读量
316
订阅数
订阅专栏
申请加入专栏
全部文章（636）
大数据（273）
sql（163）
数据库（129）
kafka（105）
spark（100）
flink（91）
编程算法（83）
apache（71）
存储（60）
hive（59）
java（52）
node.js（52）
api（52）
数据（44）
hadoop（41）
文件存储（39）
缓存（39）
hbase（36）
云数据库 SQL Server（35）
TDSQL MySQL 版（33）
数据处理（31）
分布式（29）
数据结构（28）
scala（25）
云数据库 Redis（24）
mapreduce（24）
数据分析（20）
javascript（19）
linux（19）
yarn（18）
https（18）
python（17）
网络安全（17）
unix（16）
jvm（16）
windows（16）
zookeeper（14）
开发（14）
打包（13）
消息队列 CMQ 版（13）
批量计算（12）
http（12）
bash（11）
数据湖（11）
数据迁移（10）
云计算（10）
面试（10）
xml（9）
企业（9）
数据安全（9）
Elasticsearch Service（9）
框架（9）
bash 指令（8）
腾讯云测试服务（8）
面向对象编程（8）
优化（8）
jar（7）
运维（7）
processing（7）
架构（7）
机器学习（6）
json（6）
日志数据（6）
开源（6）
hashmap（6）
tcp/ip（6）
rabbitmq（6）
数据可视化（6）
微服务（6）
html（5）
神经网络（5）
深度学习（5）
压力测试（5）
jdbc（5）
rpc（5）
nosql（4）
spring（4）
网站（4）
express（4）
sql server（4）
nest（4）
任务调度（4）
es（4）
数据集成（4）
工具（4）
配置（4）
数据管理（4）
系统（4）
性能（4）
oracle（3）
github（3）
maven（3）
人工智能（3）
vr 视频解决方案（3）
electron（3）
容器（3）
shell（3）
socket编程（3）
kerberos（3）
性能测试（3）
实时数仓（3）
测试（3）
工作（3）
行业（3）
集群（3）
内存（3）
设计（3）
实践（3）
索引（3）
原理（3）
对象存储（2）
官方文档（2）
数据挖掘（2）
css（2）
ajax（2）
android（2）
ide（2）
lucene/solr（2）
nginx（2）
容器镜像服务（2）
海外加速（2）
mongodb（2）
rollup.js（2）
kubernetes（2）
uml（2）
架构设计（2）
5g（2）
迁移（2）
clickhouse（2）
报表（2）
产品（2）
磁盘（2）
函数（2）
后端（2）
监控（2）
解决方案（2）
模型（2）
排序（2）
事件（2）
异常（2）
最佳实践（2）
负载均衡（1）
自动驾驶（1）
ios（1）
iphone（1）
php（1）
go（1）
lua（1）
erlang（1）
regex（1）
react（1）
typescript（1）
postgresql（1）
flask（1）
sqlalchemy（1）
git（1）
搜索引擎（1）
负载均衡缓存（1）
专用宿主机（1）
云数据迁移（1）
日志服务（1）
腾讯云可观测平台（1）
命令行工具（1）
云数据库 MongoDB（1）
es 2（1）
图像处理（1）
数据备份（1）
电商（1）
出行（1）
serverless（1）
游戏（1）
无人驾驶（1）
jdk（1）
推荐系统（1）
markdown（1）
zabbix（1）
微信（1）
机器人（1）
物联网（1）
系统架构（1）
腾讯云开发者社区（1）
安全治理（1）
raft（1）
实时监控（1）
数据库管理（1）
流计算 Oceanus（1）
大数据存储（1）
汽车（1）
腾讯云（1）
bi（1）
bigdata（1）
block（1）
class（1）
code（1）
combine（1）
configuration（1）
csv（1）
data（1）
dp（1）
export（1）
fifo（1）
hash（1）
import（1）
ip（1）
key（1）
memory（1）
mysql（1）
netty（1）
populate（1）
properties（1）
pulsar（1）
queue（1）
rank（1）
root（1）
scheduler（1）
select（1）
state（1）
sum（1）
table（1）
task（1）
time（1）
vi（1）
window（1）
报表工具（1）
登录（1）
队列（1）
服务（1）
高性能（1）
管理（1）
规范化（1）
基础（1）
架构师（1）
接口（1）
连接（1）
日志（1）
入门（1）
实时计算（1）
数据采集（1）
数据同步（1）
算法（1）
微信公众号（1）
线程（1）
效率（1）
协议（1）
研发（1）
语法（1）
中间件（1）
字符串（1）
搜索文章
搜索
搜索
关闭
2024年大数据方向的发展趋势
大数据
行业
开发
实时计算
数据
最近事情较多，因为临近年底，在做总结和后续规划，在这一年中，数据开发方向仍然在快速发展，新概念和新技术层出不穷。
王知无-import_bigdata
2024-02-01
455
0
211硕士Java实习全挂！不想卷后端了，大数据方向想快速入门找实习，该怎么做？
java
大数据
后端
开发
入门
今天给大家分享的是一个球友的提问，如果你也正好是应届生再找实习，那么也可以照着这个方向去学习。
王知无-import_bigdata
2023-11-14
253
0
大数据面试实际场景类问题怎么准备，实在遭不住了！
大数据
解决方案
框架
面试
数据
前几天我发了一个面试总结的文章，实际场景类问题在大数据领域面试的占比越来越多。大家面试开始「务实」，在实际场景问题中，顺便增加对框架原理性内容的考察，这绝对是大数据领域内的一个进步，但是同时对工作经验较浅，平时缺少思考的同学们提出了巨大挑战！
王知无-import_bigdata
2023-08-08
246
0
做项目去实习到底做的什么？
大数据
架构
开发
面试
数据
实习经历是校招同学几乎仅有的机会接触企业真实场景的方式，而且一般的实习3-6月，短的甚至只有2个月。
王知无-import_bigdata
2023-08-08
169
0
阿里大数据之路：数据技术篇大总结
大数据
日志
事件
数据
数据同步
一、日志采集 1.1 浏览器的页面日志采集 1.2 无线客户端的日志采集 1.3 日志采集的挑战案例
王知无-import_bigdata
2023-04-07
807
0
阿里大数据之路：数据管理篇大总结
大数据
监控
数据
数据管理
系统
元数据打通了源数据、数据仓库、数据应用，记录了数据从产生到消费的全过程。元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及 ETL 的任务运行状态。
王知无-import_bigdata
2023-04-07
1.3K
0
Flink1.16新特性图文解析
flink
大数据
hive
存储
迁移
sql gateway这个功能超级强大，支持多租户，协议插件化，兼容hive生态，以后flink流批作业都可以通过sql gateway提交到集群了。
王知无-import_bigdata
2023-02-01
837
0
Apache Hudi 使用文件聚类功能 (Clustering) 解决小文件过多的问题
windows
flink
大数据
hive
sql
本文详细阐述了在 “批处理后，流处理之前” 进行文件 Clustering 操作的方法。该方法可以将众多小文件合并成数量极少的大文件，从而防止过多小文件的产生。
王知无-import_bigdata
2022-11-11
1K
0
看完这篇， FlinkSQL 统统能整明白了
flink
大数据
sql
神经网络
深度学习
的确，这些年，越来越多开发，转行做大数据，又或通过大数据打造自己的竞争力（比如很多 Java 开发都会学学大数据），核心原因有三点：
王知无-import_bigdata
2022-11-11
723
0
Hive SQL 大厂必考常用窗口函数及相关面试题
大数据
二、窗口函数的基本用法 1.基本语法 2.设置窗口的方法 1）window_name 2）partition by 子句 3) order by子句 4）rows 指定窗口大小 3.开窗函数中加order by 和 不加 order by的区别
王知无-import_bigdata
2022-11-11
3K
0
阿里大数据之路：数据模型篇大总结
数据库
大数据
数据分析
sql
架构设计
核心：从业务架构设计（如何快速上手工作）到模型设计，从数据研发到数据服务，做到数据可管理、可追溯、可规避重复建设。
王知无-import_bigdata
2022-11-11
1.3K
0
全球第一！新一代云数仓 SelectDB 登顶 ClickBench
腾讯云测试服务
apache
sql
数据库
大数据
概述：分析型数据库性能排行榜 ClickBench 最近迎来了一匹黑马，那就是成立不满一年，成绩却斐然的新一代云数仓 SelectDB。其在业界最为通用的 c6a.4xlarge, 500gb gp2 机型下位居榜首，超越了此前霸占榜首的 ClickHouse，多项指标排行前列。这无疑在数据库领域掀起了大风浪，人们纷纷搜索 SelectDB 这个新名字。今天，就由小编带领大家来一探究竟吧！
王知无-import_bigdata
2022-11-11
675
0
「Hudi系列」Hudi查询&写入&常见问题汇总
hive
大数据
文件存储
数据库
spark
2. 「Hudi系列」Apache Hudi入门指南 | SparkSQL+Hive+Presto集成
王知无-import_bigdata
2022-06-05
5.5K
0
Apache Hudi 0.11 版本重磅发布，新特性速览!
spark
打包
flink
大数据
hive
在 0.11.0 中，默认为 Spark writer 启用具有同步更新的元数据表和基于元数据表的file listing，以提高在大型 Hudi 表上的分区和文件listing的性能。在reader方面，用户需要将其设置为 true 以从中受益。元数据表和相关文件listing 仍然可以通过设置hoodie.metadata.enable=false来关闭此功能。因此，使用异步表服务部署 Hudi 的用户需要配置锁服务。如果此功能与您无关，您可以通过额外设置这个配置 hoodie.metadata.enable=false 像以前一样使用 Hudi。
王知无-import_bigdata
2022-06-05
3.3K
0
Flink SQL窗口表值函数（Window TVF）聚合实现原理浅析
sql
flink
大数据
表值函数(table-valued function, TVF)，顾名思义就是指返回值是一张表的函数，在Oracle、SQL Server等数据库中屡见不鲜。
王知无-import_bigdata
2022-06-05
1.4K
0
Presto在字节跳动的内部实践与优化
hive
数据分析
日志数据
大数据
sql
在字节跳动内部，Presto 主要支撑了 Ad-hoc 查询、BI 可视化分析、近实时查询分析等场景，日查询量接近 100 万条。
王知无-import_bigdata
2022-06-05
1.4K
0
Flink 细粒度资源管理新特性解读
flink
大数据
windows
bash
ApacheFlink努力为所有现成的应用程序自动导出合理的默认资源需求。对于希望根据特定场景的知识微调资源消耗的用户，Flink提供细粒度资源管理。
王知无-import_bigdata
2022-06-05
838
0
Flink新特性之非对齐检查点(unaligned checkpoint)详细解析
flink
大数据
编程算法
分布式
作为 Flink 最基础也是最关键的容错机制，Checkpoint 快照机制很好地保证了 Flink 应用从异常状态恢复后的数据准确性。
王知无-import_bigdata
2022-06-05
4.5K
0
美团数据指标体系搭建实战
数据可视化
大数据
在美团商家版中，美团为商家搭建的数据指标体系，很好的指导了商家的经营发展方向以及提供经营状况概览。
王知无-import_bigdata
2022-06-05
1.4K
0
基于Flink1.14 + Iceberg0.13构建实时数据湖实战
flink
大数据
hive
数据库
sql
Iceberg默认支持Hadoop Catalog。如果需要使用Hive Catalog，需要将flink-sql-connector-hive-3.1.2_2.12-1.14.3.jar放到Flink集群所有服务器的lib目录下，然后重启Flink
王知无-import_bigdata
2022-06-05
1.5K
0
点击加载更多
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战，赢鹅厂证书、公仔好礼！
立即学习
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档