首页
学习
活动
专区
工具
TVP
发布

暴走大数据

专栏作者
298
文章
539391
阅读量
99
订阅数
数据质量监控框架及解决方案总结
随着业务发展和数据量的增加,大数据应用开发已成为部门应用开发常用的开发方式,由于部门业务特点的关系,spark和hive应用开发在部门内部较为常见。当处理的数据量达到一定量级和系统的复杂度上升时,数据的唯一性、完整性、一致性等等校验就开始受到关注,而通常做法是根据业务特点,额外开发job如报表或者检查任务,这样会比较费时费力。
大数据真好玩
2022-04-01
2.8K0
Grafana Labs发布企业级日志记录解决方案Enterprise Logs
Grafana Enterprise Logs是建立在开源专案Grafana Loki之上的日志解决方案,可提供权限管理等企业需要的日志操作功能。
大数据真好玩
2021-04-21
6460
Cassandra & Hbase争锋 | NoSQL数据库的另一个王者
谷歌在2006年的一份研究报告中首次对Bigtable进行了阐述,如果你熟悉Bigtable这个名词,那么:行先是以一种非常独特的方式被索引,随后Bigtable利用行键对数据进行分割,将它们分布到集群中。这句话你应该不陌生。
大数据真好玩
2019-09-10
2.3K0
Google理论背书,百度实践加持,Apache Doris为OLAP而生
大数据离不开数据存储,数据库作为大数据业务核心,在整个基础软件栈中是非常重要的一环。正因为如此,业界追求更优的大数据存储引擎和查询引擎的脚步从未停止。目前业界已有的大数据存储、查询引擎有 Druid、Kylin、Impala 等开源数据库,还有如 EMC Greenplum、HP Vertica、AWS Redshift 等商用数据库。百度开源的 Palo 项目又是一个什么样的数据库引擎呢?它与现有的这些数据库引擎相比有何不同之处?它的性能表现如何?
大数据真好玩
2019-09-10
1K0
聊聊分布式系统架构
一、分布式系统的经典基础理论 1、分布式系统设计的两大思路:中心化和去中心化 中心化:中心化的设计思想在自然界和人类生活中是如此的普遍和自然,它的设计思想也很简单,分布式集群中的节点按照角色分工,可以分为两种角色--“领导”和“干活的”,中心化的一个思路就是“领导”通常分发任务并监督“干活的”,谁空闲了就给它安排任务,谁病倒了就一脚踢出去,然后把它的任务分给其他人;中心化的另一个思路是领导只负责生成任务而不再指派任务,由每个“干活的”自发去领任务。 去中心化:全球IP互联网就是一个典型的去中心化的分布式控
大数据真好玩
2019-09-04
1.2K0
没有更多了
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档