腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

IT技术精选文摘

专栏作者

542

文章

766306

阅读量

136

订阅数

MongoDB和数据流：使用MongoDB作为Kafka消费者

mongodb 数据库 apache

数据流在当今的数据环境中，没有一个系统可以提供所有必需的观点来提供真正的洞察力。从数据中获取完整含义需要混合来自多个来源的大量信息。与此同时，我们不耐烦地立即获得答案;如果洞察时间超过10毫秒，那么该值就会丢失 - 高频交易，欺诈检测和推荐引擎等应用程序不能等待。这通常意味着在数据进入记录数据库之前分析数据的流入。为数据丢失增加零容忍，挑战变得更加艰巨。 Kafka和数据流专注于从多个消防软管摄取大量数据，然后将其路由到需要它的系统 - 过滤，汇总和分析途中。本文介绍了Apache Kafka，

2018-04-18

3.5K0

深入浅出MongoDB复制

个人介绍赵景波，3年专职DBA经验，2017 DTCC 讲师，目前主要负责新浪NoSQL服务的运维及研发工作。热衷于开源DB内部原理探究。综述笔者最近在生产环境中遇到许多复制相关问题，查阅网上资料发现官方文档虽然系统但是不够有深度，网上部分深度文章则直接以源码展示，不利于大家了解。所以本文则是结合前两者最终给读者以简单的方式展现MongoDB复制的整个架构。本文分为以下5个步骤： MongoDB复制简介 MongoDB添加从库 MongoDB复制流程详解 MongoDB高可用 MongoDB复制总结

2018-04-08

1.2K0

带着问题学习分布式系统之数据分片

mongodb 分布式存储数据处理

分布式系统（尤其是分布式存储系统）需要解决的两个最主要的问题，即数据分片和数据冗余，下面这个图片形象生动的解释了其概念和区别：其中数据即A、B属于数据分片，原始数据被拆分成两个正交子集分布在两个节点

2018-01-30

1.7K0

带着问题学习分布式系统之中心化复制集

mongodb 分布式数据库

假若我说有三个节点（计算机）要维护同一分数据，如果你对分布式系统并不了解，那么你可能会有什么问题呢，我想可能有两个最基本的问题：　　为什么同一份数据要保存多分？　　这些节点数据要一致吧，否则同时从多个节点读的时候数据不一样？　　第一个问题，为什么要同一分数据要保存多分，是因为分布式系统中的节点都有一定的概率发生故障，虽然单个节点的故障概率比较小，但当系统规模不断上升，故障的概率就变大了许多。节点的故障会对系统的可用性、可靠性产生影响。当数据在系统中只有一份存储时，如果发生断电、主机crash、网络故

2018-01-30

7810

MongoDB的优缺点及设计拙劣之处

数据库 mongodb nosql

对于使用MongoDB的新人来说，它是一个NoSQL的文档数据库。文档包括一组键值对并且是MongoDB中的基本数据单元。它绝对是现在最受欢迎的nosql数据库之一。它广泛接受并适合各种用途（尽管不是全部）。在这篇文章中，我想简要介绍一下我过去几年因使用MongoDB的经验而总结的它好的地方、不好之处及拙劣的地方。好的地方以下是关于MongoDB的一些好的东西。灵活的数据模型在今天动态的用例和每一个变化中的应用程序中，拥有灵活的数据模型是一个福音。灵活的数据模型意味着没有预定义的模式，并且文

2018-01-30

6.2K0

MongoDB设计模式

数据库 mongodb nosql

MongoDB是一个NoSQL文档数据库。它是大多数用例的理想选择，然而当它不适用你的用例时，您仍然可以通过使用以下设计模式来克服它的一些限制。 1.查询命令隔离模式对副本集合中的不同节点隔离不同

2018-01-30

9720

日活跃数千万,10亿级APP大数据统计分析平台的架构演进

数据库 mongodb 系统架构大数据

美图拥有十亿级用户，每天有数千万用户在使用美图的各个产品，从而积累了大量的用户数据。随着 APP 的不断迭代与用户的快速膨胀，产品、运营、市场等越来越依赖于数据来优化产品功能、跟踪运营效果，分析用户

2018-01-30

2.3K0

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态