New in MongoDB 3.6. What’s New in MongoDB 3.6. Part 1 – Speed to Develo
监控数据库发生的变化是MongoDB同步数据服务的关键。我们不需要去定期轮训查询集合中的更改文档，我们就可以可以更轻松地过滤Change Streams 变化流，并立即采取处理错误。这是一种Reactive反应式编程风格，可以非常强大。如今，获取这些变更信息流非常简单。
CDC全称是Change Data Capture，我们通常将能够捕获数据变更的技术称为CDC。目前通常描述的CDC技术主要面向数据库的变更，是一种用于捕获数据库中数据的变更技术。CDC的技术应用场景有数据同步、数据分发、数据集成等。
原标题：Spring认证中国教育管理中心-Spring Data MongoDB教程九(内容来源：Spring中国教育管理中心）
本文是第10篇，主要讲述Change Streams构建实时同步数据流的实战经验，非常值得一看。
MongoDB中的副本集是一组维护相同数据集的mongod进程。副本集提供冗余和高可用性，是所有生产部署的基础。本节介绍MongoDB中的复制以及副本集的组件和体系结构。该部分还提供了与副本集相关的常见任务的教程。
MongoDB 4.0增加了对多文档ACID事务的支持。但等等......这是否意味着MongoDB直到现在才支持事务？不，实际上MongoDB已经提供了对单个文档事务的支持。 MongoDB 4.0跨多文档、多语句、多集合和多数据库扩展了事务保证。 如果没有任何形式的事务数据完整性保证，数据库还有什么用呢？
利用 CDC，您可以从现有的应用程序和服务中获取最新信息，创建新的事件流或者丰富其他事件流。CDC赋予您实时访问后端数据库的能力。
自2019年12月发布1.0版本以来，社区一直在积极构建一个全面的开源低延迟变更数据捕获(CDC)平台。在过去的三年里，我们扩展了Debezium的产品组合，包括用于Oracle的稳定连接器、社区主导的Vitess连接器、增量快照的引入、多分区支持等等。在社区活跃贡献者和提交者的帮助下，Debezium成为CDC领域事实上的领导者，部署在多个行业的许多组织的生产环境中，使用数百个连接器将数据更改从数千个数据库平台输出到实时流。
开源项目是众多组织与个人分享的组件或项目，作者付出的心血我们是无法体会的，所以首先大家要心存感激、尊重。请严格遵守每个项目的开源协议后再使用。尊重知识产权，共建和谐开源社区。
原标题：Spring认证中国教育管理中心-Spring Data MongoDB教程八(内容来源：Spring中国教育管理中心）
年MongoDB试图扩大其用户群，包括传统的数据库专业人员，但现在公司转变方向，为其NoSQL Atlas数据库服务（DBaaS）添加功能，将其打造成更完整的数据平台，以支持开发者构建生成式人工智能应用程序。
3.6版本起，默认使用localhost(127.0.0.1),多个ip使用逗号分隔：localhost,198.51.100.1 除去部分2.6 RPM安装包是本地外，其余版本默认是All interfaces.
本文是第12篇，主要讲述MongoDB电子商务产品目录模型设计实战操作，非常值得一看。
随着美国 “Black Lives Matter”运动愈演愈烈，继 IBM 、亚马逊、微软等科技公司之后，GitHub 方面也表示，该公司正在努力以“main”之类的中性术语替换其服务上的“master”一词，以避免不必要的奴隶制联想。现在，几个开源项目正在将其默认 Git 存储库的名称从“master”更改为 main、default、primary、root 或其他名称等替代名称。GitHub 对这一运动的支持有效地确保了这个术语将在数百万个项目中被删除，并有效地使本月开始的清理软件术语合法化。
最近一段时间群里经常有人开始问MOGNODB 的问题，我觉得后面会开始在大量写一些MONGODB 的东西，原来从mongodb 3.2开始弄想起来也有6-7年时间了，相比传统的DBA 对于MONGODB 应该是非常了解和熟悉的，但是我错了，截止到现在，传统的DBA 对于MONGODB 一部分人还是一头雾水，时代不同了，不会MOGNODB 的DBA，如同你吃饭，只有刀叉，没有筷子，筷子更简单，更多变，适应的场景和变化更多，所以这是一个必备的技能，REDIS + MONGODB + MYSQL OR REDIS + POSTGRESQL + MONGODB 这属于DBA铁三角，不信你可以看看招聘信息。
近期正在探索前端、后端、系统端各类常用组件与工具，对其一些常见的组件进行再次整理一下，形成标准化组件专题，后续该专题将包含各类语言中的一些常用组件。欢迎大家进行持续关注。
之前的文章“ 时间序列数据和MongoDB：第一部分 - 简介 ”中，介绍了时间序列数据的概念，然后介绍了一些常见问题，可用于帮助收集时间序列应用程序。这些问题的答案有助于指导支持大批量生产应用程序部署所需的架构和 MongoDB 数据库配置。现在，我们将重点介绍两种不同的模式设计如何影响读取，写入，更新和删除操作下的内存和磁盘利用率。
微服务是一个软件架构模式，对微服务的讨论大多集中在容器或其他技术是否能很好的实施微服务，而本文将从以下几个角度来和大家分享在微服务架构下进行数据设计需要关注的地方，旨在帮助大家在构建微服务架构时，提供一个从数据方面的视角：
微服务是一个软件架构模式，对微服务的讨论大多集中在容器或其他技术是否能很好的实施微服务，而本文将从以下几个角度来和大家分享在微服务架构下进行数据设计需要关注的地方，旨在帮助大家在构建微服务架构时，提供一个从数据方面的视角:
作者：hazenweng，腾讯 QQ 音乐后台开发工程师 MongoDB 作为一款优秀的基于分布式文件存储的 NoSQL 数据库，在业界有着广泛的应用。下文对 MongoDB 的一些基础概念进行简单介绍。 1 MongoDB 特点 面向集合存储：MongoDB 是面向集合的，数据以 collection 分组存储。每个 collection 在数据库中都有唯一的名称。 模式自由：集合的概念类似 MySQL 里的表，但它不需要定义任何模式。 结构松散：对于存储在数据库中的文档，不需要设置相同的字段，并且
1.一些数据库的基本概念与sql的不太一样，数据库的表对应db的集合，行对应文档，字段对应域等等。db多了一个正则表达式的数据类型 2.字符串采用UTF-8编码，使用二进制数据存储，可以存储视频，图像，音频 3.mongodb创建账户时需要声明账户对于指定或所有数据库所拥有的读写权限，网上没有找到如何更改账户权限的方法，只有创建时设置的方法 4.是一个介于关系和非关系之间的数据库，以键值对存储数据。但也有聚合，索引，排序的功能。 5.查询语句的方式与之前的sql不一样，但不支持子查询，解决方案是先读出数据然后再进行计算 6.可以把不同结构文件存储在同一个数据库中 7.分布式文件系统
目前公司离线数仓现状，数仓部门每日凌晨后处理昨天的线上业务数据，因此第二天业务人员才看到的报表，数据是T-1的，因此数据是具有滞后性，尤其在互联网金融公司，有业务人员需要做信贷的风险管控，及时的调整一些风控规则和策略，但是不能立刻看到效果，而是需要等到第二天才可以看到调整的效果，因此才有了实时数仓的需求。线上业务数据基本存储在Mysql和MongoDB数据库中，因此实时数仓会基于这两个工作流实现，本文重点讲述基于MongoDB实现实时数仓的架构。
【编者的话】微服务是一个软件架构模式，对微服务的讨论大多集中在容器或其他技术是否能很好的实施微服务，而本文将从以下几个角度来和大家分享在微服务架构下进行数据设计需要关注的地方，旨在帮助大家在构建微服务架构时，提供一个从数据方面的视角： 微服务定义 微服务的优势及架构特点 微服务架构下的数据设计 选择一个合适的数据库 什么是微服务？ 按照 Martin Fowler 的定义，微服务是一个软件架构模式，通过开发一系列的小型服务的方式来实现一个应用。每一个这样的小服务通常都是运行在自己的进程里面，并且通过轻量级的
FastGPT是一个基于LLM大语言模型的知识库问答系统，提供开箱即用的数据处理、模型调用等能力。同时可以通过Flow可视化进行工作流编排，从而实现复杂的问答场景！该项目为群有提供，且他自己部署了一个，用着我感觉还不错，而且官方也有体验版本可以使用。感兴趣可以去看看：https://fastgpt.run/
Debezium是一个分布式平台，它将您现有的数据库转换为事件流，因此应用程序可以看到数据库中的每一个行级更改并立即做出响应。Debezium构建在Apache Kafka之上，并提供Kafka连接兼容的连接器来监视特定的数据库管理系统。Debezium在Kafka日志中记录数据更改的历史，您的应用程序将从这里使用它们。这使您的应用程序能够轻松、正确、完整地使用所有事件。即使您的应用程序停止(或崩溃)，在重新启动时，它将开始消耗它停止的事件，因此它不会错过任何东西。
分层模式可能是最著名的软件体系结构模式之一。许多开发人员使用它，却不知道它的名称。这样做的目的是将你的代码划分为“层”，其中每个层都有一定的责任，并向更高层提供服务。
Transporter是一种用于在不同数据存储之间移动数据的开源工具。开发人员经常为诸如跨数据库移动数据，将数据从文件移动到数据库或反之亦然等任务编写一次性脚本，但使用像Transporter这样的工具有几个优点。
StreamNative 郑重宣布开源 Function Mesh。Function Mesh 是为事件流应用程序构建的无服务框架，为在 Kubernetes 上运行的复杂事件流任务管理 Pulsar Functions 和 Pulsar I/O connector，增强应用程序的事件流功能。
MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。
Zabbix Agent 2可以让我们通过最少的配置来监控一整套新系统。不需要再编写自定义监控脚本、部署额外的包或配置ODBC了。Zabbix Agent 2的一个很好的用例是监控最流行的NoSQL数据库后端之一的MongoDB。本文分享该用例的详细描述和操作指南。
Elasticsearch有助于对数据进行全文搜索，而MongoDB则擅长存储数据。使用MongoDB存储数据和使用Elasticsearch进行搜索是一种常见的体系结构。
Chang Stream(变更记录流) 是指collection(数据库集合)的变更事件流，应用程序通过db.collection.watch()这样的命令可以获得被监听对象的实时变更。BigQuery是Google推出的一项Web服务，该服务让开发者可以使用Google的架构来运行SQL语句对超级大的数据库进行操作。
NoSQL 数据库是非关系数据库，不使用结构化查询语言 (SQL) 进行数据操作。相反，他们使用其他数据模型进行访问和数据存储。SQL 数据库通常用于处理结构化数据，但它们可能不是处理非结构化或半结构化数据的最佳选择。
在MySQL8.0引入了InnoDB ReplicaSet，它提供了我们熟悉的复制特性，如果有mongodb副本集的概念，理解InnoDB ReplicaSet会比较容易。
(注：最近我发现MONGODB 的文字，大家好像不大感兴趣，不知道是大家的公司不使用MONGBDB 还是由于MONGODB 太稳定，所以就忽略了，其实MONGODB 可以聊的话题和使用的范围很大，有的公司可能主力数据库就是MONGODB 所以MONGODB 确实不是可有可无的)
当前实时数据同步的应用场景较多，实现方式主要有两种，一是数据库厂家本身提供了实时数据捕获工具，如 Oracle 的 OGG 等；另外一种是实时解析数据库的事务日志，获取到实时变化的数据后进行同步，如 Flink CDC 等。
环境说明： 系统：ubuntu 20.04 MongoDB：V4.4.6
MongoDB中的一些最新特性（如多文档ACID事务）需要对底层的WiredTiger存储引擎中进行基础性的增强。
1 月 20 日，Elastic 公司 CEO Shay Banon 在公司官网发文表示，他们决定将 Elasticsearch 和 Kibana 的开源协议由 Apache 2.0 变更为 SSPL 与 Elastic License，这是因为被 AWS 的所作所为逼于无奈作出的选择。
在内部系统（比如 CRM、ERP、数据看板等）需要定制化开发的情况下，大多数团队会使用基于 Web 框架从头开始开发，如 React、Vue，然而这些框架上手存在一定困难，打包、部署、库的选择等方面对代码新手来说也可能具有挑战性，更不用说还得从头开始设计访问控制 (RBAC) 和数据的管理。本篇文章将主要讨论 Superblocks，这是一款最新的低代码开发工具，它正在迅速改变内部系统开发的格局。
我们在平时的工作中经常碰到这样的情况：更改文件夹名称时总提示有文件或程序在运行，而实际上我们并没有打开文件夹里的文件或程序。这时其实是有后台程序在运行，我们需要将其找出来关掉就可以了。下面将简单介绍如何操作。
最近在学习Kong网关，因此根据老习惯，我会将我的学习过程记录下来，一来体系化整理，二来作为笔记供将来翻看。由于我司会直接使用Kong企业版，学习过程中我会使用Kong开源版。
翻译自 Data Warehouses and Customer Data Platforms: Better Together 。
单节点的 MongoDB 在数据的安全和冗余方面是比较低的，在生产环境中，我们为 MongoDB 配置副本集，这样可以提高数据的高可用性和安全性。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
