热备：备份设备与主设备一起工作运转，当主设备故障时，备份设备能立即取代主设备的工作
Elasticsearch 的数据备份是通过快照机制实现的。为了完成集群的快照，需要依赖一个共享存储系统，即所有节点需要挂载到共享存储的同一个目录，并且每个节点对此目录需有读写权限，最初我们使用 NAS（即 NFS）来实现备份，这个方案也已经稳定运行多年。
随着云计算的普及和数据分析需求的扩大，数据湖+数据仓库的湖仓一体分析能力成为下一代数据分析系统的核心能力。相对于数据仓库，数据湖在成本、灵活性、多源数据分析等多方面，都有着非常明显的优势。IDC发布的十项2021年中国云计算市场趋势预测中，有三项和数据湖分析有关。可以预见，跨系统集成能力、数据控制能力和更加全面的数据驱动能力，将会是未来数据分析系统重要的竞争领域。
DLA一键建仓上线之后陆续收到很多反馈，其中一个就是RDS的数据能不能投递到AnalyticDB for MySQL里面去，以达到极致的分析速度，最近我们实现了这一特性，今天给大家介绍一下。
Robinhood 团队成员高级工程师 Balaji Varadarajan 和技术主管 Pritam Dey 描述了他们公司的数据Lakehouse的实现，Robinhood 的数据团队如何基于 Apache Hudi 和相关 OSS 服务来处理数 PB 规模的指数级增长。
FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，比如MySQL，HDFS等，也可以采集实时变化的数据，比如MySQL binlog，Kafka等，是全域、异构、批流一体的数据同步引擎，大家如果有兴趣，欢迎来github社区找我们玩~
[每周 Postgres 世界动态] 本文全网唯一源地址 产品新闻 信息来源：网址基础上整理。 PostgreSQL 新版本发布 14.2 13.6 12.10 11.15 10.20 PostGIS 新版本发布3.2.1. PostGIS 是一个面向 PostgreSQL 的空间数据库扩展。 博客动态 信息来源：网址 depesz - 使用 INT4/INT 替换 INT8/BIGINT 将为你节省多少空间？ EDB - 服务端 LZ4 备份压缩 EDB - 先慢后快[FOSDEM 2022] Yugab
云场景攻防：公有云，私有云，混合云，虚拟化集群，云桌面等 云厂商攻防：阿里云，腾讯云，华为云，亚马云，谷歌云，微软云等 云服务攻防：对象存储，云数据库，弹性计算服务器，VPC&RAM等 云原生攻防：Docker，Kubernetes(k8s)，容器逃逸，CI/CD等
最近数据库行业还是发生一些事情，例如：NebulaGraph获得获得数千万美元的A轮融资，Oracle将在AWS支持MySQL HeatWave服务，VLDB 2022在悉尼举行，来自中国多篇成果被接收，等等，查看原文
内容来源：2017 年 12 月 21 日，驻云科技资深架构师翟永东在“云时代企业架构的搭建”进行《云上架构如何实现高性能和高可用》演讲分享。IT 大咖说（微信id：itdakashuo）作为独家视频合作方，经主办方和讲者审阅授权发布。 阅读字数：2851 | 8分钟阅读 摘要 云上架构需要关注多方面的因素，本次主要讲的是高可用和高性能，从这两方面展开深度的解析如何搭建完善的云上架构。 嘉宾演讲视频及PPT回顾：http://suo.im/4sKQd8 云上架构概述 云上搭建架构不单单需要考虑到性能和可用性
我们知道这种监控平台的数据特征一般都是时间序列数据（简称 时序数据），那么相应的这些数据最好是存储在时序数据库中，目前主流的时序数据库有InfluxDB、OpenTSDB、Graphite、TimescaleDB等。其中，InfluxDB是目前监控领域使用较多的时序数据库，并且基于InfluxDB有一套完善的开源解决方案 —— TICK Stack，如下图所示：
日志服务最近在原有 30+ 种数据采集渠道 基础上，新增 MySQL Binlog、MySQL select 等数据库方案，仍然主打快捷、实时、稳定、所见即所得的特点。
8月，在满是酷热的上海，阿里云携手驻云在上海云基地举办了“云时代，企业如何轻松上云”的专题活动， 活动邀请了阿里云市场部总监金杰就目前的云市场和新技术展开了分享和讨论。 用数据说话：45% VS 4%？ 云计算是IT时代的转战互联网+的一大进化，计算能让一个公司在大数据的浪潮中也拥有像阿里巴巴、腾讯一样的技术支撑能力，但在这之前，企业一定要的理解和选择品牌云计算厂商。 阿里云运营总监金杰表示：云计算成为国家基础设施从IT到DT（Data Technology），近几年，云服务增长率为45%，传统 IT整
parser模块(绿色部分)在整个系统中的角色如下图所示，用来订阅binlog事件，然后通过sink投递到store.
7月10日下午消息，阿里云透露，工信部将于下周发布可信云认证名单，阿里云已进入该名单。这是国内权威机构首次开展云计算领域的资质认证，也被认为是中国政府即将大规模采购云计算的前奏。此前，奥巴马提出“云优先”战略，要求美国政府在IT建设中优先采用云技术。 据介绍，阿里云的云服务器ECS、云数据库RDS和云存储OSS，均已通过评估。在评估过程中，阿里云多项服务领先。云数据库是云端部署中最关键的模块，阿里云对此做了大量技术探索，成为国内应用开源数据库MySQL最好的公司，自研数据库OceanBase也走在业界最前沿
2022年5月9日，贵州省大数据发展管理局发布《2022年省级政务云服务统筹保障项目单一来源采购公示》，预算 132576000 元。 货物或服务的说明：依托云上政务云平台向省大数据局指定的贵州省政务部门、企事业单位（提供ECS（弹性云服务器）、RDS(关系型数据库服务)、云磁盘、OSS(对象存储服务)、SLB（负载均衡服务）、DRDS（分布式关系型数据库）、IPv6网关、EIP（弹性IP地址）、裸金属服务器等云资源服务，并不断更新服务内容。 单一来源原因 1、根据《贵州省大数据发展应用促进条例》第二十六条
随着得物 App 的用户流量增长，业务选择的数据库越来越多样化，异构数据源之间的数据同步需求也逐渐增多。为了控制成本并更好地支持业务发展，我们决定自建 DTS 平台。本文主要从技术选型、能力支持与演化的角度出发，分享了在 DTS 平台升级过程中获得的经验，并提供一些参考。
云服务器已经成为了如今建立网络平台或程序的主选趋势，而云服务器只是作为主机搭载，在创建的过程当中尽管也会提供存储空间，但是并不会提供独立的数据库。所以如果需要大型数据的存储和运行的话，一般都会选择单独配备云数据库。而云数据库rds怎么选自然也是在选配当中所需要考虑到的问题，一般情况下会先评估网站或程序对数据库的使用需求。
4.域名--->CDN--->负载均衡--->云服务器ECS+数据库RDS(主从)+缓存Redis
2-1 大厂前端物料体系介绍 2-2 组件平台架构设计 点击查看【processon】
关于404星链计划 「404星链计划」是知道创宇404实验室于2020年8月提出的开源项目收集计划，这个计划的初衷是将404实验室内部一些工具通过开源的方式发挥其更大的价值，也就是“404星链计划1.0”，这里面有为大家熟知的Pocsuite3、ksubdomain等等，很快我们就收到了许多不错的反馈。2020年11月，我们将目光投向了整个安全圈，以星链计划成员为核心，筛选优质、有意义、有趣、坚持维护的开源安全项目，为立足于不同安全领域的安全研究人员指明方向，也就是“404星链计划2.0”。为了更清晰地展
这题目让我想起非诚勿扰电影里面的台词，有意思吗？有意思呀！PostgreSQL 有意思，PolarDB for PostgreSQL 有意思。
简介和安装 redis简介： 开源高性能key-value存储；采用内存中（in-memory）数据集的方式，也可以采用磁盘存储方式（前者性能高，但数据可能丢失，后者正好相反） 支持字符串（strings）、哈希（hashes）、列表（lists）、集合（sets）和 有序集合（sorted sets）等；支持对复杂数据结构的高速操作。 特性多，支持主从同步、pub/sub等 支持多种客户端（http://redis.io/clients） ... 注：应用场景没有提到，暂时没有太多实际体会，不瞎说，
Serverless架构是近年来迅速兴起的一个技术概念。基于这种架构能构建出多种应用场景，适用于各行各业。只要是对轻计算、高弹性、无状态等场景有诉求，您都可以通过本文来熟悉一些基础概念，并从相关场景中获得启发。
CockroachDB 是一个开源的分布式数据库，最近改变了代码授权，放弃了 Apache 许可证。
因为纳入的数据集有点多，来源于12篇文章：232 single cell transcriptome samples (normal = 31; adjacent = 54; tumor = 148) ，分别来源于：
Envoy Proxy和其它L4/L7反向搭理工具最大的区别就是原生支持动态配置。 首先来看一下Envoy的大致架构
本文延续上一篇文章 云数据库MySQL导入云数据仓库PostgreSQL最佳实践，继续介绍云数据库MySQL导入云数据仓库PostgreSQL的使用问题。其中描述的问题及解决方法同样适用于 腾讯云 云数据仓库 PostgreSQL（CDWPG）。
目前微服务早已火遍大江南北，对于开发来说，我们时刻关注着技术的迭代更新，而项目采用什么技术栈选型落地是开发、产品都需要关注的事情，该篇文章主要分享一些目前普遍公司都在用的技术栈，快来分享一下你当前所在用的技术吧。
运维监控工具千千万，仅开源的解决方案就有流量监控（MRTG、Cacti、SmokePing、Graphite 等）和性能告警（Nagios、Zabbix、Zenoss Core、Ganglia、OpenTSDB等）可供选择。
在 PingCAP 用户峰会 2023 上， PingCAP 联合创始人兼 CTO 黄东旭 分享了“The Future of Database”为主题的演讲， 介绍了 TiDB Serverless 作为未来一代数据库的核心设计理念。黄东旭 通过分享个人经历和示例，强调了数据库的服务化而非服务化数据库的重要性，并展示了 TiDB Serverless 架构的创新之处， 同时探讨了 TiDB Serverless 对于中国用户的价值 。以下为分享实录 。
OLAP 是一个很卷的赛道，创业公司也众多。在本文中，笔者基于 10+ 年的大数据与数据仓库的工作经验，就目前的主流趋势：离在线一体化、引擎一体化、云原生化等写一些思考，抛砖引玉，希望能与各位共同探讨。
有两个很重要的文件 第一个就是：canal.properties 第二个就是：example目录下的instance.properties 文件
最终结果是三分之一的直播录制视频完全丢失，其它的录制视频都是不完整，也就是说只录制了前半部分，后半部分是没有的。
单个物理维度可以被事实表多次引用，每个引用连接逻辑上存在差异的角色维度。例如，事实表可以有多个日期，每个日期通过外键引用不同的日期维度，原则上每个外键表示不同的日期维度视图，这样引用具
A云Polardb-x 1.0现已全面升级为Polardb-x 2.0，但Polardb-X 1.0有其自有特色，仍然有很多企业在使用Polardb-X 1.0方案。那么，当这些企业想将业务系统迁移至腾讯云时，该如何进行数据库选型？怎么样进行数据同步？其中又会涉及到哪些问题呢？
VSCode 作为「宇宙最强编辑器」，在日常生活办公中自然不可或缺。VSCode 目前有好几个版本，分别是 Code-OSS、Visual-Studio-Code 以及 VSCodium，它们的区别是：
PDF：连续型随机变量的概率密度函数是一个描述这个随机变量的输出值,在某个确定的取值点附近的可能性的函数。
ALSA(Advanced Linux Sound Architecture)是linux上主流的音频结构，在没有出现ALSA架构之前，一直使用的是OSS(Open Sound System)音频架构。关于OSS的退出以及ALSA的出现，可以看 Linux音频驱动-OSS和ALSA声音系统简介及其比较。
随着医疗、大型企业行业上云步伐的加快，上云后的业务系统安全性如何保障成为客户关注的重点。对于医疗、大型企业客户，往往建有自己的数据中心，如何保障极端情况下业务系统的稳定运行？双活、灾备，能帮到我们！
由于我自己的个人网站是放在韩国首尔的甲骨文云上，在中国部分地区确实无法快速访问。 于是我想通过CDN+OSS的方式来加速访问。
OSS（Open Sound System）是unix平台上一个统一的音频接口。以前，每个Unix厂商都会提供一个自己专有的API，用来处理音频。这就意味着为一种Unix平台编写的音频处理应用程序，在移植到另外一种Unix平台上时，必须要重写。不仅如此，在一种平台上具备的功能，可能在另外一个平台上无法实现。但是，OSS出现以后情况就大不一样了，只要音频处理应用程序按照OSS的API来编写，那么在移植到另外一个平台时，只需要重新编译即可。因此，OSS提供了源代码级的可移植性。
创业公司由于时间、人员、资金等各方面的限制，系统需要的各个组件优先选择第三方服务，而不是自己搭建。一个创业开发项目都需要服务器操作系统、开发语言、web服务器、开发框架、数据库、缓存、静态文件存储、日志系统、业务监控、持续集成、代码管理、发布部署系统、文档管理等。现在按这些方面展开来讲。
Lustre 如何工作的 📷 Lustre 架构说明 lustre是一个基于对象的分布式文件系统。它核心有三个组件元数据服务(mds)、对象存储服务(oss)和客户端(client).lustre采用块设备来存储文件和元数据，每个块设备由单一独立的lustre服务来管理。比如lustre的元数据服务，元数据需要存储在块设备上，元数据进程需要把元数据写入到这个块设备上。lustre的总容量是所有的ost(oss管理的块设备)之和。lustre客户端是通过标准的Posix/IO的系统调用。 📷 MDS(meta
库存可供应天数=（可用性数量为负的最早日期 - 当前日期 - 1）+ 不为负的最近可用性数量/需求数量。
很多的小伙伴，经常会有这样的困惑，我看了很多技术的学习文档、书籍、甚至视频，我想动手实践，于是我打开了GitHub，想找个开源项目，进行学习，获取项目实战经验。这个时候很多小伙伴就会面临这样的问题：“我不会搜啊，我该怎么找呀？”，最终只能放弃。
Canal是阿里开源的增量解析MySQL binlog组件。通过将binlog投递到kafka，一方面可以直接进行指标计算。另一方面，可以减轻夜间离线数仓数据同步的压力。本文基于canal-1.1.4版本进行binlog解析和投递到kafka功能测试
Grafana是一款能够提供查询、告警和可视化指标、日志、链路跟踪的软件，并且提供了TSDB时序数据库用于存储数据。 一共有3个版本，Grafana OSS（开源版），Grafana Enterprise（企业版），Grafana Cloud（云版）。 开源版为免费版本，升级企业版要重新安装；企业版包含开源版内容，并且可以升级到完整的企业版功能，是官方推荐安装的版本；云版提供免费的10K系列指标、50G大小日志、50G大小链路追踪功能。
最近在实现 MetaProtocol 时阅读了 Envoy 相关的一些源码。这里将一些重要流程的时序图记录下来，以备后续查看。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
