首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

SRE初识PostgreSQL:可用性知识体系梳理

之前我写过一篇从方法论到实践的文章,供不熟悉混沌的人参考【万字长文】腾讯新能源汽车客户-混沌工程实战-腾讯开发者社区-腾讯调研了国内的ChaosBlade、ChaosMesh、ChaosMeta后...逻辑复制 (Logical Replication)- 使用PostgreSQL内置的逻辑复制机制。- 允许选择性复制特定表或数据库的更改。- 可跨版本复制。- 可用于数据仓库和数据集成。...- 可用于数据仓库和数据集成。- 可用于多个PostgreSQL版本。- 配置较复杂。- 需要更多的管理和监视。- 逻辑复制通常比流复制慢。...-通常通过控制器和冗余电源实现高可用性存储设备。- 数据一致性:SAN提供了数据一致性和可靠性,可以避免数据损坏或丢失。- 高性能:SAN通常提供高性能存储,适用于高负载数据库工作负载。...- DRBD可以配置为活动/备份模式,其中一个节点为主节点,另一个为备份节点。- 数据在主节点上写入后,会实时复制到备份节点。- 实时复制:DRBD提供实时数据复制,确保数据在主节点故障时不会丢失。

52352

数据库半月谈(2022.12.25~2023.1.7)

季军:PostgreSQLPostgreSQL是我们年度 DBMS 帖子的常客。它三度夺冠,一次又一次地出现在前三名中。PostgreSQL 被称为具有高级功能集的开源 DBMS。...一方面,企业对 ESG 要求;另一方面,政府快速转向监管角色,以确保企业能够说到做到在资金(和政策)方面遵循既定的可持续计划。...❖ 2022爱分析·中国数据智能最佳实践案例 近日,“2022爱分析·中国数据智能最佳实践案例”评选活动落下帷幕。...❖ GBase GCDW数仓登录阿里计算巢 近日,南大通用GBase GCDW数仓登录阿里计算巢,向企业级用户提供了一款原生的数据仓库产品。...它的实现,让用户在云端获取数据仓库服务“更简单”,让用户在云端使用数据仓库服务“更便捷”,让用户在云端支持数据仓库服务费用“更具性价比”。

1K60
您找到你想要的搜索结果了吗?
是的
没有找到

顾问-混沌】腾讯上容灾实践

在2023年11月12日,刚经过11的购物节大压力的阿里,却从17:44起发生了服务宕机,旗下的淘宝、闲鱼、饿了么等服务出现服务中断,甚至让高校学生宿舍的洗衣机都“宕机”了。...PostgreSQL版、图数据库、原生内存数据库Tair、数据库 Redis 版、原生关系型数据库 PolarDB、数据库专属集群、数据库 MySQL 版、原生数据仓库AnalyticDB...MySQL版、原生分布式数据库 PolarDB-X、数据库 ClickHouse、原生多模数据库Lindorm、数据库 PostgreSQL 版、数据库 SQL Server 版、数据库...有没有一个标准的范式可以帮助用的团队验证容灾方案有效性,以及进行常态化的容灾稳定性建设呢?,便是开展上的混沌工程。 什么是上混沌工程?...在上开展混沌工程,可以帮助用户发现平时难以发现的容灾设计隐患并及时修复验证。将上混沌工程纳入到业务系统的发展周期中是科学,必要的。

48071

首次揭秘1112背后的数据库技术!| Q推荐

从 2009 年到 2021 年,从千万交易额到千亿交易额, 11 已经开展了 12 年。如今,每年的 11 以及一个月后的 12,已经成为真正意义上的全民购物狂欢节。...在 2021 年 11 12 中,一种无所不在的技术力保证了整体系统的稳定,如 PolarDB 具备的极致弹性、海量存储和高并发 HTAP 访问的产品特性。...分析型数据库 ADB 3.0(AnalyticDB for MySQL 3.0) 发布,高度兼容 MySQL 协议以及 SQL:2003 语法标准,支持对海量数据进行即时的多维分析透视和业务探索,快速构建企业数据仓库...在陈锦赋看来,原生数据仓库 ADB3.0 很大的一个价值部分在于能够实现数据的在线化实时化,能够挖掘到一些目前还未被发现到的商业价值。... 11 12 丰富的运营活动和千亿交易额背后,数据库层面是包括 RDS、PolarDB、Tair、ADB(ADB3.0) 以及 Lindorm 等数据库产品提供的组合技。

31.7K50

Andy Pavlo:回顾数据库的 2021

PostgreSQL 的优势 在开发者中,传统的想法已经改变。PostgreSQL 已经成为新应用程序的首选。它是可靠的,许多特性,而且会越来越多。...根据这份排行榜,截至 2021 年 12 月,尽管 PostgreSQL 依然位居第四位(紧随 Oracle、MySQL 和 MSSQL),但是在过去一年中,PostgreSQL 已经缩小了与 MSSQL...另外一家秘密启动的 DBMS 初创公司 Firebolt 宣布,他们已经为其基于 ClickHouse 分叉的新的数据仓库 筹资了 1.27 亿美元。一家名为 ClickHouse, Inc....但是,他们并没有获得吸引力,特别是和其他拥有大量资金的数据仓库相比。在完成收购 ServiceNow 之后,仍然没有任何消息表明 Swarm64 产品是否会继续。...私募股权公司收购 Cloudera 自从上个十年的后半期,世界逐渐远离 MapReduce 和 Hadoop 技术以来,Cloudera 在数据仓库市场就没有获得同样的吸引力。

87610

什么是PostgreSQL?跟MySQL、Oracle比强在哪?

主流的服务提供商如亚马逊、阿里、腾讯、华为也都提供了PostgreSQL数据库服务。...另外,由于MySQL对SQL语法支持的功能较弱,基本上不适合做数据仓库。...虽然也有些厂商开发了MySQL数据仓库的存储引擎(如Infobright),但这个方案只是解决了部分数据仓库的问题,SQL功能弱的问题还是无法完全解决。...而PostgreSQL不仅支持复杂的SQL,还支持大量的分析函数,非常适合做数据仓库PostgreSQL数据库中还有一些支持移动互联网的新功能,如空间索引。...另外,PostgreSQL更小巧。PostgreSQL可以在内存很小的机器上完美运行起来,如在512MB的主机中,而Oracle数据库基本要在数GB的主机中才可以运行起来。

4.5K10

偶数科技OushuDB数据库巡检脚本

OushuDB由国人自主研发,符合国家信创标准;通过计算存储分离架构解决了传统数据仓库高成本、高门槛、难维护、难扩展的问题。同时支持各大公有云和私有。...Oushu Database(简称 OushuDB)是由 Apache HAWQ 创始团队打造的新一代原生数据仓库,该产品采用了存储与计算分离技术架构,具有 MPP 的所有优点,还具有弹性,支持混合工作负载和高扩展性等优点...兼容 Oracle,GPDB 和 PostgreSQL,可以轻松取代传统数据仓库包括 Teradata,Oracle,DB2,Greenplum 和 SQL-on-Hadoop 引擎。...偶数数据库作为一款生于大数据时代的产品,在原生上支持了阿里、腾讯等各种平台;适应 Hadoop 生态的发展,兼容 ORC 和 Parquet 存储格式,可以灵活的接入多种现有数据。...,只有1个SQL脚本,不存在嵌套调用脚本等其它问题 13、最终生成html文件格式的健康检查结果 14、Oracle数据库对巡检结果进行过滤,列出了数据库问题的内容 15、对OS的信息提供了收集(单独脚本

1K40

腾讯向开放原子开源基金会捐赠OpenTenBase,共建国产数据库新生态

12月16日,在2023开放原子开发者大会上,腾讯将企业级分布式数据库TDSQL的社区发行版 OpenTenBase 正式捐赠给开放原子基金会,通过开源共创的方式,与上下游产业链以及开发者共同打造繁荣数据库技术生态...腾讯数据库研发总经理潘安群表示,OpenTenBase数据库在技术上填补了业内基于 PostgreSQL的开源分布式OLTP系统空白,并且集HTAP引擎、分布式事务一致性、高 SQL 兼容度、复杂查询等技术能力于一身...OLAP(在线分析处理)能力,能够有效降低业务架构复杂度和成本; 在事务一致性方面,引入全局事务管理节点来管理分布式事务,通过分布式事务一致性技术来保证在全分布式环境下的事务一致性; 在兼容性方面,高度兼容PostgreSQL...腾讯数据库TDSQL近年来在多个领域取得重要突破,在性能上,今年3月刷新TPC-C世界记录,每分钟事务处理数达到8.14亿。...腾讯数据库总经理王义成介绍,TDSQL已涵盖金融级分布式、原生、分析型等多引擎融合的完整数据库产品体系,提供业界领先的金融级高可用、存算分离、数据仓库、企业级安全等能力。

17210

腾讯向开放原子开源基金会捐赠OpenTenBase,共建国产数据库新生态

12月16日,在2023开放原子开发者大会上,腾讯将企业级分布式数据库TDSQL的社区发行版 OpenTenBase 正式捐赠给开放原子基金会,通过开源共创的方式,与上下游产业链以及开发者共同打造繁荣数据库技术生态...腾讯数据库研发总经理潘安群表示,OpenTenBase数据库在技术上填补了业内基于 PostgreSQL的开源分布式OLTP系统空白,并且集HTAP引擎、分布式事务一致性、高 SQL 兼容度、复杂查询等技术能力于一身...OLAP(在线分析处理)能力,能够有效降低业务架构复杂度和成本; 在事务一致性方面,引入全局事务管理节点来管理分布式事务,通过分布式事务一致性技术来保证在全分布式环境下的事务一致性; 在兼容性方面,高度兼容PostgreSQL...腾讯数据库TDSQL近年来在多个领域取得重要突破,在性能上,今年3月刷新TPC-C世界记录,每分钟事务处理数达到8.14亿。...腾讯数据库总经理王义成介绍,TDSQL已涵盖金融级分布式、原生、分析型等多引擎融合的完整数据库产品体系,提供业界领先的金融级高可用、存算分离、数据仓库、企业级安全等能力。

14910

腾讯向开放原子开源基金会捐赠OpenTenBase,共建国产数据库新生态

12月16日,在2023开放原子开发者大会上,腾讯将企业级分布式数据库TDSQL的社区发行版 OpenTenBase 正式捐赠给开放原子基金会,通过开源共创的方式,与上下游产业链以及开发者共同打造繁荣数据库技术生态...腾讯数据库研发总经理潘安群表示,OpenTenBase数据库在技术上填补了业内基于 PostgreSQL的开源分布式OLTP系统空白,并且集HTAP引擎、分布式事务一致性、高 SQL 兼容度、复杂查询等技术能力于一身...OLAP(在线分析处理)能力,能够有效降低业务架构复杂度和成本; 在事务一致性方面,引入全局事务管理节点来管理分布式事务,通过分布式事务一致性技术来保证在全分布式环境下的事务一致性; 在兼容性方面,高度兼容PostgreSQL...腾讯数据库TDSQL近年来在多个领域取得重要突破,在性能上,今年3月刷新TPC-C世界记录,每分钟事务处理数达到8.14亿。...腾讯数据库总经理王义成介绍,TDSQL已涵盖金融级分布式、原生、分析型等多引擎融合的完整数据库产品体系,提供业界领先的金融级高可用、存算分离、数据仓库、企业级安全等能力。

15410

腾讯数据库入选“2021年度中国数据库魔力象限”领导者象限

注:本文图片未展示其他入选产品 墨天轮选取2021年12月数据库流行度排行前40的产品,参考 Gartner 魔力象限模型,综合2021年平均分、最新得分、复合增长率、三方评测、生态以及论文和专利数量综合评定等多方数据...、数据仓库、企业级安全等能力,同时具备智能运维平台、Serverless版本等完善的产品服务体系 。...目前TDSQL-C 已经在电商、游戏、互联网等行业广泛应用,满足业务高并发的需求,借助其强大的计算能力、高可用集群架构、极速扩展增加只读节点的机制,顺利应对业务流量洪峰,提升用户体验、为客户活动保驾护航...2020年12月14日,TcaplusDB也成为首批通过键值型内存数据库功能评测的分布式NoSQL数据库产品。...腾讯原生数据库TDSQL-C斩获2021PostgreSQL中国最佳数据库产品奖 原生数据库TDSQL-C PostgreSQL版内核解密 ↓↓点击阅读原文,了解更多优惠

2.8K20

Snowflake 荣获 2021 年年度数据库

1 年度最佳 DBMS:Snowflake Snowflake 平台是一个完全托管的服务,它整合了数据仓库、数据集市和数据湖,并支持针对这些方面运行分析。...Snowflake 于 2014 年公开推出,并将数据仓库提升到了一个新的水平。在多轮风险投资的支持下,它不断扩展平台和服务。...在 DB-Engines 的整体排名中,Snowflake 在 2021 年开始时排名 37,在过去 12 个月中已经攀升了 20 位,排名 17,而且这一趋势似乎还没有结束。...2 亚军:PostgreSQL 三次获奖的 PostgreSQL 今年紧随其后。 PostgreSQL 曾获得三次年度数据库称号,怎料今年遇到发展迅猛的 Snowflake,最终只能屈居第二。...例如,在过去的 12 个月中,Oracle 和 PostgreSQL 之间的分数差距减少了约 14%,从 771 分缩小到 660 分。

1.5K71

11腾讯大使推广赚钱攻略💰

2、在控制台复制的推广链接也能参与开团活动?不能,推广大使需在双十一开团活动点击【立即参与】获取专属链接(同时含cps_key和_hash_key),才可按照返佣和开团规则分别计算佣金和开团奖励。...1)老用户四款白名单返佣产品:老用户产品首购/复购/续费仅限GPU服务器、CBS硬盘、网站建设、对象存储COS,按10%返佣,其他产品均不参与。...1)邀新企业现金奖励/ 邀新个人现金奖励/ 新手大使抽奖活动邀请进度查看地址:腾讯推广大使邀新奖励>最新活动2)开团活动邀请进度查看地址:11主会场->开发者·开团有礼5、新手大使抽奖活动什么时候开始抽奖...非新会员和1星会员的推广者不能抽奖?...新手大使抽奖活动仅针对新会员和1星会员,抽奖时间为11月5日12:00 至 12月4日23:59 ,获得的抽奖次数如果在2022年12月4日23:59前未进行抽奖,抽奖次数则失效,默认放弃抽奖机会。

50.8K340

DB-Engines:Snowflake荣获2021年的年度DBMS

年度最佳DBMS - Snowflake Snowflake平台是一个完全管理的服务平台,它整合了数据仓库、数据集市和数据湖,并允许在这些之上进行分析。...Snowflake在2014年公开表明,要将数据仓库提升到一个新的水平。在几轮风险投资的支持下,它不断地扩展平台并提供服务。...在DB-Engines的整体排名中,Snowflake在2021年初时排名37,在过去的12个月中已经攀升了20位,排名17,而且这一趋势似乎还没有结束。...Snowflake不仅是第一个获得 "年度DB-Engines DBMS "奖项的软件即服务(SaaS),也是第一个进入该奖项前三名的以数据仓库为中心的产品。...例如,在过去的12个月里,Oracle和PostgreSQL之间的得分差距减少了约14%,从771分降到660分。

1.2K40

DB-Engines公布2022年度数据库,Snowflake成功卫冕

年度 DBMS:Snowflake Snowflake 是一个基于的数据平台,因其可扩展性、灵活性和性能而广受欢迎。...同时它整合了数据仓库、数据集市和数据湖,并支持针对这些方面运行分析。 据介绍,Snowflake 在 DB-Engines 的排名中从一年前的第 17 位上升到现在的第 11 位。...亚军:Google BigQuery BigQuery 是 Google 创建的基于数据仓库平台。除了 Serverless 计算提供的常见功能外,它还内置了机器学习和商业智能功能。...在过去的 12 个月中,Oracle 和 PostgreSQL 之间的分数差距从 660 分减少到 630.32 分。...副业搞得好、赚钱没烦恼:程序员“副业”灵感指南 ·································· 你好,我是程序猿DD,10年开发老司机、阿里MVP、腾讯TVP、出过书创过业、

1.6K30

MySQL vs Postgre SQL: 5个你最关注的非技术维度的区别

始终未能形成潮流,到Greenplum出现,才在OLAP数据仓库领域得到广泛使用。...2003年12月,MySQL 5.0版本发布,提供了视图、存储过程等功能。 2008年1月,MySQL AB公司被Sun公司以10亿美金收购,MySQL数据库进入Sun时代。...PostgreSQL PostgreSQL中国用户组 来源于国内PostgreSQL社区主导的组织,核心成员为PostgreSQL的国内主要领袖,主席萧少聪目前为阿里核心数据库专家。...PostgreSQL 数据仓库类 由于PostgreSQL的第三方版本Greenplum在数据仓库的大量应用,目前Greenplum已经是实际的MPP数据库标准。...业务系统类 由于对SQL特性的完整支持,对业务开发以及迁移相对友好,很多地方采用PostgreSQL作为业务系统。 浙江移动:采用PostgreSQL-XC 替换原先的Oracle架构。 ?

1.6K81

5个MySQL与Postgre SQL非技术维度的区别

始终未能形成潮流,到Greenplum出现,才在OLAP数据仓库领域得到广泛使用。...2003年12月,MySQL 5.0版本发布,提供了视图、存储过程等功能。 2008年1月,MySQL AB公司被Sun公司以10亿美金收购,MySQL数据库进入Sun时代。...PostgreSQL PostgreSQL中国用户组 来源于国内PostgreSQL社区主导的组织,核心成员为PostgreSQL的国内主要领袖,主席萧少聪目前为阿里核心数据库专家。...PostgreSQL 数据仓库类 由于PostgreSQL的第三方版本Greenplum在数据仓库的大量应用,目前Greenplum已经是实际的MPP数据库标准。...业务系统类 由于对SQL特性的完整支持,对业务开发以及迁移相对友好,很多地方采用PostgreSQL作为业务系统。 浙江移动:采用PostgreSQL-XC 替换原先的Oracle架构。

2.2K00

技术专题有奖征文 第1期(新人友好) ,聊数据库瓜分5000元奖池、拿社区流量曝光券

哪些数据库使用TIPS?数据库哪些有趣的底层知识?想学习数据库从何入手......本月开始,腾讯开发者社区将举办技术专题有奖征文赛。...1;腾讯TVP卫衣;牛气冲天牛牛企鹅公仔*1;优秀文章可能在腾讯开发者等公众号、论坛发布、推广。...图片图片五、Q&AQ1 : 怎么知道我有没有成功参加活动?作品出现在“数据库知识开放麦”标签页内,你的文章就成功参赛啦。Q2: 投稿有数量限制?不限制数量。...如果对【数据库】你很多想说的,都可以发出来,我们会在活动期间对好文进行流量曝光。鼓励多篇投稿,但一定要保证质量。Q3: 多篇投稿后,不同稿件入选不同奖项怎么办?...Q5: 投稿文章可以同时参加腾讯开发者社区其他活动?可以。Q6:社群流量兑换券要怎么使用?

2.8K51

腾讯数据仓库 PostgreSQL:使用python将linux日志导入数据仓库

原创声明:本文首发腾讯·+社区,未经允许,不得转载 数据仓库PostgreSQL(CDWPG,原名Snova) 兼容 Greenplum 开源数据仓库,是一种基于 MPP(大规模并行处理)架构的数仓服务...借助于 Snova,您可以使用丰富的 PostgreSQL 开源生态工具,实现对 Snova 中海量数据的即席查询分析、ETL 处理及可视化探索; 还可以借助 Snova 云端数据无缝集成特性,轻松分析位于...---- 通过官网我们知道,snova可以使用PostgreSQL工具,因此,如果想要将linux日志导入snova数据仓库,只需要调用 python3 中的 psycopg2 模块(该模块...i = 1 while i < row: #日期时间的格式化 log = line[i].split(' ',3)#split() 通过指定分隔符对字符串进行切片,如果参数 num 指定值...image.png 至此,已将日志导入到snova数据仓库中。

1.6K110
领券