消息队列的应用场景十分广泛,主流的消息中间件有ActiveMQ,RabbitMQ,RocketMQ,ZeroMQ,Kafka等,ActiveMQ是最老牌的MQ,它是Apache的开源项目,ZeroMQ是最快的消息队列,RabbitMQ也很不错,RocketMQ是阿里巴巴的开源项目,现在已经捐赠给Apache并成为了Apache的顶级项目,Kafka是吞吐量最高的消息中间件,常用于日志的处理,可能因为吞吐量的原因,ActiveMQ和RabiitMQ的活跃度越来越低,RocketMQ因为有相当好的性能,抗过了阿里的双十一,双十二等,所以越来越活跃,但是别去管那么多,消息中间件都差不多,懂一个了去学其他的也都一样
本文先介绍传统关系数据库中事务的ACID特性,再介绍分布式系统中的经典理论——CAP定理和BASE理论。 事务 事务的定义: 事务(Transaction)是由一系列对系统中数据进行访问与更新的操作所组成的一个程序执行逻辑单元(Unit),狭义上的事务特指数据库事务。 事务的作用: 当多个应用程序并发访问数据库时,事务可以在这些应用程序之间提供一个隔离方法,以防止彼此的操作相互干扰。-事务为数据库操作序列提供了一个从失败中恢复到正常状态的方法,同时提供了数据库即使在异常状态下仍能保持数据一致性的方法。事务具
NoSQL: non-relational,Not-Only SQL,致力于解决关系型数据库扩展的问题
近日,权威机构 IDC 发布的《2023年上半年中国关系型数据库软件市场跟踪报告》显示:腾讯云数据库 TDSQL 整体收入同比增长位列中国云厂商第一。
墨墨导读:2020数据技术嘉年华于11月21日落下帷幕,大会历时两天,来自全国各地的数据领域学术精英、领袖人物、技术专家、从业者和技术爱好者相聚北京,见证了个人的快速成长、技术的迭代进步、行业的蓬勃发展、生态的融合共赢,以及市场的风云变迁。
随着互联网信息的发展,大家也对云这个词汇也不是特别陌生了,作为全球首选的云服务厂商之一的腾讯云,依托腾讯多年的业务积累和技术沉淀,我们推出了高性能、低成本、安全可靠的整体数据服务解决方案。并且随着客户数据日益增长,也做了相关的调研和分析,推出了腾讯云新一代自研数据库。首先,欢迎我们的数据库产品总监祝百万给大家分享腾讯云数据库的前世今生和产品布局。
2021年7月15日至20日,由腾讯云联合电子科技大学共同研发的《企业级分布式数据库TDSQL入门实战》课程,圆满地完成了课程教学。为期4天的课程学习中,来自电子科技大学近百位大学生通过理论学习和实操训练,对企业级分布式数据库TDSQL有了深入的了解。 《企业级分布式数据库TDSQL入门实战》课程现场 《企业级分布式数据库TDSQL入门实战》课程由腾讯云高级培训讲师胡一鹤老师通过线上直播的教学方式进行。本课程围绕数据库的发展趋势和未来新技术的走向展开,通过理论教学与实践应用结合的模式让同学们更深入地
注:本文摘自2018年11月22日腾讯云数据库CynosDB新品发布会的演讲实录。随着互联网信息的发展,大家也对云这个词汇也不是特别陌生了,作为全球首选的云服务厂商之一的腾讯云,依托腾讯多年的业务积累和技术沉淀,我们推出了高性能、低成本、安全可靠的整体数据服务解决方案。并且随着客户数据日益增长,也做了相关的调研和分析,推出了腾讯云新一代自研数据库。首先,欢迎我们的数据库产品总监祝百万给大家分享腾讯云数据库的前世今生和产品布局。
HelloGitHub 推出的《讲解开源项目》[1]系列。经过几番的努力和沟通,终于邀请到分布式任务调度与计算框架:PowerJob 的作者 Salieri,加入 HG 的开源讲解系列,开启了他的 P
6月5日,全球领先的IT市场研究和咨询公司IDC发布的《2022年下半年中国关系型数据库软件市场跟踪报告》显示,在Top 5厂商中,腾讯云数据库整体收入同比增速、本地部署模式收入同比增速均位列第一。
今日,2023 第八届IDC中国数字化转型年度盛典在北京召开,会议内容围绕本土化落地人工智能(大模型)、“下一代云”、 数据安全、客户体验、数字原生等热门科技话题展开,腾讯云数据库受邀出席,和与会者一起探讨如何助力企业迈向数字化业务时代。
产品经理要不要懂技术的问题一直有很多的观点和讨论,一般来讲产品懂技术是有一定的优势,但不是充分必要条件。而数据产品是B端更偏底层的工种,有一定技术基础后,开展工作更顺利。找工作的经历里面,有被问到过你
又到了双十一、双十二、年终大促季,每年这个时候都是购物狂欢节,不仅促销产品多、种类全、覆盖面广,促销花样也在不断翻新,直播、砍价、优惠券、加价购等,令人眼花缭乱。 当全国人民沉浸在买买买的自嗨中无法自拔时,考验的不仅是百万商家的战略战术,更是各种技术平台的实力比拼,尤其是底层的数据库,将迎来流量峰值期间的高并发和快速响应挑战。 高并发业务场景下 快速、弹性扩缩容调整 (微盟产品和服务布局) 以微盟为例,公司承载的是多渠道的广告营销业务,提供和各个细分领域相关的垂直SaaS解决方案及服务。比如:双11期
8月18日,由腾讯联合中国电子节能技术协会牵头研制的《键值型数据库系统技术及节能要求》团体标准(以下简称“团标”)正式对外发布。 该团标由腾讯发起,京东、金山云、北京邮电大学等多家企业和高校共同参与制定,这一标准的建立,建立了国内数据库领域节能技术要求标准,将为业界发展和节能减耗提供更多助力。 此次发布的团标已于2021年10月在腾讯内部率先应用,其自研数据库已帮助数据中心实现30%以上的节能减排 ,一年节电约3.94亿度,减排二氧化碳量达8.26万吨,碳排放当量约为种植451万棵大树,节能效果显著。 中
众所周知,文明的发展离不开信息的积累,而任何东西的积累离不开存储。因此,信息存储是文明发展的重要环节,从某种意义上讲,甚至可以说是人类迈入文明社会的标志之一。在历史上,人类曾经创造过很多信息存储的方法。我们一起来看下存储发展历程。
随着产品复杂度的提升和微服务架构的流行,一个业务系统背后的数据存储系统也越来越复杂。
高速性(velocity):大数据要求处理速度快,比如淘宝双十一需要实时显示交易数据
举例:一个用户表有很多的属性,关联了很多数据,如果放到同一个表里面的话查询是方便了,但是效率不行。
当时的业务很相对简单,就是JSP—>Action—->Service—->DAO—–>数据库,数据库也就是一个实例而已,无论是Mysql还是Oracle。把这五层缩减为三层的话便是:应用层——>DAO层——>Mysql实例。
云数据库的功能是很强大的,而且云数据库主要分为两大类型,一种是关系型数据库,另一种是非关系型数据库,也可以说是分布式数据库。那么什么是关系型数据库?分布式数据库和关系型数据库区别有哪些?
1.程序自动完成,数据源方便管理。2.不需要维护,因为没用中间件。3.理论支持任何数据库 (sql标准)。
一年一度的双十一又双叒叕来了,给技术人最好的礼物就是大促技术指南!而经过这些年的发展,大促早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的大促场景,对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。
7月4日,国际权威机构IDC发布的《2021年下半年中国关系型数据库软件市场跟踪报告》显示,腾讯云数据库在关系型数据库软件市场(公有云模式)中,位列第二。 IDC报告显示,2021下半年中国关系型数据库软件市场规模为15.8亿美元,同比增长34.9%。其中,公有云关系型数据库规模8.7亿美元,同比增长48.7%。IDC预测,到2026年,中国关系型数据库软件市场规模将达到95.5亿美元,未来5年市场年复合增长率(CAGR)为28.1%。 这表明,中国公有云关系型数据库前景广阔,数据库行业正加速向云端迁移。
“双11”带来的购物狂潮余温尚存,“双12”又火热来袭,而面对愈演愈烈的促销大战,云市场显然已按耐不住云服务商的热情,各家动作频频,其中以阿里云、天翼云、腾讯云为主要代表,借助岁末年关纷纷推出大幅度优惠促销活动。业内专家认为,作为如今最火爆的新兴市场,越来越多的 “云”企业短兵相接、各展所长,预计1-3年内中国必有几个非常大的云服务商强势崛起。 云市场短兵相接,促销活动夺眼球 记者了解到,12月18日前后,云服务商活动相对集中,中国电信、阿里、腾讯等大品牌均在此前后开展活动,其中,主要三家云
2012 年开始,由腾讯内部业务适配而衍生的自研分布式数据库 TDSQL 正式诞生。2020年12月,腾讯云数据库三大产品线统一升级,将 TDSQL、CynosDB(现为TDSQL-C)、TBase (现为TDSQL PG版)统一至全新的 TDSQL 系列中。砥砺前行十余载,这家互联网厂商在数据库领域立下一座座丰碑,腾讯云TDSQL 每次都能精准踩点的秘诀是什么? 1 腾讯云 TDSQL 的前世今生 要想真正的了解腾讯云 TDSQL,首先要了解其发展历程。TDSQL 发展经历了四个发展阶段: 第一阶段:2
当前的大环境和技术氛围,提供给国产化技术厂商一个千载难逢的推广机会,操作系统、数据库、中间件、办公终端各领域,无论是供应商,还是使用者,比以往任何时候都更积极和主动,并且更具成效。
PingCAP 联合创始人&CTO 黄东旭,一定是传说中的「别人家的孩子」:小学三年级开始写代码,四、五年级学 C 语言,高中时就开始用 Linux,还喜欢画画,会玩摇滚……单看履历,已然感受到了一万
2021年9月16日,由中科软科技股份有限公司主办的中国寿险科技应用高峰论坛2021隆重举行。国内头部保险公司管理者、国内外各界信息化专家、保险科技公司齐聚北京,共议保险科技未来发展,探索保险科技发展新机遇。 “云数据库是数据库行业发展的必然。腾讯云数据库已进入世界顶级数据库厂商行列。” 在中国寿险科技应用高峰论坛2021会上,腾讯云数据库副总经理王义成先生发表题为“TDSQL助力保险核心系统数字化转型”的主题演讲,分析云数据库行业的必然趋势,并针对腾讯云数据库TDSQL的生态发展理念,在政务机关、
在选择数据存储时,经常会选择关系型数据库(SQL)和非关系型数据库(NoSQL)进行数据存储,这两种数据各有优缺点,下面进行简单对比
面对互联网业务的不断深化以及业务量的爆发式增长,传统数据库架构迎来了前所未有的挑战和变革。
其实我很早就想写写分布式数据库相关的文章,既是我现在正在学习的,也是我很感兴趣的内容。但是谈到分布式数据库,会涉及很多相关的技术细节,等把相关的一些细节写明白的时候,已经十几篇文章过去了XD。所以如果想要了解B/B+树、LSMT、CAP等技术细节的,可以翻翻之前的文章。今天我们来聊聊NoSQL这个概念。
10月20日,一年一度的数据库技术交流盛会——DTCC 2021(第十二届中国数据库技术大会)在京圆满落幕。 大会以“数造未来”为主题,重点围绕数据架构、人工智能与大数据应用、传统企业数据库实践和国产开源数据库等内容展开分享和探讨。 在本次数据库年度盛会交流平台上,腾讯云数据库团队集结多位顶级技术达人亮相,针对当前热门数据库技术主题,共同为大家带来了满满技术干货分享。 错过现场?没关系,一文带你回顾腾讯云数据库大咖演讲要点~ 数造未来 HTAP数据库解决方案、应用实践和未来发展 林晓斌,腾讯云数据库总经理
在微服务架构中,随着服务的逐步拆分,数据库私有已经成为共识,这也导致所面临的分布式事务问题成为微服务落地过程中一个非常难以逾越的障碍,但是目前尚没有一个完整通用的解决方案。
在大数据领域,被业界广泛谈及的CAP理论存在着一些关键性的认知误区,而只有全面地考察与分析分布式环境中的各种场景,我们才能真正正确地理解它。
疫情肆虐之下的2020年带来了很多变数,让所有人体会到了“难”。之前数据库领域有人也谈起了去“O”(Oracle数据库)之难,国内提了十多年的去“IOE”,感觉现在对于去“O”依然是蜀道之难,难于上青天。 Oracle数据库往往承载着企业关键业务系统,去留要看企业发展情况和战略规划,所谓难更多是一种谨慎。“因为’O‘不仅仅是去数据库,还涉及到很多应用,如果过于绝对可能对客户现有的系统产生比较大的影响。”PG中文社区副主席唐成在接受IT168采访时曾说。 即将到来的5G时代数据井喷,海量数据对数据库提出
很多人在问我,程序员如何拿高薪,如何做到年薪40W+,其实总结出来还是一句话,你的技术决定你的能力已经薪资。 那么什么样的技术人才才能拿到一份Java行业里面的高薪呢? 下面是我的一个总结技术: 最后、是我总结出的阿里面试必备知识点: 掌握Java编程语言,包含io/nio/socket/multi threads/collection/concurrency等功能的使用; 熟练掌握jvm(sun hotspot和ibm j9)内存模型、gc垃圾回收调优等技能; 精通JVM,JMM,MVC架构,熟练使
关系型数据库指的是使用关系模型(二维表格模型)来组织数据的数据库,由二维表及其之间的联系所组成的一个数据组织。
5月16日,腾讯云发布全新非关系型数据库KeeWiDB,搭载全自研存储引擎。这是腾讯云发布的首款软硬件结合、高速低延迟的NoSQL数据库产品。 KeeWiDB创新性地实现三级存储架构设计,自研代码量超过25万行,单节点读写能力超过18万QPS,最高可线性堆叠至千万级并发吞吐量,同时兼容Redis协议,访问延迟达到毫秒级,是一款具有行业领先性的数据库产品。 在非关系型数据库领域,Redis因其高吞吐、低延迟、丰富的数据结构一直受开发者欢迎。但在海量数据和极致用户体验的双重挑战下,Redis全内存方案无法解决
随着互联网数据规模的爆炸式增长, 如何从海量的历史, 实时数据中快速获取有用的信息, 变得越来越有挑战性. 一个中等的电商平台, 每天都要产生百万条原始数据, 上亿条用户行为数据. 一般来说, 电商数据一般有3种主要类型的数据系统:
对于数据存储方案的选择,是现代企业和个人都需要面对的重要决策。本文将为您介绍几种常见的数据存储方案,包括关系型数据库、NoSQL数据库以及分布式文件系统。通过了解每种方案的特点、操作方式和适用业务类型,希望能帮助您选择合适的数据存储方案,以更好地管理和存储数据。
提起数据库一直是中国企业级市场无法抹去的伤痛,无论是去IOE还是去SOA,大家都认为数据库是中国企业最无法去除的。而国内管理软件厂商为了实现这一战略,不断寻求并购来实现去除数据库的使命。 去年,用友为了实现大数据战略落地,开始在全亚洲市场搜索可以并购的对象,在日本和韩国考查一翻后,最后把目光锁定到南大通用,由于当时南大通用报价过高,最后收购计划不了了之。而另一家有国资委背景的浪潮,也有意在数据库领域展开并购,特别是棱镜门事件爆发后,受国产化政策的影响,收购数据库厂商已经成为这两家今年必须完成的课题。可是放眼
本文是《极客时间》-《TiDb极简入门》的学习笔记。传送门:https://time.geekbang.org/opencourse/videointro/100089601
Hadoop 是采用了 Map Reduce 的一种分布式的计算框架,它是根据 GFS去开发了 HDFS 分布式文件系统,还有根据 Big Table 开发了 HBase数据存储系统。可以了解到的是,Hadoop 的开源特性成为了分布式计算系统事实上的国际标准。
在学习redis之前我们先来学习两个概念,即什么是关系型数据库什么是非关系型数据库,二者的区别是什么,二者的关系又是什么?
1961年通用电气公司的Charles Bachman 成功地开发出世界上第一个网状DBMS也是第一个数据库管理系统——集成数据存储(Integrated Data Store,IDS) 层次型DBMS是紧随网状型数据库而出现的。最著名最典型的层次数据库系统是IBM 公司在1968 年开发的IMS (Information Management System)网状数据库和层次数据库已经很好地解决了数据的集中和共享问题,但是在数据独立性和抽象级别上仍有很大欠缺。
原ZLJ卖场的压测流程,是依托于阿里云PTS工具,团队自身缺乏性能测试能力自建,缺少性能分析和数据沉淀,测试场景单一,只有单接口和多接口压测,缺少场景和链路压测,不能相对合理的评估系统性能承载能力,机器扩容只凭借经验进行增加调整,缺乏评估依据。
NoSQL,指的是非关系型的数据库。NoSQL是Not Only SQL的缩写,是对不同于传统的关系型数据库管理系统的统称。非关系型数据库不同于传统的关系型数据库,非关系型数据库对数据的存储不需要特定的模式,适用于大规模的数据存储。
目录: 一、关系型数据库 (一)常用关系型数据库: 二、非关系型数据库 (一)常用非关系型数据库: (二)分类: 文档型 key-value型 列式数据库 图形数据库 一、关系型数据库 (一)常用关系型数据库: MySQL、SQL-Server、SQLite、MariaDB、ORACLE、PostgreSQL、… 二、非关系型数据库 (一)常用非关系型数据库: CouchDB、MongoDB、 Redis、Voldemort、Oracle、Cassandra
领取专属 10元无门槛券
手把手带您无忧上云