首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

首次揭秘1112背后的云数据库技术!| Q推荐

从 2009 年到 2021 年,从千万交易额到千亿交易额, 11 已经开展了 12 年。如今,每年的 11 以及一个月后的 12,已经成为真正意义上的全民购物狂欢节。...是什么样的数据库撑起了 2021 年的 11 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...“那这背后对于一个新的数据库产品类型的要求,实际上整个业界大家都是在探索阶段。” 写在最后 11 12 背后的数据库技术支持远不止于此。... 11 12 丰富的运营活动和千亿交易额背后,数据库层面是包括 RDS、PolarDB、Tair、ADB(ADB3.0) 以及 Lindorm 等数据库产品提供的组合技。

31.8K50

推荐一款绝佳的时序数据库:VictoriaMetrics

简介VictoriaMetrics(简称 VM),是一个快速高效、经济并且可扩展的监控解决方案和时序数据库。...简言之,VM 是一个完全兼容 Prometheus 协议且性能比 Prometheus 更好的、面向监控分析的、更方便使用的时序数据库。VM 提供单机版和集群版。...推荐理由2.1 可作为 Prometheus 远程存储我们知道,Prometheus 在大数据量和高并发查询下性能是有瓶颈的,为了解决这个问题,官方支持了20多种时序数据库作为其远端存储,最常用的比如:.../victoria-metrics -retentionPeriod=30d -storageDataPath=data &2.9 DB-Engines TSDB 类排名也不错作为一款新兴 TSDB 时序数据库...而且能完全兼容 Prometheus 协议,这点就可以排除大部分时序库了。2.10 夜莺也推荐近两年火热的夜莺监控,官网也默认推荐其作为后端存储库。没听过?一句话推荐语:比 Zabbix 更强!

7.2K60
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    国产化人大金仓数据库转库工具:oracle12c数据库转kingbase8.6人大金仓数据库实例演示

    oracle12c数据库转人大金仓数据库实例演示 第一章:数据准备 ① 人大金仓建库建用户 ② 人大金仓授权表空间 ③ 人大金仓创建 schema 表 第二章:转库演示 ① 转库工具准备 ② 创建源库和目的库数据库连接...③ 创建迁移任务 ④ 启动迁移任务 ⑤ 迁移完成,查看迁移结果 第一章:数据准备 ① 人大金仓建库建用户 切换人大金仓用户,然后创建用户和数据库,名称要和 oracle 的用户名一致。...oracle_yz_0406 owner auto_2105_oracle_yz_0406 tablespace nnc_data01; CREATE DATABASE ② 人大金仓授权表空间 根据自己数据库的实际需要来设置即可...nnc_index01 to auto_2105_oracle_yz_0406; GRANT ③ 人大金仓创建 schema 表 退出,用自己的建的用户登录,建个 schema 表,这个也要和 oracle 数据库的用户一致...windows 版迁移工具获取:小蓝枣的csdn资源仓库 ② 创建源库和目的库数据库连接 新建数据库连接。 建一个源库 oracle 的连接。 然后再建个目标库人大金仓数据库的连接。

    1.8K10

    2022 IoTDB Summit:京东周炯《万物互联时代的时序数据库

    12 月 3 日、4日,2022 Apache IoTDB 物联网生态大会在线上圆满落幕。...随着碳达峰、碳中和的目标提出,节能降碳已经成为了大家的共识,在能源碳领域我们通过产业数据中台、物联网管理平台、智慧能源服务平台的建设,打造统建共享的智能园区和能源碳平台,提高园区管理水平、促进生产决策...03 面向物联场景的时序数据库 那这些物联网场景的数据都有哪些特征?...要同时满足以上五个处理目标,传统数据库往往有所不足,因此,迫切需要专门的时序数据库来解决这些不足。...而时序数据库的市场也是百花齐放,各种新的时序数据库不断涌现,其中许多优秀的国产时序数据库的上升趋势非常明显,比如 Apache IoTDB 等。

    1.5K10

    墨天轮2021年度中国数据库获奖名单(下)

    获奖理由: 涛思数据研发的 TDengine 是国产数据库排行榜上时序数据库,2021年平均得分第一的数据库。...,运行实例超过89.3K,在时序数据库的发展前途无可限量。...2020年12月14日,TcaplusDB成为首批通过键值型内存数据库功能评测的分布式NoSQL数据库产品。TcaplusDB在键值型内存数据库,国内数据库国产化迁移替代领域表现出了明显优势。...在新的一年,期望国产数据库厂商在关键领域实现突破,我们也期待有越来越多的从业者,不断加入国产数据库的阵营!END 推荐阅读:331页!...2021年度数据库技术年刊 推荐下载:2021数据技术嘉年华视频回放及PPT下载 2021数据技术嘉年华50余个PPT下载、视频回放已上传墨天轮平台,可在“数据和云”公众号回复关键词“2021DTC”

    1.1K40

    UML建模之时序图(Sequence Diagram)

    转自:http://www.cnblogs.com/ywqu/archive/2009/12/22/1629426.html 一、时序图简介(Brief introduction) 二、时序图元素(Sequence...(Sequece Diagram Example Analysis) 时序图场景 时序实例 时序实例分析 四、总结(Summary) 一、时序图简介(Brief introduction...(Sequece Diagram Example Analysis) 时序图场景 完成课程创建功能,主要流程有: 1、请求添加课程页面,填写课程表单,点击【create】按钮 2、添加课程信息到数据库...3、向课程对象追加主题信息 4、为课程指派教师 5、完成课程创建功能 时序实例 时序实例分析 1、序号1.0-1.3 完成页面的初始化 2、序号1.4-1.5 课程管理员填充课程表单...时序图中包括的建模元素主要有:对象(Actor)、生命线(Lifeline)、控制焦点(Focus of control)、消息(Message)等等。最后,以课程创建功能演示一时序实例

    2.4K20

    腾讯唯一时序数据库:CTSDB 解密

    为了存储这些与时间相关的数据,积极拥抱物联网时代,各大企业纷纷推出自家的时序数据库。本文将对时序数据库的基本概念、应用场景及腾讯时序数据库CTSDB做简要介绍。 什么是时序数据库 1....2.2 时序数据库 时序数据库是管理时序数据的专业化数据库,并针对时序数据的特点对写入、存储、查询等流程进行了优化,这些优化与时序数据的特点息息相关: 1) 存储成本: 利用时间递增、维度重复、指标平滑变化的特性...CTSDB单节点集群与节点集群对比测试:用以验证CTSDB的线性扩展能力。...(2) CTSDB单节点集群与CTSDB节点集群写入性能对比 image.png 结论:CTSDB单节点集群写入最高可达20w,节点集群写入性能34w。...(2) CTSDB单节点集群与节点集群查询性能对比 image.png 结论:在并发数较高的情况下,节点集群查询性能较单节点集群有了大幅度提升,呈现了查询性能线性扩展的趋势。

    5.8K140

    微服务高可用容灾架构设计

    监控组件:负责采集可观测性三大件 Trace, Log, Metrics,底层往往使用 ES 或者时序数据库,由于这部分组件请求数据量比较大,在规划部署时,网络流量的成本应当被纳入考量。...3、数据层:目前大多数应用使用关系型数据库,当前关系型数据库的技术水平还不能很好的支持多实例多写,所以对于数据库只能讨论主备模式,关键点在于主备切换的自动化以及数据复制的延迟,分别降低故障恢复的 RTO...应用层:无状态服务同时对外提供服务,活的前提是微服务管控层活以及数据库跨 AZ 时延低。 数据库层高可用部署模式仍为一主多从,后面不再对数据库层进行异常分析。...异地互备 数据库层面水平拆成两个实例分片,例如可以按地域拆成北方、南方。 部署方案: 微服务管控层:服务同城活,异地不互通。...部署单元设计:考虑容灾设计,单元与数据库分片绑定,同城单元活,异地部署灾备单元。

    88370

    日吞吐万亿,腾讯云时序数据库 CTSDB 解密

    三、写入、存储、查询多环节优化,时序数据库优势明显 1. 时序数据模型及特点 在引入时序数据库之前,先要了解【时序数据】的模型及特点。...时序数据库 2.1 时序数据库 时序数据库是管理时序数据的专业化数据库,并针对时序数据的特点对写入、存储、查询等流程进行了优化,从而解决时序数据处理难题: 存储成本: o 利用维度重复、时间递增、指标平滑变化等特性...(2) CTSDB单节点集群与CTSDB节点集群写入性能对比 7.jpg 横坐标:并发数(写入线程数) ,纵坐标:QPS(单位:万次/s) 结论:CTSDB单节点集群写入最高可达20w,节点集群写入性能...(2) CTSDB单节点集群与节点集群查询性能对比 9.jpg 横坐标:并发数(查询线程数) ,纵坐标:QPS(单位:次/s) 结论:在并发数较高的情况下,节点集群查询性能较单节点集群有了大幅度提升...欢迎对时序数据库和分布式存储感兴趣的同学加入我们!

    27.1K11685

    vivo 大规模特征存储实践

    支撑其他 Nosql/Newsql 数据库,资源复用 从业务需求出发,后续我们会有各种各样 Nosql 数据库的需求,如图数据库时序数据库、对象存储等等,如果每个产品之间都是完全隔离,没有任何资源(代码...实例中,并力求每个实例中的 Leader 数也相近。...跨机房活也是分两期落地: 第一期:不考虑冲突处理,不保证集群间的最终一致。...支撑时序数据库 在 5G 和 物联网时代,时序数据库起着非常重要的作用。...12. 支撑对象存储的元数据存储 元数据存储对“对象存储”来说至关重要,既然我们已经提供了一个强大的 KV 存储产品,是不是可以复用起来,减轻运维和研发维护的负担呢?

    1.4K20

    如何保证MySQL和Redis的数据一致性?10张图带你搞定!

    建议: 优先使用“先更新数据库再删除缓存”的执行时序,原因主要有两个: 先删除缓存值再更新数据库,有可能导致请求因缓存缺失而访问数据库,给数据库带来压力。...业务应用中读取数据库和写缓存的时间有时不好估算,进而导致延迟删中的sleep时间不好设置。...一致性:同步直写>异步回写,因此,对于读写缓存,要保持数据强一致性的主要思路是:利用同步直写,同步直写也存在两个操作的时序问题:更新数据库和更新缓存。...”的情况;一般推荐使用“更新数据库+删除缓存”的方案。...在“更新数据库+删除缓存”的方案中,推荐使用推荐用“先更新数据库,再删除缓存”策略,因为先删除缓存可能会导致大量请求落到数据库,而且延迟删的时间很难评估。

    4.1K22

    58同城数据库架构设计思路

    ,即复制主库(很多公司用单master,此时无法保证写的可用性),冗余数据,如下图 带来的问题:主同步key冲突,引不一致 解决方案: a)方案一:由数据库或者业务层保证key在两个主上不冲突 b)方案二...两次淘汰法 异常的读写时序,或导致旧数据入缓存,一次淘汰不够,要进行二次淘汰 a)发生写请求时,先淘汰缓存,再写数据库,额外增加一个timer,一定时间(主从同步完成的经验时间)后再次淘汰 b)发生读请求时...存在的问题:只能完成N库扩2N库的扩容(不需要数据迁移),非通用扩容方案(例如3库扩4库就无法完成) (4.2)非指数扩容,数据库增加字段,数据迁移 方案一:追日志方案 方案二:写方案 (4.3)水平切分怎么切...Codd的12条法则 另外,我们回顾一下数据库之父Codd的12条法则,作为数据库设计的指导性方针: 信息法则 关系数据库中的所有信息都用唯一的一种方式表示——表中的值。...基数 考量一个实体的实例和另一个实体实例关联的数量。

    2.3K70

    为什么有了 MySQL ,还要有时序数据库

    为了更好的支持时序数据的存储分析,各种时序数据库(TimeSeries Database)应运而生,时序数据库可以基于时间区间进行聚合分析和高效检索,实现对时序数据的快速写入、持久化、多纬度的查询等功能...据DB-Engines 2019年12月的最新报告显示,近一年内时序数据库的受欢迎程度稳居前列。 ?...通过UCloud控制台界面创建实例,用户可根据业务的实际需求情况按需选择时序数据库实例 CPU 和内存规格大小,从而实现业务的快速灵活可拓展。 ?...简单易用 支持使用InfluxQL方式对时序数据库进行访问和管理,完全兼容InfluxDB的读写协议; 通过控制台即可一键部署InfluxDB,实现对实例时序数据库进行管理,并提供监控功能,高效便捷,...实时发现实例瓶颈。

    4K20

    金融业务的数据存储选型

    时序数据库 实现和时序数据库完全不同,适用场景也不同。由于多了一个时间维度,就不能按列存储。 其实我在第6节课的思考题里,已经给你提示了时序数据库的存储空间复杂度和时间复杂度,这些复杂度并不低。...这都导致时序数据库不适合吞吐量特别高的业务,如股票和外汇业务这些高频交易类业务。适合交易量稍小一些的场外交易类业务,像债券、期货、资产证券化等。 核心组件代表了公司的核心竞争力,需要自己研发。...时序数据库对于大型金融公司来说就是核心竞争力,所以外界很少知道。实现时序数据库的挑战主要在时间索引的生成和查询。...金融市场数据一般使用时序数据库。相比关系型数据库常用的行存储方式,时序数据库用了列存储的方式,这个方式在存储、读取和计算上都有很大的速度优势。KDB是金融行业的专用列存储数据库,它具有更高的执行效率。...时序数据库适合交易量稍小的场外市场业务,一般是金融公司自研。 关系型数据库和面向对象编程之间有天然的矛盾。

    2.1K30

    数据架构选型必读:4月数据库产品技术解析

    写缓冲区的存储从系表空间移至写文件。将写缓冲区存储区移出系统表空间可减少写延迟,增加吞吐量并在写缓冲区页的放置方面提供灵活性。 二进制日志事务压缩。...http://postgis.net/ 时序插件timescaledb发布1.7.0:timescale是PostgreSQL的一款时序数据库插件,在IoT行业中有非常好的应用。...1.7.0的主要功能增强包括:支持PostgreSQL 12、支持实时聚合(流计算功能)。...五、自动化数据库实例高可用部署 在SequoiaDB v5.0中,用户在创建MySQL、PostgreSQL、MariaDB等数据库实例时可直接指定实例组,一个实例组中的数据库表结构DDL信息会自动进行同步...为此,我们策划了RDBMS、NoSQL、NewSQL、时序数据库、大数据生态圈、国产数据库、云数据库等几个版块。

    1.8K20

    MemSQL可以为时间序列应用做些什么

    不得擅自使用腾讯云数据库团队的名义进行转载,或盗用腾讯云数据库团队名义发布信息。 在MemSQL使用中,我们发现人们对时序数据库的场景非常感兴趣。...在下文中,我将展示如何使用MemSQL用作一个强大的时序数据库,并通过简单的查询和用户定义的函数来说明这一点,这些函数将展示如何进行时间序列 - 频率转换,平滑等操作。...我还将介绍如何快速加载时序数据点,并且没有规模限制。...用SQL操作时间序列 与大多数时序数据库不同,MemSQL支持标准SQL,包括内部和外部联接,子查询,通用表表达式(CTE),视图,用于日期和时间操作的丰富标量函数,分组,聚合和窗口函数。...活动推荐:腾讯TEG与CCF(中国计算机协会)合办的腾讯技术工程沙龙“走进工业互联网”将在4月14日(周日)举办啦!扫码即可报名~ ?

    1.4K30

    腾讯云数据库产品介绍

    TDSQL 可以提供公有云、专有云两种部署方案,可以提供关系型数据库实例、分布式数据库实例、分析型数据库实例。...时序数据库 CTSDB 腾讯云推出的一款分布式、可扩展、支持近实时数据搜索与分析的时序数据库。CTSDB提供高效读写、低成本存储、强大的聚合分析能力、实例监控以及数据查询结果可视化等功能。...基于时间序列数据的特点,传统的关系型数据库无法进行有效存储和查询,于是时序数据库应运而生。 游戏数据库 TcaplusDB 专为游戏设计的分布式 NoSQL 数据存储服务。...特性: HTAP 事务和分析引擎:事务和分析混合处理技术(HTAP)要求同一个数据库实例能够处理资源诉求矛盾的两种业务类型(OLTP 或和OLAP),这对于传统数据库很难做到。...-- 物联网设备监控互联网业务监控 游戏数据库 TcaplusDB Cache 与持久存储结合支持全区全服 -- 游戏场景 分布式HTAP数据库Tbase HTAP 事务和分析引擎支持行列混合存储多周边生态支持去

    11.6K10
    领券