联机分析处理（OLAP）的概念最早是由关系数据库之父E.F.Codd于1993年提出的。当时，Codd认为联机事务处理(OLTP）已不能满足终端用户对数据库查询分析的需要，SQL对大数据库进行的简单查询也不能满足用户分析的需求。用户的决策分析需要对关系数据库进行大量计算才能得到结果，E.F.codd提出了多维数据库和多维分析的概念，即OLAP。
2022年度Gdevops全球敏捷运维峰会，将于6月17日以广州为起点正式开启！ 与大家携手走过的第7个年头，Gdevops始终坚持输出技术干货、传播前沿理念与实战经验。本次广州站峰会，除了致力于帮助大家解决运维、数据库、金融科技等领域的老大难问题以外，Gdevops还希望与产学研界技术同仁一起探索云原生时代、数字化转型背景下的新趋势、新挑战和新解法。 时间：2022年6月17日 地点：广州阳光酒店 指导单位：上海市软件行业协会、上海市计算机行业协会 学术指导单位：中国信息通信研究院云计算与大数据研究所
OLAP(OnLine Analytical Processing)，即联机分析处理。OLAP对业务数据执行多维分析，并提供复杂计算，趋势分析和复杂数据建模的能力。它主要用于支持企业决策管理分析，是许多商务智能（BI）应用程序背后的技术。OLAP使最终用户可以对多个维度的数据进行即席分析，从而获取他们所需知识，以便更好地制定决策。OLAP技术已被定义为实现“快速访问共享的多维信息”的能力。
OLTP 和 OLAP：这两个术语看起来相似，但指的是不同类型的系统。在线事务处理 (OLTP) 实时捕获、存储和处理来自事务的数据。在线分析处理 (OLAP) 使用复杂的查询来分析来自 OLTP 系统的汇总历史数据。 什么是 OLTP？ OLTP 系统在数据库中捕获和维护事务数据。每个事务都涉及由多个字段或列组成的单个数据库记录。示例包括银行和信用卡活动或零售结账扫描。 在 OLTP 中，重点是快速处理，因为 OLTP 数据库经常被读取、写入和更新。如果事务失败，内置系统逻辑可确保数据完整性。 什么是
OPAP系统构建了一个实时查询的系统可以使用者立马能够查询到实时数据。举个简单的例子，当用户参加一项活动时，产品经理或者是运营人员希望能够马上获得用户的参与效果，并且快速的探索用户的行为特征，从而立马改进活动以获得更好的效果。正所谓：越来接近实时的数据，越有价值。OPAP系统的意义便在于此。
推广大使应在腾讯云推广许可范围内，使用正当的手段方式进行推广，不应进行任何欺骗或虚假性质的推广行为，包括但不限于：
All in 云+时代，数据库的高可用性、按需付费、按需扩展等属性解放了大批开发者。腾讯发布的自研数据库CynosDB作为国内首款同时兼容MySQL和PG的云原生数据库在业内引发热议，还不够了解TA？那么本期分享你一定不能错过！
导语 | 腾讯内部每日都需要对海量的游戏营销活动数据做效果分析，而活动参与人数的去重一直是一项难点。本文将为大家介绍腾讯游戏营销活动分析系统——奕星，在去重服务上的技术思路和迭代方案，希望与大家一同交流探讨。
导语 | 腾讯内部每日都需要对海量的游戏营销活动数据做效果分析，而活动参与人数的去重一直是一项难点。本文将为大家介绍腾讯游戏营销活动分析系统——奕星，在去重服务上的技术思路和迭代方案，希望与大家一同交流探讨。文章作者：王方晓，腾讯运营开发工程师。 一、背景 奕星 (EAS) 是腾讯内部专注于游戏营销活动分析的系统，在营销活动效果分析中，奕星遇到一个最大的问题就是对活动参与人数的去重，并给出对应的活动号码包。单个营销活动的周期是固定的，但活动与活动之间时间很少会有完全相同的情况。 比如A活动时间是1-10号
奕星 (EAS) 是腾讯内部专注于游戏营销活动分析的系统，在营销活动效果分析中，奕星遇到一个最大的问题就是对活动参与人数的去重，并给出对应的活动号码包。单个营销活动的周期是固定的，但活动与活动之间时间很少会有完全相同的情况。
大家好呀！这里是爱学习的 Guide！今天给大家科普一个速度快到飞起的数据库——ClickHouse。
对于sql开发人员来说，需要了解开发的数据库应用于哪种类型，下面对数据库的应用做了分类
关于数据仓库的概念、原理、建设方法论，网上已经有很多内容了，也有很多的经典书籍，本文更想聊聊企业数据仓库项目上的架构和组件工具问题。
点击上方蓝字关注每天学习数据库 All in 云+时代，数据库的高可用性、按需付费、按需扩展等属性解放了大批开发者。腾讯发布的自研数据库CynosDB作为国内首款同时兼容MySQL和PG的云原生数据库在业内引发热议，还不够了解TA？那么本期分享你一定不能错过！ 本期云+社区技术沙龙将全方位解读CynosDB，揭秘技术内幕，解读兼容两大主流开源数据库的一主多读架构、高可用架构及快速恢复实现、可计算智能存储和分布式存储。 长按识别下方长图二维码，即可报名到现场与鹅厂技术大牛零距离交流！来不了现场的朋友，可以预
场主认为：Flink=风口趋势所在！而技术人就是追风的人，stay hungry，stay young！
网名 yumushui ，拥有多年一线传统行业和互联网数据库架构设计与运维经验。Oracle 11g OCM，对MySQL、Oracle、PostgreSQL、Greenplum、MongoDB等多种数据库有丰富的架构、维护实践与分享。
TiDB 主要应用在今日头条核心 OLTP 系统 - 对象存储系统中，存储其中一部分元数据，支持头条图片和视频相关业务，比如抖音等。
ClickHouse 是俄罗斯开源的OLAP数据库，以彪悍的性能著称。开源5年以来，以性能优异、简单易用的特点，吸引了大量的用户群体。本次分享将通过对ClickHouse原理的解析，帮助大家理解ClickHouse 彪悍的性能是如何做到的。同时，会介绍腾讯云ClickHouse在QQ音乐等产品中的实际落地案例、特有的产品能力，以及未来规划。
在各种因素的推动下，分布式数据库已经成为一种技术潮流，甚至是新基建很重要的一部分，该类型数据库也在众多行业进行了广泛落地，供需两旺。分布式数据库的架构设计思想也很值得广大开发者学习。本文，InfoQ 希望呈现有关分布式数据库的架构设计优化及实践相关内容。
玩过魔兽世界，暗黑破坏神，Dota，炉石传说，Dota自走棋的朋友，对这个词一定不陌生。
6月11日9点，腾讯大数据将联合DataFun举办：多维分析架构峰会。腾讯数据平台部总监陈鹏将担任峰会的荣誉主席，计算平台组负责人陈奕安将担任峰会的主席。 本次峰会共设置9大主题论坛，来自腾讯的技术专家龙跃将担任新一代 MPP 数据库架构论坛出品人并作《腾讯新一代多维分析引擎MercsDB》主题分享。本次峰会精彩纷呈，内容上既涵盖了开源多维分析、新一代MPP数据库架构、数据湖分析型架构、实时多维分析等核心技术，也包含金融、互联网、交通、物流、工业、画像、营销等多个应用场景的实践经验。 感兴趣的朋友欢迎预约直
分布式数据库系统通常使用较小的计算机系统，每台计算机可单独放在一个地方，每台计算机中都可能有DBMS的一份完整拷贝副本，或者部分拷贝副本，并具有自己局部的数据库，位于不同地点的许多计算机通过网络互相连接，共同组成一个完整的、全局的逻辑上集中、物理上分布的大型数据库。余军讲师为你讲解分布式数据库在金融行业的创新实践。 余军 PingCAP 高级技术总监，金融行业首席架构师；开源软件的忠实爱好者，负责金融行业基于 TiDB 产品的解决方案、产品架构咨询和建设规划。主要工作经历：富麦信息科技有限公司 CTO ，中
2022 开源新春活动 点击抽签 开启开源新年好运气 虎年 无bug 论坛 爆火 保持 健康 头发 狂长 告别 996 虎虎 生威 开源应用中心新春活动 打卡集好礼，礼包天天送 活动时间：2022年01月14日-02月28日 活动内容：完成三项打卡任务即可获得领奖资格，活动期间每个工作日10个春节礼包 新年快乐 开源应用中心新春活动 打卡集好礼，礼包天天送 打卡内容 打卡1:体验开通应用 打卡2:分享体验心得至各大社交平台 打卡3:将开源历史文章分享至个人论坛（没有个人论坛的同学可以通过
这篇博文讨论了在大数据环境中使用面向 OLAP 的数据库。重点关注 Hive 作为用于实现大数据仓库 (BDW) 的 SQL-on-Hadoop 引擎，探讨如何在 Hive 中将维度模型转换为表格模型。文章还介绍了 Druid 等新兴技术，用于对大型数据集进行实时分析。
http://blog.csdn.net/u011239443/article/details/52623602 《An Overview of Data Warehousing and OLAP Technology》
在 2016 年正式开源后，ClickHouse 这个大数据计算引擎里的后起之秀开始在一众“前辈”面前崭露头角。近两年来，ClickHouse 的关注度、采用度得到了显著提升，这归功于其强大的性能优势和细粒度的分析能力。 字节跳动是国内最大规模的 ClickHouse 使用者之一：节点总数超过 18000个；最大内部集群 2400 余台；管理数据量超 700 PB。然而正如《人月神话》所言，软件开发没有银弹，开源版的 ClickHouse 也无法解决字节跳动复杂的业务场景所带来的个性化挑战。为了解决实际业务
【迪B课堂】为腾讯云数据库产品经理迪B哥开设的面向数据库开发者、数据库运维人员、云端运维人员的系列培训课程，旨在为开发者解决数据库选择和使用过程中遇到的问题。《我说》为迪B课堂的答疑系列，3分钟帮您解决数据库日常运维过程中的小难题。
作者 | 吴炳锡 中国数据库行业随着 2021 年 7 月 PingCAP 完成 3.4 亿美元融资，估值达到 30 亿美金，把中国数据库行业引爆了。2022 年 12 月 23 日达梦数据库 IPO 顺利过会，如果上市成功预计估值在 500 亿人民币，不出意外的话，这将是科创板最大的 IPO 之一。 那么你知道中国的数据公司有多少吗？据不完全的统计已经超过 300 多家，那 2023 年数据库市场又会是什么变化呢？我这里抛出来 5 个问题借本文与大家讨论一下。 Q1. 中国和海外数据库的差距还有多远？
1.何为建模？ 数据几乎总是用于两种目的：操作型记录的保存和分析型决策的制定。简单来说，操作型系统保存数据，分型型系统使用数据。前者一般仅反映数据的最新状态，按单条记录事务性来处理；其优化的核心是更快地处理事务。后者往往是反映数据一段时间的状态变化，按大批量方式处理数据；其核心是高性能、多维度处理数据。通常我们将操作型系统简称为OLTP（On-Line Transaction Processing）— 联机事务处理，将分析型系统简称为OLAP（On-Line Analytical Processing）— 联机分析处理。 针对这两种不同的数据用途，如何组织数据，更好地满足数据使用需求。这里就涉及到数据建模问题。即设计一种数据组织方式（模型），来满足不同场景。在OLTP场景中，常用的是使用实体关系模型（ER）来存储，从而在事务处理中解决数据的冗余和一致性问题。在OLAP场景中，有多种建模方式有：ER模型、星型模型和多维模型。下面分别说明下：
数据几乎总是用于两种目的：操作型记录的保存和分析型决策的制定。简单来说，操作型系统保存数据，分型型系统使用数据。前者一般仅反映数据的最新状态，按单条记录事务性来处理；其优化的核心是更快地处理事务。后者往往是反映数据一段时间的状态变化，按大批量方式处理数据；其核心是高性能、多维度处理数据。通常我们将操作型系统简称为OLTP（On-Line Transaction Processing）— 联机事务处理，将分析型系统简称为OLAP（On-Line Analytical Processing）— 联机分析处理。
数据几乎总是用于两种目的：操作型记录的保存和分析型决策的制定。简单来说，操作型系统保存数据，分型型系统使用数据。
2022年6月，腾讯云数据库TDSQL PG版 Oracle兼容能力以及TDSQL-A两大引擎全新升级，Oracle兼容性和海量数据查询分析能力再上新台阶。 升级后的TDSQL PG版 Oracle兼容能力将进一步降低用户迁移改造成本，全面支持存储过程、Package管理等高级特性，同时支持分布式和集中式两种架构，用户可以根据业务需要从集中式无缝升级至分布式。 海量数据分析能力也迎来了全面升级，TDSQL分布式分析型引擎TDSQL-A自研列存储引入延迟读取、过滤下推、自适应行列转换等能力，支持更加丰富的使
数据仓库 与操作系统分离 , 基于标准的企业模型集成 , 带时间属性 , 面向主题 , 不可更新 的 数据集合 ;
以下文章来源于腾讯云AI ，作者玩转新春采购的 春节已接近尾声 又一份浓浓的年味保留内心 夹带着这份美好 我们再次启程，开启搬砖模式 每一年开工季也是采购需求旺季如何买到最优惠？如何才能不焦虑？ 如何让更多的中小微企业、乃至AI个体从业者也享受到技术红利？ 腾讯云AI特别推出了「新春采购」钜惠大促活动 在这里 与全年真低价相遇！ 一元购、五折惠、京东卡 八块八、九块九应有尽有 跟着买，不迷路 腾讯云AI没套路 ↓↓↓ 爆品·秒杀专区 在腾讯云官网主会场 推出语音识别、文字识别、人像变换等爆品
数据库作为数据存储和管理的核心工具，其技术演进一直是业界关注的焦点。近年来，随着大数据、云计算、人工智能等技术的不断成熟，数据库领域也迎来了前所未有的变革。HTAP 作为一种新兴的数据库技术，正逐渐成为推动企业数字化转型的重要力量。
为您的应用程序找到合适的数据库解决方案并不容易。在全球最大的在线视频网站之一爱奇艺，我们在多个领域的数据库选择方面经验丰富：在线事务处理（OLTP），在线分析处理（OLAP），混合事务/分析处理（HTAP），SQL，和NoSQL。。
导读：本文由京东零售大数据架构师李海波老师贡献。李海波老师从2016年开始在小米和京东负责商业智能和多维分析，推动了多个OLAP组件在公司落地，积极参与内核研发是Apache Doris和ClickHouse的贡献者，曾在百度等公司长期负责广告和搜索相关架构，毕业于华中科技大学计算机专业。
最近这一年多断断续续一直在往 TiDB 中提交一些修改，前两天看了一些 GitHub 提交记录，发现竟然已经累计了 70 来个 PR 了。考虑到最近这一年基本处于疯狂加班的节奏，另外忙里偷闲还基本上刷完了之前列的十几本书的读书清单，我觉得这也算一个不大不小的成就吧，值得 mark 一下。
点击上方蓝字关注每天学习数据库 【迪B课堂】为腾讯云数据库产品经理迪B哥开设的面向数据库开发者、数据库运维人员、云端运维人员的系列培训课程，旨在帮助大家从入门到精通学习和使用数据库。《我说》为迪B课堂的答疑系列，3分钟帮您解决数据库日常运维过程中的小难题。搜索关注腾讯云数据库官方微信，立得10元云代金券，可移动端一键管理数据库。 本期解答的问题是：导致MySQL主从复制延迟的原因 视频核心信息： 我们在进行主备切换时，使用主从复制来进行从库部署。主从复制延迟过大会导致业务信息不一致。造成复制延迟的原因见下
近些年，由于互联网的快速发展以及线上需求的爆发，直播在国内已经成为一个非常成熟的商业模式。在娱乐、教育、办公等场景中涌现出许多优秀的视频直播产品。随着国内市场竞争日益白热化，加之企业出海渐成趋势，越来越多的直播公司选择走出去，寻找新的海外直播市场，借鉴国内成熟的产品、运营以及商业模式，让全球的用户都用上中国人创造的产品，LiveMe 便是成功的出海直播产品之一。
本文为「3306π」成都站系列专访，本期专访嘉宾为腾讯云TXSQL数据库研发工程师赖铮。 赖铮-腾讯 TXSQL数据库研发工程师 在即将举办的10月26日「3306π」成都站活动中，赖铮将分享腾讯云数据库TXSQL的内核新特性，诸如：异步删除大表，GTID复制功能扩展，隐藏列解决无主键表的复制延迟，新的事务调度算法等等，并详细介绍这些新特性的实现原理和使用方法。这些新特性极大的增强了腾讯云数据库的性能、稳定性和易用性，从而为腾讯云数据库的用户提供了更为完善的数据库服务。 以下是会前专访实录。 1、
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/80422836
现在，国内的许多企业都在为信息安全，数据安全而努力着。减少对国外软件产品的依赖，实现软件国产化是一个必然的趋势。但众所周知，我国的软件市场被国外厂商占据了较大的份额，典型如 Microsoft、Oracle、SAP 等。市场上是否存在可以替代这些软件的解决方案呢？其替代方案以及替代成本又如何呢？替换过程能够足够顺滑呢？ 带着这些问题，在将于 2023 年 3 月 17-18 日举办的 ArchSummit 全球架构师峰会北京站上，我们策划了【国产软件优化迭代之路】专题，邀请了蚂蚁集团研发总监封仲淹担任专题出
近期新年活动各家厂商都在紧张筹备中，预计将在3月左右达到高峰期，尤其是318采购节，据了解，厂商投入新购云服务器及一大批量新扩展业务系统上云部署中，轻量应用服务器、其中某用户场景是电商业务系统，需求抗住150W高并发QPS需求，目前腾讯云CLB负载均衡共享型仅支持5W性能，远不够接入支持，无法满足业务应用需求，以下是自己一些见解和推荐方案：
本文从GitHub中整理出15个最受欢迎的Python开源框架。这些框架包括事件I/O，OLAP，Web开发，高性能网络通信，测试，爬虫等。 Django: Python Web应用开发框架 Django 应该是最出名的Python框架，GAE甚至Erlang都有框架受它影响。Django是走大而全的方向，它最出名的是其全自动化的管理后台：只需要使用起ORM，做简单的对象定义，它就能自动生成数据库结构、以及全功能的管理后台。 Diesel：基于Greenlet的事件I/O框架 Diesel提供一个整洁的AP
目前，随着大型决策支持系统的发展，其支撑数据库的执行效率已经成为制约整个企业信息系统性能和效率提升的瓶颈。[1]尤其在电子商务领域，联机事务分析（OLAP）应用越来越广泛，对性能的要求也越发紧迫。联机事务分析是以多维度的方式分析数据，能弹性地提供积存、下钻和枢纽分析等操作，呈现集成性决策信息的方法。其目前主要处理兆兆（T）字节的数据，满足复杂的查询需求，尤其是对多张表中的千万条记录的数据进行数据分析和信息综合。而目前上述需求在关系数据库中已经不能完全的得到满足。[2]同时，商业应用领域对性能、可靠性和性价比的苛刻要求，催生了数据库集群的广泛应用[3]。数据库集群分为共享集群和非共享集群，而针对决策支持系统的业务处理，非共享集群有其固有的优势。[4]
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
