腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯大数据的专栏

专栏作者

323

文章

451731

阅读量

124

订阅数

龙举云兴｜顶级项目 Apache InLong 核心技术探秘

apache flink sql 数据库云数据库 SQL Server

Apache 软件基金会（即 Apache Software Foundation，简称为 ASF）于近日正式宣布，Apache InLong（应龙）从孵化器成功毕业，成为基金会顶级项目！ Apache 基金会公告（点击“阅读原文”查看） Apache InLong 的毕业，标志着业界首个一站式大数据集成 Apache 顶级项目诞生，也标志着第一个由腾讯捐献的 Apache 项目孵化成功，中国本土原生的顶级项目再增一员，恭喜 InLong 社区。Apache 软件基金会是专门为支持开源软件项目而办的一个

腾讯大数据

2022-06-24

3730

智能计算时代 | SuperSQL基于监督学习模型的自适应计算提效能力

sql 数据库云数据库 SQL Server hive hadoop

点击蓝字关注我们更多咨询天穹SuperSQL是腾讯自研、基于统一SQL语言模型、面向机器学习智能调优、提供虚拟化数据和开放式计算引擎的大数据智能融合平台。在开放融合的Data Cloud上，业务方可以消费完整的数据生命周期（采集-存储-计算-分析-洞察），还能够满足位于不同数据中心、不同类型数据源的数据联合分析/即时查询的需求。目前，SuperSQL已经迈入智能计算时代，SuperSQL能够基于规则匹配(RBO)与代价估算(CBO)，利用不同算法智能地为不同用户SQL挑选最合适的执行引擎，极大地优化S

腾讯大数据

2022-03-03

9730

《你问我答》第四期 | 进一步讲解SuperSQL、Oceanus以及Tbase

flink hive 大数据云数据库 SQL Server 运维

各位小伙伴们大家好，我们又见面啦~ 这里是《你问我答》栏目第四期上周推送了一篇关于腾讯SuperSQL的文章《「解耦」方能「专注」——腾讯天穹SuperSQL跨引擎计算揭秘》很多同学对这个项目产生了浓厚的兴趣本期，我们的专家老师将现身说法进一步为大家介绍腾讯大数据SQL引擎天穹SuperSQL的性能表现同时，也会解答小伙伴们关于腾讯一站式实时计算平台Oceanus 以及分布式 HTAP 数据库管理系统Tbase 的部分疑问对这些话题感兴趣的同学就快来看看吧！ 01 @旧故里草木深：

腾讯大数据

2020-06-22

1.1K0

「解耦」方能「专注」——腾讯天穹SuperSQL跨引擎计算揭秘

postgresql sql 数据库云数据库 SQL Server hive

导语：得益于调度单元是通用的SQL语句，SuperSQL能够做到与特定计算引擎解耦，也正因为此原因，SuperSQL只需专注在最优执行计划生成，并根据SQL具体类型选择最佳的计算引擎。天穹SuperSQL是腾讯自研的跨数据源、跨数据中心、跨计算引擎的大数据SQL引擎，能够满足位于不同数据中心、不同类型数据源的数据联合分析/即时查询的需求。在腾讯整个天穹大数据图谱中，负责连接端与存储。数据源无论是关系型数据库、NoSQL还是大数据系统；数据存储无论是跨集群还是跨数据中心；数据计算无论是报表生成、分析挖掘

腾讯大数据

2020-06-16

2.9K0

SuperSQL：跨数据源、跨DC、跨执行引擎的高性能大数据SQL中间件

云数据库 SQL Server sql spark 数据库 jdbc

导语：SuperSQL是腾讯数据平台部自研的跨数据源、跨数据中心、跨执行引擎的统一大数据SQL分析平台/中间件，支持对接适配多类外部开源SQL执行引擎，如Spark、Hive等。背景 SuperSQL是一款自研的跨数据源、跨数据中心、跨执行引擎的高性能大数据SQL中间件，满足对位于不同数据中心的不同类型数据源的数据联合分析/即时查询的需求。SuperSQL的目标是成为公司内部统一的SQL分析中间件，实现以下三点的价值：解决业务数据孤岛，最大化数据的使用价值执行引擎最优选择，提升业务使用数据效率优化

腾讯大数据

2019-09-26

3.5K0

腾讯云数据库获全球“实力竞争者”

开源云数据库 SQL Server mongodb postgresql sql server

近日，国际领先的行业研究与咨询机构Forrester正式对外发布全球最新的数据库评估报告《The Forrester Wave™: Database-As-A-Service, Q2 2019》，腾讯云数据库（TencentDB）在性能规模、配置和管理、数据安全、执行力、开源、售后支持、综合收入、用户数量、合作伙伴9项细分指标均获高分。

腾讯大数据

2019-06-24

1.2K0

Oceanus:基于Apache Flink的一站式实时计算平台

云数据库 SQL Server sql 数据库运维

Flink Forward是由Apache官方授权，用于介绍Flink社区的最新动态、发展计划以及Flink相关的生产实践经验的会议。2018年12月20日，Flink Forward首次来到中国举办。腾讯TEG数据平台部参加了会议并在会上介绍了腾讯内部基于Flink打造的一站式实时计算平台Oceanus。一、背景介绍 TEG实时计算团队作为腾讯内部最大的实时数据服务部门，为业务部门提供高效、稳定和易用的实时数据服务。其每秒接入的数据峰值达到了2.1亿条，每天接入的数据量达到了17万亿条，每天的数据增长

腾讯大数据

2019-01-30

1.9K1

数据库schema设计与优化

数据库云数据库 SQL Server 分布式

1、前言对于数据库而言，在日常开发中我们主要的关注点有两块，一个是schema的结构设计，另一个就是索引的优化，这两块是影响我们最终系统结构和性能的关键部分，自然也是我们花费精力最多的部分；本文主要介绍数据库设计中的一般原则和优化手段，包括数据库的一半范式、反范式设计、数据切分、数据路由与合并等等 2、 Schema设计的一般性原则 2.1 概述范式理论是关系型数据库设计的黄金法则，它提供了数据结构化的理论基础，有效地保证了数据的一致性，应该说，关系型数据库就是在范式的基础上才成长起来的。数据库的

腾讯大数据

2018-01-26

9960

HBase在腾讯大数据的应用实践

数据库云数据库 SQL Server hadoop 系统架构

前言随着腾讯产品与技术的发展，几乎任何一个与用户相关的在线业务的数据量都在亿级别，每日系统调用次数从亿到百亿，对海量数据的高效插入和快速读取变得越来越重要。而传统关系型数据库模式固定、强调参照完整性、数据的逻辑与物理形式相对独立等，比较适用于中小规模的数据，但对于数据的规模和并发读写方面进行大规模扩展时，RDBMS性能会大大降低，分布式更为困难。为什么会选择HBase？高可靠性。HBase是运行在Hadoop上的NoSQL数据库，它的数据由HDFS做了数据冗余，具有高可靠性。同时TDW（腾讯分布式数据仓

腾讯大数据

2018-01-26

1.4K0

Hermes与开源的Solr、ElasticSearch的不同

大数据云数据库 SQL Server 数据库 spark 分布式

谈到Hermes的索引技术，相信很多同学都会想到Solr、ElasticSearch。Solr、ElasticSearch真可谓是大名鼎鼎，是两个顶级项目，最近有些同学经常问我，“开源世界有Solr、ElasticSearch为什么还要使用Hermes” 在回答这个问题之前，大家可以思考一个问题，既然已经有了Oracle、MySQL等数据库为什么大家还要使用ES下的Hive、Spark？ Oracle和MySQL也有集群版，也可以分布式，那ES与Hive的出现是不是多余的？ Hermes的出现，并

腾讯大数据

2018-01-26

1.7K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态