腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

互联网技术栈

专栏作者

93

文章

174303

阅读量

42

订阅数

美团分布式ID生成服务

云数据库 SQL Server 分布式 zookeeper 数据库 sql

Leaf是美团基础研发平台推出的一个分布式ID生成服务，名字取自德国哲学家、数学家莱布尼茨的一句话“There are no two identical leaves in the world”。Leaf具备高可靠、低延迟、全局唯一等特点。目前已经广泛应用于美团金融、美团外卖、美团酒旅等多个部门。具体的技术细节，可参考此前美团技术博客的一篇文章：《Leaf美团分布式ID生成服务》。近日，Leaf项目已经在Github上开源：https://github.com/Meituan-Dianping/Leaf，希望能和更多的技术同行一起交流、共建。

2019-08-21

8650

分布式分析引擎Kylin Spring DataSource封装

Apache Kylin™是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。

2019-03-20

8860

大数据实时查询-Presto集群部署搭建

大数据分布式 sql 数据分析 hive

Presto是一个分布式SQL查询引擎，它被设计为用来专门进行高速、实时的数据分析。它支持标准的ANSI SQL，包括复杂查询、聚合（aggregation）、连接（join）和窗口函数（window functions)。Presto的运行模型和Hive或MapReduce有着本质的区别。Hive将查询翻译成多阶段的MapReduce任务，一个接着一个地运行。每一个任务从磁盘上读取输入数据并且将中间结果输出到磁盘上。然而Presto引擎没有使用MapReduce。它使用了一个定制的查询和执行引擎和响应的操作符来支持SQL的语法。除了改进的调度算法之外，所有的数据处理都是在内存中进行的。不同的处理端通过网络组成处理的流水线。这样会避免不必要的磁盘读写和额外的延迟。这种流水线式的执行模型会在同一时间运行多个数据处理段，一旦数据可用的时候就会将数据从一个处理段传入到下一个处理段。这样的方式会大大的减少各种查询的端到端响应时间。

2018-12-12

3.3K0

Databus 分布式数据库同步系统

TDSQL MySQL 版 http git 分布式存储

一个大型分布式系统往往存在多种的存储系统，mysql，tair，redis，memcache，hbase等等。一些重要的或者需要事务支持的数据操作，通常都会放到mysql处理。但是，为了满足高性能的访问需求或者做一些服务定制化的查询，业务上通常又会把mysql的数据再写到tair或者redis等外部存储中一份。

2018-12-12

1.8K0

Zookeeper 使用场景

zookeeper dubbo 存储分布式开源

image.png 主要使用场景汇总应用场景描述使用示例备注命名服务服务注册、服务发现功能 dubbo 配置服务利用ZK的树形数据存储保持配置信息分布式锁利用ZK临时顺序节点，实现资源占用功能分布式锁专用服务一些开源项目对zk的命名服务、配置服务等需求 kafka hadoop redis 选主分布式服务需要一个leader和多个follower（或者backup），zk临时节点来完成选主功能 kafka 数据挖掘抓取服务 ---- 个人介绍：高广超：多

2018-12-12

4120

服务框架及服务治理组件——业界调研

负载均衡开源分布式容器 rpc

声明：主要内容来自公司内部对业界的调研,不一定恰当、准确、实时。表格文字较多，APP阅读体验较差团队服务相关组件\方案通信框架监控负载均衡\路由是否开源腾讯完全自研；BG内部自治，每个BG有自己相应的解决方案，单独演进；包括：服务注册路由中心；流量定义ABTesting方案；日志分布式收集；配置中心等没有公司级的服务治理组织去统一各个BG也不一样技术工程TEG\原搜索：自定义二进制协议编解码，或Protocol Buffer（以下简称PB）进行序列化\反序列化，自研服务容器、

2018-12-12

1.5K0

分布式任务调度组件 LTS 用户文档

分布式开源 git http .net

LTS(light-task-scheduler)主要用于解决分布式任务调度问题，支持实时任务，定时任务和Cron任务。有较好的伸缩性，扩展性，健壮稳定性而被多家公司使用，同时也希望开源爱好者一起贡献。

2018-12-12

1.6K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态