腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

性能与架构

专栏作者

597

文章

1146661

阅读量

116

订阅数

谷歌开源的大数据处理项目 Apache Beam

大数据 apache 数据处理

Apache Beam 是什么？ Beam 是一个分布式数据处理框架，谷歌在今年初贡献出来的，是谷歌在大数据处理开源领域的又一个巨大贡献。数据处理框架已经很多了，怎么又来一个，Beam有什么优势？就是因为分布式数据处理技术现在太多了，让人目眩，所以Beam要解决这个问题。大数据处理领域发展得红红火火，新技术不断，有个笑话：一个程序员抱怨这个框架的API不好用，同事安慰说：别急，再等几分钟就有新框架出来了，应该会更好。 Hadoop MapReduce、Spark、Storm、Flink、Apex …

2018-04-04

1.5K0

如何高效的学习新技术

node.js mapreduce 容器镜像服务大数据容器

在技术领域中，发展非常迅猛，各种技术、概念、框架等层出不穷，我们不断的接收到新的讯息，这就要求我们不断的学习新知识那么我们如何才能高效的学习新的技术呢？我认为最关键的是对技术的热爱和好奇心没有热爱，就会被快速的技术更新折磨得非常疲惫，就会在工作中感觉压力越来越大，越来越迷茫同时也要有好奇心，看到新东西有点小兴奋例如 nodejs火了，这是个什么东西？他是一个js框架吗？他都能干啥？他有什么好处？ docker容器流行了，容器是什么？和虚机是什么关系？他是怎么工作的？在实际工作中怎么用他？前端开发

2018-04-02

7200

mysql 大数据量的分页优化

云数据库 SQL Server 大数据

使用limit进行分页，翻到10000多页后效率低原因 limit offset 会逐行查找，是先查询再跳过优化思路（1）从业务逻辑不允许翻过100页，例如百度一般可以翻到70页左右（2）技术上 select * from table limit 5000000,10 时就很慢了，大概需要4秒多优化方法（1） select * from table where id>5000000 limit 10; 这样就非常快，0.02s左右，因为使用了id索引但这样用有前提，id是连续的，中间的数据不能

2018-04-02

1.3K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态