黑光技术-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

黑光技术

专栏成员

88

文章

150732

阅读量

17

订阅数

漫谈开源许可证

开源面向对象编程 apache linux 大数据

目前，开源软件被大规模的使用在生产环境，包括Linux，MySQL这些基础软件，以及各细分领域的专业软件，比如做大数据处理的hadoop/kafka/storm，搞机器学习的tensorflow等，可以说我们每天都在直接或间接的使用开源软件。使用开源软件就一定要遵循它的许可证，否则可能会面法律纠纷和行业谴责。

2020-05-14

1.3K0

事件驱动架构：初级篇

windows 大数据数据库 sql 微服务

原文：https://medium.com/high-alpha/event-driven-architecture-a-primer-f636395d0295

2020-05-14

5760

Flink数据流编程模型

api 大数据数据处理 sql

低级处理函数集成了DataStream API，使得它可以在某些特定操作中进入低级抽象层。DataSet API在有限数据集上提供了额外的原语，比如循环/迭代（loops/iterations ）。

2019-03-08

1.7K0

Apache Flink 1.6 Documentation: Jobs and Scheduling

大数据 mapreduce

Flink中的执行资源是通过任务执行槽来确定的。每个TaskManager有一个或者多个任务执行槽，每个可以运行一个并行任务的流水线。每个流水线包含多个连续的任务，像N次的MapFunction的并行实例跟一个ReduceFunction的n次并行实例。注意Flink经常同时执行多个连续的任务：对数据流程序来说都会这样，但是对于批处理程序来只是频繁发生。

2019-03-06

6370

大数据利器2018版

类别名称官网备注（可重点关注加粗部分）查询引擎Phoenixhttps://phoenix.apache.org/Salesforce公司出品，Apache HBase之上的一个SQL中间层，完全使用Java编写Prestohttp://prestodb.io/Facebook开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持GB到PB字节Sharkhttp://shark.cs.berkeley.edu/Spark上的SQL执行引擎，已演化成Spark-SQL和Hive on SparkPigh

2019-03-06

9940

Flink分布式运行时环境

大数据编程算法 jvm go api

Flink对分布式任务的执行操作，它是把操作子任务链起来放到任务中。每个任务由一个线程来执行。把操作链起来放入任务中是非常好的一个优化：它可以减少线程间交互和缓存的开销，减少延迟的同时提升整体的吞吐量。链操作的方式是可以配置的，在链操作文档中有详细的介绍chaining docs 。

2019-02-23

9150

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态