腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

DevOps持续集成

专栏作者

384

文章

576666

阅读量

67

订阅数

Apache Airflow的组件和常用术语

ios apache windows 存储 python

The many functions of Airflow are determined by the perfect interaction of its components. The architecture can vary depending on the application. It is thus possible to scale flexibly from a single machine to an entire cluster. The graphic shows a multi-node architecture with several machines. Airflow 的许多功能取决于其组件的完美相互作用。体系结构可因应用程序而异。因此，可以从单台机器灵活地扩展到整个集群。该图显示了具有多台计算机的多节点体系结构。

DevOps云学堂

2022-12-29

1.1K0

Apache Airflow-ETL 工作流的下一级CRON替代方案

apache ios windows api 网站

The business world communicates, thrives and operates in the form of data. 商业世界以数据的形式进行通信、繁荣和运营。 The new life essence that connects tomorrow with today must be masterfully kept in motion. 连接明天和今天的新生命精华必须巧妙地保持运动。 This is where state-of-the-art workflow management provides a helping hand. 这就是最先进的工作流程管理提供帮助的地方。 Digital processes are executed, various systems are orchestrated and data processing is automated. 执行数字流程，协调各种系统，实现数据处理自动化。 In this article, we will show you how all this can be done comfortably with the open-source workflow management platform Apache Airflow. 在本文中，我们将向您展示如何使用开源工作流管理平台Apache Airflow轻松完成所有这些操作。 Here you will find important functionalities, components and the most important terms explained for a trouble-free start. 在这里，您将找到重要的功能、组件和最重要的术语，以实现无故障启动。

DevOps云学堂

2022-12-29

9330

Apache Airflow-编写第一个DAG

apache 网站 ide python

Apache Airflow: Write your first DAG in Apache Airflow

DevOps云学堂

2022-12-29

1.3K0

Apache Airflow：安装指南和基本命令

The more preferable approach to installing Apache-Airflow is to install it in a virtual environment. Airflow requires the latest version of PYTHON and PIP (package installer for python).

DevOps云学堂

2022-12-29

2.3K0

Airflow DAG 和最佳实践简介

数据库 sql bash apache

由于组织越来越依赖数据，因此数据管道(Data Pipeline)正在成为其日常运营的一个组成部分。随着时间的推移，各种业务活动中使用的数据量急剧增长，从每天兆字节到每分钟千兆字节。

DevOps云学堂

2022-10-04

2.7K0

面向DataOps：为Apache Airflow DAG 构建 CI/CD管道

单元测试腾讯云测试服务 python apache

使用 GitHub Actions 构建有效的 CI/CD 管道以测试您的 Apache Airflow DAG 并将其部署到 Amazon MWAA

DevOps云学堂

2022-10-04

3K0

如何使用Sonatype Nexus管理Helm Charts

kubernetes 容器镜像服务编程算法网站 apache

Helm是Kubernetes的最受欢迎的软件包管理工具。它允许DevOps团队对Kubernetes应用程序进行版本控制，分发和管理。尽管可以使用标准的kubectl命令和Kubernetes清单YAML文件，但是当组织从事微服务体系结构时-数百个容器相互交互-这就需要对Kubernetes清单进行版本化和管理。

DevOps云学堂

2020-06-19

3.3K0

实践: 使用共享库扩展Jenkinsfile

jenkins github python apache git

共享库这并不是一个全新的概念，其实具有编程能力的同学应该清楚一些。例如在编程语言Python中，我们可以将Python代码写到一个文件中，当代码数量增加，我们可以将代码打包成模块然后再以import的方式使用此模块中的方法。

DevOps云学堂

2020-02-19

2K0

新生：编写Jenkinsfile常用的Groovy语法

Jenkinsfile使用Groovy语法编写，除了使用Jenkins插件自带的一些DSL方法之外，还可以通过原生的Groovy语法进行数据处理、逻辑控制。

DevOps云学堂

2019-12-24

2.1K0

必备: 流水线中常用的DSL方法

jenkins json apache html

若要使用readJSON方法需要安装Pipeline插件，很方便解析Json数据。可以读取文件或文本。具体的用法：

DevOps云学堂

2019-12-24

1.1K0

全能詹：Jenkins收集测试误报用例

uml github git 开源 apache

什么是误报？这里定义为不是用例本身错误导致的错误（网络、环境等原因造成的失败）。

DevOps云学堂

2019-11-28

1K0

Groovy Jenkins Pipeline

微服务 apache jenkins

Jenkins是一种广泛使用的CICD工具。多微服务的场景下流水线非常复杂。进行一些很小的变更都是一项繁琐的任务，例如更新一个URL一样。因为必须为每个微服务都进行更改。由于缺少更改日志，因此也很难跟踪进行了哪些更改以及由谁进行更改。

DevOps云学堂

2019-11-12

1.3K0

Ant+Jmeter批量接口测试实践

下载地址：http://ant.apache.org/bindownload.cgi

DevOps云学堂

2019-10-18

5960

项目中常用的构建工具

maven java xml gradle apache

最早出现的构建工具是Make，但是Make这个构建工具一般只用在C或者C++语言的构建中，那么Java语言中有哪些常见的构建工具呢？

DevOps云学堂

2019-10-18

1.4K0

Jmeter连接Mysql和Oracle数据库

oracle apache 云数据库 SQL Server java 数据库

Ⅰ。所有jmeter基本组件功能本文不做介绍。 jmeter要连接mysql数据库，首先得下载mysql jdbc驱动包（注：驱动包的版本一定要与你数据库的版本匹配，驱动版本低于mysql版本有可能会导致连接失败报错）我这里下载的是mysql-connector-java-5.1.28.jar，驱动下载方法见文章末尾介绍

DevOps云学堂

2019-10-18

3.7K0

使用Jmeter开发app端接口自动化案例实战

安全 http 网络安全 apache https

一、使用Fiddler抓包 1.首先进入Tools>Options，设置HTTPS请求抓包，勾选HTTPS下的Capture HTTPS CONNECTs选项

DevOps云学堂

2019-10-17

6700

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态