前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >ETL(六):筛选器转换组件的使用

ETL(六):筛选器转换组件的使用

作者头像
数据分析与统计学之美
发布2021-11-25 09:48:55
7930
发布2021-11-25 09:48:55
举报
文章被收录于专栏:Python+数据分析+可视化
1、需求如下
在这里插入图片描述
在这里插入图片描述
2、开发步骤如下
1)定义源表;
在这里插入图片描述
在这里插入图片描述
2)定义目标表:将源表拖拉到右侧灰色区域,创建目标表;

① 给目标表重命名;

在这里插入图片描述
在这里插入图片描述

② 根据需求,选择我们想要保留的字段;

在这里插入图片描述
在这里插入图片描述

③ 生成并执行,该目标表才能真正在目标数据库中创建;

在这里插入图片描述
在这里插入图片描述

④ 可以在目标数据库Oracle中的edw用户中查看该创建的表;

在这里插入图片描述
在这里插入图片描述
3)创建映射;

① 创建一个新的映射;

在这里插入图片描述
在这里插入图片描述

② 将源表和目标表都拖拉进右侧灰色区域;

在这里插入图片描述
在这里插入图片描述

③ 在源表和目标表中间加一个“筛选器转换”组件;

在这里插入图片描述
在这里插入图片描述

④ 把给目标表的所有字段,都先传递给这个“筛选器转换”组件,进行过滤;

在这里插入图片描述
在这里插入图片描述

⑤ 编辑“筛选器转换”组件,过滤得到我们想要的数据;

在这里插入图片描述
在这里插入图片描述

⑥ 再把“筛选器转换”组件中的字段,传递给目标表中;

在这里插入图片描述
在这里插入图片描述

⑦ 点击CTRL+S保存,当出现如下界面,证明映射创建成功;

在这里插入图片描述
在这里插入图片描述
4)定义任务

① 创建任务;

在这里插入图片描述
在这里插入图片描述

② 选择该任务要执行的映射;

在这里插入图片描述
在这里插入图片描述

③ 修改源表的连接对象;

在这里插入图片描述
在这里插入图片描述

④ 修改目标表的连接对象;

在这里插入图片描述
在这里插入图片描述

⑤ 点击CTRL+S保存,当出现如下界面,证明任务创建成功;

在这里插入图片描述
在这里插入图片描述
5)创建一个工作流

① 创建一个工作流

在这里插入图片描述
在这里插入图片描述

② 将任务手动拖拉到右侧区域,建立工作流与任务之间的连接;

在这里插入图片描述
在这里插入图片描述

③ 点击CTRL+S保存,当出现如下界面,证明工作流创建成功;

在这里插入图片描述
在这里插入图片描述

④ 启动工作流;

在这里插入图片描述
在这里插入图片描述

⑤ 上述操作会自动打开M客户端,在M客户端可以查看执行日志,当出现了错误都可以在这里进行原因查找;

在这里插入图片描述
在这里插入图片描述

⑥ 此时,取edw用户下查看重新生成的edw_emp_deptno_30表,可以看到表中只有deptno=30的记录;

在这里插入图片描述
在这里插入图片描述
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019/12/23 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1、需求如下
  • 2、开发步骤如下
    • 1)定义源表;
      • 2)定义目标表:将源表拖拉到右侧灰色区域,创建目标表;
        • 3)创建映射;
          • 4)定义任务
            • 5)创建一个工作流
            相关产品与服务
            数据库
            云数据库为企业提供了完善的关系型数据库、非关系型数据库、分析型数据库和数据库生态工具。您可以通过产品选择和组合搭建,轻松实现高可靠、高可用性、高性能等数据库需求。云数据库服务也可大幅减少您的运维工作量,更专注于业务发展,让企业一站式享受数据上云及分布式架构的技术红利!
            领券
            问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档