ETL代表提取、转换和加载。它是从任何数据源中提取数据并将其转换为适当格式以供存储和将来参考的过程。
ETL负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到 数据仓库或数据集市中，成为 联机分析处理、数据挖掘的基础。
数据质量（Data Quality）是数据分析结论有效性和准确性的基础也是最重要的前提和保障。数据质量保证（Data Quality Assurance）是数据仓库架构中的重要环节，也是ETL的重要组成部分。 我们通常通过数据清洗（Data cleansing）来过滤脏数据，保证底层数据的有效性和准确性，数据清洗一般是数据进入数据仓库的前置环节，一般来说数据一旦进入数据仓库，那么必须保证这些数据都是有效的，上层的统计聚合都会以这批数据作为基础数据集，上层不会再去做任何的校验和过滤，同时使用稳定的
Oracle 为了支持与安全相关的修复以及高优先级的非安全修复，将在每年的 1 月，4 月，7 月和 10 月中每个季度发布一个RU。从 2017 年 7 月开始，Oracle 对数据库和 GI(Grid Infrastructure) 12.2 及之后版本的主动修补程序进行了更改。Oracle 从 12.2 版本开始补丁不在使用 PSU、SPU 的称呼了， 取而代之的为 RU (Release Updates) 和 RUR (Release Update Revisions)。
下载补丁和 OPatch 停止集群件备份家目录 两节点 GI、DB OPatch 替换 复制 oui-patch.xml 到远程节点 2 注意权限 补丁分析 使用 root 用户分析补丁 33806152 OCW 分析 ACFS 补丁分析 Tomcat 补丁分析 DBWLM 补丁分析 节点一分开打各个补丁 root 自动打补丁 33806152 OCW 补丁 ACFS 补丁 Tomcat 补丁 DBWLM 补丁 节点二应用补丁 Root 打补丁 33803476 检查补丁信息 手动打补丁 OJVM 补丁 检查数据库补丁信息 补丁回退 其他补丁相关的资料
近期，由于 Oracle 发布了第一季度的补丁程序包，而安全又被重视了很多，那么我们运维的数据库则需要打升级补丁，避免被扫描到漏洞。天天在打补丁，连做梦都是，这里总结分享一下，避免后人踩坑，需要的可仔细阅读实践。
此前 Oracle 已经发布了 Autonomous Data Warehouse 服务（ADW），现在 Autonomous Transaction Processing 服务发布 (ATP)，这两者都是依托 Oracle Cloud提供的。当然，在中国即将开放的数据中心里，这两项功能也无法使用到。
Warning: The SCN headroom for this database is only 3 days!
4 月中旬， Oracle 官方发布了季度补丁程序包，我们生产环境的众多数据库能打补丁的都打上了补丁，不重要的数据库也不能打补丁则关停了一段时间，上个月也可真是风风火火的一个月，感觉天天都在打补丁，事后也写了篇 Oracle 11GR2 RAC 最新补丁指导,感兴趣的可以点此查看。这两日有部分小伙伴说对于单节点的数据库该怎么操作，碰巧今晚又有两台单节点的数据库需要打补丁，那么难得有时间就写一下吧，方便以后学习。
ETL是BI项目最重要的一个环节，通常情况下ETL会花掉整个项目的1/3的时间，ETL设计的好坏直接关接到BI项目的成败。ETL也是一个长期的过程，只有不断的发现问题并解决问题，才能使ETL运行效率更高，为项目后期开发提供准确的数据。
Oracle 10g 以后的升级，步骤都差不多，实验之前，翻看了下官方手册和MOS上升级的内容。 步骤没有变化。下面详细讲解下Oracle 11.2.0.4 升级到 12.2.0.1 的大致步骤。
DECODE 函数将 expr 与 search 的值逐个比较。如果 expr 与 search 值相等，Oracle 返回 search 相应的 result。如果 expr 与 search 值都不匹配，Oracle 返回 default，如果没有函数中没有赋值 default，Oracle 返回 null。
最近携程的数据事故闹得沸沸扬扬，不管是什么原因，问题终究发生了。在问题发生的时候，更关键的是解决方法和防范措施，一般在升级或者重大的生产演练中，我们都有一个lesson learn,就是总结问题，总结经验，防范规范。 除此之外，一线人员在各种重大活动中都发挥了重要的作用，我还是喜欢那句华为任正非的那句话：让听得见炮声的人指挥。其余我只能报以呵呵的态度了。 自己也抽空整理了一下自己经历的数据相关的重大问题和事故，一总结还真吓一跳。确认也有不少案例。很多都记录在自己的技术博客中了，想了解详细的内容可以参考一下
前面几天发布了一篇使用 OGG 21c 遇到的几个问题之后，居然在新的周一后又发现了一个与 OGG 相关的问题，那是什么问题呢？且听小哥我慢慢道来。说来也简单就是使用 OGG21c 在中间机配置好了远程捕获 EXTRACT 进程，将数据导入到目标端 19c 后，源端捕获进程有很大的延迟，按照这个延迟来看，本地的归档日志也都删除了，可这个捕获进程呢没有任何报错，延迟一直在增大。
参考MOS文档： AutoUpgrade Tool (Doc ID 2485457.1) Database Server Upgrade/Downgrade Compatibility Matrix (Doc ID 551141.1)
顶级云计算数据仓库展示了近年来云计算数据仓库市场发展的特性，因为很多企业更多地采用云计算，并减少了自己的物理数据中心足迹。
Oracle patch也即是Oracle补丁。Oracle补丁又包含好几个种类，小的补丁简直是难以数计，难免让人眼花缭乱。尽管如此，Oracle patch还是有序可循的。而且Oracle提供的opatch工具非常方便的用于安装oracle patch，以及查看当前系统已经安装的patch。本文列出了patch的几种类型，以及主要描述通过opatch工具查看当前数据库的patch应用的情况。对于如何apply patch可参考Oracle官方文档。
脚本使用和下载可参考Github：https://github.com/pc-study/InstallOracleshell
hive on spark(版本兼容) 官网https://cwiki.apache.org/confluence/display/Hive/Hive+on+Spark%3A+Getting+Started
编写此文档为了更好地指导Oracle补丁安装工作，细化工作任务，规范安装升级操作。
导读：记录19.3 rac 打补丁过程中遇到的一些问题19.3升19.5、19.5升19.6。
从去年开始便一直使用的是 ogg 19c，但今年年中时候发现 Oracle 官方居然将 Linux x64 位的 ogg 下载链接下架了，不知为何无法下载到这个版本了（PS：有需要的前去我的墨天轮地址下载：https://www.modb.pro/download/761440），微服务版本也没有了，现在只能从官网看到 21c 的安装包。
JDK8发布至今已经很久了，很多开发人员，公司都还是使用的JDK6或者JDK7，看到很多人的评论，那么我们到底要不要升级到JDK8呢？ Oracle这个婊子早已经宣布停止更新了JDK7的补丁以及相关升级包，对于这样的做法我一开始是拒绝的，甚至到现在我都是拒绝的。。。 - - 很多人都是使用的老版本JDK，你关闭了，也太急躁了吧，JDK8是新，但是实在是不兼容啊，很多项目升级到JDK8之后会因为JDK8内部的一些实现造成不兼容，然后这些项目又不得不回退到原始版本，于是这些公司的员工甚至架构师就开始骂街了
产品原型： 图片.png 功能需求：点击导出考勤表格按钮，会自动下载成Excel格式 图片.png 图片.png jsp页面代码： <button type="02
chown -R oracle:oinstall /u01/app/oracle/oggdata/orcl
版权声明：本文为博主原创文章，未经博主允许不得转载。
哪怕像情人节这么浪漫的日子，DBA们还是要埋头苦干与数仓持续战斗。面对浩大的数仓工程，DBA们每天身兼搬砖工、侦察兵和消防员……多个角色，心情也随之在窃喜、崩溃、惊慌、失落与无奈之间频繁切换……
Sqoop是一个用来将hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库(例如：mysql,oracle,等)中的数据导入到hadoop的HDFS中，也可以将HDFS的数据导入到关系型数据库中。
包含 Hive 支持的 Spark SQL 可以支持 Hive 表访问、UDF (用户自定义函数)以及 Hive 查询语言(HiveQL/HQL)等。需要强调的一点是，如果要在 Spark SQL 中包含Hive 的库，并不需要事先安装 Hive。一般来说，最好还是在编译Spark SQL时引入Hive支持，这样就可以使用这些特性了。如果你下载的是二进制版本的 Spark，它应该已经在编译时添加了 Hive 支持。
接上2篇文档关于多键索引内容,接着学习数组文档,主要实验来验证如何进行高效数据查询,通过对比方式来验证3种多键索引优缺点以及适合场景,具体链接如下:
目录 实时ETL模块开发准备 一、编写配置文件 二、创建包结构 三、编写工具类加载配置文件 实时ETL模块开发准备 一、编写配置文件 在公共模块的resources目录创建配置文件：config.properties # CDH-6.2.1 bigdata.host=node2 # HDFS dfs.uri=hdfs://node2:8020 # Local FS local.fs.uri=file:// # Kafka kafka.broker.host=node2 kafka.broker.port=9
Oracle作为大型商业关系型数据库, 从其补丁体系就可以看出其考虑的全面性. 首先我们看下oracle Patch的主要类型:
上一个系列文章讲解了Feign的源码，主要是Feign动态代理实现的原理，及配合Ribbon实现负载均衡的机制。
汇总各种来源的数据，可以创建一个中央仓库。通过分析和汇总业务数据报告，数据仓库能够帮助企业做出明智、战略性的决策分析。虽然数据仓库提供了许多便利，但是把这些敏感数据收集到一个单独系统，会给数据仓库带来安全问题。 如果选择使用数据仓库，企业需要考虑如何更好地保护内部信息系统。任何数仓安全方面的妥协都会给入侵者或网络罪犯以可乘之机，造成销售、营销、客户信息等业务数据的毁坏泄露。今年爆发的WannaCry勒索软件事件也表明了这一点，现代企业需要严格规避数据犯罪。 在数据仓库中，最常见的数据库管理系统应该是开源My
本次环境： RHEL 6.5 + Oracle 11.2.0.4 单实例 目前最新的PSU： 补丁程序23054359: DATABASE PATCH SET UPDATE 11.2.0.4.160719 目前最新的OJVM PSU： 补丁程序23177551: OJVM PATCH SET UPDATE 11.2.0.4.160719
Oralce 19C 版本已经趋于成熟，而 11GR2 版本Oracle已经在 2020 年停止支持，意味着不再更新 bug 补丁。因此，升级 19C 是未来的大趋势，本文就来讲解下 Oracle 如何快速安装的升级到 19C 版本。
北京时间2020年1月15日，Oracle发布2020年1月关键补丁更新（Critical Patch Update，简称CPU），此次更新修复了333个危害程度不同的安全漏洞。其中196个漏洞可被远程未经身份认证的攻击者利用。此次更新涉及Oracle Database Server、Oracle Weblogic Server、Oracle Java SE、Oracle MySQL等多个产品。Oracle强烈建议客户尽快应用关键补丁更新修复程序，对漏洞进行修复。
<input type="button" onclick="javascript:method1('tableExcel');" value="第一种方法导入到EXCEL"> <input type="button" onclick="javascript:method2('tableExcel');" value="第二种方法导入到EXCEL"> <input type="button" onclick="javascript:getXlsFromTbl('tableExcel',null);" value="第三种方法导入到EXCEL">
1:引入Bootstrap Table表格插件相关链接：这里直接拿来用就可以了，如果要下载到本地，可以自行去官网下载。
近期安恒信息在应急响应过程中发现有恶意攻击者利用WebLogic漏洞对企业服务器发起大范围远程攻击，攻击成功后植入挖矿后门程序，通过分析发现攻击者利用了Oracle WebLogic中WLS 组件漏洞（CVE-2017-10271）。有大量企业的服务器被攻陷，且被攻击企业数量呈现明显上升趋势，需要引起高度重视。CVE-2017-10271是一个最新的利用Oracle WebLogic中WLS 组件的远程代码执行漏洞，Oracle官方在 2017 年 10 月份发布了该漏洞的补丁，但没有公开漏洞细节，如果企业
Spark通过Spark-SQL使用hive 语句,操作hive,底层运行的还是 spark rdd。
用TaskStackBuilder来获取PendingIntent处理点击跳转到别的Activity，首先是用一般的PendingIntent来进行跳转。
公司做项目需要前端导出 excel，因此查了许多，总结出前端导出 excel 的三种方法（如不全面，请更正）
Oracle在2015年11月官方发布了一个Weblogic Java反序列化漏洞，CVE编号“CVE-2015-4852”，官方公告： https://www.oracle.com/technetw
我们知道，有多种方法可以进入“Excel加载宏”对话框。最简单的就是，单击功能区“开发工具”选项卡“加载项”组中的“Excel加载项”，即可打开如下图1所示的的“加载宏”对话框。
数据库升级并不难，只要遵循其步骤，一般问题不大。但是升级失败的情况也是屡见不鲜，尤其是生产数据库的升级，搞不定的时候甚至要创建SR。
声明：本文仅代表原作者观点，来源|CSDN/Elsa。仅用于SAP软件的应用与学习，不代表SAP公司。注：文中SAP相关字或图片，相应著作权归SAP所有。
泛型函数 (Generic Function) 存在的意义，解决了运行时参数类型多变，而标准函数无法一一匹配的情况。以判断某变量是否为 Null 而赋予不同默认值为例。程序不可能做到对每种类型都做这样的判断，这样将需要重写很多方法，而泛型则很好解决了该问题
前段时间在做oracle查询的时候遇到了一个非常奇怪的现象，现将现象和解决过程记录下来，以备查看：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
