开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Fat/Uber JAR和将cloudera 5.16.x升级到cloudera 6.x/7.x

Fat/Uber JAR:
- 概念：Fat/Uber JAR是一种打包方式，将应用程序及其所有依赖的库文件打包到一个单独的JAR文件中。
- 分类：属于构建和部署应用程序的技术。
- 优势：简化部署过程，减少依赖管理的复杂性，提高应用程序的可移植性。
- 应用场景：适用于Java应用程序的打包和部署，特别是在分布式环境中部署应用程序时。
- 腾讯云相关产品：腾讯云容器服务（TKE）提供了容器化部署的解决方案，可用于部署使用Fat/Uber JAR打包的应用程序。详情请参考：腾讯云容器服务

将Cloudera 5.16.x升级到Cloudera 6.x/7.x:
- 概念：Cloudera是一家提供大数据解决方案的公司，其产品包括Cloudera Distribution Hadoop（CDH）和Cloudera Manager等。
- 升级过程：将Cloudera集群从5.16.x版本升级到6.x/7.x版本需要进行以下步骤：
  1. 检查兼容性：查阅Cloudera官方文档，确认目标版本与当前版本的兼容性。
  2. 备份数据：在升级前，务必备份集群中的数据，以防数据丢失或损坏。
  3. 升级Cloudera Manager：按照官方文档提供的步骤，升级Cloudera Manager到目标版本。
  4. 升级CDH：使用Cloudera Manager界面或命令行工具，按照官方文档提供的步骤，升级CDH到目标版本。
  5. 测试和验证：升级完成后，进行功能测试和验证，确保集群正常运行。
1. 腾讯云相关产品：腾讯云大数据产品提供了类似的解决方案，如腾讯云EMR（Elastic MapReduce）和腾讯云CVM（云服务器），可用于部署和管理Cloudera集群。详情请参考：腾讯云大数据产品

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

CDH5升级到CDP7.1

将Cloudera Enterprise CDH升级到更高版本的CDH和CDP数据中心版。

01

Elasticsearch 升级 7.x 版本后，我感觉掉坑里了！

Elasticsearch从6.x升级到7.x改动还真不是一般的大，ElasticsearchTemplate不建议使用了，改为使用ElasticsearchRestTemplate，ElasticsearchRepository实现复杂查询的方法也不建议使用了。从此我们简单的数据操作可以使用ElasticsearchRepository，而复杂的数据操作只能使用ElasticsearchRestTemplate了。

01

FAQ系列之CDP PvC Base

CDP 私有云基础是Cloudera的本地（裸机）产品、企业数据中心（Enterprise Data Hub）和 HDP 企业的演变。CDP Private Cloud Base 7.1 包括 Cloudera Runtime 7.1，它将 CDH 和 HDP 的优点结合到一个发行版中。CDP私有云基础为客户提供以下服务：

04

将CDH就地升级到CDP PvC基础版概览

升级CDP私有云基础包括两个主要步骤，即升级Cloudera Manager和升级集群。您不需要同时升级Cloudera Manager和集群，但是Cloudera Manager和集群的版本必须兼容。Cloudera Manager的主要+次要版本必须等于或高于CDH或Cloudera Runtime的主要+次要版本。

02

0743-Cloudera Enterprise 6.3.3发布

2020年2月4日Cloudera宣布正式发布CDH6.3.3，该维护版本(maintenance release)包含以前CDH6.3次要版本(minor release)的所有功能，并添加了许多重要的bug修复。同时官方也发布了一些已知问题(known issue)，建议大家可以阅读官网新的升级指南，该指南会指导你如何根据自己特定的环境制定专门的升级方案。

06

干货 | Elasticsearch 8.X 版本升级指南

所以，市面上的各家公司在使用 Elasticsearch 过程中，都有自己的版本选型。根据我个人的调研和不完全观察，当前 1.X、2.X、5.X、6.X、7.X、8.X 版本都有大量的公司在使用。

03

Tomcat与JDK版本对应关系，Tomcat各版本特性

Apache Tomcat是一个开源软件实现了Java Servlet和Java Server Pages技术。不同版本的Servlet和JSP规范可使用不同版本的Apache Tomcat。Tomcat与JDK版本对应关系为：

02

Cloudera Enterprise 6正式发布

2.针对CDH各个组件以及Cloudera Manager本身的自动化的TLS设置安装。

02

0834-CDP Private Cloud Base 7.1.6正式GA

https://docs.cloudera.com/cdp-private-cloud-base/7.1.6/manager-release-notes/topics/cm-release-notes-731.html

03

Cloudera Enterprise 6 Beta发布

盼星星盼月亮，C6终于来了，虽然是Beta，但没关系，至少可以玩起来了，对吧，哈哈。Cloudera在北京时间5月16日的半夜，在其社区（community.cloudera.com）对外宣布发布Cloudera Enterprise 6，Beta。咱们在5月没有等到CDH5.15，等到C6 beta也是不错的嘛。 C6相较于C5是一次各个组件的大版本升级，可以说是翻天覆地的，简单说你以前期待的Hadoop3的一些激动人心的新功能，C6统统都有了。这次更新是一次革命性的，举世无双的，前无古人后无来者的，是对

03

CDP-DC7.1中的 YARN：新增功能和升级方法

该博客文章将介绍客户如何将集群和工作负载迁移到新的CDP-DC7.1，以及此新版本的重点。

03

0593-CDH5与CDH6对比

Cloudera于2018年8月30日正式发布CDH6.0.0，至2019年2月19日，最新的迭代版本为CDH6.1.1，可能马上就会发布CDH6.2。CDH6是基于Hadoop3同时包含大量其他组件的大版本更新的发布版本，许多用户考虑到未来CDH的版本主要是基于C6，而CDH5会慢慢的停止更新，所以考虑新搭集群使用CDH6，或者想把已有的CDH5集群升级到CDH6。第一个问题就是需要考虑CDH5和CDH6的差别，通过分析一些差异看能否将已有的应用迁移或者直接部署到CDH6，兼容性稳定性是否存在问题等。出于这个目的，本文会从各个方面详细比较CDH5和CDH6的差别，从而让用户能够进行正确的判断并进行相应的选择。以下内容主要基于最新的CDH5.16.1和CDH6.1.1进行比较。最后再次强调，没有最好的技术，也没有最新的技术就是最好的，永远只有最合适的技术。

04

0486-如何将Kerberos的CDH5.16.1从Oracle JDK 1.8迁移至OpenJDK 1.8

受前段时间Oracle官宣的从2019年1月之后将不再提供免费的的JDK商业版本的影响，Cloudera开始开发基于OpenJDK的Hadoop平台，参考Fayson之前的文章《Java收费，Hadoop怎么办？》。今年11月29日，Cloudera才发布不久的CDH5.16.1正式提供OpenJDK的支持，参考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》。本文Fayson主要介绍如何将CDH从Oracle JDK迁移到OpenJDK。

04

干货 | Elasitcsearch7.X集群/索引备份与恢复实战

上述问题涉及到集群备份、索引数据备份、数据迁移、数据恢复等问题，而数据备份和恢复又分为：

01

将 Impala 数据迁移到 CDP

在将 Impala 工作负载从 CDH 平台迁移到 CDP 之前，您必须了解 CDH 和 CDP Impala 之间的语义和行为差异以及需要在数据迁移之前执行的活动。

03

CDP私有云基础版7.1.6的新功能是什么？

根据IDG的说法，当客户考虑更新到产品的最新版本时，他们期望新功能、增强的安全性和更好的性能，但越来越希望拥有更简化的升级过程。伴随着CDP私有云的每个新版本，我们正在努力提供这些内容。伴随着许多新功能，我们正在尽可能简化升级过程。在此博客中，我们将介绍7.1.6版本中的新功能以及从HDP进行的新的就地升级，从而完全消除了替换基础架构和数据迁移的麻烦。

02

Prometheus学习笔记之设置存储时间为30天不生效

Prometheus升级到2.23进行测试发现，设置存储时间为30天未生效，根据官方说明手册，实际运行后发现数据只能存储几个小时。。。。

03

InPanel Linux 服务器管理面板

安装完成后请设置管理员用户名和密码，如果直接回车，则使用默认的用户名 admin 和密码 admin 。设置完后，打开给定的链接地址即可访问您的 InPanel 面板。如下图所示：

03

Elasticsearch Log4j漏洞快速修复步骤

摘要：2021年12月9日，Log4j的GitHub公开披露了一个影响Apache Log4j2多个版本的高严重性漏洞 (CVE-2021-44228) 该漏洞影响了Apache Log4j2的2.0到2.14.1版本。

03

CDP私有云基础版7.1.6版本概要

Cloudera于2021年3月宣布发布Cloudera Data Platform（CDP）私有云（PvC）基本版本7.1.6和Cloudera Manager版本7.3.1。这些版本引入了从HDP 3到CDP私有云基础版的直接升级路径，同时添加了许多增强功能以简化从CDH 5和HDP 2的升级和迁移路径，并汇总了先前版本中的所有先前维护增强功能。

01

Drupal CMS安全漏洞预警

安全漏洞公告 2018年3月28日，Drupal官方发布了Drupal core存在远程代码执行漏洞的公告，对应CVE编号：CVE-2018-7600，漏洞公告链接： https://www.drupal.org/sa-core-2018-002 根据公告，Drupal 6.x、7.x、8.x版本的子系统存在严重安全漏洞，利用该漏洞可能实现远程代码执行攻击，从而影响到业务系统的安全性，建议尽快更新到新的版本。同时，Drupal的分支版本Backdrop CMS在1.9.3之前的1.x.x版本也存在该漏洞，

05

Centos下Yum安装PHP5.5,5.6,7.0

默认的版本太低了，手动安装有一些麻烦，想采用Yum安装的可以使用下面的方案： 1.检查当前安装的PHP包 yum list installed | grep php 如果有安装的PHP包，先删除他们 yum remove php.x86_64 php-cli.x86_64 php-common.x86_64 php-gd.x86_64 php-ldap.x86_64 php-mbstring.x86_64 php-mcrypt.x86_64 php-mysql.x86_64 php-pdo.x86_64

03

CDH集群跨多版本滚动升级

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 现生产环境的集群版本为5.12.1，开发环境的CDH集群版本为5.10.0过低，需要将开发环境的CDH集群滚动升级至5.12.1版本，与生产环境版本一致。Fayson在前面的文章也有介绍《如何升级Cloudera Manager和CDH版本》，本篇文章Fayson主要介绍跨多

02

Elasticsearch 7.0 正式发布，盘他！

Elastic{ON}北京分享了Elasticsearch7.0在Speed,Scale,Relevance等方面的很多新特性。

04

如何规划 MongoDB 升级

MongoDB 4.4和5.0即将停止维护，是时候升级数据库软件了。下面简述升级的方法。

01

Laravel 7 新版本发布，新功能及更改

Laravel 7 为非 LTS 版本，目前只有 Laravel 6 和 5.5 版本是 LTS 版本。

02

0774-5.16.1-如何将CDSW从1.6升级到1.7

目前CDSW的最新版本是1.7.1，此版本仅支持从1.5.x和1.6.x升级，其他更低的版本需要先升级到1.5.x或1.6.x，然后再升级到1.7.1。本文档将介绍如何基于CDH5.16.1将CDSW从1.6升级到1.7.1。

07

如何使用Cloudera Manager升级Spark2.1版本至Spark2.2

在CDH集群中spark1和Spark2版本可以共存，为了更好的体验及使用Spark新版本的API或修改已知旧版本的bug，现需要将CDH集群中Spark2的版本升级至Spark2.2最新，本篇文章主要介绍如何通过Cloudera Manager将Spark2.1版本升级至Spark2.2。

08

数千万WordPress和Drupal站点存在DDoS风险

近日白帽子Nir goldshlager发现了WordPress和Drupal存在DDoS攻击风险，受影响的版本为WordPress 3.5 – 3.9和Drupal 6.x – 7.x，根据为维基百

06

Laravel 7 新版本发布，新功能及更改

Laravel 7 为非 LTS 版本，目前只有 Laravel 6 和 5.5 版本是 LTS 版本。

03

如何升级Cloudera Manager和CDH

本文档讲述如何升级Cloudera Manager和CDH，通过本文档，您将学习到以下知识：

0497-如何将Kerberos的CDH6.1从Oracle JDK 1.8迁移至OpenJDK 1.8

受前段时间Oracle官宣的从2019年1月之后将不再提供免费的的JDK商业版本的影响，Cloudera开始开发基于OpenJDK的Hadoop平台，参考Fayson之前的文章《Java收费，Hadoop怎么办？》。今年11月29日，Cloudera才发布不久的CDH5.16.1正式提供OpenJDK的支持，参考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》和《0486-如何将Kerberos的CDH5.16.1从Oracle JDK 1.8迁移至OpenJDK 1.8》。同时12月19日发布的《0487-CDH6.1的新功能》和《0488-Cloudera Manager6.1的新功能》，也开始支持OpenJDK。本文Fayson主要介绍如何将CDH6.1从Oracle JDK迁移到OpenJDK。

01

实战问题：Elasticsearch 2.X 数据如何迁移到 7.X？

从 Elasticsearch 2.4.x 到 7.10.x 的迁移确实是一个大跨步，直接升级的确存在很多不兼容的变更。数据迁移在这种场景下是一个相对稳妥的选择。以下是一些建议：

03

如何降级Cloudera Manager和CDH

在前面的文章中，Fayson介绍过《如何升级Cloudera Manager和CDH》，在实际使用过程中，我们往往会碰到将集群升级到一个较新的版本后，会出现一些莫名其妙的问题，为了保证生产系统的稳定运行，在无法快速定位问题的情况下，这时需要对集群进行降级。本文主要介绍如何对集群进行Cloudera Manager和CDH的降级。

05

【Elasticsearch系列之五】通过snapshot迁移ES数据

2) 需占用源集群磁盘空间，或者借助于对象存储，实现友商ES到腾讯云ES，或自建ES到腾讯云ES的数据迁移。

05

0466-CDH5.16.1和CM5.16.1的新功能

Fayson在2018年的6月15日介绍了《CDH5.15和CM5.15的新功能》，今天11月29日，Cloudera正式发布CDH5.16.1。从5.15到5.16，差不多等待了5个月，当然Cloudera在期间还发布了CDH6正式版，随后发布CDH6.0.1，参考《Cloudera Enterprise 6正式发布》。我们注意到这次CDH新版本的发布，没有5.16.0而直接是5.16.1，具体原因未知。

03

大规模 Hadoop 升级在 Pinterest 的实践

Monarch 是 Pinterest 的批处理平台，由30多个 Hadoop YARN 集群组成，其中17k+节点完全建立在 AWS EC2 之上。2021年初，Monarch 还在使用五年前的 Hadoop 2.7.1。由于同步社区分支（特性和bug修复）的复杂性不断增加，我们决定是时候进行版本升级了。我们最终选择了Hadoop 2.10.0，这是当时 Hadoop 2 的最新版本。

02

K8S 生态周报| Helm v2 爆出全版本漏洞

CNCF（云原生计算基金会）在美国时间 2019 年 10 月 31 日宣布 Jaeger 正式毕业了。

02

免流集成破解版授权一键备份数据库网页端防DDOS脚本等21个集成脚本

感谢 potx qq:570746521 的投稿 --------------------------------------------------------------------- 功能介绍：集成各种免流破解版授权一键备份数据库网页端防DDOS脚本等21个集成脚本 1.[7.x]骚逼汪个人修改版[04.10] 2.[7.x]最新骚逼汪流控破解版[04.10]

05

Java 17：和遗留 25 年的漏洞 Say Goodbye

Spring Framework 6 将采用 Java 17 和 Jakarta EE 9

03

Spring Boot 2.3.0正式发布：优雅停机、配置文件位置通配符新特性一览

各位小伙伴大家好，我是A哥。北京时间2020-05-15，Spring Boot 2.3.0版本正式发布了，次版本号的升级，一般会有些新特性出来。作为Java Coder的我们有必要一览它的新new Feature，keep下技术节奏嘛。

02

0594-6.1.0-如何从CDH6.1.0升级到CDH6.2.0

Fayson在前面的文章中详细介绍过CDH的升级，参考《如何升级Cloudera Manager和CDH》，对于小版本的滚动升级，也有专门的一篇文章介绍，参考《0284-CDH集群跨多版本滚动升级》。但以前的版本都是基于CDH5，本文主要是描述如何从CDH6.1升级到CDH6.2。

03

0787-6.3.3-如何在本地集群安装Workload Experience Manager(WXM)

Workload XM是Cloudera现代数据平台以工作负载为中心的管理工具，可主动分析数据仓库、数据工程和机器学习环境的工作负载，提升应用程序性能，以及优化基础架构的容量配置。Workload XM与Cloudera Enterprise平台内的多种计算引擎进行交互，使用户能够全面了解各类性能指标，从而通过迭代模式进行自助服务。

02

Spark 3.0新特性在FreeWheel核心业务数据团队的应用与实战

相信作为 Spark 的粉丝或者平时工作与 Spark 相关的同学大多知道，Spark 3.0 在 2020 年 6 月官方重磅发布，并于 9 月发布稳定线上版本，这是 Spark 有史以来最大的一次 release，共包含了 3400 多个 patches，而且恰逢 Spark 发布的第十年，具有非常重大的意义。

01

Oracle JDBC驱动版本、JDK版本、数据库版本对应关系（ORA-28040）

1、Oracle JDBC驱动版本查看方式（Oracle JDBC驱动程序随Oracle数据库服务器一起提供）（用户：Oracle”）；

03

TomcatAJP文件包含漏洞及线上修复漏洞

wget https://archive.apache.org/dist/tomcat/tomcat-8/v8.5.51/bin/apache-tomcat-8.5.51.tar.gz

05

ES版本升级报错之CheckClusterState4Scalelnerr(FailedOperation.ErrorClusterState)

o.e.x.m.c.n.NodeStatsCollector collector node_stats timed out when collecting data

06

CDH+Kylin三部曲之一：准备工作

ansible是常用的运维工具，可大幅度简化整个部署过程，接下来会使用ansible来完成部署工作，如果您对ansible还不够了解，请参考《ansible2.4安装和体验》，部署操作如下图所示，在一台安装了ansible的电脑上运行脚本，由ansible远程连接到一台CentOS7.7的服务器上，完成部署工作：

01

大数据平台 CDH 6.2 搭建

https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/

02

Elasticsearch分布式-Zen2（新版本7.0）

Elasticsearch如此广泛流行的原因之一是因为其易于扩展，可以从仅具有几个节点的小集群扩展到有数百个节点的大型集群，并且保证不管集群规模的大小，其核心的分布式协调功能始终是稳定运行的。Elasticsearch 7.0版本开始引入了新的集群分布式协调子系统，与早期版本相比具有许多优势。本文介绍了新的协调系统有哪些改进，如何使用新的子系统，如何从6.x版本安全的升级，以及这些改进如何提高数据的一致性，最后部分描述了相关的工作原理。

04

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭