1 eclipse中hadoop环境部署概览 eclipse中部署hadoop包括两大部分：hdfs环境部署和mapreduce任务执行环境部署。一般hdfs环境部署比较简单，部署后就 可以在eclipse中像操作windows目录一样操作hdfs文件。而mapreduce任务执行环境的部署就比较复杂一点，不同版本对环境的要求度 高低不同就导致部署的复杂度大相径庭。例如hadoop1包括以前的版本部署就比较简单，可在windows和Linux执行部署运行，而hadoop2 及以上版本对环境要求就比较严格
Jar包服务为一个高程服务，通过传入坐标信息点获取对应的高程点，传入点集获取点集上的贴地飞行高度 1. Linux环境 安装JDK 1.1 通过 SecurCRT客户端 Alt+P 进行JDK数据上传 /root/appdata 1.2 解压代码：
ant是jakarta一个非常好的OpenSource子项目，是基于java的编译工具。下面简单介绍一下在linux环境中如何安装ant：
该文介绍了在Linux环境下如何对jar包和zip包进行修改，首先介绍了两种工具，然后以具体操作演示了如何使用这些工具进行文件修改。
背景是这样的：手上有一个学长之前实现的Spark项目，使用到了GraphX，并且用的Scala编写，现在需要再次运行这个项目，但如果直接在IDEA中打开项目，则由于各种错误会导致运行失败，这里就记录一下该如何使用IDEA来加载老旧的Spark项目。 注意：默认你的机器已有Scala环境，项目使用IDEA打开，对Sbt不做要求，因为这里采用的是NoSbt方式添加依赖的。
准备一台linux环境，内存4G或以上，硬盘40G或以上，我这里使用的是Centos7.7 64位的操作系统（注意：一定要使用64位的操作系统），需要虚拟机联网，关闭防火墙，关闭selinux，安装好JDK8。
spring boot项目打包方式有两种，分别是jar包和war包，官方推荐前者，所以本文也将项目打包成jar包。
SpringBoot 可以直接部署在linux物理环境里面，也可以把springboot工程打包成镜像，以容器的方式来运行。在微服务框架下，springboot工程动辄几十上百，如果一个个都手动部署事毕会耗费很多的精力，linux环境配置也是很麻烦的，并且容易出错。如果我们把springboot打包成镜像，以docker作为工程的运行载体，就可以很容易保证运行环境的一致性。并且可以用Kuberates 来管理镜像，通过kubernates也可以编排镜像，这就为我们一键部署微服务提供了安全高效的方法，所以springboot Docker部署势在必行，本章节我们来学习一下 Springboot的 Docker部署。 这里共分了12个步骤，其实最关键的就4步。 0. 新建springboot-docker web工程 1. 指定端口信息 [可选] 2. 修改pom.xml [关键] 3. 创建restful api 4. 启动测试接口，测试成功 5. 打包jar 6. 移动配置文件到 dockerfile 目录 [可选] 7. 移动jar包 到 dockerfile 目录 8. 目前 打包成镜像的数据源已经配备完毕 9. 编写Dockerfile文件 [关键] 10. 上传到Linux环境[Linux 环境下已经安装 Docker 并且服务已经启动] 11. 打包镜像 [关键] 12. 启动镜像 [关键] 13. 测试接口
打包有两种方式： 1、直接 项目--右键--export，选择JAR file打包（不推荐这种方式）； 这样直接打的包通过java -jar 会提示“没有主清单属性”，需要修改jar包中的MANIFEST.MF文件，加上Main-Class这一行 具体请参考：http://jingyan.baidu.com/article/db55b60990f6084ba30a2fb8.html http://blog.chinaunix.net/uid-10376640-id-4621557.html 2、通过mave
这两天遇到一个大坑，客户要做office 文档在线预览功能，于是乎就要把office文档转换成pdf交给前端显示。
在使用nio加载文件时，在idea中运行没有问题，但打成jar包后在windows和linux下都有问题： public static void main(String[] args) throws Exception{ // SpringApplication.run(MarketCollectApplication.class,args); URI uri = MarketCollectApplication.class.getClassLoader().getReso
Nmon是一款计算机性能系统监控工具，因为它免费，体积小，安装简单，耗费资源低，广泛应用于AIX和Linux系统。
本文介绍的Nexus不是谷歌的一个手机品牌哈，而是一个非常强大的仓库管理平台。支持常见的Docker、Maven、npm、PyPI等仓库的管理。
http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
javax.naming.NoInitialContextException: Cannot instantiate class: weblogic.jndi.WLInitialContextFactory [Root exception is java.lang.ClassNotFoundException: weblogic.jndi.WLInitialContextFactory] 将WebLogic.jar添加到Add to library中。可是在执行时发现报错： 一：不自动识别jar为cla
支持多数据源的管理，系统默认自带了MySQL、Oracle、PostgreSQL、SQL Server部分版本数据库的驱动程序，支持自定义扩展数据源。
Jenkins是一个开源的、提供友好操作界面的持续集成(CI)工具，广泛用于项目开发，具有自动化构建、测试和部署等功能。Jenkins用Java语言编写，可在Tomcat等流行的servlet容器中运行，也可独立运行。通常与版本管理工具(SCM)、构建工具结合使用。
官网下载 JDK8：http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
jmeter是一个java开发的利用多线程原理来模拟并发进行性能测试的工具，一般来说，GUI模式只用于创建脚本以及用来debug，执行测试时建议使用非GUI模式运行。
在容器构建过程中执行的命令，我们可以用该命令自定义容器的行为，比如安装一些软件，创建一些文件等，格式：
Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。
工作当中遇到的事情比较杂，因此涉及的知识点也很多。这里暂且记录一下，今天遇到的知识点，纯干货~ 关于文件的解压和压缩 如果你的系统不支持tar -z命令 如果是古老的Unix系统，可能并不认识tar -z命令，因此如果你想要压缩或者解压tar.gz的文件，就需要使用gzip或者gunzip以及tar命令了。 关于tar.gz可以这么理解，tar结尾的压缩包，其实只负责把文件打包，并没有进行压缩；而gz结尾的包，则是进行压缩操作。 因此，tar.gz的文件可以理解为，先进行打包，再进行压缩。 那么，压缩
APK（android Application PacKage）文件是安卓app的安装文件，其实就是一个zip或rar压缩包，把apk后缀改为zip，即可解压得到一堆安卓相关文件。
以下内容是本人早期学习时的笔记，可能比较详实繁琐，现在复习一下Maven，顺便将内容抛出来，供大家一起学习进步。
通常一套程序分为了很多个部署环境：开发，测试，uat，线上 等，我们要想对这些环境区分配置文件，可以通过两种方式：
官网地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
说了这么多其实还是建议如果有环境的话，程序员还是在Linux环境下开发的好。虽然刚开始有点难，但是后面会发现有很多好处。那么我们在Linux系统下开发首先会遇到的一个问题就是快捷方式。
1）导包容易出错。尤其Text和CombineTextInputFormat。 2）Mapper中第一个输入的参数必须是LongWritable或者NullWritable，不可以是IntWritable. 报的错误是类型转换异常。 3）java.lang.Exception: java.io.IOException: Illegal partition for 13926435656 (4)，说明Partition和ReduceTask个数没对上，调整ReduceTask个数。 4）如果分区数不是1，但是reducetask为1，是否执行分区过程。答案是：不执行分区过程。因为在MapTask的源码中，执行分区的前提是先判断ReduceNum个数是否大于1。不大于1肯定不执行。 5）在Windows环境编译的jar包导入到Linux环境中运行， hadoop jar wc.jar com.atguigu.mapreduce.wordcount.WordCountDriver /user/atguigu/ /user/atguigu/output 报如下错误： Exception in thread "main" java.lang.UnsupportedClassVersionError: com/atguigu/mapreduce/wordcount/WordCountDriver : Unsupported major.minor version 52.0 原因是Windows环境用的jdk1.7，Linux环境用的jdk1.8。 解决方案：统一jdk版本。 6）缓存pd.txt小文件案例中，报找不到pd.txt文件 原因：大部分为路径书写错误。还有就是要检查pd.txt.txt的问题。还有个别电脑写相对路径找不到pd.txt，可以修改为绝对路径。 7）报类型转换异常。 通常都是在驱动函数中设置Map输出和最终输出时编写错误。 Map输出的key如果没有排序，也会报类型转换异常。 8）集群中运行wc.jar时出现了无法获得输入文件。 原因：WordCount案例的输入文件不能放用HDFS集群的根目录。 9）出现了如下相关异常
来源：cnblogs.com/wangrudong003/p/10502043.html
本篇和大家分享的是 Spring Boot 打包并结合 Shell 脚本命令部署，重点在分享一个shell 程序启动工具，希望能便利工作； profiles指定不同环境的配置 maven-assembly-plugin打发布压缩包 分享shenniu_publish.sh程序启动工具 linux上使用shenniu_publish.sh启动程序 profiles指定不同环境的配置 通常一套程序分为了很多个部署环境：开发，测试，uat，线上 等，我们要想对这些环境区分配置文件，可以通过两种方式： 通过app
本篇和大家分享的是springboot打包并结合shell脚本命令部署，重点在分享一个shell程序启动工具，希望能便利工作；
做过自动化的人，肯定对selenium web环境的搭建非常熟悉了，特别是selenium在java中的使用。
下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
Solr 版本：solr-4.10.3.tgz.tgz SolrLinux下的软件安装包以及中文分词器见末尾百度云1
grpc是google开源的RPC框架，基于http2协议和ProtoBuf序列化机制，关于它的使用实例在官方文档已经有比较详细的介绍，在此仅对安装部署过程作一番总结。 要使用grpc进行正常的开发运
https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
我们再双击这个package 就可以再次产生这个target包，但是，这个时候自己的maven仓库还没有这个jar包
实际上在Android中是无法使用pfx格式证书，Android 系统中使用的证书要求是bks格式。要转换bks证书格式，首先要搭建转换证书的环境。
线上问题的解决一直是java程序员头疼的一个问题。有的应用很敏感，例如游戏行业，可能需要做到1个月都不能停服，那线上问题出了问题怎么办呢？谁也不能保证更新线上的逻辑百分百不出问题，这就需要我们在不停应用的情况下在线解决。随着技术的逐渐成熟，java社区也逐渐提供了一些线上解决方案，比如说下面3个方面：
大家好，又见面了，我是你们的朋友全栈君。 c语言和java语言哪个比较好 java语言和c语言的区别有单文件的编译时间java比c语言快;c语言可以直接操作内存，java不能直接操作;c语言可以
以前在Win下使用Aptana Stdio的时候进行过破解，最近一段时间的工作环境切换到了Linux下，而且使用了Aptana的Plugin For Eclipse，过期了一直没有去管，今天花了点时间将他破解掉了。
1：在windows的eclipse里面直接运行main方法，就会将job提交给本地执行器localjobrunner执行
注意下载linux版本JDK的时候不能直接通过wget这种直接链接下载，否则会解压不成功，应该打开原官网，点击同意许可后点击下载（这种方式下载很慢），比较好的方式是复制下载页的地址到迅雷，通过迅雷打开该下载页，同意许可后点击下载。
性能测试工作中，经常有同学要使用PerfMon内部插件对压测资源进行监控，本文简单介绍下该插件如何使用 一、安装PerfMon插件 1. 启动jmeter，进入选项》Plugins Manager
欢迎访问我的GitHub 这里分类和汇总了欣宸的全部原创(含配套源码)：https://github.com/zq2599/blog_demos 为什么要编译nginx-clojure源码 作为《Java扩展Nginx》的第二篇，本想与大家一起开始nginx-clojure的深度之旅，但有个问题若不解决，会让大多数有兴趣的读者立即止步、关闭网页、再也不见 前文咱们使用的是nginx-clojure官方的安装包，这是个编译好的nginx可执行文件，开箱即用，当时我们还用命令查看过nginx版本是1.18.0
点击上方“芋道源码”，选择“设为星标” 管她前浪，还是后浪？ 能浪的浪，才是好浪！ 每天 10:33 更新文章，每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路，很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
坊间传闻java web开发人员写了那么多代码，但是其实一半代码都在处理NPE。总是在加班，却大部分时间都在处理包冲突，类加载不了的bug。这些问题总是让新老程序员都很抓狂，有很多的工具可以辅助我们解决这些问题（maven helper插件，arthas等）但是有没有一些原则可以遵循，在源头上避免这些问题的发生呢。
2.把apache-jmeter-4.0zip包 用rz命令上传到linux系统的根目录下 解压
本文介绍了如何利用Docker构建pinpoint编译环境，通过使用Dockerfile和Docker Compose文件实现了一个完整的编译环境。首先介绍了Dockerfile和Docker Compose文件的基本用法，然后详细描述了pinpoint编译环境的构建过程。在构建过程中，使用了yum和curl等命令行工具，并使用了Maven和Java等软件包管理工具。通过使用Docker构建编译环境，可以简化pinpoint的编译过程，提高编译效率，并可以保证编译环境的一致性和稳定性。同时，还可以将构建好的镜像上传到Docker Hub等容器管理平台，方便其他用户使用。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
