首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

hadoop报错解决方案---安装系列三

操作过程中主要出现以下几个错误: Unsupported major.minor version 51.0 处理办法: eclipse下的项目的jdk环境和liux下的jdk环境不一致,将windows下的eclipse中的jdk环境与linux的环境更改一致 切换linux的jdk版本为1.7: 上传jdk7压缩包并解压 配置jdk变量 vi /etc/profile 在终端里面输入: alternatives  --install   /usr/bin/java  java  /usr/local/jvm/jdk1.7.0_79/bin/java 300 alternatives  --install   /usr/bin/java  java  /usr/lib/jvm/jdk1.8.0_101/bin/java 300   jdk1.8.0_101为之前安装的jdk 如想切换至1.8 还需更改环境变量/etc/profile 红色部分自行修改目录(安装JDK的目录) 接着执行alternatives  --config  java 输入想要切换的jdk序号 Java -version 在myeclipse里添加1.7的jdk,创建java项目时选择jdk版本为1.7 重启hadoop集群报错: java.net.BindException: Port in use: 0.0.0.0:50070 Caused by: java.net.BindException: Address already in use 处理办法: 1)sudo lsof -i:端口 -P 2)sudo kill -9 PID 以50070端口为例: sudo lsof -i:50070 -P 控制台输出内容: COMMAND  PID USER   FD   TYPE             DEVICE SIZE/OFF NODE NAME   java   6501 root  189u  IPv4 0x782e003217773193      0t0  TCP *:50070 (LISTEN) 然后kill掉: sudo kill -9 6501 hadoop主节点缺少NameNode log信息: java.io.FileNotFoundException:/home/hadoop/app/dfs/name/in_use.lock (Permission denied) 处理办法: 有两种场景出现 1):在原来正常的时候,有一次突然使用了原来不同的用户启动了一次hadoop。这种场景会产生一个in_use.lock 文件夹在你设置的目录中,这时候可以删除这个文件夹直接,然后重新启动 2):在格式化hadoop的时候和当期启动的用户不是同一个,也会导致该问题。这个时候可以使用格式化hadoop的那个用户重新启动hadoop。也可以解决此错误。 hadoop主节点缺少SecondaryNameNode log信息: Cannot lock storage /home/hadoop/app/tmp/dfs/namesecondary. The directory is already locked 处理办法:删除该目录 java项目运行不报错 处理办法: 新建一个文件,命名为“log4j.properties”,放到src目录下。向里填入一下信息: log4j.rootLogger=INFO, stdout log4j.appender.stdout=org.apache.log4j.ConsoleAppender log4j.appender.stdout.layout=org.apache.log4j.PatternLayout log4j.appender.stdout.layout.ConversionPattern=%d %p [%c] - %m%n log4j.appender.logfile=org.apache.log4j.FileAppender log4j.appender.logfile.File=target/spring.log log4j.appender.logfile.layout=org.apache.log4j.PatternLayout log4j.appender.logfile.layout.ConversionPattern=%d %p [%c] - %m%n 保存后重新运行 通过java接口向hbase插入一张表时报错:  [org.apache.hadoop.util.NativeCodeLoader] - Unable to load native-h

02

Ubuntu Linux 环境下配置JDK

1.下载对应的JDK,这里下载的是jdk-8u102-linux-x64.tar.gz 2.创建目录作为JDK安装目录,这里选择安装位置为:/home/Java/(可自行选择安装路径,之后的配置按照自己的安装路径来)   sudo mkdir /home/Java 3.解压文件带/home/Java/目录下,文件下载的位置是在下载目录下的   cd ~/下载   sudo tar -zxvf jdk-8u102-linux-x64.tar.gz -C /home/Java/ 4.配置系统环境变量   sudo gedit /etc/profile 在最后加入   export JAVA_HOME=/home/Java/jdk1.8.0_102   export JRE_HOME=$JAVA_HOME/jre   export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$CLASSPATH   export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH 修改完成后保存并关闭,输入以下命令使环境变量生效   source /etc/profile 5.查看安装版本:   java -version 显示      java version "1.8.0_102"   Java(TM) SE Runtime Environment (build 1.8.0_102-b14)   Java HotSpot(TM) 64-Bit Server VM (build 25.102-b14, mixed mode) 如依旧没显示先重启 6.设置默认JDK 查看系统中已有的JDK版本   sudo update-alternatives --config java   sudo update-alternatives --config javac   sudo update-alternatives --config javaws 修改默认JDK(注意替换路径) install后第三个参数 根据自己的路径设置 2000为优先级 可设为其他   sudo update-alternatives --install "/usr/bin/java" "java" "/home/Java/jdk1.8.0_102/bin/java" 2000   sudo update-alternatives --install "/usr/bin/javac" "javac" "/home/Java/jdk1.8.0_102/bin/javac" 2000   sudo update-alternatives --install "/usr/bin/javaws" "javaws" "/home/Java/jdk1.8.0_102/bin/javaws" 2000 设置完成后查看一下   sudo update-alternatives --config java 显示 有 2 个候选项可用于替换 java (提供 /usr/bin/java)。   选择       路径                                          优先级  状态 ------------------------------------------------------------ * 0            /home/Java/jdk1.8.0_102/bin/java                 2000      自动模式   1            /home/Java/jdk1.8.0_102/bin/java                 2000      手动模式   2            /usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java   1081      手动模式 要维持当前值[*]请按<回车键>,或者键入选择的编号: 这里可更改默认的JDK,通常选择自动模式那个,也可根据自己的需要进行选择

02
领券