首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

大数据环境搭建-Linux基础环境配置

版本准备 一定要注意各个版本的匹配 名称 版本 JDK 1.8.0_221 Scala 2.12.15 Spark 3.1.3 Hadoop 2.7.7 HBase 1.5.0 注意 一定要保证开发环境和部署的环境保持一致...服务器环境 服务器准备至少3台 192.168.160.130(master) 192.168.160.131(slave1) 192.168.160.132(slave2) 虚拟机设置 固定服务器IP....rpm 更改文件权限 chmod 755 jdk-8u221-linux-x64.rpm 安装 rpm -ivh jdk-8u221-linux-x64.rpm 安装后的路径为/usr/java/jdk1.8.0...:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 配置立即生效 source /etc/profile 查看 echo $JAVA_HOME 复制到另两台服务器...Linux 环境下/etc/profile和/etc/profile.d 的区别 两个文件都是设置环境变量文件的,两者都是永久性的环境变量,是全局变量,对所有用户生效 /etc/profile.d/

1.2K40
您找到你想要的搜索结果了吗?
是的
没有找到

linux环境node服务器配置流程

安装node  Node 官网已经把 linux 下载版本更改为已编译好的版本了,我们可以直接下载解压后使用: # wget https://nodejs.org/dist/v10.9.0/node-v10.9.0...-linux-x64.tar.xz // 下载 # tar xf node-v10.9.0-linux-x64.tar.xz // 解压 # cd node-v10.9.0-linux-x64.../usr/share/nginx:存放静态文件 /var/log/nginx:存放日志 其实从上面的根目录文件夹可以知道,Linux系统的配置文件一般放在/etc,日志一般放在/var/log,运行的程序一般放在...当然,如果要更清楚Nginx的配置项放在什么地方,可以打开/etc/nginx/nginx.conf 我猜测,Nginx如果指定默认加载/etc/nginx/nginx.conf的配置文件。...配置阿里云安全组 如果配置了以上信息后,访问不了网站,ping域名又是正确的,那可以优先考虑配置阿里云的安全组,把要访问的端口放开 ?  增加一个80端口的配置,开放80端口即可 ?

1.9K20

一般生产环境Linux服务器配置

1.生产环境Linux服务器系统版本的选择 选择CentOS6.5版本64位的Linux操作系统 CentOS (Community Enterprise Operating System,中文意思是:...CentOS是完全开源和免费的,企业可以在生产环境上自由部署 2.一般服务器的初始磁盘分区 1)/boot引导分区,存放引导文件和内核等。分区大小设定200M。...一般正式环境下,Linux引导文件及内核全部大小在100M以内。 2)swap交换分区,作为虚拟内存使用,用于当物理内存不足时,调用硬盘的一部分当内存使用。...一般生产环境服务器内存较大,交换分区大小与内存相同即可 3)/分区根分区,将分完/boot和swap分区剩下的空间都分给/分区 3.数据库服务器的初始磁盘分区 1)/boot引导分区,分区大小设定200M...,需要用bond绑定为一块虚拟网卡对外提供服务,配置一个ip,可以实现网卡的负载均衡和高可用性,规划生产环境用两块网卡eth0、eth1绑定为bond0 1)虚拟网卡bond0配置文件 vim /etc

4.2K10

Linux入门】Linux环境配置

前言:本篇内容讲解Linux环境配置,云服务器和虚拟机的配置、如何多用户使用一个云服务器。关于选择哪一种还是依情况而定。...1、搭建 Linux 环境 Linux 环境的搭建方式 1、直接安装在物理机上....但是由于 Linux 桌面使用起来非常不友好, 不推荐. 2、使用虚拟机 好处:免费 坏处:环境不稳定,安装复杂 3、使用云服务器 好处:安装简单,无需占用物理空间,环境稳定。...UNIX/Linux 系统不依赖图形环境,依然可以通过命令行完成 100% 的功能,而且因为不使用图形环境还会节省大量的系统资源。...云服务器配置: 获得root权限进行登录 ssh root@公网ip 分享账号: 多用户管理操作: # adduser 新用户名--------创建用户 # passwd 新用户名----

51331

Javaweb基础环境配置

Javaweb CS 和 BS 的区别 CS架构是客户端服务器架构模式(需要在本地安装) CS优点:充分利用客户端机器的资源,减轻服务器的负荷 CS缺点:需要安装;升级维护成本高 BS架构是浏览器服务器架构模式...(不需要本地安装,只需要浏览器) BS优点:客户端不需要安装;维护成本低 BS缺点:所有的计算和存储任务都是放在服务器端的,服务器负荷重 Tomcat Tomcat是一个web container...javaweb项目 创建project -> new module -> 勾选 Java EE 下的 web application 才会有和源代码src同级的目录web,其中有web-INF idea配置..._bilibili 当从别的地方拷贝过来的项目时,如果没有蓝色的小点,则需要添加web.xml,具体方法还是从project structure中找 servlet 概念 server 服务器

11610

Hadoop基础环境配置

配置工作 解压和配置环境变量 将hadoop-2.7.6.tar.gz和jdk-8u191-linux-x64.tar.gz拷贝到本地~/apps目录下(这里我习惯将软件安装到自己创建的~/apps文件夹下...),然后解压: tar xzvf hadoop-2.7.6.tar.gz tar xzvf jdk-8u191-linux-x64.tar.gz 配置HADOOP_HOME和JAVA_HOME环境变量,...: 如果是bash环境下: source ~/.bashrc 如果是zsh环境: source ~/.zshrc 配置HDFS 配置hadoop-2.7.6/etc/hadoop/core-site.xml...,主要是配置了HDFS和YARN,并运行了简单的MapReduce程序来测试YARN环境的搭建是否正确。...HDFS是分布式文件系统,是大数据基础的存储管理系统,用于管理分布式文件的存储,实现分布式文件的高可用、线性扩展。 YARN是资源调度管理系统,负责在任务运行时调度集群资源给任务使用。

50600

Linux的安装(虚拟机环境)与基础配置

一、背景 本文介绍如何安装虚拟机VMware以及如果在虚拟机上安装Linux系统以及Linux安装完毕之后的基础配置 需要准备的东西有VMware以及Linux镜像文件 二、下载安装VMware   下载地址...7.处理器配置默认的就可以了: ? 8.内存自定义,可以自己设置大点。不建议小于默认的内存大小。 ? 9.“网络类型”选择“使用桥接网络”: ? 10....四、Linux基础配置 1、网络设置 A、修改对应网卡的IP地址的配置文件  # vi /etc/sysconfig/network-scripts/ifcfg-eth0 IPV6INIT=no #关闭...xshell登录: host(你设置的ip地址,这里是):192.168.1.129 账号:root 密码(安装时候设置的root密码):123456 2.安装简单的图形管理配置套件  linux命令行模式下有一个简单的图像设置界面...3、开发环境 yum install vim  //强大的Vi编辑器,类似于Vi的文本编辑器,不过在Vi的基础上增加了很多新的特性 yum install wget //从网络上自动下载文件的工具,支持通过

9.1K00

java环境_Java基础篇——环境配置

JVM是一台虚拟计算机,在不同的操作系统中(前提是该系统已经安装了Java环境),JVM会调用对应系统的操作指令来完成任务。...Java环境的基本构建:Java编译器javac.exe、Java解释器java.exe等。...编写Java程序的机器上一定要安装JDK,然后设置环境变量,这样系统才能找到javac.exe和java.exe所在的目录,正确执行相关命令。...3.配置环境变量 打开系统属性->高级,里面有个环境变量: 环境变量 打开环境变量: 环境变量 在下面的系统变量中新建JAVA_HOME变量,值就是JDK的安装目录: JAVA_HOME 然后新建...cmd打开命令窗口: cmd 输入 java ,出现如下信息表示安装成功: java 也可以通过命令 java -version 查看当前jdk的版本: java -version 至此,java环境变量已经配置完成

1.1K30

linux15-工具指南11-基础linux服务器配置

参考: 运维 - 实践篇(一) - 基础 Linux 服务器环境配置 - 掘金[1] 前言 之前白嫖了微软家的同步盘:[[31-教你用教育或开发者账户白嫖onedrive做你的同步盘]] 现在轮到幸运儿甲骨文家的服务器了...后面我也会配置用非root 或启动用户以密码的方式登录服务器。...: sudo apt install openjdk-17-jre-headless 4-其他配置 4.1-conda 与环境 为了防止root 权限可怕的操作,这部分均使用yzpeng 管理员账户。...4.2-一些软件 通常我并不会设置: # conda config --set auto_activate_base false 即我会默认让服务器开启后,自动进入base 的conda 环境。...参考资料 [1] 运维 - 实践篇(一) - 基础 Linux 服务器环境配置 - 掘金: https://juejin.cn/post/7058260643043868686 [2] 2021年注册永久免费甲骨文云

42220
领券