[BigData：Hadoop]：安装部署篇
文章目录
- 一：机器103设置密钥对免密登录
- 二：机器102设置密钥对免密登录
- 三：机器103安装Hadoop安装包
- 3.1：wget拉取安装Hadoop包
- 3.2：解压移到指定目录
- 3.2.1：解压移动路径异常信息
- 3.2.2：切换指定目录，进行解压，因为上述还是不行，应该是根目录解压有限制
- 3.2.3：安装成功，查看Hadoop版本
- 3.2.3.1：显示JAVA_HOME未找到
- 3.2.4：配置Hadoop的Java环境变量
- 3.2.4.1：查看环境变量配置发现没有JAVA_HOME
- 3.2.4.2：解决：查看java安装目录
- 3.2.3：再次查看Hadoop版本
一：机器103设置密钥对免密登录
[root@vboxnode3ccccccttttttchenyang ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa):
Created directory ‘/root/.ssh’.
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
[root@vboxnode3ccccccttttttchenyang ~]# ls
anaconda-ks.cfg before-calico.yaml bigdata calico.yaml logs recommended.yaml
[root@vboxnode3ccccccttttttchenyang ~]# cd /root
[root@vboxnode3ccccccttttttchenyang ~]# ls
anaconda-ks.cfg before-calico.yaml bigdata calico.yaml logs recommended.yaml
[root@vboxnode3ccccccttttttchenyang ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:iDJChgXvhOSh9xBSNORW8fW8UeeHgTxwEYpbu3MPGUc root@vboxnode3ccccccttttttchenyang
The key’s randomart image is:
±–[RSA 2048]----+
|oBB o. . .o=+o |
|=*.+ . . + ++o o |
|++B . . * .E .|
|o= o . . o + . . |
|. + o . S o . . |
| . o . + |
| o + |
| o o |
| . |
±—[SHA256]-----+
[root@vboxnode3ccccccttttttchenyang ~]# cd /root/.ssh
[root@vboxnode3ccccccttttttchenyang .ssh]# ls
id_rsa id_rsa.pub
二：机器102设置密钥对免密登录
[root@vboxnode3ccccccttttttchenyang .ssh]# ssh-copy-id chenyang-mine-vbox02
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
The authenticity of host 'chenyang-mine-vbox02 (192.168.56.102)' can't be established.
ECDSA key fingerprint is SHA256:SGpvRTxwvfuiJB6N+Gl0IRJZ0Bh4ggdISEqytykpPN8.
ECDSA key fingerprint is MD5:2e:91:01:39:bd:6f:b9:a8:3b:3d:9c:07:3c:81:bc:c7.
Are you sure you want to continue connecting (yes/no)? y
Please type 'yes' or 'no': yes
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@chenyang-mine-vbox02's password:
Permission denied, please try again.
root@chenyang-mine-vbox02's password:
Permission denied, please try again.
root@chenyang-mine-vbox02's password:
Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
[root@vboxnode3ccccccttttttchenyang .ssh]# ssh chenyang-mine-vbox02
root@chenyang-mine-vbox02's password:
Last failed login: Sun Aug 27 22:58:22 CST 2023 from vboxnode3ccccccttttttchenyang on ssh:notty
There were 3 failed login attempts since the last successful login.
Last login: Sun Aug 27 22:52:26 2023 from 192.168.56.1
-bash: “export: 未找到命令
-bash: /etc/kubernetes/admin.conf: 没有那个文件或目录
-bash: /etc/kubernetes/kubelet.conf: 权限不够
-bash: “export: 未找到命令
[root@chenyang-mine-vbox02 ~]# ssh vboxnode3ccccccttttttchenyang
The authenticity of host 'vboxnode3ccccccttttttchenyang (192.168.56.103)' can't be established.
ECDSA key fingerprint is SHA256:SGpvRTxwvfuiJB6N+Gl0IRJZ0Bh4ggdISEqytykpPN8.
ECDSA key fingerprint is MD5:2e:91:01:39:bd:6f:b9:a8:3b:3d:9c:07:3c:81:bc:c7.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added 'vboxnode3ccccccttttttchenyang,192.168.56.103' (ECDSA) to the list of known hosts.
root@vboxnode3ccccccttttttchenyang's password:
Last login: Sun Aug 27 22:48:56 2023 from 192.168.56.1[root@vboxnode3ccccccttttttchenyang ~]# ls
anaconda-ks.cfg before-calico.yaml bigdata calico.yaml logs recommended.yaml
三：机器103安装Hadoop安装包
3.1：wget拉取安装Hadoop包
wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
[root@vboxnode3ccccccttttttchenyang ~]# wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
--2023-08-27 22:59:48-- https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
正在解析主机 mirrors.aliyun.com (mirrors.aliyun.com)... 182.40.60.209, 140.249.32.209, 150.139.245.176, ...
正在连接 mirrors.aliyun.com (mirrors.aliyun.com)|182.40.60.209|:443... 已连接。
已发出 HTTP 请求，正在等待回应... 200 OK
长度：408587111 (390M) [application/octet-stream]
正在保存至: “hadoop-2.10.1.tar.gz”100%[=================================================================================>] 408,587,111 7.86MB/s 用时 37s2023-08-27 23:00:26 (10.5 MB/s) - 已保存 “hadoop-2.10.1.tar.gz” [408587111/408587111])
[root@vboxnode3ccccccttttttchenyang ~]# cd /usr/local/home/
[root@vboxnode3ccccccttttttchenyang home]# ;ls
-bash: 未预期的符号 `;' 附近有语法错误
[root@vboxnode3ccccccttttttchenyang home]# ls
bigdata docker log.file sentinel-dashboard-1.8.6.jar server
[root@vboxnode3ccccccttttttchenyang home]# cd bigdata/
[root@vboxnode3ccccccttttttchenyang bigdata]# ls
[root@vboxnode3ccccccttttttchenyang bigdata]# pwd
/usr/local/home/bigdata
[root@vboxnode3ccccccttttttchenyang bigdata]# cd ~
[root@vboxnode3ccccccttttttchenyang ~]# ls
anaconda-ks.cfg before-calico.yaml bigdata calico.yaml hadoop-2.10.1.tar.gz logs recommended.yaml
3.2：解压移到指定目录
3.2.1：解压移动路径异常信息
[root@vboxnode3ccccccttttttchenyang ~]# tar -zxvf hadoop-2.10.1.tar.gz //usr/local/home/bigdata
tar: //usr/local/home/bigdata：归档中找不到
tar: 由于前次错误，将以上次的错误状态退出
[root@vboxnode3ccccccttttttchenyang ~]# tar -zxvf hadoop-2.10.1.tar.gz /usr/local/home/bigdata
tar: /usr/local/home/bigdata：归档中找不到
tar: 由于前次错误，将以上次的错误状态退出
[root@vboxnode3ccccccttttttchenyang ~]# rm -rf bigdata/
[root@vboxnode3ccccccttttttchenyang ~]# ls
anaconda-ks.cfg before-calico.yaml calico.yaml logs recommended.yaml
[root@vboxnode3ccccccttttttchenyang ~]# wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
--2023-08-27 23:04:49-- https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
正在解析主机 mirrors.aliyun.com (mirrors.aliyun.com)... 140.249.32.209, 150.139.245.176, 117.24.169.248, ...
正在连接 mirrors.aliyun.com (mirrors.aliyun.com)|140.249.32.209|:443... 已连接。
已发出 HTTP 请求，正在等待回应... 200 OK
长度：408587111 (390M) [application/octet-stream]
正在保存至: “hadoop-2.10.1.tar.gz”100%[=================================================================================>] 408,587,111 15.4MB/s 用时 50s2023-08-27 23:05:39 (7.80 MB/s) - 已保存 “hadoop-2.10.1.tar.gz” [408587111/408587111])
3.2.2：切换指定目录，进行解压，因为上述还是不行，应该是根目录解压有限制
切换指定目录，进行解压，因为上述还是不行，应该是根目录解压有限制
[root@vboxnode3ccccccttttttchenyang ~]# cd /usr/local/home/bigdata
[root@vboxnode3ccccccttttttchenyang bigdata]# ls
[root@vboxnode3ccccccttttttchenyang bigdata]# wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
--2023-08-27 23:07:12-- https://mirrors.aliyun.com/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz
正在解析主机 mirrors.aliyun.com (mirrors.aliyun.com)... 182.40.60.209, 150.139.245.178, 150.139.245.179, ...
正在连接 mirrors.aliyun.com (mirrors.aliyun.com)|182.40.60.209|:443... 已连接。
已发出 HTTP 请求，正在等待回应... 200 OK
长度：408587111 (390M) [application/octet-stream]
正在保存至: “hadoop-2.10.1.tar.gz”100%[=================================================================================>] 408,587,111 15.1MB/s 用时 26s2023-08-27 23:07:38 (15.1 MB/s) - 已保存 “hadoop-2.10.1.tar.gz” [408587111/408587111])
[root@vboxnode3ccccccttttttchenyang bigdata]# ls
hadoop-2.10.1.tar.gz
[root@vboxnode3ccccccttttttchenyang bigdata]# tar -zxvf hadoop-2.10.1.tar.gz
hadoop-2.10.1/
hadoop-2.10.1/bin/
hadoop-2.10.1/bin/hadoop
hadoop-2.10.1/bin/hadoop.cmd
hadoop-2.10.1/bin/rcc
hadoop-2.10.1/bin/hdfs
hadoop-2.10.1/bin/hdfs.cmd
hadoop-2.10.1/bin/container-executor
hadoop-2.10.1/bin/test-container-executor
hadoop-2.10.1/bin/yarn
hadoop-2.10.1/bin/yarn.cmd
hadoop-2.10.1/bin/mapred
hadoop-2.10.1/bin/mapred.cmd
hadoop-2.10.1/etc/
hadoop-2.10.1/etc/hadoop/
hadoop-2.10.1/etc/hadoop/core-site.xml
hadoop-2.10.1/etc/hadoop/ssl-client.xml.example
hadoop-2.10.1/etc/hadoop/ssl-server.xml.example
hadoop-2.10.1/etc/hadoop/hadoop-env.cmd
hadoop-2.10.1/etc/hadoop/hadoop-env.sh
hadoop-2.10.1/etc/hadoop/hadoop-metrics.properties
hadoop-2.10.1/etc/hadoop/hadoop-metrics2.properties
hadoop-2.10.1/etc/hadoop/hadoop-policy.xml
hadoop-2.10.1/etc/hadoop/log4j.properties
hadoop-2.10.1/etc/hadoop/hdfs-site.xml
hadoop-2.10.1/etc/hadoop/httpfs-log4j.properties
hadoop-2.10.1/etc/hadoop/httpfs-site.xml
hadoop-2.10.1/etc/hadoop/httpfs-env.sh
hadoop-2.10.1/etc/hadoop/httpfs-signature.secret
hadoop-2.10.1/etc/hadoop/kms-acls.xml
hadoop-2.10.1/etc/hadoop/kms-env.sh
hadoop-2.10.1/etc/hadoop/kms-log4j.properties
hadoop-2.10.1/etc/hadoop/kms-site.xml
hadoop-2.10.1/etc/hadoop/yarn-env.cmd
hadoop-2.10.1/etc/hadoop/yarn-site.xml
hadoop-2.10.1/etc/hadoop/container-executor.cfg
hadoop-2.10.1/etc/hadoop/slaves
hadoop-2.10.1/etc/hadoop/yarn-env.sh
hadoop-2.10.1/etc/hadoop/capacity-scheduler.xml
hadoop-2.10.1/etc/hadoop/configuration.xsl
hadoop-2.10.1/etc/hadoop/mapred-queues.xml.template
hadoop-2.10.1/etc/hadoop/mapred-env.cmd
hadoop-2.10.1/etc/hadoop/mapred-env.sh
hadoop-2.10.1/etc/hadoop/mapred-site.xml.template
hadoop-2.10.1/lib/
hadoop-2.10.1/lib/native/
hadoop-2.10.1/lib/native/examples/
hadoop-2.10.1/lib/native/examples/pipes-sort
hadoop-2.10.1/lib/native/examples/wordcount-nopipe
hadoop-2.10.1/lib/native/examples/wordcount-part
hadoop-2.10.1/lib/native/examples/wordcount-simple
hadoop-2.10.1/lib/native/libhadoop.a
hadoop-2.10.1/lib/native/libhadoop.so
hadoop-2.10.1/lib/native/libhadoop.so.1.0.0
hadoop-2.10.1/lib/native/libhdfs.a
hadoop-2.10.1/lib/native/libhdfs.so
hadoop-2.10.1/lib/native/libhdfs.so.0.0.0
hadoop-2.10.1/lib/native/libhadooputils.a
hadoop-2.10.1/lib/native/libhadooppipes.a
hadoop-2.10.1/libexec/
hadoop-2.10.1/libexec/hadoop-config.cmd
hadoop-2.10.1/libexec/hadoop-config.sh
hadoop-2.10.1/libexec/hdfs-config.cmd
hadoop-2.10.1/libexec/hdfs-config.sh
hadoop-2.10.1/libexec/httpfs-config.sh
hadoop-2.10.1/libexec/kms-config.sh
hadoop-2.10.1/libexec/yarn-config.cmd
hadoop-2.10.1/libexec/yarn-config.sh
hadoop-2.10.1/libexec/mapred-config.cmd
hadoop-2.10.1/libexec/mapred-config.sh
hadoop-2.10.1/sbin/
hadoop-2.10.1/sbin/FederationStateStore/
hadoop-2.10.1/sbin/FederationStateStore/MySQL/
hadoop-2.10.1/sbin/FederationStateStore/MySQL/FederationStateStoreDatabase.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/FederationStateStoreStoredProcs.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/FederationStateStoreUser.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/dropDatabase.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/dropStoreProcedures.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/dropTables.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/dropUser.sql
hadoop-2.10.1/sbin/FederationStateStore/MySQL/FederationStateStoreTables.sql
hadoop-2.10.1/sbin/FederationStateStore/SQLServer/
hadoop-2.10.1/sbin/FederationStateStore/SQLServer/FederationStateStoreStoreProcs.sql
hadoop-2.10.1/sbin/FederationStateStore/SQLServer/FederationStateStoreTables.sql
hadoop-2.10.1/sbin/stop-all.sh
hadoop-2.10.1/sbin/start-all.cmd
hadoop-2.10.1/sbin/stop-all.cmd
hadoop-2.10.1/sbin/hadoop-daemon.sh
hadoop-2.10.1/sbin/hadoop-daemons.sh
hadoop-2.10.1/sbin/slaves.sh
hadoop-2.10.1/sbin/start-all.sh
hadoop-2.10.1/sbin/distribute-exclude.sh
hadoop-2.10.1/sbin/hdfs-config.cmd
hadoop-2.10.1/sbin/start-dfs.cmd
hadoop-2.10.1/sbin/stop-dfs.cmd
hadoop-2.10.1/sbin/hdfs-config.sh
hadoop-2.10.1/sbin/refresh-namenodes.sh
hadoop-2.10.1/sbin/start-balancer.sh
hadoop-2.10.1/sbin/start-dfs.sh
hadoop-2.10.1/sbin/start-secure-dns.sh
hadoop-2.10.1/sbin/stop-balancer.sh
hadoop-2.10.1/sbin/stop-dfs.sh
hadoop-2.10.1/sbin/stop-secure-dns.sh
hadoop-2.10.1/sbin/httpfs.sh
hadoop-2.10.1/sbin/kms.sh
hadoop-2.10.1/sbin/start-yarn.cmd
hadoop-2.10.1/sbin/stop-yarn.cmd
hadoop-2.10.1/sbin/start-yarn.sh
hadoop-2.10.1/sbin/stop-yarn.sh
hadoop-2.10.1/sbin/yarn-daemon.sh
hadoop-2.10.1/sbin/yarn-daemons.sh
hadoop-2.10.1/sbin/mr-jobhistory-daemon.sh
hadoop-2.10.1/share/
hadoop-2.10.1/share/doc/
hadoop-2.10.1/share/doc/hadoop/
hadoop-2.10.1/share/doc/hadoop/common/
hadoop-2.10.1/share/doc/hadoop/common/api/
3.2.3：安装成功，查看Hadoop版本
3.2.3.1：显示JAVA_HOME未找到
hadoop version
[root@vboxnode3ccccccttttttchenyang bigdata]# hadoop version
Error: JAVA_HOME is not set and could not be found.
3.2.4：配置Hadoop的Java环境变量
[root@vboxnode3ccccccttttttchenyang bigdata]# vi /etc/profile
[root@vboxnode3ccccccttttttchenyang bigdata]# java -version
openjdk version "1.8.0_362"
OpenJDK Runtime Environment (build 1.8.0_362-b08)
OpenJDK 64-Bit Server VM (build 25.362-b08, mixed mode)
[root@vboxnode3ccccccttttttchenyang bigdata]# javac
用法: javac <options> <source files>
其中, 可能的选项包括:-g 生成所有调试信息-g:none 不生成任何调试信息-g:{lines,vars,source} 只生成某些调试信息-nowarn 不生成任何警告-verbose 输出有关编译器正在执行的操作的消息-deprecation 输出使用已过时的 API 的源位置-classpath <路径> 指定查找用户类文件和注释处理程序的位置-cp <路径> 指定查找用户类文件和注释处理程序的位置-sourcepath <路径> 指定查找输入源文件的位置-bootclasspath <路径> 覆盖引导类文件的位置-extdirs <目录> 覆盖所安装扩展的位置-endorseddirs <目录> 覆盖签名的标准路径的位置-proc:{none,only} 控制是否执行注释处理和/或编译。-processor <class1>[,<class2>,<class3>...] 要运行的注释处理程序的名称; 绕过默认的搜索进程-processorpath <路径> 指定查找注释处理程序的位置-parameters 生成元数据以用于方法参数的反射-d <目录> 指定放置生成的类文件的位置-s <目录> 指定放置生成的源文件的位置-h <目录> 指定放置生成的本机标头文件的位置-implicit:{none,class} 指定是否为隐式引用文件生成类文件-encoding <编码> 指定源文件使用的字符编码-source <发行版> 提供与指定发行版的源兼容性-target <发行版> 生成特定 VM 版本的类文件-profile <配置文件> 请确保使用的 API 在指定的配置文件中可用-version 版本信息-help 输出标准选项的提要-A关键字[=值] 传递给注释处理程序的选项-X 输出非标准选项的提要-J<标记> 直接将 <标记> 传递给运行时系统-Werror 出现警告时终止编译@<文件名> 从文件读取选项和文件名
3.2.4.1：查看环境变量配置发现没有JAVA_HOME
[root@vboxnode3ccccccttttttchenyang bigdata]# export
declare -x HADOOP_HOME="/usr/local/home/bigdata/hadoop-2.10.1"
declare -x HISTCONTROL="ignoredups"
declare -x HISTSIZE="1000"
declare -x HOME="/root"
declare -x HOSTNAME="vboxnode3ccccccttttttchenyang"
declare -x KUBECONFIG="/etc/kubernetes/kubelet.conf"
declare -x LANG="zh_CN.UTF-8"
declare -x LESSOPEN="||/usr/bin/lesspipe.sh %s"
declare -x LOGNAME="root"
declare -x LS_COLORS="rs=0:di=01;34:ln=01;36:mh=00:pi=40;33:so=01;35:do=01;35:bd=40;33;01:cd=40;33;01:or=40;31;01:mi=01;05;37;41:su=37;41:sg=30;43:ca=30;41:tw=30;42:ow=34;42:st=37;44:ex=01;32:*.tar=01;31:*.tgz=01;31:*.arc=01;31:*.arj=01;31:*.taz=01;31:*.lha=01;31:*.lz4=01;31:*.lzh=01;31:*.lzma=01;31:*.tlz=01;31:*.txz=01;31:*.tzo=01;31:*.t7z=01;31:*.zip=01;31:*.z=01;31:*.Z=01;31:*.dz=01;31:*.gz=01;31:*.lrz=01;31:*.lz=01;31:*.lzo=01;31:*.xz=01;31:*.bz2=01;31:*.bz=01;31:*.tbz=01;31:*.tbz2=01;31:*.tz=01;31:*.deb=01;31:*.rpm=01;31:*.jar=01;31:*.war=01;31:*.ear=01;31:*.sar=01;31:*.rar=01;31:*.alz=01;31:*.ace=01;31:*.zoo=01;31:*.cpio=01;31:*.7z=01;31:*.rz=01;31:*.cab=01;31:*.jpg=01;35:*.jpeg=01;35:*.gif=01;35:*.bmp=01;35:*.pbm=01;35:*.pgm=01;35:*.ppm=01;35:*.tga=01;35:*.xbm=01;35:*.xpm=01;35:*.tif=01;35:*.tiff=01;35:*.png=01;35:*.svg=01;35:*.svgz=01;35:*.mng=01;35:*.pcx=01;35:*.mov=01;35:*.mpg=01;35:*.mpeg=01;35:*.m2v=01;35:*.mkv=01;35:*.webm=01;35:*.ogm=01;35:*.mp4=01;35:*.m4v=01;35:*.mp4v=01;35:*.vob=01;35:*.qt=01;35:*.nuv=01;35:*.wmv=01;35:*.asf=01;35:*.rm=01;35:*.rmvb=01;35:*.flc=01;35:*.avi=01;35:*.fli=01;35:*.flv=01;35:*.gl=01;35:*.dl=01;35:*.xcf=01;35:*.xwd=01;35:*.yuv=01;35:*.cgm=01;35:*.emf=01;35:*.axv=01;35:*.anx=01;35:*.ogv=01;35:*.ogx=01;35:*.aac=01;36:*.au=01;36:*.flac=01;36:*.mid=01;36:*.midi=01;36:*.mka=01;36:*.mp3=01;36:*.mpc=01;36:*.ogg=01;36:*.ra=01;36:*.wav=01;36:*.axa=01;36:*.oga=01;36:*.spx=01;36:*.xspf=01;36:"
declare -x MAIL="/var/spool/mail/root"
declare -x OLDPWD="/root"
declare -x PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin:/usr/local/home/bigdata/hadoop-2.10.1/bin:/usr/local/home/bigdata/hadoop-2.10.1/sbin"
declare -x PWD="/usr/local/home/bigdata"
declare -x SELINUX_LEVEL_REQUESTED=""
declare -x SELINUX_ROLE_REQUESTED=""
declare -x SELINUX_USE_CURRENT_RANGE=""
declare -x SHELL="/bin/bash"
declare -x SHLVL="1"
declare -x SSH_CLIENT="192.168.56.102 48468 22"
declare -x SSH_CONNECTION="192.168.56.102 48468 192.168.56.103 22"
declare -x SSH_TTY="/dev/pts/1"
declare -x TERM="xterm"
declare -x USER="root"
declare -x XDG_RUNTIME_DIR="/run/user/0"
declare -x XDG_SESSION_ID="3"
3.2.4.2：解决：查看java安装目录
关于命令：ls -lr
列出目录中的文件和子目录列表。但是，ls-lr命令可以递归地列出指定目录下的所有的子目录文件和信息，并按照文件修改时间的顺序排序。
如果想在指定目录下，查看所有文件和子目录的详细信息并且以递归形式展示，可以使用“ls -lR”命令。
关于命令：ls -lrt 实际上是代表了 “-l -r -t” 这三个选项集合。
[root@vboxnode3ccccccttttttchenyang bigdata]# which java
/usr/bin/java
[root@vboxnode3ccccccttttttchenyang bigdata]# ls -lr /usr/bin/java
lrwxrwxrwx. 1 root root 22 4月 7 19:15 /usr/bin/java -> /etc/alternatives/java
[root@vboxnode3ccccccttttttchenyang bigdata]# ls -lrt /etc/alternatives/java
lrwxrwxrwx. 1 root root 73 4月 7 19:15 /etc/alternatives/java -> /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64/jre/bin/java/
找到安装目录：/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64
[root@vboxnode3ccccccttttttchenyang ~]# echo $JAVA_HOME
[root@vboxnode3ccccccttttttchenyang ~]# vi /etc/profile
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexport PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROL
export HADOOP_HOME=/usr/local/home/bigdata/hadoop-2.10.1
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$JAVA_HOME:$JRE_HOME/lib:$CLASSPATH
已经可以查看到JAVA_HOME
[root@vboxnode3ccccccttttttchenyang ~]# export
declare -x CLASSPATH="/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64/lib:/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64/jre/lib:"
declare -x HADOOP_HOME="/usr/local/home/bigdata/hadoop-2.10.1"
declare -x HISTCONTROL="ignoredups"
declare -x HISTSIZE="1000"
declare -x HOME="/root"
declare -x HOSTNAME="vboxnode3ccccccttttttchenyang"
declare -x JAVA_HOME="/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64"
declare -x JRE_HOME="/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64/jre"
declare -x KUBECONFIG="/etc/kubernetes/kubelet.conf"
declare -x LANG="zh_CN.UTF-8"
declare -x LESSOPEN="||/usr/bin/lesspipe.sh %s"
declare -x LOGNAME="root"
[root@vboxnode3ccccccttttttchenyang ~]# echo $JAVA_HOME
/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.362.b08-1.el7_9.x86_64
3.2.3：再次查看Hadoop版本
[root@vboxnode3ccccccttttttchenyang ~]# hadoop version
Hadoop 2.10.1
Subversion https://github.com/apache/hadoop -r 1827467c9a56f133025f28557bfc2c562d78e816
Compiled by centos on 2020-09-14T13:17Z
Compiled with protoc 2.5.0
From source with checksum 3114edef868f1f3824e7d0f68be03650
This command was run using /usr/local/home/bigdata/hadoop-2.10.1/share/hadoop/common/hadoop-common-2.10.1.jar
相关文章：
[BigData：Hadoop]：安装部署篇
文章目录 一：机器103设置密钥对免密登录二：机器102设置密钥对免密登录三：机器103安装Hadoop安装包3.1：wget拉取安装Hadoop包3.2：解压移到指定目录3.2.1：解压移动路径异常信息3.2.2：切换指定目录…...
ubuntu 上vscode使用cmake编译运行c++程序
参考：ubuntu 上vscode使用cmake编译运行c程序_vscode ubuntu运行c程序_SCH0的博客-CSDN博客 文章是对官方过程的翻译： Get started with CMake Tools on Linux...
Node.js 新特性 SEA/单文件可执行应用尝鲜
#1 关于 SEA 单文件可执行应用（SEA，Singe Executable Applications），是 Node.js 新版本的特性，最初在 v19.7.0、v18.16.0 加入，并在 v20.x 得到扩展。而上个月发布的全家桶 Bun.js，就自带了 SEA…...
137.只出现一次的数字II
137. 只出现一次的数字 II - 力扣（LeetCode） 给你一个整数数组 nums ，除某个元素仅出现 一次 外，其余每个元素都恰出现 三次 。请你找出并返回那个只出现了一次的元素。 你必须设计并实现线性时间复杂度的算法且使用常数级空间来…...
k8s-15 strogeclass
官网： https://github.com/kubernetes-sigs/nfs-subdir-external-provisioner StorageClass提供了一种描述存储类 (class)的方法，不同的cass可能会映射到不同的服务质量等级和备份策略或其他策略等 每个 StorageClass 都包含 provisioner、parameters 和…...
微信小程序开发实战：利用差异对比显示对象属性变化
前言 在小程序开发中，经常会遇到需要比较两个对象之间的差异并将这些差异可视化展示在界面上的情况。这一过程对于数据管理和用户反馈至关重要。本文将介绍一种实用的方法，可以帮助开发者高效地比较两个对象的属性差异，并将这些差异以直观的方…...
Redis的GEO结构
GEO就是Geolocation的简写形式，代表地理坐标。Redis在3.2版本中加入了对GEO的支持，允许存储地理坐标信息，帮助我们根据经纬度来检索数据。常见的命令有： GEOADD：添加一个地理空间信息，包含：经度…...
做UI设计师是否需要美术功底？
UI确实需要一定的手绘能力，但是跟画画是有很大不同的。 很多人问：学UI需不需要手绘能力。或者学UI需要什么绘画基础。 所以今天集体回答一下。 我们先来看一下跟绘画有关系的行业： 漫画： 主要的不是绘画能力，更重…...
python txt or 日志等超大文本文件读取
判断文件路径是否存在 要判断一个路径文件是否存在，可以使用Python的os.path模块中的exists()函数。下面是一个示例： import os# 要检查的文件路径 file_path = "path/to/file.txt"# 使用os.path.exists()函数判断文件是否存在 if os.path.exists(file_path):pri…...
Windows：Arduino IDE 开发环境配置【保姆级】
物联网开发学习笔记——目录索引 参考官网：Arduino - Home Arduino是一款简单易学且功能丰富的开源平台，包含硬件部分（各种型号的Arduino开发板）和软件部分（Arduino IDE)以及广大爱好者和专业人员共同搭建和维护的互联…...
【LeetCode 算法专题突破】双指针（⭐）
文章目录 前言1. 移动零题目描述代码 2. 复写零题目描述代码 3. 快乐数题目描述代码 4. 盛最多水的容器题目描述代码 5. 有效三角形的个数题目描述代码 6. 三数之和题目描述代码 7. 四数之和题目描述代码 总结 前言 学算法入门必学的一个章节，双指针算法࿰…...
ts知识点——基础积累
第一章 快速入门 1、TypeScript简介 TypeScript是JavaScript的超集。它对JS进行了扩展，向JS中引入了类型的概念，并添加了许多新的特性。TS代码需要通过编译器编译为JS，然后再交由JS解析器执行。TS完全兼容JS，换言之，…...
mybatis plus MetaObjectHandler 不生效
首先要知道,spring boot 只会加载启动类同级和下级的bean 如果把bean放在启动类不同的上级目录,是加载不了bean的 如果把mybatisplus的配置文件放在与启动类不同包,就会扫描不到 例如放在这里,就扫描不到 放到这里,就可以扫描到...
力扣第216 组合总和 ||| c++ 回溯 + 注释
题目 216. 组合总和 III 中等 相关标签 数组 回溯 找出所有相加之和为 n 的 k 个数的组合，且满足下列条件： 只使用数字1到9每个数字 最多使用一次 返回 所有可能的有效组合的列表 。该列表不能包含相同的组合两次，组合可以以任何顺…...
深度学习系列51：hugging face加速库optimum
1. 普通模型 Optimum是huggingface transformers库的一个扩展包，用来提升模型在指定硬件上的训练和推理性能。Optimum支持多种硬件，不同硬件下的安卓方式如下： 如果是国内安装的话，记得加上-i https://pypi.tuna.tsinghua.edu.c…...
【QT开发笔记-基础篇】| 第四章 事件QEvent | 4.6 定时器事件
本章要实现的整体效果如下： QT 中使用定时器，有两种方式： 定时器类：QTimer定时器事件：QEvent::Timer，对应的子类是 QTimerEvent 本节通过一个案例，同时讲解这两种方式 案例：当点击…...
阿里云服务器ECS实例规格族c/g/r等字母说明
阿里云服务器ECS实例命名规则：ecs.<规格族>.large字母含义命名说明，包括x86、ARM架构、GPU异构计算、弹性裸金属、超级计算集群SCC云服务器，c代表计算型、g代表通用型、r代表内存型、u代表通用算力型、e代表经济型e实例，阿里…...
Everything和SVN结合使用-在Everything中显示SVN
点击跳转>Unity3D特效百例点击跳转>案例项目实战源码点击跳转>游戏脚本-辅助自动化点击跳转>Android控件全解手册点击跳转>Scratch编程案例点击跳转>软考全系列 👉关于作者 专注于Android/Unity和各种游戏开发技巧，以及各种资源分享&…...
代码随想录算法训练营第五十二天| 123.买卖股票的最佳时机III 188.买卖股票的最佳时机IV
今日学习的文章链接和视频链接 123.买卖股票的最佳时机III 视频讲解：https://www.bilibili.com/video/BV1WG411K7AR https://programmercarl.com/0123.%E4%B9%B0%E5%8D%96%E8%82%A1%E7%A5%A8%E7%9A%84%E6%9C%80%E4%BD%B3%E6%97%B6%E6%9C%BAIII.html 188.买卖股票的…...
②. GPT错误：图片尺寸写入excel权限错误
꧂问题最初 ꧁ input输入图片路径 print图片尺寸 大小 长宽高 有颜色占比>0.001的按照大小排序将打印信息存储excel表格文件名 表格路径 图片大小 尺寸 颜色类型 占比信息input输入的是文件就处理文件 是文件夹📁就处理文件。路径下的图片 1. 是处理本路径图片 …...
JQuery、JSON、AJAX、XML、IO流、多线程、反射核心知识点详解
JQuery 一、什么是JQuery JQuery是JavaScript的一个框架，对js的封装，使得js简单易学 优点： 1、不用考虑浏览器兼容性问题 2、jquery拥有强大的选择器，简化了js代码 3、jquery提供了很多系统函数，直接调用 二、版本 1.x…...
基于python的多种图像增强算法实现
基于python的多种图像增强算法实现 引言工具算法增强对比度直方图均衡化锐化图像噪声消除中值滤波均值滤波高斯滤波双边滤波增强对比度直方图均衡化总结全部资源引用引言 本项目使用python实现多种空域增强的图像增强算法，并使用了pyqt编写页面。通过点击不同页面的多种按钮，…...
Java前后端交互实现班级管理（查询）
1，数据库创建存储专业信息的表 2，后端： 连接数据库工具类DBUtil.java： package com.ffyc.webserver.util;import java.sql.*;public class DButils {static {try {Class.forName("com.mysql.cj.jdbc.Driver");} catch…...
论文速递 | 8月下旬9月上旬Operations ResearchManagement Science文章精选
编者按 本期我们选取了8月下旬及9月上旬Operations Research文章2篇，Management Science文章4篇期刊文章，着眼于各种不同场景下对于风险的预测、量化及管理，通过聚焦于风险这一主题，体系化地形成文章精选。 文章1 Computation of…...
DataBinding使用报错
val dataBinding DataBindingUtil.setContentView<ActivityMainBinding>(this,R.layout.activity_main)报错一： Unresolved reference: ActivityMainBinding 首先你要知道一个概念，ActivityMainBinding是DataBinding中的一种视频绑定ÿ…...
08Maven中的继承和聚合的作用
Maven中的继承 实际开发中对一个比较大型的项目进行了模块拆分 , 一个project下面创建了很多个modul, 每一个module都需要配置自己的依赖信息 开发中使用的同一个框架内的不同jar包，它们应该是同一个版本，所以整个项目中使用的框架版本需要统一 传统方…...
Ansible运行临时命令及常用模块介绍
目录 一.运行临时命令 1.基本语法格式 2.查看当前版本已安装的所有模块 二.ansible常见模块 1.command模块 2.shell模块 3.raw模块 4.script模块 5.file模块 参数列表： 示例： 6.copy模块 参数列表： 示例： 7.fetch模…...
EtherCAT报文-APRD（自动增量读）抓包分析
0.工具准备 1.EtherCAT主站 2.EtherCAT从站（本文使用步进电机驱动器） 3.Wireshark1.EtherCAT报文帧结构 EtherCAT使用标准的IEEE802.3 Ethernet帧结构，帧类型为0x88A4。EtherCAT数据包括2个字节的数据头和44-1498字节的数据。数据区由一个或…...
论文阅读：Seeing in Extra Darkness Using a Deep-Red Flash
论文阅读：Seeing in Extra Darkness Using a Deep-Red Flash 今天介绍的这篇文章是 2021 年 ICCV 的一篇 oral 文章，主要是为了解决极暗光下的成像问题，通过一个深红的闪光灯补光。实现了暗光下很好的成像效果，整篇文章基本没有任…...
将license验证加入到系统中
1.将ClientDemo下的cn文件夹的内容导入项目对应的java目录下。 2.将license-config.properties文件导入resources目录下。 3.在项目的pom.xml中添加如下依赖。 <properties><!-- Apache HttpClient --><httpclient>4.5.5</httpclient><!-- License…...
建设网站的公司哪家好/产品推广策划书
转自：http://www.ihacksoft.com/vmware-workstation-12-windows-10.html 直入正题，首先需要准备3个文件。分别是VirtualBox虚拟机安装包、VirtualBox虚拟机增强包以及Ubuntu系统光盘镜像文件。 我们先去virtualbox.的官网（https://www. virt…...
关于做公司官方网站域名申请/制作网页完整步骤代码
下面是育路教育网编辑整理2011年计算机基础知识精选部分及答案，供大家参考一下。祝愿所有考生考试顺利！1.世界上第一台电子计算机诞生于 ( B)A． 1941年B． 1946年C． 1949年D． 1950年2. 世界上首次提出存储程…...
郑州建设企业网站公司/怎么找到精准客户资源
4.2 长训练序列的生成 从时域上来看，帧结构在短训练序列之后是长训练序列，其长度为8us，其中包括二个有效OFDM符号的长度（每个3.2us）和一个长型保护间隔的长度（1.6us）。 长训练序列主要用于精确的…...
微信公众号平台网站开发/qq群推广软件
来源：toutiao.com/i69432395414489175121. Java自带工具方法1.1 List集合拼接成以逗号分隔的字符串1.2 比较两个字符串是否相等，忽略大小写1.3 比较两个对象是否相等1.4 两个List集合取交集2. apache commons工具类库2.1 commons-lang，java.l…...
学校网站建设模板/seo诊断书案例
javascript有许多内建的方法来产生对话框，如：window.alert(), window.confirm(),window.prompt().等。 然而IE提供更多的方法支持对话框。如： showModalDialog() (IE 4 支持) showModelessDialog() (IE 5 支持) window.showModalDialog()方法…...
the7企业中 英文wordpress模板/前端seo主要优化哪些
Pod调度 在默认情况下，一个Pod在哪个Node节点上运行，是由Scheduler组件采用相应的算法计算出来的，这个过程是不受人工控制的。但是在实际使用中，这并不满足的需求，因为很多情况下，我们想控制某些Pod到达某…...