news 2026/7/30 14:30:12

任务一-1.子任务一:基础环境准备

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
任务一-1.子任务一:基础环境准备

1.子任务一:基础环境准备(任务一)

在master(node1)上安装jdk

1.安装并配置 Java 环境

Hadoop 等分布式框架依赖 Java,需安装 JDK(推荐 JDK 8);
下载 JDK(以jdk-8u361-linux-x64.tar.gz为例,需提前从 Oracle 官网或镜像站下载);
从本地上传文件到虚拟机使用到软件有Xshell,XFTP,Filezilla,需要主机先去官网下载文件(具体配置及使用参考链接1)。

(1)上传 JDK 到root用户的/root/app 目录(需先创建目录):

# 切换root用户su- root# 确保是root用户# 假设通过 Xftp 等工具上传 JDK 到/root/appmkdirsoftwaremkdir# app放安装包,software放解压后的程序、软件

/root/app的内容情况如下图:

/root/software的内容情况如下图:

(2)解压 JDK 到software目录,更改文件夹的名称:

cd/root/apptar-zxvf jdk-8u361-linux-x64.tar.gz -C /root/software/cd/root/software/mvjdk1.8.0_162 jdk1.8

(3) 配置 Java 环境变量(root用户、/etc/profile文件 编辑.bashrc):

su- root# 确保是root用户vim/etc/profile# 末尾添加以下内容

添加:

# Java Environment# 注意路径与实际解压的一致exportJAVA_HOME=/root/software/jdk1.8.0exportPATH=$PATH:$JAVA_HOME/binexportCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

# 生效配置:source ~/.bashrcsource/etc/profile

(4)验证 Java 安装:

java -version# 输出JDK版本信息即成功


每个节点都需要安装JDK。
集群节点之间的免密登录

在slave1、slave2(node2、node3)上安装jdk

从master上复制jdk的安装路径到slave1、slave2上

  1. master将JDK远程复制到slave1和slave2中:
scp-r /root/software root@slave1:/root/scp-r /root/software root@slave2:/root/


2. 将master的配置文件/etc/profile分发到slave1和slave2上:

[root@master ~]# scp /etc/profile slave2:/etcprofile100%19581.0MB/s 00:00[root@master ~]# scp /etc/profile slave1:/etcprofile100%1958837.1KB/s 00:00
  1. 使环境变量立即生效(slave1、slave2)
source/etc/profile
  1. 验证(slave1、slave2)
java -version

OPENJDK去看这个文件

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/31 7:58:41

《精通 Python 设计模式:从入门理解到实战落地》

《精通 Python 设计模式:从入门理解到实战落地》“设计模式不是银弹,但它是你代码世界的地图。”——写给每一位渴望写出优雅、可维护代码的 Python 开发者一、引言:为什么 Python 程序员也需要设计模式? 在 Python 这样一门灵活、…

作者头像 李华
网站建设 2026/7/30 23:45:34

《Python 工厂模式全解析:从设计理念到实战落地》

《Python 工厂模式全解析:从设计理念到实战落地》“当你不想在代码中写死类名时,工厂模式就是你的朋友。”——写给每一位追求灵活架构与可扩展性的 Python 开发者一、引言:对象创建的隐性复杂性 在软件开发中,“创建对象”看似简…

作者头像 李华
网站建设 2026/7/30 10:16:19

IndexTTS2语音合成完整指南:零基础实现情感可控AI语音生成

IndexTTS2语音合成完整指南:零基础实现情感可控AI语音生成 【免费下载链接】index-tts An Industrial-Level Controllable and Efficient Zero-Shot Text-To-Speech System 项目地址: https://gitcode.com/gh_mirrors/in/index-tts IndexTTS2作为新一代工业级…

作者头像 李华
网站建设 2026/7/29 5:35:17

PyEMD与NumPy 2.0兼容性问题全面解析及解决方案

PyEMD与NumPy 2.0兼容性问题全面解析及解决方案 【免费下载链接】PyEMD Python implementation of Empirical Mode Decompoisition (EMD) method 项目地址: https://gitcode.com/gh_mirrors/py/PyEMD 问题背景 PyEMD作为经验模态分解及其变体方法的Python实现&#xff…

作者头像 李华
网站建设 2026/7/30 19:01:21

23、WCF异常处理与工作流服务集成详解

WCF异常处理与工作流服务集成详解 在开发基于WCF(Windows Communication Foundation)的应用程序时,异常处理和工作流服务集成是两个关键的方面。下面将详细介绍相关的技术要点和操作步骤。 1. WCF异常处理 1.1 基础异常处理 在WCF中,使用 FaultException 类可以有效避…

作者头像 李华
网站建设 2026/7/30 0:09:59

25、Windows Workflow Foundation (WF)与WCF集成:服务托管、持久化与访问控制

Windows Workflow Foundation (WF)与WCF集成:服务托管、持久化与访问控制 1. 在IIS中托管支持工作流的服务 在IIS中托管支持工作流的服务与托管其他服务的过程基本相同。以下是具体步骤: 1. 创建一个IIS应用程序。 2. 准备一个SVC文件,该文件描述了如何实例化服务。 3.…

作者头像 李华