目录
百战程序员,全站22050+开发课程+文档 ,学习精选优质好课快人一步!观看视频 快捷键ALT+N

Python全系列 教程

3567个小节阅读:5931k

收藏
全部开发者教程

鸿蒙应用开发

C语言快速入门

JAVA全系列 教程

面向对象的程序设计语言

Python全系列 教程

Python3.x版本,未来主流的版本

人工智能 教程

顺势而为,AI创新未来

大厂算法 教程

算法,程序员自我提升必经之路

C++ 教程

一门通用计算机编程语言

微服务 教程

目前业界流行的框架组合

web前端全系列 教程

通向WEB技术世界的钥匙

大数据全系列 教程

站在云端操控万千数据

AIGC全能工具班

A

A A

White Night

阅读(665)
赞(0)

四、HDFS完全分布式搭建

hadoop运行模式:本地模式、伪分布式模式、完全分布式模式、高可用的完全分布式模式。

4.1 规划

首先将四台虚拟机均拍摄一个快照:hadoop完全分布式Pre。如果安装失败,那么很方便进行重置。

node1node2node3node4
NameNodeSecondaryNameNode  
 DataNode-1DataNode-2DataNode-3

注意:NameNode和SecondaryNameNode都比较消耗内存,所以不要将它们安装在同一台服务器上。

4.2 前置环境

4.2.1 免密钥设置

首先将node1和node2拍摄快照,并还原到初始化快照上。

由于后续hadoop等需要四台服务器之间互相均可以免密登录,所以本次直接配置四台服务器的彼此之间的免密登录。配置思路如下:

a、 首先在四台服务器上都要执行:

b、在node1上将node1 的公钥拷贝到authorized_keys中:

将该文件拷贝给node2:

c、在node2中将node2的公钥追加到authorized_keys中:

将该文件拷贝给node3:

d、在node3中将node3的公钥追加到authorized_keys中:

将该文件拷贝给node4:

e、在node4中将node4的公钥追加到authorized_keys中:

将该文件拷贝给node1、node2、node3:

f.测试是否实现了免密登录

4.2.2 JDK安装环境变量配置

node1-node4上目录的创建目录/opt/apps

将jdk-8u221-linux-x64.rpm上传到node1/opt/apps

将/opt/apps下的jdk-8u221-linux-x64.rpm scp到node2、node3、node4的对应目录中

在node1、node2、node3、node4上安装jdk并配置profile文件

node1上修改环境变量

将node1的/etc/profile拷贝到node2、node3、node4上并执行 source /etc/profile

北京市昌平区回龙观镇南店村综合商业楼2楼226室

©2014-2023 百战卓越(北京)科技有限公司 All Rights Reserved.

京ICP备14032124号-2