学习时,在vmware中使用linux系统的时候,安装配置hadoop框架,查找一些资料,发现有些介绍不够详细(比如一些路径的变化没有说清楚),刚接触linux的话一下子可能会有些混乱,所以在这里详细地总结、演示一下。下面介绍ubuntu版本的hadoop伪分布式的安装配置。
- 一、 Hadoop框架的概述
- 1.1 hadoop的简介
- 1.2 hadoop版本的变化
- 1.3 hadoop生态圈
- 1.4 三种模式区别
- 1.4.1 单机模式
- 1.4.2 伪分布式模式
- 1.4.3 完全分布式模式
- 二、 Hadoop安装前准备
- 2.1 安装Xshell、Xftp
- 2.2 安装JDK
- 2.3 SSH安装
- 2.4 下载解压Hadoop
- 三、 Hadoop安装的过程
- 3.1 配置主机名
- 3.2 免密登录设置
-
- 3.3 设置Hadoop配置文件
- 3.4 格式化
- 3.5 启动、验证Hadoop进程
- 3.6 通过Web访问Hadoop
- 3.6.1 HDFS web界面
- 3.6.2 YARN web界面
- 3.7 测试Hadoop
- 3.8 停止Hadoop进程
cs