本PDF教程摘要
本文详细介绍了在 CentOS 7 系统上安装与配置单机 Hadoop(HDFS)的完整流程,涵盖 JDK 环境准备、Hadoop 安装包下载与部署、核心配置文件(core-site.xml、hdfs-site.xml 等)修改、SSH 免密登录设置、HDFS 格式化及服务启动,并通过命令行与 Web 界面验证 HDFS 和 YARN 功能,适合 Hadoop 初学者快速搭建本地测试环境。
本PDF教程内容目录
1. Hadoop 简介 2. 准备工作 2.1. 拥有一台 Centos Linux 机器 2.2. Linux 安装好 JDK 8、配置好环境变量 2.3. 下载 Hadoop 安装包 3. 安装 3.1. 上传安装包、解压、放到安装位置 3.2. 修改 Hadoop 配置文件 3.2.1. 修改 `core-site.xml` 3.2.2. 修改 `hdfs-site.xml` 3.2.3. 修改 `yarn-site.xml` 3.2.4. 修改 `mapred-site.xml` 3.2.5. 修改 `hadoop-env.sh` 3.3. 配置 Hadoop 环境变量 3.4. 修改hosts文件,将当前主机名配进去 3.5. 配置本机 ssh 免密登录 3.6. 格式化 HDFS (首次启动前执行) 3.7. 启动 Hadoop 4. 测试 4.1. HDFS 使用测试 4.2. Hadoop Web 页面测试 4.3. Yarn Web 页面测试