Hadoop入门安装
2021-03-19 09:51:05 1 举报AI智能生成
登录查看完整内容
Hadoop入门虚拟机安装集群详细步骤
作者其他创作
大纲/内容
运行模式
本地运行模式
伪分布式模式
完全分布式模式
配置文件
core-site.xml
hdfs-site.xml
yarn-site.xml
mapred-site.xml
配置workers
集群上分发配置
启动集群
hadoop101初始化
hadoop101启动 HDFS
hadoop102启动YARN
查看启动进程
集群基本测试
HDFS Web端
HDFS Web端
YARN Web端
上传文件到集群
查看HDFS文件存储路径
查看HDFS在磁盘存储文件内容
拼接
从集群下载文件
执行 wordcount 测试程序
配置历史服务器
配置 mapred-site.xml
hadoop101启动历史服务器
查看 JobHistory
Jobhistory
配置日志的聚集
配置 yarn-site.xml
重启集群
测试
查看日志
历史服务器地址
集群启动/停止方式
整体启动/停止(配置 ssh 是前提)
各个服务组件逐一启动/停止
Hadoop3入门安装
集群部署规划
hadoop101
DataNode
NameNode
NodeManager
hadoop102
ResourceManager
hadoop103
SecondaryNameNode
Hadoop运行环境搭建
虚拟机
安装软件包
关闭防火墙
创建用户
配置用户权限
创建目录
卸载虚拟机自带的JDK(如有)
安装JDK
安装Hadoop
修改hosts
虚拟机配置ssh免密登录
收藏
0 条评论
回复 删除
下一页
