安装ssh
安装rsync
配置ssh免密码登录
1 |
ssh -keygen -t dsa -P '' -f ~/. ssh /id_dsa
|
2 |
cat ~/. ssh /id_dsa.pub >>~/. ssh /authorized_keys
|
验证是否成功
下载Hadoop1.0.0,JDK
新建 linux 终端,建立app目录,Java和Hadoop都将安装在此目录中。
接下来,安装Java和Hadoop,Hadoop解压即可。
2 |
chmod +x jdk-6u30-linux-i586.bin
|
3 |
./jdk-6u30-linux-i586.bin |
5 |
tar zxf hadoop-1.0.0-bin. tar .gz
|
配置JDK环境变量
增加下面语句到最后
1 |
export JAVA_HOME=/home/app/jdk1.6.0_30
|
2 |
export PATH=$JAVA_HOME/bin:$PATH
|
3 |
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
|
接下来开始配置Hadoop
进入Hadoop目录
1 |
cd /home/app/hadoop-1.0.0
|
修改配置文件,指定JDk安装路径
1 |
export JAVA_HOME=/home/app/jdk1.6.0_30
|
修改Hadoop核心配置文件core-site.xml,这里配置的是HDFS的地址和端口号
3 |
< name >fs.default.name</ name >
|
4 |
< value >hdfs://localhost:9000</ value >
|
修改Hadoop中HDFS的配置,配置的备份方式默认为3,因为安装的是单机版,所以需要改为1
3 |
< name >dfs.replication</ name >
|
修改Hadoop中MapReduce的配置文件,配置的是JobTracker的地址和端口
1 |
vi conf/mapred-site.xml
|
3 |
< name >mapred.job.tracker</ name >
|
4 |
< value >localhost:9001</ value >
|
接下来,启动Hadoop,在启动之前,需要格式化Hadoop的文件系统HDFS,进入Hadoop文件夹,输入下面命令
1 |
bin/hadoop namenode - format
|
然后启动Hadoop,输入命令
这个命令为所有服务全部启动。
最后,验证Hadoop是否安装成功。打开浏览器,分别输入一下网址:
http://localhost:50030 (MapReduce的Web页面)
http://localhost:50070 (HDfS的web页面)
如果都能查看,说明安装成功。
分享到:
相关推荐
开源思想,少要积分,仅供学习。 Hadoop1.0伪分布式安装步骤。 开源思想,少要积分,仅供学习。 Hadoop1.0伪分布式安装步骤。
ubuntu下Hadoop的伪分布式配置
Linux Hadoop 伪分布式配置 一个节点,线程模仿分布式
Hadoop安装教程_单机_伪分布式配置
hadoop2.6.5伪分布式搭建hadoop2.6.5伪分布式搭建hadoop2.6.5伪分布式搭建hadoop2.6.5伪分布式搭建
2、大数据环境-安装Hadoop2.5.2伪分布式傻瓜教程 原创
前面几篇已经配好了JDK,ssh无密码验证,这里就不再介绍了。这里假设你已经配好了这些。
hadoop2.4.1伪分布式搭建
hadoop安装与配置,hadoop的伪分布式模式配置与安装伪分布式模式,讲解hadoop的伪分布式模式进⾏对hadoop的基本模拟部署
hadoop2.7.3伪分布式模式搭建,一个pdf文档,思路步骤清晰,按着步骤能得出结果,手把手教学。
VMware上CentOS7.0+Hadoop3.1伪分布式搭建
详细的hadoop2 伪分布式环境搭建以及eclipse部署。demo示例代码测试运行。文中有插件包。资源包等参考链接参考下载。
最近自学hadoop2.0.0伪分布式搭建,都是一边学一边记录的 个人认为只要是稍微熟悉linux的都能看懂并搭建成功 分有点高,考虑好在下载
实验1.hadoop伪分布式配置.docx
如果用的是 CentOS/RedHat 系统,请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。 本教程基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable) 版本下验证通过,可适合任何 Hadoop 2.x.y 版本,如 Hadoop 2.7.1、...
大数据hadoop安装伪分布式成熟虚拟机镜像,只需改本地虚拟网卡ip地址为192.168.6.1,网关192.168.6.2即可
Hadoop版本:hadoop-0.20.2-cdh3u4.tar.gz 硬件环境: 三台主机:分别为 gdy192 192.168.61.192 gdy194 192.168.61.194 gdy195 192.168.61.195 本次部署模型为: gdy192上部署:NameNode和JobTracker gdy194上...
hadoop2.2伪分布式集群搭建 #查看防火墙状态 service iptables status #关闭防火墙 service iptables stop #查看防火墙开机启动状态 chkconfig iptables --list #关闭防火墙开机启动 chkconfig iptables off
大数据hadoop平台伪分布式搭建详细步骤,基于ubtuntu系统,供初学者学习使用。... 大数据hadoop平台伪分布式搭建详细步骤,基于ubtuntu系统,供初学者学习使用。...