阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Hadoop本地模式配置

212次阅读
没有评论

共计 1506 个字符,预计需要花费 4 分钟才能阅读完成。

我使用的是 VMware 虚拟机,Ubuntu14.04 LTS,64 位,已经安装 Java,如果不知道如何配置网上有很多教程,不再赘述,我安装的是 1.6.0_30 版本。建议不要安装太高版本,我原来安装了 1.8 版本的,尝试配置 Hadoop-2.6,死活都不成功,最后改成 1.7 版本的才配置成功。

此处再温馨提示一下,很多人使用命令:wget  http://www.us.apache……. 去下载压缩包,但是总是下载失败,原因是时间隔太久下载地址变了。在我写这篇博文的时候可以通过以下地址下载到 2.6 版本的。

命令:wget http://apache.fayea.com/hadoop/common/current/hadoop-2.6.0.tar.gz

1. 下载 hadoop-0.20.2 版本。由于目前最新的是 2.6 版本,使用 wget 命令下载 0.20.2 不易下到,所以直接百度下载了 0.20.2 版本。百度云盘:http://pan.baidu.com/s/1gdrf8Wz

2. 解压。下载成功以后,将压缩包移动到:/usr/local 目录,在 /usr/local 目录下使用 tar -xzf hadoop-0.20.2.tar.gz 解压。

3. 添加环境变量。继续执行命令:

sudo echo “export HADOOP_HOME=$PWD/hadoop-0.20.2” > /etc/profile.d/hadoop.sh

sudo echo “PATH=$PATH:$HADOOP_HOME/bin” >> /etc/profile.d/hadoop.sh

. /etc/profile

注意:在执行以上命令时会报错,主要是权限问题。在 root 权限下可以正确执行,但是不方便使用,每次都需输入绝对路径。一通尝试以后成功了!解决办法如下:

Hadoop 本地模式配置

4. 测试。命令:hadoop dfs -ls /

Hadoop 本地模式配置

配置成功!!!

总结:有时候直接使用 hadoop 命令会找不到命令,可以进入 hadoop 文件夹,不进入 bin 文件夹,使用 bin/hadoop 命令。

Ubuntu14.04 下 Hadoop2.4.1 单机 / 伪分布式安装配置教程  http://www.linuxidc.com/Linux/2015-02/113487.htm

CentOS 安装和配置 Hadoop2.2.0  http://www.linuxidc.com/Linux/2014-01/94685.htm

Ubuntu 13.04 上搭建 Hadoop 环境 http://www.linuxidc.com/Linux/2013-06/86106.htm

Ubuntu 12.10 +Hadoop 1.2.1 版本集群配置 http://www.linuxidc.com/Linux/2013-09/90600.htm

Ubuntu 上搭建 Hadoop 环境(单机模式 + 伪分布模式)http://www.linuxidc.com/Linux/2013-01/77681.htm

Ubuntu 下 Hadoop 环境的配置 http://www.linuxidc.com/Linux/2012-11/74539.htm

单机版搭建 Hadoop 环境图文教程详解 http://www.linuxidc.com/Linux/2012-02/53927.htm

搭建 Hadoop 环境(在 Winodws 环境下用虚拟机虚拟两个 Ubuntu 系统进行搭建)http://www.linuxidc.com/Linux/2011-12/48894.htm

更多 Hadoop 相关信息见 Hadoop 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=13

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-20发表,共计1506字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中