Hadoop 大数据部署 一. 系统环境配置: 1. 关闭防火墙,selinux 关闭防火墙:systemct…
1. 硬件环境 共有 3 台机器, 均使用的 linux 系统,Java 使用的是 jdk1.6.0。配置如下…
最近新采购的一批机器,由于 intel cpu 体系架构的改变,新机器的系统需要升级,选择了 CentOS 6…
前言 做大数据相关的后端开发工作一年多来, 随着 Hadoop 社区的不断发展, 也在不断尝试新的东西, 本文…
最近抛弃非 ssh 连接的 Hadoop 集群部署方式了,还是回到了用 ssh key 验证的方式上了。这里面…
一、问题症状: 在安装 Hadoop 的时候报类似如下的错误: # A fatal error has bee…
Hadoop 是 Apache 开源组织的一个分布式计算开源框架,在很多大型网站上都已经得到了应用,如亚马逊、…
装个 Hadoop 单节点的,为得是方便学习和调试。 0.jdk 安装,很简单在本博可以找到。 (我直接用 r…
简介 每个 Hadoop 集群都包括不止一个节点。这些节点可以按功能分成几个组,比如 master 组,wor…
在一个 Hadoop 集群中有不同类型的节点,它们对磁盘的要求是不同的。主(master)节点侧重于存储的可靠…