共计 1161 个字符,预计需要花费 3 分钟才能阅读完成。
今天看了下 Hadoop 官网,2.5.2 版本已经发布好几天了。赶紧看看有什么新东西。
Apache Hadoop 2.5.2 包含了一些重要的基于 2.5.0 发行版的 bug 修复。
Common
使用 HTTP 代理服务器时认证技术改进。当通过代理服务器访问 WebHDFS 时,这将非常有用。
增加了一个新的 hadoop 指标监控 sink,允许将监控数据直接写入到 Graphite。
与 hadoop 兼容文件系统相关的规范工作。
HDFS
支持 POSIX 风格的文件系统扩展属性。点此产看更多。
使用 OfficeImageViewer 组件,客户端可以通过 WebHDFS 接口浏览一个 fsimage 文档。
NFS 网关收到了多个支持性改进和 bug 修复。hadoop 端口映射器不在需要必须运行 gateway,gateway 现在能够拒绝来自没有权限的端口的连接。
SecondaryNameNode,JournalNode 和 DataNode 的 web 用户接口已经用 HTML5 和 Javascript 技术更新。
YARN
YARN 的 REST API 支持 write/modify 操作。用户可以通过 REST API 提交和杀死一个应用。
时间线存储到 YARN 中,用来存储通用的和应用特定的信息,支持 Kerberos 认证技术。
公平调度器(Fair Scheduler)支持动态的分层的用户队列,用户队列在运行时动态的创建在任意指定的父队列下。
CentOS 安装和配置 Hadoop2.2.0 http://www.linuxidc.com/Linux/2014-01/94685.htm
Ubuntu 13.04 上搭建 Hadoop 环境 http://www.linuxidc.com/Linux/2013-06/86106.htm
Ubuntu 12.10 +Hadoop 1.2.1 版本集群配置 http://www.linuxidc.com/Linux/2013-09/90600.htm
Ubuntu 上搭建 Hadoop 环境(单机模式 + 伪分布模式)http://www.linuxidc.com/Linux/2013-01/77681.htm
Ubuntu 下 Hadoop 环境的配置 http://www.linuxidc.com/Linux/2012-11/74539.htm
单机版搭建 Hadoop 环境图文教程详解 http://www.linuxidc.com/Linux/2012-02/53927.htm
搭建 Hadoop 环境(在 Winodws 环境下用虚拟机虚拟两个 Ubuntu 系统进行搭建)http://www.linuxidc.com/Linux/2011-12/48894.htm
更多 Hadoop 相关信息见 Hadoop 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=13