Hadoop 0.21.0的新功能 - lance家园 - CSDN博客

来源：百度文库 编辑：神马文学网 时间：2024/07/05 10:57:33

Hadoop 0.21.0的新功能收藏

Hadoop 0.21.0的新功能

Hadoop发布了最新版本，这版与之前的版本，在功能上有较大的改进，增加了一些新的功能。主要如下：

http://www.cloudera.com/blog/2010/08/what%E2%80%99s-new-in-apache-hadoop-0-21/

Common:

classification annotations

Large-Scale Automated Test Framework

fault injection framework

Mockito-based tests

retrieve metrics and configuration

Hdfs：

增加append操作

文件系统新的api

同时支持文件符号链接

Secondary NN去掉了，换成了BN(backup namenode),CN(checkpoint namenode)。

一些附助的文件工具:offline image viewer，block forensicstool

另外支持file concatenation操作，DistributedRAID filesystem。

 

Mapreduce

New api

LocalJobRunner：支持distributedcache和run mappers in parallel。

Distcp提升

加入测试框架MRUnit。

Rumen，Mumak，job history loganalyzer。

job scheduling

Smarter speculative execution 智能推测执行器

Streaming combiners

Job完成后会创建该job的运行日志。

未加入的功能：

安全性

Sqoop-将数据从关系型数据库导入到hdfs的工具

Hadoop 0.21.0的新功能 - lance家园 - CSDN博客 HADOOP的初次尝试 baozhengw的专栏 - CSDN博客 tomcat5.5 整合 iis6.0 - shangpusp的专栏 - CSDN博客 事件与委托趣谈 - CSDN-浩淼的天空 - CSDN博客 Hadoop的Python语言封装 HDMI 1.3 的新功能 好玩的word新功能 tomcat7的新功能 sketchup6.0新功能的介绍和改进的部分介绍 AGPS简介 - kv110的专栏 - CSDN博客 奇妙的Base64编码 - 天奇居 - CSDN博客 破解工具软件 - 梦的归宿 - CSDN博客 OpenMAX简介 - shenbin1430的专栏 - CSDN博客 Android flinger - simmer_ken的专栏 - CSDN博客 windows 命令 - orangeman1982112的专栏 - CSDN博客 JNDI概述 - tanghongru1983的专栏 - CSDN博客 指针 - syhhl007的专栏 - CSDN博客 变量命名 - yszwn的专栏 - CSDN博客 联发博动笔试 - 奋起的blog - CSDN博客 什么是PLL - JasonCao的专栏 - CSDN博客 VC积累 - cherryt的专栏 - CSDN博客 fms技术 - wanglilin2000的专栏 - CSDN博客 Android的PVPlayer介绍 CSDN博客