阿帕奇软件基金会公布Hadoop 2最新版本

云计算 Hadoop
阿帕奇软件基金会(Apache Software Foundation)在周三公布了其最新版本的开源数据处理程序Hadoop 2。新版本可同时运行多个程序,以便用户能够以超级计算速度迅捷高效地用多种方式处理数据。

阿帕奇软件基金会(Apache Software Foundation)在周三公布了其最新版本的开源数据处理程序Hadoop 2。新版本可同时运行多个程序,以便用户能够以超级计算速度迅捷高效地用多种方式处理数据。

阿帕奇Hadoop为一种架构,允许在计算机集群间使用简单的编程模型分布式处理大型数据集。这一架构使得企业能够以更为高效、更为合理的费效比存储、处理、管理和分析每天新生成的和所收集到的数据。

目前Hadoop已经部署至全球众多公司当中,其中包括亚马逊网络服务(AWS)、AOL、苹果、易趣、Facebook、Netflix和惠普等知名公司。

在周三推出的该平台最新版本增加了大量的新组件,历时四年多打造。其中最值得关注的是,新增了YARN。YARN(Yet Another Resource Negotiator,另一种资源协调者)为Hadoop中的MapReduce的后继产品。新版本将主要功能分成两个独立的守护进程中,其中一个负责资源管理,另一个负责任务安排和监控。

阿帕奇软件基金会在发布会上称,YARN位于HDFS(Hadoop分布式文件系统)的顶层,作为针对大数据应用的大型分布式操作系统,以便能够同时运行多个应用,使其在整个生命周期中更为高效地为数据提供支持。Hadoop 2和YARN使用户能够在稳定的Hadoop生态系统基础部分中混合批处理、交互和实时工作负载。

该基金会还表示,YARN为MapReduce的第二版(Version 2),其API保持了与上一版本的兼容。针对MapReduce 编写的应用也可在YARN上运行,无需重新编译。

阿帕奇软件基金会称,目前有超过12个阿帕奇项目整合了Hadoop,未来还将有十多个项目将整合Hadoop。

Hadoop 2通用版(GA)与阿帕奇软件基金会在6月份推出的预发行版一致,其中也包括了YARN。阿帕奇Hadoop 2将会根据阿帕奇许可证v2.0版推出

责任编辑:王程程 来源: 网界网编译
相关推荐

2009-12-31 11:09:36

Ubuntu wine

2010-08-20 08:50:55

Android

2009-07-10 10:37:00

Windows SerWindows Ser

2010-02-22 12:03:38

微软免费杀毒软件

2012-10-16 09:46:23

OpenStackFolsomSwift

2009-12-16 08:49:12

2013-02-28 11:28:30

2010-05-24 19:09:01

SubVersion最

2012-06-04 11:01:44

Windows 8版本

2012-11-12 10:10:37

FolsomOpenStack

2012-09-28 14:17:36

OpenStack虚拟网络

2013-05-20 14:54:44

Android开发最新版本ADT使用

2013-08-02 10:13:42

Windows 8.1

2012-07-17 10:23:58

虚拟化

2010-03-24 14:18:15

Turbo linux

2011-09-29 21:12:53

点心桌面

2013-10-29 11:36:43

SUSESUSE Linux

2009-04-09 16:49:49

Linux基金会We're

2012-12-13 09:20:55

Corona 2.0Corona SDK下

2023-07-19 15:57:25

blendOSLinux
点赞
收藏

51CTO技术栈公众号