类似Google构架的开源项目Hadoop近获社区关注 (类似googleplay的应用商店)

类似Google构架的开源项目Hadoop近获社区关注 (类似googleplay的应用商店)

类似 Google 构架的开源项目已经存在一年多了,现在正受到来自开发社区的广泛关注。下面是来自 Hadoop官网的消息:

Hadoop 是由 Java 编写的,该项目已到得 Yahoo 的全面支持,项目的领袖 Doug Cutting 从 2006 年一月开始已经被 Yahoo 全职雇用于此项目中。华盛顿大学也从那时开始了一个以 Hadoop 为基础的分布式计算的课程,课程相关的材料也已发布在 Google Code 了,以满足那些对这项技术感兴趣的开发者们。最近,Yahoo 的 Jeremy Zawodny提供了一个 Hadoop 的状态更新:

Zawodny 去年一直工作于提供数据排序的基准评测,在测试中,每一个节点都对相同总和的输入数量进行排序。 假如有 20 个节点,每个节点有 100 条记录,那么就有 2000 个记录需要排序;当有 100 个节点时,每个节点有 100 条记录,那就总共有 10000 条记 录。下面是最近的评测结果:

节点数 耗时(小时) 四月200618847.9五月200650042.0十一月2006201.8十一月20061003.3十一月20065005.2十一月20069007.8七月2007201.2七月20071001.3七月20075002.0七月20079002.5 Tim O’Reilly找出了Zawodny 所发的帖子,并从中发现了来自于 Yahoo 的高层支持:

John Munsh 用一句话总结了Yahoo 的参与:“Hadoop 和‘非我发明症(Not-Invented-Here Syndrome)’之反例”。(译者注:John Munsh 在这里用“非我发明症”来指Microsoft 那种不愿意接受任何协议,标准,或是其他公司开发的软件的态度。它认为不是自己创造的东西就是不 值得信任的。而Yahoo! 却基于竞争对手Google 的MapReduce 来构造自己的应用,所以这里说是“非我发明症”之反例。)

微软的Sriram Krishnan 则从那些转到类似Hadoop 和 Amazon EC2这种针对大规模应用并在不断发展的解决方案的创业者和开发人员所面对的问题的角度,对 Hadoop 提出了反对意见:

查看英文原文:Open Source Google-Like Infrastructure Project Hadoop Gains Momentum

声明:本文来自用户分享和网络收集,仅供学习与参考,测试请备份。