hadoop

由中国科学院计算技术研究所主办的 Hadoop中国2011云计算大会将于12月2日至3日在北京会议中心召开! 大会特别邀请了Condor的创始人Miron Livny教授、以及来自Google、Facebook等国内外著名互联网公司和IT企业的学者和资深开发人员到场演讲并进行技术交流，部分专家是首次来中国访问。

在最近的 PASS 峰会上，微软宣布 SQL Server 的下一版本会叫做 SQL Server 2012，它之前的开发代号是“Denali”。此外还为其它产品赋予了官方的名称，包括 Power View(之前叫做“Crescent”)和 SQL Server 数据工具(之前叫做“Juneau”)。

由中国科学院计算技术研究所主办的 Hadoop中国2011云计算大会(Hadoop in China 2011，HiC2011)将于12月2日至3日在北京会议中心召开，这将是Hadoop in China社区的一次年度技术盛会!

Hadoop中国2011云计算大会(Hadoop in China 2011，HiC2011)将于12月2日至3日在北京召开。Hadoop 中国是国内唯一一个学术界、产业界、技术界跨界沟通平台。大会历时5届，与会国内外知名专家逾百人，重要主题演讲专家近50人，是国内相关领域历时最久、规模庞大、规格最高的技术会议。

Hadoop中国2011云计算大会将于12月2日至3日在北京召开。作为国内唯一一个学术界、产业界、技术界跨界沟通平台。大会报名注册地址：http://hic2011.hadooper.cn/dct/page/65554?vendor=IT168。

微软近日宣布正在开发适用于Windows Server与Windows Azure平台的开源Hadoop框架。而一向对开源趋势不屑一顾的微软为何大张旗鼓，加入开源阵营，声称支持Hadoop呢?那么Hadoop有什么特别的优点呢?本文将为您揭晓答案。

Hadoop与Google一样，都是小孩命名的，是一个虚构的名字，没有特别的含义。从计算机专业的角度看，Hadoop是一个分布式系统基础架构，由Apache基金会开发。Hadoop的主要目标是对分布式环境下的“大数据”以一种可靠、高效、可伸缩的方式处理。

微软最近宣布公司正在开发适用于Windows Server与Windows Azure的Apache Hadoop框架。 　　Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。

　　在10月12日的西雅图举行的SQL PASS 2011峰会上，微软宣布将于从雅虎分拆出来的Hortonworks合作开发，在Apache Hadoop上实现搭建Windows Server以及Windows Azure平台。Hortonworks作为微软的战略合作伙伴将会借助自己在此领域的专长帮助最大化将Hadoop集成到微软的产品之中。

Twitter将Storm正式开源了，这是一个分布式的、容错的实时计算系统，它被托管在GitHub上，遵循 Eclipse Public License 1.0。Storm是由BackType开发的实时处理系统，BackType现在已在Twitter麾下。GitHub上的最新版本是Storm 0.5.2，基本是用Clojure写的。

随着Last.fm服务的发展，用户数目从数千增长到数百万，这时，存储、处理和管理这些用户数据渐渐变成一项挑战。幸运的是，当大家认识到Hadoop技术能解决众多问题之后，Hadoop的性能迅速稳定下来，并被大家积极地运用。

MapReduce是一种可用于数据处理的编程模型。该模型比较简单，但用于编写有用的程序并不简单。Hadoop可以运行由各种语言编写的MapReduce程序。

古代，人们用牛来拉重物。当一头牛拉不动一根圆木时，他们不曾想过培育更大更壮的牛。同样，我们也不需要尝试开发超级计算机，而应试着结合使用更多计算机系统。

随着互联网、移动互联网和物联网的发展，谁也无法否认，我们已经切实地迎来了一个海量数据的时代，数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB，对这些海量数据的分析已经成为一个非常重要且紧迫的需求。

在互联网这个领域一直有这样的说法：“如果老二无法战胜老大，那么就把老大赖以生存的东西开源吧”。当年Yahoo!与Google还是处在强烈竞争关系时候，招聘了Doug(Hadoop创始人)，把Google老大赖以生存的DFS与Map-Reduce开源了，开始了Hadoop的童年时期。差不多在2008年的时候，Hadoop才算逐渐成熟。

人物简介：在被任命为Hortonworks CEO之前，Eric Baldeschwieler在雅虎负责Apache Hadoop项目，将其从20个节点的原型系统发展为42000个节点的服务。

在互联网这个领域一直有这样的说法：“如果老二无法战胜老大，那么就把老大赖以生存的东西开源吧”。当年与Google还是处在强烈竞争关系的Yahoo!于是招了Doug(Hadoop创始人)进来，把Google老大赖以生存的DFS与Map-Reduce开源了，开始了Hadoop的童年时期。差不多在2008年的时候，Hadoop才算逐渐成熟。

在企业中部署Hadoop时，如何从数据中获取商业价值，而不用担心如何管理Hadoop软件框架。为了实现这样的愿望，Dell和Cloudera联合推出了Hadoop解决方案Cloudera Enterprise。

今天听同事分享了一篇很有意思的讲座，叫做"Why Map-Reduce Is Not The Solution To Your Big-Data Problem"(为什么Map-Reduce不是你的“大数据”问题的解决方案)。同事很牛，也分享了很多非常有价值的观点，不过他预言Map-Reduce将会在5年之内消失。

Apache Hadoop 是一个软件框架，它可以分布式地操纵大量数据。它于2006年首次提及，由 Google、Yahoo! 和 IBM 等公司支持。可以认为它是一种 PaaS 模型。它的设计核心是 MapReduce 实现和 HDFS (Hadoop Distributed File System)，它们源自 MapReduce(由一份 Google 文件引入)和 Google File System。