智者说, 要想最快的进步, 主要有两点: 1, 向第一名学习, 向有结果的人学习; 2, 采用持续的、 大量的、 有决心的行动。 。 家林会带您在 10 分钟内理解云计算分布式大数据处理框架 Hadoop 并开始动手实践,倒计时开始…… 第 1 分钟: Hadoop 要解决的问题是什么? 答: Hadoop 核心要解决长期 IT 界乃至人类社会的两大主题: 1, 海量数据的存储: 传统的存储方式昂贵而且日益难以满足核裂变级别数据的增长, 例如纽约证券交易所每天要产生 T 级别的数据量, Facebook 要每天要服务过亿的用户( 其中图片等数据`量是惊人的) , 如何使用廉价的设备支持无线增长的数据的...
智者说, 要想最快的进步, 主要有两点: 1, 向第一名学习, 向有结果的人学习; 2, 采用持续的、 大量的、 有决心的行动。 。 家林会带您在 10 分钟内理解云计算分布式大数据处理框架 Hadoop 并开始动手实践,倒计时开始 第 1 分钟: Hadoop 要解决的问题是什么? 答: Hadoop 核心要解决长期 IT 界乃至人类社会的两大主题: 1, 海量数据的存储: 传统的存储方式昂贵而且日益难以满足核裂变级别数据的增长, 例如纽约证券交易所每天要产生 T 级别的数据量, Facebook 要每天要服务过亿的用户( 其中图片等数据`量是惊人的) , 如何使用廉价的设备支持无线增长的数据的安全高效的存储, Hadoop 提出了解决方案, 即 HDFS. 2, 海量数据的分析: 如何有效而快速的从海量数据中提取出有价值的信息, Hadoop 给出了解决方案, 即 MapReduce. HDFS和 MapReduce 是 Hadoop 整个项目的基础和核心, Hadoop 庞大的家族中的其它子项目都是基于 HDFS和 MapReduce, 所以掌握 HDFS和 MapReduce 也就掌握了 Hadoop 的核心。 第 2 分钟: Hadoop 的来源和发展历史是什么? 答: 始于 2002 年 Apache 搜索引擎项目 Nutch, 2004 年 Nutch 的开发者基于Google 发表的著名的 GFS论文开发出了开源版本的 GFS即 NDFS, 2005 年基于Google 发表的著名的 MapReduce 论文把 MapReduce 引入 NDFS, 2006 年改名为Hadoop, NDFS的创始人加入 Yahoo, 同时 Yahoo 成立专门的小组发展 Hadoop。 可以看出, 在 Hadoop 的发展过程中, 除了其创始人外, Google 和 Yahoo 居功至伟。 第 3 分钟: