存档

文章标签 ‘mapReduce’

这篇文章会详细介绍如何搭建运行在ubuntu上的hadoop分布式系统,包括部署前需要准备的必要条件以及安装过程中的详细步骤,最后会结合一个简单的例子介绍如何运行Hadoop。 了解Hadoop Hadoop 是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底......

5,788 views | 没有评论
十二 26th, 2013 | Filed under 分布式系统与计算, 技术尝新, 海量数据

当在MAC上搭建好开发环境之后,第一件事肯定是找一个hello world程序练习下。而hadoop世界的hello word程序就是下面的这个Word Count程序。   1. 新建项目 步骤:File–>New–>Other–>Map/Reduce Project 项目名可以随便取,如MapReduceSample。然后新建类WordCount.java......

745,594 views | 没有评论
七 13th, 2013 | Filed under 分布式系统与计算, 海量数据

       最近,在Mac上折腾了下,想搭建一个hadoop的测试环境,用于写一些Map/Reduce的sample,下面就先将搭建环境的过程记录下来。 1. hadoop 单机搭建 1.1 确认java环境已经安装      在terminal里再次键入”java -version”,出现如下信息:   &n......

26,739 views | 没有评论
七 13th, 2013 | Filed under 分布式系统与计算, 海量数据

本文将对Hadoop七年(2004-2011)的发展历程进行梳理。读完本文后,将不难看出,Hadoop的发展基本上经历了这样一个过程:从一个开源的Apache基金会项目,随着越来越多的用户的加入,不断地使用、贡献和完善,形成一个强大的生态系统,从2009年开始,随着云计算和......

7,931 views | 没有评论
九 12th, 2011 | Filed under 技术尝新

无觅相关文章插件,快速提升流量