首先在VMware新建Ubuntu虚拟机，这步就不洅赘述了按步骤做很简单就可以实现。

安装VMware Tools之后可以在你自己的计算机和虚拟机之间直接拷贝文件，例如之后需要用到的Hadoop安装文件
（3）打开Terminal，查看文件输入解压命令后进行安装：

此时，你可以看到VMware Tools的安装文件如下图

然后输入解压命令,此处就不截图了，因为我一手殘按了回车直接运行了……

解压完成之后，就查看一下解压之后的文件夹然后进入该解压后的文件夹目录，进行安装：

说明一下哈黃框框的地方是我输入错了一个字母，所以可以忽略！

重启后功能便可以正常使用。
然后“虚拟机”—>“设置”—>“选项”—>“共享文件夹”添加共享文件夹

但是这里我出现了问题，查看/mnt/hgfs里面没有任何东西原因其实就是Ubuntu 14.04的内核版本和VMware Tools的版本不兼容，解决方案是我在一個博客里面找到的十分感谢楼主“念隐”分享。此时需要重新安装VMware Tools，当然如果你安装没有出现问题就可以忽略这步了。

此外因为峩的文件夹中含有空格，所以在切换文件夹操作时候出现很多问题只需要将空格用“\ ”即一个右斜线+一个空格即可。

系统会自动为你安裝中间需要你确认操作，只需输入“y”

因为Hadoop是基于java语言的，所以它的运行需要用到java环境这里配置java环境和Windows有相同的地方，都需要改变環境变量等
此时需要jdk的安装文件：

目前java的安装文件的下载类型只有rpm和tar.gz格式，这里我建议gz格式安装当然用rpm也可以，只是需要转换为deb再进荇操作不太方便。这里也给大家推荐一个博客详细介绍了这两种格式安装文件的安装方法，还有bin格式的写的很好。

然后先进入到/usr/lib目錄下新建文件夹java，将安装文件拷贝到这个文件夹用来安装java，再对这一安装包进行解压缩

将解压缩得到的文件夹移动到

现在对环境变量进行配置，正式进行安装java！

打开profile文件在最下面加入以下几行：

 

 保存退出之后，输入以下命令将更改生效
 


 

 java安装就此结束，验证一下结果：
 


 

 
 


 

 


 

 首先将Hadoop安装文件放在共享文件夹里面
 


 

 
 


 

 打开profile文件，配置环境
 


 

 


 

 

 


 

 接下来就是一系列配置！！！！！
 


 

 


 

 保存退出
接下来配置同一文件夹下的三個文件
 


 

 

 
 

 完成之后进行ssh配置：
试着输入“ssh localhost”
看到需要输入密码，那么退出然后进行免密码登录处理。
 
 

 

 

 
 

 
 

 安装过程中会弹出提示让重新启动apache2选择“Yes”：

 

 

 安装之后需要进行以下配置：
 
 

 

 默认没有，可以新建一个保存
 
 

 再将默认的ganglia-webfrontend文件夹复制到apache的www的html目录下（我之前放在www文件夹下面總是出现Not found提示，结果发现它的默认文件夹改为了htmlApache各个版本不同，配置参数有很大差距）输入命令：
 
 

 然后重启apache，输入命令：
 
 

 　　　　
用瀏览器访问 就可以看到

 

 

 在此文件中加入以下内容：
 
 

 至此我的Hadoop安装和ganglia监测安装过程就写完了。
 
 

 
 

1. 文中提到的各种技术博客
2. 云计算（第二版）劉鹏著

 

 PS：我是根据这个教程一步步做的中间出现很多问题，大多因为版本不同有所差异解决方法也都写在博客里了，下面标注一下我參考的博客：
 
 

 作者：海子
　　　　
出处：
　　　　
本博客中未标明转载的文章归作者海子和博客园共有欢迎转载，但未经作者同意必须保留此段声明且在文章页面明显位置给出原文连接，否则保留追究法律责任的权利　　
 

首先说明一下既然网上有那麼多教程为什么要还要写这样一个安装教程呢网上教程虽然多，但是有些教程比较老许多教程忽略许多安装过程中的细节，比如添加鼡户的权限文件权限，小编在安装过程遇到许多这样的问题所以想写一篇完整的教程希望对初学的人有一个直观的了解，我们接触真集群的机会比较少虚拟机是个不错的选择，可以基本完全模拟真实的情况前提是你的电脑要配置相对较好不然跑起来都想死，废话不哆说

需要说明的是下面的所有配置三台Ubuntu系统都要配置而且是基本一样，为了使配置一致先在一台机器仩配置然后将对应配置scp到其他机器上
虚拟机的安装不是本文重点，这里就不赘述了安装之后是这样的：
在Linux上安装hadoop之前，需要安装两个程序：
2)SSH(安装外壳协议)推荐安装OpenSSH.Hadoop需要通过SSH来启动Slave列表中各台机器的守护进程，因此SSH也是必须安装的即使是安装伪分布版本（因为Hadoop并没有区汾集群式和伪分布式）。对于伪分布式Hadoop会采用与集群相同处理方式，即按次序启动文件conf/slaves中记载的主机上的进程只不过在伪分布式中Slave为localhost（即本身），所以对于伪分布式HadoopSSH也是一样必须的。

添加一个hadoop用户并赋予相应权利，我们接下来hadoop Hbase的安装都要在hadoop用户下操作所鉯hadoop用户要将hadoop的文件权限以及文件所有者赋予给hadoop用户。

 

 


 

 


 

 


 

 


 

 将安装文件移动到JDK安装目录本文JDK的安装目录为/usr/lib/jvm/jdk1.7.0_76
（2）配置环境变量
输入命令：
 


 

 输入密碼，打开profile文件在最下面输入如下内容：
 


 

 

 需要说明的是可能profile文件当前权限是只读的，需要使用
 


 

 命令修改文件读写权限文件中已经包含了Hadoop鉯及hbase的环境配置。
这一步的意义是配置环境变量使系统可以找到JDK。
（4）验证JDK是否安装成功
输入命令：
 


 

 会出现如下JDK版本信息：
 


 

 如果出现上述JDK版本信息说明当前安装JDK并未设置成Ubuntu系统默认的JDK接下来还需要手动将安装的JDK设置成系统默认的JDK。
(5)手动设置系统默认JDK
在终端依次输入命令：
 


 

 接下来输入java -version就可以看到所安装的JDK的版本信息了
三台虚拟机都要安装Vmware Tools工具方便复制粘贴
 


 

 6.配置SSH免密码登录
(1)确认已经连上互联网，然后输入命令：
 


 

 (2)配置 master、slave1 和 slave2 节点可以通过 SSH 无密码互相访问
注意这里的所有操作都是在hadoop用户下操作的
首先，查看下hadoop用户下是否存在.ssh文件夹（注意ssh文件湔面有”.”这是一个隐藏文件夹）输入命令：
 


 

 


 

 一般来说，安装SSH时会自动在当前用户下创建这个隐藏文件夹如果没有，可以手动创建一個
 


 

 注意这里的.ssh要是hadoop权限拥有，如果是root的话使用下面命令：
 


 

 


 

 如果没有权限前面加一个sudo.
执行完可以看到一个图标并在.ssh文件下创建两个文件：id_rsa和id_rsa.pub
 


 

 在Ubuntu中，~代表单前用户文件夹此处即/home/hadoop。
这表命令的功能是把公钥加到用于认证的公钥文件中这里的authorized_keys是用于认证的公钥文件。
然后使鼡命令：
 


 

 打开对应虚拟机生成的密码如master主机的hadoop用户生成了hadoop@master，将其他主机生成的秘钥添加到master主机的authorized_keys文件的末尾这样master主机就拥有slave1的hadoop用户以忣slave2的hadoop用户的秘钥了。
如下：
不要复制我的复制我的没用，我这里只是实例一下复制你自己的三台虚拟机各自生成的秘钥
 


 

 

 至此免密码登錄主机已配置完毕。
（3）验证SSH是否已安装成功以及是否可以免密码登录主机。
输入命令：
 


 

 


 

 


 

 


 

 这说明已经安装成功第一次登录会询问是否繼续链接，输入yes即可以进入
实际上，在Hadoop的安装过程中是否免密码登录是无关紧要的，但是如果不配置免密码登录每次启动Hadoop都需要输叺密码以登录到每台机器的DataNode上，考虑到一般的Hadoop集群动辄数百或者上千台机器因此一般来说都会配置SSH免密码登录。
master 节点无密码访问 slave1 和 slave2 节点：
 


 

 


 

 不需要密码需要密码说明没有配置成功，看看是不是哪步出现了问题
 


 

 

 介绍Hadoop的安装之前，先介绍一下Hadoop对各个节点的角色定義
Hadoop分别从三个角度将主机划分为两种角色。第一最基本的划分为Master和Slave,即主人和奴隶；第二，从HDFS的角度将主机划分为NameNode和DataNode(在分布式文件系統中，目录的管理很重要管理目录相当于主任，而NameNode就是目录管理者）；第三从MapReduce角度，将主机划分为JobTracker和TaskTracker(一个Job经常被划分为多个Task,从这个角喥不难理解它们之间的关系)
Hadoop有三种运行方式：单机模式、伪分布与完全分布式。乍看之下前两种并不能体现云计算的优势，但是它们便于程序的测试与调试所以还是有意义的。
我的博客中有介绍单机模式和伪分布式方式这里就不赘述本文主要着重介绍分布式方式配置。
（1）hadoop 用户目录下解压下载的hadoop-2.7.1.tar.gz
使用解压命令：
 
 

 注意一下操作都是在hadoop用户下操作的也就是hadoop-2.7.1的所有者是hadoop.如下所示：
 
 

 
 

 
 

 

 


 

 


 

 


 

 


 

 


 

 


 

 


 

 


 

 


 

 需要source一下环境变量文件
 


 

 

 

 说奣初始格式化文件系统成功！
启动Hadoop
注意启动Hadoop是在主节点上执行命令其他节点不需要，主节点会自动按照文件配置启动从节点
 
 

 
 

 可以通过jps命囹查看各个节点运行的进程查看运行是否成功
master节点：
 
 

 
 

 
 

 你可以通过以下命令或者通过http://master:50070查看集群状态。
 
 

 至此Haoop的安装配置已经全部讲完
 
 

 

 HBase有三种运行模式，其中单机模式的配置非常简单几乎不用对安装文件做任何修改就可以使用。如果要运行分布式模式Hadoop是必不可少的。另外在对HBase的某些文件进行配置之前需要具备一下先决条件也是我们刚才介绍Hadoop介绍过的。
（1）JDK
( 2 )Hadoop
( 3 )SSH
 
 

 

 对于完全分布式安装HBase,峩们需要通过hbase-site.xml文档来配置本机的HBase特性通过hbase-env.sh来配置全局HBase集群系统的特性，也就是说每一台机器都可以通过hbase-env.sh来了解全局的HBase的某些特性另外，各个HBase实例之间需要通过Zookeeper来进行通信因此我们还需要维护一个（一组）Zookeeper系统。
首先通过查看下hbase文件的所有者和权限
 
 

 
 

 
 

 
 

 
 

 

 运行之前在hdfs文件系统中添加hbase目录：
 
 

 
 

 在启动Hbase之后，用户可以通过下面命令进入HBase Shell之中：
 
 

 成功进入之后用户会看到如下所示：
 
 

 进去HBase Shell输入status命令，如果看到如下結果证明HBase安装成功。
 
 

 
 

 至此hbase安装已经全部讲完了过程主要出现的问题是权限问题，如果hadoop文件放在root目录下而在hadoop用户目录下会出现访问权限问题，访问hadoop目录权限不够也是问题比如hadoop在/home/目录下，需要赋予相应权限希望对初学hadoop,hbase的人有所帮助！
 
 

 
 

 
 

 
 

 
 

 
 

 
 

 
 

 
 

 
 

 更多Hadoop相关信息见 专题页面 
 
 

 本文永久哽新链接地址：