安装
2011年4月4日
10:13
Hadoop-0.20.2安装使用
1、Cygwin 安装 ssh
2、按照以下的文档配置ssh
在Windows上安装Ha
doop教程.pdf
3、几个配置文件的配置
3.1、conf/core-site.xml
<property>
<name></name>
<value>hdfs://localhost:9000</value>
<final>true</final>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/workspace/temp/hadoop/tmp/hadoop-
${}</value>
<final>true</final>
</property>
3.2、conf/hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
<final>true</final>
</property>
<property>
<name>.dir</name>
<value>/workspace/temp/hadoop/data/hadoop/name</value>
<final>true</final>
</property>
<property>
<name>dfs.data.dir</name>
<value>/workspace/temp/hadoop/data/hadoop/data</value>
<final>true</final>
</property>
3.3、conf/mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
<final>true</final>
</property>
3.4、conf/hadoop-env.sh
export JAVA_HOME=D:/workspace/tools/jdk1.6
4、解决启动的时候 ClassNotFound： org.apache.hadoop.util.PlatformName
将 %hadoop_home%\bin\hadoop-config.sh中的第190行
修改为如下：
JAVA_PLATFORM=`CLASSPATH=${CLASSPATH} ${JAVA} -Xmx32m -classpath ${HADOOP_COMMON_HOME}/hadoop-common-0.21.0.jar
org.apache.hadoop.util.PlatformName | sed -e "s/ /_/g"`
5、命令
6、创建HBase文件夹
bin/hadoop dfs -mkdir Hbase
bin/hadoop dfs -mkdir tmp
http://localhost:50070/
http://localhost:50030/
1、修改bin/hbase-env.sh 中的
export JAVA_HOME
export HBASE_MANAGES_ZK=true
2、将conf/hbase-default.xml文件中的内容完全复制到conf/hbase-site.xml中
3、对conf/hbase-site.xml文件做如下修改：
<property>
<name>hbase.rootdir</name>
<value>hdfs://localhost:9000/hbase</value>
</property>
<property>
<name>hbase.tmp.dir</name>
<value>/workspace/temp/hadoop/tmp/hbase-${}</value>
<description>Temporary directory on the local filesystem.</description> </property>
<property>
<name>hbase.cluster.distributed</name>
<value>false</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>127.0.0.1</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2222</value>
<description>Property from ZooKeeper's config zoo.cfg.
The port at which the clients will connect.
</description>
</property>
Hive-0.5.0安装和使用
一、创建Hive所需目录
bin/hadoop dfs -mkdir /user/hive/warehouse
bin/hadoop dfs -mkdir /tmp
bin/hadoop dfs -chmod g+w /user/hive/warehouse
bin/hadoop dfs -chmod g+w /tmp
二、修改bin/hive-config.sh文件，增加以下内容
export HIVE_HOME=/cygdrive/d/workspace/tools/hadoop/run/hive export HADOOP_HOME=/cygdrive/d/workspace/tools/hadoop/run/hadoop。