Author Archives: coder4

Hadoop集群配置

首先恢复单机配置,可以参考教程:
http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/
本文大部分参考了这个《Hadoop集群配置教程》,非常感谢!

Master:10.182.165.114 node1 (Namenode 和 JobTracker)
Slave:10.182.165.156 node2

1、下载、创建用户
/usr/sbin/add[......]

继续阅读

关于mutt发邮件的中文乱码的问题

首先,mutt是很智能的,不要低估了人家的智商。

默认来说,是根据系统的LANG变量来评估所需要试用的编码的。

以中文为例
sudo sudo dpkp-reconfigure locales

#然后构上选择zh_CN.GB2312
#但是不要选择默认编码!
Generating locales (this might take a while)...
zh_CN.GB2312... done
Generation complete.

#执行成功后直接exp[......]

继续阅读

Hadoop伪集群测试

Hadoop的执行模式有三种:单机、伪集群和集群。

前面《Hadoop单机测试》文章中,我们已经搞定了纯单机模式。下面来说伪集群。

伪集群的各个进程将跑在不同的JVM里,并且使用HDFS。

2012.06.21更新:更新Hadoop版本到1.0.3

1、配置伪集群

conf/core-site.xml
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl&qu[......]

继续阅读

Hadoop单机测试

经过电话确认,终于把Rackspace激活了,又多了一个玩具,以后再跑大实验时候可以用用看。

以下主要参考Hadoop的官方教程。

2012年6月21日更新:更新到最新的版本Hadoop 1.0.3

1、下载Hadoop
wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.0.3/hadoop-1.0.3-bin.tar.gz

tar -xzvf hadoop-1.0.3-bin.tar.gz
2、设[......]

继续阅读