使用python访问hdfs——pyhdfs库的编译&安装

首先可以参考这两篇文档：
http://code.google.com/p/libpyhdfs/source/browse/trunk/INSTALL
http://www.cnblogs.com/zhangmiao-chp/archive/2011/05/04/2036665.html

然后补充两个细节：
1. 我在执行:

apt-get install libhdfs0-dev

的时候提示找不到包，改成：

apt-get install libhdf4-dev

之后安装成功。

2. 文档一中提到：

引用

You can copy your libhdfs.so into `lib' directory.

其中的libhdfs.so位于hadoop的目录下，在我这边是位于hadoop-1.0.3-bin/c++/Linux-i386-32/lib/下，编译pyhdfs时需要用到。

pyhdfs编译安装成功后，在python代码中

import pyhdfs

可能仍然会报错：

引用

ImportError: libhdfs.so.0: cannot open shared object file: No such file or directory

此时需要编辑/etc/ld.so.conf ，将上文提到的hadoop-1.0.3-bin/c++/Linux-i386-32/lib/目录地址添加进去，然后执行

sudo /sbin/ldconfig -v

使配置生效即可。