依赖包

亲测可用，上传到$(hadoop_home}/share/hadoop/common可实现lzo压缩 hadoop-lzo-0.4.21-SNAPSHOT.jar

hdfs默认不支持lzo压缩，需要通过将lzo源码融入hadoop源码，重新编译hadoop源码；或者编译lzo源码生成jar，作为插件使用

hadoop-lzo-release-0.4.20.zip

hadoop-lzo-0.4.20 centOS6.5 64位编译出来的 拷贝jar包到hadoop和hbase中 cp /opt/hadoopgpl/lib/hadoop-lzo-0.4.20-SNAPSHOT.jar $HADOOP_HOME/share/hadoop/common/ cp /opt/hadoopgpl/lib/hadoop-lzo-0.4.20-SNAPSHOT.jar $HBASE_HOME/lib/ 2.2.6. 拷贝本地库so文件到hadoop tar -cBf - -C target/native/Linux-amd64-64/lib . | tar -xBvf - -C $HADOOP_HOME/lib/native/

hadoop-lzo-0.4.21-SNAPSHOT.jar是hadoop数据压缩lzo工具包

hadoop-lzo-0.4.21-SNAPSHOT.jar是hadoop数据压缩lzo工具包，hadoop版本是2.7.2

hadoop支持LZO压缩配置 将编译好后的hadoop-lzo-0.4.20.jar 放入hadoop-2.7.2/share/hadoop/common/ core-site.xml增加配置支持LZO压缩 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec, org.apache.hadoop.io.compress.DefaultCodec, org.apache.hadoop.io.compress.BZip2Codec, org.apache.hadoop.io.compress.SnappyCodec, com.hadoop.compression.lzo.LzoCodec, com.hadoop.compression.lzo.LzopCodec io.compression.codec.lzo.class com.hadoop.compression.lzo.LzoCodec

lzo创建索引的压缩包

Mac下编译的hadoop-lzo，Hadoop对应的版本是2.8.0，大家可以下载使用。