瀚海星空

星空浩瀚 人类渺小

HFile打印

周海汉 http://abloz.com 2012.12.27 [zhouhh@Hadoop48 ~]$ hbase org.apache.hadoop.hbase.io.hfile.HFile usage: HFile [-a] [-b] [-e] [-f ] [-k] [-m] [-p] [-r ] [-s] [-v] -a,–checkfamily Enable family ...

用maven生成HBase官方指南文档

from http://abloz.com 2012.12.26 I’m maintain a Chinese copy of HBase official guide, but I don’t know how the author edit the source of the book. The source is xml, and html is generated by maven...

hadoop 源码编译

周海汉 2012.12.26 http://abloz.com 以前写过一篇《yarn hadoop mapreduce 2.0 编译》,环境准备和那一篇一样。 本篇直接从svn下载最新源码,进行编译。 下载源码: 从subversion库check out: [zhouhh@Hadoop48 hsrc]$ svn co http://svn.apache.org/repos/asf/h...

BloomFilter 布隆过滤

周海汉 2012.12.20 听说世界末日狂欢要到了? Bloom 1970年发明了布隆过滤器,对大数据尤其有用。 Bloom过滤原理: 如果要判断一个数是否在一个集合中,最自然的想法是直接遍历,如果找到,则存在;没有找到,则不存在。如果数据是有序集合,则可以用折半查找。 Hash方法是一种很好的映射方式,方便快速查找。我们可以先用Hash做索引,如果数据Hash后在索引表中存在,则...

NameNode不能启动报 NullPointerException

hadoop 1.02,hbase 0.92.系统所有node改了ip地址后,second name node过了一段时间退出,报如下错误: 2012-12-17 17:09:05,646 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: java.lang.NullPointerException at org....

HBase 0.94 master启动过程源码分析

HBase 0.94 master启动过程源码分析 周海汉 http://abloz.com [zhouhh@Hadoop48 bin]$ pwd /home/zhouhh/hbase-0.94.0/bin [zhouhh@Hadoop48 bin]$ vi hbase shell中开始准备java和hadoop,hbase的环境,然后处理传入的参数。如果参数是”master”,则类是or...

django 在ubuntu12.04上的部署


How can I use different pipelines for different spiders in a single Scrapy project

Hi vitsin, You can’t override settings like this in your spiders like your code does: class FirstSpider(CrawlSpider): settings.overrides['ITEM_PIPELINES'] = ... And you can’t customize the i...

TTransportException

在用php通过thrift server读取Hbase数据时,出现如下错误: [Wed Nov 28 18:23:06 2012] [error] [client 192.168.20.81] PHP Fatal error: Uncaught exception ‘TTransportException’ with message ‘TSocket: timed out reading...

mysql 5.5 utf8 配置方法

周海汉 (http://abloz.com) 2012.11.25 ubuntu 12.04所带的mysql 5.5,在/etc/mysql/my.cnf的[mysqld]中添加default-character-set=utf8 以支持utf8会导致msql无法启动。 在my.cnf的[mysqld]中添加 log_error = /var/log/mysql/error.log 重启后...