Hbase 0.20.6 Не удается запустить мастер исключения - PullRequest
Новая
       31

Hbase 0.20.6 Не удается запустить мастер исключения

1 голос
/ 06 января 2011

Я использую Hbase 0.20.6 с Hadoop 0.21.0 на Ubuntu 10.04 LTS и я не могу запустить главную ошибку.(Ошибка добавлена ​​в конце сообщения из файла hbase-root-master-ubuntu.log)

Работает ли Hbase 0.20.6 нормально с Hadoop 0.21.0 ??и если это не так, есть ли работа вокруг ??

В чем источник проблемы ??

Спасибо за ваше время и внимание.

Журнал: 

java.io.IOException: Call to localhost/127.0.0.1:54310 failed on local exception: java.io.EOFException
 at org.apache.hadoop.ipc.Client.wrapException(Client.java:775)
 at org.apache.hadoop.ipc.Client.call(Client.java:743)
 at org.apache.hadoop.ipc.RPC$Invoker.invoke(RPC.java:220)
 at $Proxy0.getProtocolVersion(Unknown Source)
 at org.apache.hadoop.ipc.RPC.getProxy(RPC.java:359)
 at org.apache.hadoop.hdfs.DFSClient.createRPCNamenode(DFSClient.java:106)
 at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:207)
 at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:170)
 at org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:82)
 at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:1378)
 at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:66)
 at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:1390)
 at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:196)
 at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:95)
 at org.apache.hadoop.hbase.master.HMaster.<init>(HMaster.java:195)
 at org.apache.hadoop.hbase.LocalHBaseCluster.<init>(LocalHBaseCluster.java:94)
 at org.apache.hadoop.hbase.LocalHBaseCluster.<init>(LocalHBaseCluster.java:78)
 at org.apache.hadoop.hbase.master.HMaster.doMain(HMaster.java:1229)
 at org.apache.hadoop.hbase.master.HMaster.main(HMaster.java:1274)
Caused by: java.io.EOFException
 at java.io.DataInputStream.readInt(DataInputStream.java:375)
 at org.apache.hadoop.ipc.Client$Connection.receiveResponse(Client.java:501)
 at org.apache.hadoop.ipc.Client$Connection.run(Client.java:446)
Fri Dec 24 14:02:12 EET 2010 Starting master on ubuntu
ulimit -n 1024
2010-12-24 14:02:13,267 INFO org.apache.hadoop.hbase.master.HMaster: vmName=Java HotSpot(TM) Client VM, vmVendor=Sun Microsystems Inc., vmVersion=17.1-b03
2010-12-24 14:02:13,268 INFO org.apache.hadoop.hbase.master.HMaster: vmInputArguments=[-Xmx1000m, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -Dhbase.log.dir=/usr/lib/hbase/bin/../logs, -Dhbase.log.file=hbase-root-master-ubuntu.log, -Dhbase.home.dir=/usr/lib/hbase/bin/.., -Dhbase.id.str=root, -Dhbase.root.logger=INFO,DRFA, -Djava.library.path=/usr/lib/hbase/bin/../lib/native/Linux-i386-32]
2010-12-24 14:02:13,353 INFO org.apache.hadoop.hbase.master.HMaster: My address is ubuntu.ubuntu-domain:60000
2010-12-24 14:02:13,593 ERROR org.apache.hadoop.hbase.master.HMaster: Can not start master

1 Ответ

1 голос
/ 07 января 2011

В последнее время в списке рассылки пользователей HBase обсуждалась эта тема, я бы посоветовал прочитать ее. http://mail-archives.apache.org/mod_mbox/hbase-user/201012.mbox/%3CAANLkTimA7UQZAiG0810mtHtGk30x8ejGs+n5+CF8GxQ1@mail.gmail.com%3E

В качестве резюме я бы процитировал то, что Райан Роусон из StumbleUpon упомянул в списках:

HBase 0.20.6, вероятно, хорошо работает на hadoop 21. У нас много патчей которые помогают повысить долговечность на верхней части ветви-20-append, а также некоторые может применяться к hadoop 21.

То, к чему вы, возможно, прибегаете, это использование jar hadoop 20 в hbase 0,90 поверх hadoop 21. Попробуйте удалить баночку hadoop 20 и скопировать в твоем hadoop 21.

Также рассмотрите возможность запуска cdh3b2 +, hadoop 21 является панорамированным выпуском и нет он запускается и не ожидает, что он будет запущен в производственных условиях.

Мы используем RC HBase 0.90 с Cloudera CDH3b3 через пакеты debian. Если вы хотите рассмотреть это, пожалуйста, обратитесь к странице установки для деталей. Я бы также рекомендовал эту страницу для установки в кластер. Загрузите последнюю версию HBase 0.90 RC с здесь .

...