質問

私は使用しています HBase 0.20.6Hadoop 0.21.0 の上 Ubuntu 10.04 LTS そして、マスターエラーを開始できませんでした。 (エラーは、hbase-root-master-ubuntu.logファイルからの投稿の最後に添付されています)

HBase 0.20.6はHadoop 0.21.0で正常に動作しますか?そうでない場合は、回避策がありますか?

問題ソースは何ですか?

あなたの時間と検討をありがとう。

ログ:

java.io.IOException: Call to localhost/127.0.0.1:54310 failed on local exception: java.io.EOFException
 at org.apache.hadoop.ipc.Client.wrapException(Client.java:775)
 at org.apache.hadoop.ipc.Client.call(Client.java:743)
 at org.apache.hadoop.ipc.RPC$Invoker.invoke(RPC.java:220)
 at $Proxy0.getProtocolVersion(Unknown Source)
 at org.apache.hadoop.ipc.RPC.getProxy(RPC.java:359)
 at org.apache.hadoop.hdfs.DFSClient.createRPCNamenode(DFSClient.java:106)
 at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:207)
 at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:170)
 at org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:82)
 at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:1378)
 at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:66)
 at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:1390)
 at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:196)
 at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:95)
 at org.apache.hadoop.hbase.master.HMaster.<init>(HMaster.java:195)
 at org.apache.hadoop.hbase.LocalHBaseCluster.<init>(LocalHBaseCluster.java:94)
 at org.apache.hadoop.hbase.LocalHBaseCluster.<init>(LocalHBaseCluster.java:78)
 at org.apache.hadoop.hbase.master.HMaster.doMain(HMaster.java:1229)
 at org.apache.hadoop.hbase.master.HMaster.main(HMaster.java:1274)
Caused by: java.io.EOFException
 at java.io.DataInputStream.readInt(DataInputStream.java:375)
 at org.apache.hadoop.ipc.Client$Connection.receiveResponse(Client.java:501)
 at org.apache.hadoop.ipc.Client$Connection.run(Client.java:446)
Fri Dec 24 14:02:12 EET 2010 Starting master on ubuntu
ulimit -n 1024
2010-12-24 14:02:13,267 INFO org.apache.hadoop.hbase.master.HMaster: vmName=Java HotSpot(TM) Client VM, vmVendor=Sun Microsystems Inc., vmVersion=17.1-b03
2010-12-24 14:02:13,268 INFO org.apache.hadoop.hbase.master.HMaster: vmInputArguments=[-Xmx1000m, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -XX:+HeapDumpOnOutOfMemoryError, -XX:+UseConcMarkSweepGC, -XX:+CMSIncrementalMode, -Dhbase.log.dir=/usr/lib/hbase/bin/../logs, -Dhbase.log.file=hbase-root-master-ubuntu.log, -Dhbase.home.dir=/usr/lib/hbase/bin/.., -Dhbase.id.str=root, -Dhbase.root.logger=INFO,DRFA, -Djava.library.path=/usr/lib/hbase/bin/../lib/native/Linux-i386-32]
2010-12-24 14:02:13,353 INFO org.apache.hadoop.hbase.master.HMaster: My address is ubuntu.ubuntu-domain:60000
2010-12-24 14:02:13,593 ERROR org.apache.hadoop.hbase.master.HMaster: Can not start master
役に立ちましたか?

解決

最近、HBaseユーザーメーリングリストについてこれについて説明しています。読むことをお勧めします。http://mail-archives.apache.org/mod_mbox/hbase-user/201012.mbox/%3caanlktima7uqzaig0810mthtgkk30x8ejgs+n5+cf8gxq1@mail.gmail.com%3e

要約として、私はStumbleuponのRyan Rawsonがリストに記載されているものを引用します。

HBase 0.20.6は、Hadoop 21でうまく実行される可能性があります。ブランチ-20-Appendの上に耐久性を強化するのに役立つ多くのパッチがあり、Hadoop 21にも適用される場合があります。

おそらく走っているのは、Hadoop 21の上にHbase 0.90でHadoop 20 jarを使用することです。Hadoop20瓶を削除して、Hadoop 21にコピーしてみてください。

また、CDH3B2+を実行することを検討してください。Hadoop21はパンリリースであり、誰もそれを実行したり、生産設定で実行されたりすることを期待していません。

Debianパッケージを介して、ClouderaのCDH3B3を搭載したHBase 0.90 RCSを使用しています。あなたがそれを考慮したい場合に備えて、それを参照してください インストールページ 詳細については。私もお勧めします このページ クラスターへのインストール用。最新のHBase 0.90 RCからダウンロードしてください ここ.

ライセンス: CC-BY-SA帰属
所属していません StackOverflow
scroll top