Установите Apache Kylin в пользовательской среде - PullRequest
Новая
       38

Установите Apache Kylin в пользовательской среде

0 голосов
/ 27 сентября 2019

Я пытаюсь установить Apache Kylin в Ubuntu 16.04.

Я установил:

  • hadoop 3.1.2 в псевдо-распределенном режиме (fs.default.name: hdfs:// localhost: 9000)
  • apache hive 3.1.2 и db derby 10.14.2.0 (настройка hive использует db derby)
  • hbase 1.4.10 в псевдораспределенном режиме (с использованием hdfs: //localhost: 9000 / hbase)

но когда я звоню:

  • hbase shell
  • hbase (main): 001: 0> list

получить ошибку: 

ERROR: Can't get master address from ZooKeeper; znode data == null

Here is some help for this command:
List all user tables in hbase. Optional regular expression parameter could
be used to filter the output. Examples:

  hbase> list
  hbase> list 'abc.*'
  hbase> list 'ns:abc.*'
  hbase> list 'ns:.*'

и когда я позвоню:

  • ssh localhost
  • kylin.sh start

получить ошибку 

2019-09-27 09:26:41,029 INFO  [main] client.ZooKeeperRegistry:107 : ClusterId read in ZooKeeper is null
Exception in thread "main" java.lang.IllegalArgumentException: Failed to find metadata store by url: kylin_metadata@hbase
    at org.apache.kylin.common.persistence.ResourceStore.createResourceStore(ResourceStore.java:99)
    at org.apache.kylin.common.persistence.ResourceStore.getStore(ResourceStore.java:111)
    at org.apache.kylin.rest.service.AclTableMigrationTool.checkIfNeedMigrate(AclTableMigrationTool.java:99)
    at org.apache.kylin.tool.AclTableMigrationCLI.main(AclTableMigrationCLI.java:43)
Caused by: java.lang.reflect.InvocationTargetException
    at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)
    at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62)
    at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
    at java.lang.reflect.Constructor.newInstance(Constructor.java:423)
    at org.apache.kylin.common.persistence.ResourceStore.createResourceStore(ResourceStore.java:92)
    ... 3 more
Caused by: org.apache.hadoop.hbase.client.RetriesExhaustedException: Can't get the location for replica 0
    at org.apache.hadoop.hbase.client.RpcRetryingCallerWithReadReplicas.getRegionLocations(RpcRetryingCallerWithReadReplicas.java:372)
    at org.apache.hadoop.hbase.client.ScannerCallableWithReplicas.call(ScannerCallableWithReplicas.java:153)
    at org.apache.hadoop.hbase.client.ScannerCallableWithReplicas.call(ScannerCallableWithReplicas.java:58)
    at org.apache.hadoop.hbase.client.RpcRetryingCaller.callWithoutRetries(RpcRetryingCaller.java:219)
    at org.apache.hadoop.hbase.client.ClientScanner.call(ClientScanner.java:275)
    at org.apache.hadoop.hbase.client.ClientScanner.loadCache(ClientScanner.java:436)
    at org.apache.hadoop.hbase.client.ClientScanner.next(ClientScanner.java:310)
    at org.apache.hadoop.hbase.MetaTableAccessor.fullScan(MetaTableAccessor.java:639)
    at org.apache.hadoop.hbase.MetaTableAccessor.tableExists(MetaTableAccessor.java:366)
    at org.apache.hadoop.hbase.client.HBaseAdmin.tableExists(HBaseAdmin.java:409)
    at org.apache.kylin.storage.hbase.HBaseConnection.tableExists(HBaseConnection.java:281)
    at org.apache.kylin.storage.hbase.HBaseConnection.createHTableIfNeeded(HBaseConnection.java:306)
    at org.apache.kylin.storage.hbase.HBaseResourceStore.createHTableIfNeeded(HBaseResourceStore.java:114)
    at org.apache.kylin.storage.hbase.HBaseResourceStore.<init>(HBaseResourceStore.java:88)
    ... 8 more

Ответы [ 2 ]

1 голос
/ 27 сентября 2019

Из-за ошибки, очевидно, ваш HBase не работает;Пожалуйста, убедитесь, что HBase хорош.

0 голосов
/ 27 сентября 2019

Hadoop имеет долгую историю и является сложной, поэтому мы рекомендуем вам использовать несколько хорошо протестированных дистрибутивов Hadoop, таких как CDH и HDP, но не настраиваемую среду Hadoop.Если вы делаете PoC и хотите быстро изучить Kylin, используйте изображение Docker https://hub.docker.com/r/apachekylin/apache-kylin-standalone. Если вы хотите использовать Kylin в более формальной среде Hadoop, не могли бы вы использовать Hadoop CDH 5.x или HDP 2.xРаспределение?Если у вас есть дополнительные вопросы, пожалуйста, свяжитесь с сообществом Kylin по списку рассылки.

...