Не удается загрузить драйвер JDBC Phoenix для JdbcInsertBolt в Storm - PullRequest
0 голосов
/ 11 октября 2018

Во время инициализации Apache's Storm JdbcInsertBolt я получаю ошибку

java.lang.ClassCastException: 
  Cannot cast org.apache.phoenix.jdbc.PhoenixDriver to javax.sql.DataSource
at com.zaxxer.hikari.util.UtilityElf.createInstance(UtilityElf.java:90)
at com.zaxxer.hikari.pool.PoolBase.initializeDataSource(PoolBase.java:292)
at com.zaxxer.hikari.pool.PoolBase.<init>(PoolBase.java:84)
at com.zaxxer.hikari.pool.HikariPool.<init>(HikariPool.java:102)
at com.zaxxer.hikari.HikariDataSource.<init>(HikariDataSource.java:71)
at org.apache.storm.jdbc.common.HikariCPConnectionProvider.prepare(HikariCPConnectionProvider.java:53)
at org.apache.storm.jdbc.mapper.SimpleJdbcMapper.<init>(SimpleJdbcMapper.java:43)

от базового HikariCPConnectionProvider.Что не так?

Я следую http://storm.apache.org/releases/1.1.2/storm-jdbc.html, Вот что я делаю, основываясь на этом:

Мне нравится записывать данные из топологии Apache Storm в таблицу HBase через Phoenix,Для этого я скачал файл драйвера (phoenix-4.7.0.2.6.5.3003-25-client.jar) со своего кластерного сервера и добавил его в свой локальный репозиторий maven:

mvn install:install-file 
  -Dfile=lib\phoenix-4.7.0.2.6.5.3003-25-client.jar 
  -DgroupId=org.apache.phoenix 
  -DartifactId=phoenix-jdbc -Dversion=4.7.0 -Dpackaging=jar

После этого я обновил свой .pom:

<dependency>
    <groupId>org.apache.phoenix</groupId>
    <artifactId>phoenix-jdbc</artifactId>
    <version>4.7.0</version>
</dependency>

Теперь добавьте JDBC-болт Storm:

<dependency>
    <groupId>org.apache.storm</groupId>
    <artifactId>storm-jdbc</artifactId>
    <version>1.2.2</version>
    <scope>provided</scope>
</dependency>

, и я настроен на использование болта.Во-первых: Настройте поставщика соединений:

Map hikariConfigMap = new HashMap();
hikariConfigMap.put("dataSourceClassName", "org.apache.phoenix.jdbc.PhoenixDriver");
hikariConfigMap.put("dataSource.url", "<zookeeperQuorumURI>:2181:/hbase-unsecure");
this.connectionProvider = new HikariCPConnectionProvider(hikariConfigMap);

Теперь инициализируйте преобразователь значений-кортежей в db-columns-mapper

this.simpleJdbcMapper = new SimpleJdbcMapper(this.tablename, connectionProvider);

Во время этого происходит ошибка, упомянутая выше.

Просто для полноты: JdbcInsertBolt создается следующим образом:

new JdbcInsertBolt(this.connectionProvider, this.simpleJdbcMapper)
        .withTableName(this.tablename)
        .withQueryTimeoutSecs(30);

1 Ответ

0 голосов
/ 11 октября 2018

вы пытались установить:

driverClassName -> org.apache.phoenix.jdbc.PhoenixDriver.Текущий код, кажется, установил dataSourceClassName, который отличается, я думаю,

Ссылаясь это

...