Процессорное приложение в Spring Boot 2.2.4 / Hoxton.SR1 не работает в Spring Cloud Data Flow 2.4.1 - PullRequest
0 голосов
/ 25 марта 2020

Я пытаюсь разработать новое приложение для работы с SCDF 2.4.1 и Skipper 2.3.1

Я взял образцы из https://github.com/sabbyanandan/stream-programming-models

I построили их локально. Скачал композицию docker для SCDF kafka, установил Версии и смонтировал репозиторий и запустил мою композицию docker.

Когда я развертываю «функциональный» модуль и создаю простой поток http | customUpper | log

Я вижу пример работы нормально и могу видеть вывод журнала, как и ожидалось.

Когда я изменяю приложение потока функций, чтобы использовать Spring Boot, 2.2.4 и Hoxton.SR1 для зависимостей облачного потока. Я не вижу никакого вывода в журнале.

BootApp

public class FunctionStreamSampleApplication {

    public static void main(String[] args) {
        SpringApplication.run(FunctionStreamSampleApplication.class, args);
    }

    @Bean
    public Function<String, String> uppercase() {

        return data -> {
            System.out.println("Input "+data);
            return data.toUpperCase();
        };
    }
}

application.yml
spring:
  cloud:
    stream:
      function:
        definition: uppercase

pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>2.2.4.RELEASE</version>
        <relativePath/> <!-- lookup parent from repository -->
    </parent>
    <artifactId>function219</artifactId>
    <version>0.0.1-SNAPSHOT</version>
    <name>function219</name>
    <description>Demo project for Spring Boot</description>

    <properties>
        <java.version>1.8</java.version>
        <spring-cloud.version>Hoxton.SR1</spring-cloud.version>
    </properties>

    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-actuator</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-function-context</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-stream-binder-kafka</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>

    </dependencies>
    <dependencyManagement>
        <dependencies>
            <dependency>
                <groupId>org.springframework.cloud</groupId>
                <artifactId>spring-cloud-dependencies</artifactId>
                <version>${spring-cloud.version}</version>
                <type>pom</type>
                <scope>import</scope>
            </dependency>
        </dependencies>
    </dependencyManagement>

    <build>
        <plugins>
            <plugin>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-maven-plugin</artifactId>
            </plugin>
        </plugins>
    </build>

</project>

Я удалил тестовые классы, просто чтобы обрезать их до минимума, чтобы избежать других зависимостей. При развертывании работает то же приложение, что и в версии весенней загрузки 2.1.4, на которой оно изначально было построено. Сообщите, нужно ли внести изменения, чтобы он работал на SCDF

Когда я использую kafkatools для проверки тем, созданных потоком, я вижу сообщения только в файле streamname.http, но процессор не кажется читать сообщения, так как мой системный сервер не печатается.

Ответы [ 2 ]

0 голосов
/ 30 марта 2020

Для потоковых модулей на основе функций для работы с SCDF необходимо добавить соответствующие свойства имени привязки к input и output к свойствам вашего приложения, как описано здесь: https://cloud.spring.io/spring-cloud-static/spring-cloud-stream/3.0.3.RELEASE/reference/html/spring-cloud-stream.html#_functional_binding_names

По сути, это сопоставляет имена конечных точек функционального связывания с именами конечных точек SCDF, input и output. Например, если у вас есть функция `foo ':

spring.cloud.stream.function.bindings.foo-in-0=input spring.cloud.stream.function.bindings.foo-out-0=output

. В будущих выпусках предварительно упакованных потоковых модулей будет использоваться функциональная парадигма, и эти свойства будут предоставляться автоматически.

0 голосов
/ 25 марта 2020

Я считаю, что проблема в том, что текущие опубликованные потоковые приложения, http и log, используют более раннюю версию spring-cloud-stream, основанную на spring boot 2.1.x. Более новая версия spring-cloud-stream, совместимая с boot 2.2.x, не имеет обратной совместимости. Все приложения в потоке должны быть в одной (или совместимой) версии Spring-Cloud-Stream. Я ожидаю, что если вы посмотрите на журнал для пользовательского процессора, вы увидите ошибку преобразования.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...