Вопросы с тегом google-cloud-dataflow

0 голосов

1 ответ

Google Cloud Dataflow Stream + Batch

bitnahian / 07 августа 2020

0 голосов

1 ответ

Избегайте двойных кавычек с помощью двойной кавычки

BSpinoza / 06 августа 2020

1 голос

2 ответов

Apache Avro генерирует неправильную схему Avro из Java POJO с @AvroSchema

gixen / 06 августа 2020

1 голос

0 ответов

Конвейеры слияния данных в потоке данных

user9361077 / 04 августа 2020

1 голос

1 ответ

Прочтите файл CSV, очистите его, затем запишите результат в формате CSV, используя поток данных Apache Beam

BSpinoza / 04 августа 2020

0 голосов

2 ответов

Можно ли выполнить некоторый код, такой как ведение журнала и запись метрик результатов в GCS, в конце пакетного задания потока данных?

user2179539 / 03 августа 2020

0 голосов

1 ответ

Apache Beam: как решить «ParDo требует детерминированного c ключевого кодировщика для использования состояния и таймеров» при использовании функции дедупликации

kylebutters / 02 августа 2020

0 голосов

1 ответ

Cloud Dataflow - записи удаляются во время потоковой передачи задания, но не как пакетное задание

dses / 14 июля 2020

1 голос

0 ответов

Подключиться к экземпляру Google Cloud SQL из GCP Dataflow (ml метаданные)?

Zarkopafilis / 14 июля 2020

1 голос

2 ответов

Поток данных GCP - пропускная способность постепенно снижается, рабочие не используются

Vinod / 12 июля 2020

1 голос

2 ответов

Beam - функции для запуска только один раз в начале и в конце трубопровода Beam.

SamsonStannus / 09 июля 2020

0 голосов

0 ответов

Обработка сгруппированных данных в потоке данных занимает больше времени

user_a27 / 08 июля 2020

0 голосов

1 ответ

Шаблон луча для потока данных не будет загружен в корзину

gixen / 19 июня 2020

0 голосов

1 ответ

Пример использования для потока данных (маленькие SQL запросов)

Jean-Charles VERAZZI / 19 июня 2020

1 голос

1 ответ

Конвейер потоковой передачи Beam не записывает файлы в корзину

gixen / 17 июня 2020

0 голосов

0 ответов

Обработка исключений с помощью Apache Beam и GCP PubSub

IoT user / 17 июня 2020

0 голосов

0 ответов

Airflow отмечает задачу потока данных как неудачную, но на самом деле успешно

Louis Dacquet / 16 июня 2020

0 голосов

2 ответов

Как выбрать набор полей из входных данных как массив повторяющихся полей в луче SQL

Shashank Kamath / 29 мая 2020

1 голос

2 ответов

При добавлении файла requirements.txt [Python] происходит сбой потока данных.

Alexander Fragotsis / 27 мая 2020

0 голосов

0 ответов

Beam Java Dataflow, Bigquery streaming insert GroupByKey сокращающие элементы

LPD / 26 мая 2020

0 голосов

2 ответов

Правильный способ обработки больших объемов сообщений в шаблоне потока данных Google из Pub / Sub в BigQuery.

being of habits / 25 мая 2020

0 голосов

1 ответ

Apache Beam Combine vs GroupByKey

ericVE / 09 мая 2020

0 голосов

2 ответов

Чтение задания Cloud Dataflow из одного проекта BigQuery и запись в другой проект BigQuery

Alex / 08 мая 2020

1 голос

1 ответ

Как Apache Beam, работающий в GCP Dataflow, обрабатывает пакеты больших SQL таблиц?

Adelin / 08 мая 2020

0 голосов

0 ответов

Почему Dataflow настаивает на использовании типа BOOLEAN, если он не поддерживается?

Zalán Meggyesi / 08 мая 2020