Вопросы с тегом google-облако-поток-данные - PullRequest

Вопросы с тегом google-облако-поток-данные

0 голосов
1 ответ

Я пытаюсь написать задание потока данных в Beam / Java, чтобы обработать серию событий, приходящих...

OCDev / 06 ноября 2019
3 голосов
1 ответ

У меня есть сценарий использования, когда мне нужно перенести 70 ТБ данных из DynamoDB в BigTable и...

rish0097 / 05 ноября 2019
0 голосов
2 ответов

У меня много данных, которые регулярно собираются из источников данных и хранятся в корзинах GCS. В...

busheriff / 30 октября 2019
0 голосов
2 ответов

Я использую CSVRecordSource для чтения CSV в конвейере Apache Beam, который использует open_file в...

tank / 22 октября 2019
0 голосов
1 ответ

У меня есть конвейер потока данных, работающий на GCP, который читает сообщения из pub / sub и...

geek / 22 октября 2019
0 голосов
2 ответов

До сих пор играл с этим в течение достаточно долгого времени, и я изо всех сил пытаюсь найти лучшее...

czr_RR / 21 октября 2019
0 голосов
1 ответ

Я пытаюсь реализовать функцию ListFlatten, я реализовал ее, используя SimpleDoFn, которая работает...

Praveen Billampati / 21 октября 2019
2 голосов
3 ответов

У меня есть данные от веб-пользователей в Firestore. Я вставил некоторые из этих данных в Google...

Jordi Crespo Guzman / 18 октября 2019
0 голосов
1 ответ

До сих пор я пытался написать 1 файл паркета для каждого объекта Window, но в итоге я получаю так...

czr_RR / 14 октября 2019
0 голосов
1 ответ

Недавно разрабатывался потребитель Dataflow, который считывал из подписки PubSub и выводил в файлы...

czr_RR / 08 октября 2019
0 голосов
1 ответ

Я пытаюсь передать сообщение PubSub типа JSON в базу данных ключей, и insert_update работает очень...

SagarKC / 08 октября 2019
1 голос
1 ответ

После выполнения в течение 17 часов мое задание Dataflow завершилось неудачно со следующим...

chmod_007 / 07 октября 2019
0 голосов
1 ответ

Я хочу использовать данные из данных, которые запускаются в моем конвейере, чтобы сгенерировать...

Elon Salfati / 06 октября 2019
0 голосов
1 ответ

Прямо сейчас я просто могу получить значение RunTime внутри класса, используя ParDo, есть ли другой...

Luis Antonio Gutierrez Flores / 04 октября 2019
0 голосов
1 ответ

Я пытаюсь написать конвейер Apache Beam, используя Python (3.7). Я сталкиваюсь с проблемами при...

davidl11223344 / 03 октября 2019
0 голосов
1 ответ

У меня есть несколько вопросов, связанных с Cloud Composer и BigQuery. Нам нужно импортировать и...

StriderKeni / 01 октября 2019
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...