В конвейере потоковой передачи Python в потоке данных Google отсутствуют некоторые метрики элементов - PullRequest
0 голосов
/ 08 февраля 2019

Я использую поток данных Python (луч 2.5), и мне было интересно, почему метрики шага не отображаются после beam.Map(lambda x: x.decode('utf-8')).

Все работает нормально, но количество элементов исчезает.Step details for lambda

Как видите, числа с этого момента равны нулю.

Есть ли что-то, чего мне не хватает?

1 Ответ

0 голосов
/ 07 марта 2019

Поддержка потоковых конвейеров с помощью Apache Beam Python SDK в Google Cloud Dataflow представлена ​​в бета-версии .

Некоторые функции поддерживаются не полностью, и это относится к некоторым показателям мониторинга.Они будут постепенно добавляться по мере улучшения поддержки.

...