Можно ли синхронизировать данные (в инкрементах) из Google BigTable в BigQuery с помощью Google Dataflow? В моем случае у меня есть поток данных, поступающий в Google BigTable, так как он имеет низкую задержку чтения / записи. Затем планируем создать какой-то конвейер, чтобы в итоге таблица BigQuery была согласованной.
Кроме того, если мы используем Dataflow для синхронизации данных из BigTable, то нам нужно спроектировать rowkey, чтобы избежать сложного сканирования таблиц. Это верно?
С уважением,
Кумар