Я использую API-интерфейс Big Query python для запуска сценария sql в Big Query с расположением «WRITE_APPEND» для добавления результатов в существующую таблицу.
Я достигаю этого с помощью bigquery.Client.query()
, получая доступ к результату с помощью метода result.to_dataframe()
, который в настоящее время возвращает всю таблицу назначения, тогда как я хотел бы, чтобы возвращались только вновь созданные строки.
Есть несколько способов, которыми я мог бы обойти это, но я хотел бы знать, есть ли способ только вернуть строки, добавленные к существующей таблице, а не все строки в этой таблице.