Как обрабатывать данные маленьких кусочков в пандах? - PullRequest
0 голосов
/ 01 июля 2019

Я пытаюсь обработать данные после использования параметра chunksize.Я получаю сообщение об ошибке, так как итератор не преобразует данные в фрейм.

pdvs = dbu.readFromSQL("SELECT GOOGLE.* \
                           ,creation_time \
                        FROM [dbo].[DM_SOURCE_GOOGLE_DETAILS] AS GOOGLE\
                        JOIN \
                        ( \
                            SELECT place_id \
                                ,max(datetime) AS datetime \
                                , min(datetime) AS creation_time \
                            FROM [dbo].[DM_SOURCE_GOOGLE_DETAILS] \
                            GROUP BY place_id \
                        )AS date_updated \
                        ON GOOGLE.datetime = date_updated.datetime \
                            AND GOOGLE.place_id = date_updated.place_id", chunksize = 5
                       )

combined = pd.DataFrame(pdvs)
# get address
combined['valid'] = True

Но преобразование не работает.Я получаю следующую ошибку: «генератор» объект не поддерживает назначение элемента

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...