день выходит за допустимые пределы для ошибки месяца, подозревая причину високосного года - PullRequest
0 голосов
/ 21 мая 2019

мой код не понимает, что существует високосный год. Код отлично работает с данными не високосного года. Другая проблема, с которой я сталкиваюсь, заключается в том, что при распечатке данных год устанавливается равным 1900 против фактического года.

def processing(chunk): enter code here
    being read in (by chunksize)
    chunk['Date'] = pd.to_datetime(chunk['Date'], format='%Y-%m-%d') 
    chunk['Year'] = chunk['Date'].dt.year.rename('Year') #creates a new 
        column with the year
    chunk['Month'] = chunk['Date'].dt.month.rename('Month') #new column 
        with month
    chunk['Day'] = chunk['Date'].dt.day.rename('Day') #new column with day
    chunk.drop('Date', 1, inplace=True)
return;
df = pd.read_csv('NLDN_CONUS_flash_and_cloud_2012_dT4KMG.txt', 
    delim_whitespace=True, 
    names=["Date", "Time", "Latitude", "Longitude", "Current", "Multi", 
    "Type"], chunksize=2000000, nrows=2000000)


chunk_list = []
for chunk in df:
    chunk_list.append(chunk)

df_concat = pd.concat(chunk_list)
df_concat['Date'] = pd.to_datetime(df_concat['Date'], format='%Y-%m-%d')
df_concat['month-day'] = df_concat['Date'].dt.strftime('%m-%d')
df_concat['Datetime'] = df_concat['month-day'] + ' ' + df_concat['Time']
df_concat = df_concat[['Datetime', 'Latitude', 'Longitude', 'Current', 
'Multi', 'Type']]
df_concat['Datetime'] = pd.to_datetime(df_concat['Datetime'], format='%m- 
     %d %H:%M:%S.%f')
df_concat.set_index(df_concat['Datetime'], inplace=True)
print(df_concat)

ValueError: день вне диапазона для месяца

1 Ответ

0 голосов
/ 21 мая 2019

В

df_concat['Datetime'] = pd.to_datetime(df_concat['Datetime'], format='%m- 
     %d %H:%M:%S.%f')

вы конвертируете в дату без какой-либо информации о году.Таким образом, pandas предполагает год по умолчанию, который равен 1900.

Я предлагаю использовать полную дату и время в качестве индекса, а затем группировать по дням в году или по мере необходимости.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...