кадр данных временных рядов панд со столбцами списка - PullRequest
Новая
       5

кадр данных временных рядов панд со столбцами списка

1 голос
/ 07 ноября 2019

У меня есть датафрейм pandas timeseries, где столбец содержит список из 5 значений за период 15 минут. Это означает, что каждое значение в списке измеряется каждые 3 минуты. 

d=[{'time': '09.45', 'value': 0},
   {'time': '10.00', 'value': [1, 2, 3, 4, 5]},
   {'time': '10.15', 'value': [6, 7, 8, 9, 10]},
   {'time': '10.30', 'value': 0}]
df = pd.DataFrame(d)
print(df)

    time             value
0  09.45                 0
1  10.00   [1, 2, 3, 4, 5]
2  10.15  [6, 7, 8, 9, 10]
3  10.30                 0

Я хотел бы иметь отдельные строки для каждого значения для каждых 3 минут. Я хочу вывод, как показано ниже. Если значение столбца равно 0, то оно должно быть 0 для всех отдельных строк. 

time          value
09.48         1
09.51         2
09.54         3
09.57         4
10.00         5
10.03         6
10.06         7
10.09         8
10.12         9
10.15         10
10.18         0
10.21         0
10.24         0
10.27         0
10.30         0

1 Ответ

1 голос
/ 07 ноября 2019

Раствор для панд 0.25.0 +: 

#filter out first 0 rows
df = df[df['value'].ne(0).cumsum().gt(0)]
#replace 0 to list filled by 5 times 0
df['value'] = df['value'].apply(lambda x: [0,0,0,0,0] if x == 0 else x)

#convert lists to rows
df = df.explode('value')

#create timedeltas for each 3 minutes
s = pd.to_timedelta(df.groupby(level=0).cumcount(ascending=False) * 3 * 60, unit='s')
#convert string to datetimes, subtract and convert to HH.MM format
df['time'] = pd.to_datetime(df['time'], format='%H.%M').sub(s).dt.strftime('%H.%M')
df = df.reset_index(drop=True)
print (df)
     time value
0   09.48     1
1   09.51     2
2   09.54     3
3   09.57     4
4   10.00     5
5   10.03     6
6   10.06     7
7   10.09     8
8   10.12     9
9   10.15    10
10  10.18     0
11  10.21     0
12  10.24     0
13  10.27     0
14  10.30     0
...