Формирование данных CSV с фреймами данных Python

Question

У меня есть некоторые данные CSV, которые я хочу переформатировать как

Я хочу изменить этот формат с помощью Data1-4 в качестве имен столбцов и Value 1-4 в качестве значений помимо данных A и B

У меня миллионы строк, и я не хочу их зацикливать. Я работаю с фреймом данных Python.

Пожалуйста, предложите лучший способ сделать это, так как цикл с миллионами займет огромное время, и я хочу выполнить задачу наилучшим образом с точки зрения производительности.

Еще несколько примеров данных, которые я пытаюсь сделать:

Answer 1

Если ввод Series с 3 уровнями MultiIndex, используйте Series.unstack:

print (type(s))
<class 'pandas.core.series.Series'>
print (s.index.nlevels)
3

df = s.unstack(fill_value=0)

Или, если в качестве входных данных используется 4 столбца DataFrame сначала отменить пропущенные значения в первых 2 столбцах путем прямого заполнения, а затем изменить его на DataFrame.set_index с помощью Series.unstack:

print (type(df))
<class 'pandas.core.frame.DataFrame'>
print (len(df.columns))
4

df.columns = ['Col1','Col2','Col3','Col4']
cols = ['Col1','Col2']
df[cols] = df[cols].ffill()
df = df.set_index(['Col1','Col2','Col3'])['Col4'].unstack(fill_value=0)