Добавить строки в кадре данных, используя значения из другого списка

Question

У меня есть фрейм данных:

df = pd.DataFrame(rows,columns=['proid','sku', 'qty'])

и список уникальных skus

skus = ["SKU1", "SKU2",  "SKU3"]

Теперь df не может содержать строки для всех комбинаций proid и sku, гдеsku из списка uniq skus

например:

#    proid  sku   qty
# 1  p1     SKU1   1
# 2  p1     SKU3   2
# 3  p2     SKU1   3

Я хочу добавить строки во фрейм данных таким образом, чтобы все комбинации proid sku существовали спо умолчанию 0 значений

результат:

#    proid  sku   qty
# 1  p1     SKU1   1
# 2  p1     SKU3   2
# 3  p2     SKU1   3
# 4  p1     SKU2   0
# 5  p2     SKU2   0
# 6  p2     SKU3   0

Answer 1

Другой ответ, который хорошо работает:

from itertools import product

combs = pd.DataFrame(list(product(df[proid], df[sku])),
                 columns=["proid", "sku"])
result = df.merge(combs, how = 'right').fillna(0).drop_duplicates()

Answer 2

создать фрейм данных из мультииндексов всех возможных индексов

ind = pd.MultiIndex.from_product(
      [['p1', 'p2'], ['SKU1', 'SKU2' ,'SKU3']]
).to_frame().reset_index(drop=True).rename({0:'proid', 1: 'sku'}, axis=1)

левое соединение с оригинальным фреймом данных

ind.merge(df, on=['proid', 'sku'], how='left').fillna(0)

выводит:

  proid   sku  qty
0    p1  SKU1  1.0
1    p1  SKU2  0.0
2    p1  SKU3  2.0
3    p2  SKU1  3.0
4    p2  SKU2  0.0
5    p2  SKU3  0.0

альтернативно,создать мультииндекс и переиндексировать исходный фрейм данных, заполнив нулями 0

ind2 = pd.MultiIndex.from_product(names=['proid', 'sku'], 
    iterables=[['p1', 'p2'], ['SKU1', 'SKU2' ,'SKU3']])
df.set_index(['proid', 'sku']).reindex(ind2, fill_value=0).reset_index()

Answer 3

Вы можете использовать itertools.product и concat

setup

z = io.StringIO("""    proid  sku   qty
 1  p1     SKU1   1
 2  p1     SKU3   2
 3  p2     SKU1   3""")

df = pd.read_table(z, delim_whitespace=True)
p = ["p1", "p2"]
s = ["SKU1", "SKU2", "SKU3"]
df2 = pd.DataFrame(list(it.product(p,s)), columns=["proid", "sku"])

Тогда

concat

df = df.set_index(["proid", "sku"])
df2 = df2.set_index(["proid", "sku"])

pd.concat([df2[~df2.index.isin(df.index)],df]).reset_index()

    proid   sku     qty
0   p1      SKU2    0
1   p2      SKU2    0
2   p2      SKU3    0
3   p1      SKU1    1
4   p1      SKU3    2
5   p2      SKU1    3