Фильтрация фрейма данных на основе значения столбца другого фрейма данных - PullRequest
0 голосов
/ 02 июня 2018

У меня есть 2 фрейма данных

df1

Company           SKU   Sales
Walmart           A     100
Total             A     200
Walmart           B     200
Total             B     300
Walmart           C     400
Walmart           D     500

df2

 Company             SKU   Sales
 Walmart             A     400
 Total               B     300
 Walmart             C     900
 Walmart             F     400
 Total               G     500

Я хочу получить результирующий фрейм данных (df2), в котором есть только записи соответствующих SKU вdf1 и df2

df2

Company       SKU   Sales 
Walmart       A     400
Total         B     300
Walmart       C     900

Мне нужны только уникальные (Company + SKU) значения df1 в df2

Есть ли какое-нибудь хорошее решение для достижения этой цели?

Ответы [ 3 ]

0 голосов
/ 02 июня 2018

Решение 1:

# First identify the common SKU's    
temp = list(set(list(df1.SKU)).intersection(set(list(df2.SKU))))

# Filter df2 using the list of common SKU's
df3 = df2[df2.SKU.isin(temp)]
print(df3)

   SKU  Sales
0   A   400
1   B   300
2   C   900

Решение 2: Решение в одну строку

df3 = df2[df2.SKU.isin(list(df1.SKU))]

РЕДАКТИРОВАТЬ 1: Решение для обновленного вопроса (Не оптимальный способ сделать это, но отвечает на вашвопрос)

# reading data for df1
df1= pd.read_clipboard(sep='\\s+')
df1
    Company SKU Sales
0   Walmart A   100
1   Total   A   200
2   Walmart B   200
3   Total   B   300
4   Walmart C   400
5   Walmart D   500

# reading data for df2
df2= pd.read_clipboard(sep='\\s+')
df2
Company SKU Sales
0   Walmart A   400
1   Total   B   300
2   Walmart C   900
3   Walmart F   400
4   Total   G   500

# Using intersect and zip to create a list of tuples matching in the data frames
temp = list(set(list(zip(df1.Company,df1.SKU))).intersection(set(list(zip(df2.Company,df2.SKU)))))
temp
[('Walmart', 'A'), ('Walmart', 'C'), ('Total', 'B')]

# Creating a helper variable in df2 to lookup in the temp list
df2["temp"] = list(zip(df2.Company,df2.SKU))
df2= df2[df2["temp"].isin(temp)]
del(df2["temp"])
df2
    Company SKU Sales
0   Walmart A   400
1   Total   B   300
2   Walmart C   900

Приветствуются предложения по улучшению этого кода

0 голосов
/ 03 июня 2018

Одним из способов является выравнивание индексов, а затем использование маски.

# align indices
df1 = df1.set_index(['Company',  'SKU'])
df2 = df2.set_index(['Company',  'SKU'])

# calculate & apply mask
df2 = df2[df2.index.isin(df1.index)].reset_index()

Сброс индекса не требуется, но необходим для повышения Company и SKU до столбцов.

0 голосов
/ 02 июня 2018

Обновление

Вы можете использовать простую маску:

m = df2.SKU.isin(df1.SKU)
df2 = df2[m]

Вы ищете внутреннее соединение.Попробуйте это:

df3 = df1.merge(df2, on=['SKU','Sales'], how='inner')

#  SKU  Sales
#0   A    100
#1   B    200
#2   C    300

Или это:

df3 = df1.merge(df2, on='SKU', how='inner')

#  SKU  Sales_x  Sales_y
#0   A      100      100
#1   B      200      200
#2   C      300      300
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...