我有两个文件,显示有关产品交易的信息

类型1的运算

d_op_1 = pd.DataFrame({'id':[1,1,1,2,2,2,3,3],'cost':[10,20,20,20,10,20,20,20],
                       'date':[2000,2006,2012,2000,2009,2009,2002,2006]})


python - 根据条件合并 Pandas 数据框-LMLPHP

类型2的运算

d_op_2 = pd.DataFrame({'id':[1,1,2,2,3,4,5,5],'cost':[3000,3100,3200,4000,4200,3400,2000,2500],
                       'date':[2010,2015,2008,2010,2006,2010,1990,2000]})


python - 根据条件合并 Pandas 数据框-LMLPHP

我只想保留那些寄存器,如果类型2的两个操作之间存在类型1的操作。
例如。对于ID为“ 1”的产品,在类型2的两个操作(2010,2015)之间有一个类型1(2012)的操作,因此我想保留该记录。

所需的输出云可以是:

python - 根据条件合并 Pandas 数据框-LMLPHP

或这个:

python - 根据条件合并 Pandas 数据框-LMLPHP

使用pd.merge()我得到以下结果:

python - 根据条件合并 Pandas 数据框-LMLPHP

我该如何过滤以获得所需的输出?

最佳答案

您可以使用:

#concat DataFrames together
df4 = pd.concat([d_op_1.rename(columns={'cost':'cost1'}),
                 d_op_2.rename(columns={'cost':'cost2'})]).fillna(0).astype(int)

#print (df4)

#find max and min dates per goups
df3 = d_op_2.groupby('id')['date'].agg({'start':'min','end':'max'})
#print (df3)

#join max and min dates to concated df
df = df4.join(df3, on='id')
df = df[(df.date > df.start) & (df.date < df.end)]
#reshape df for min, max and dated between them
df = pd.melt(df,
             id_vars=['id','cost1'],
             value_vars=['date','start','end'],
             value_name='date')
#remove columns
df = df.drop(['cost1','variable'], axis=1) \
       .drop_duplicates()
#merge to original, sorting
df = pd.merge(df, df4, on=['id', 'date']) \
       .sort_values(['id','date']).reset_index(drop=True)
#reorder columns
df = df[['id','cost1','cost2','date']]




print (df)
   id  cost1  cost2  date
0   1      0   3000  2010
1   1     20      0  2012
2   1      0   3100  2015
3   2      0   3200  2008
4   2     10      0  2009
5   2     20      0  2009
6   2      0   4000  2010

#if need lists for duplicates
df = df.groupby(['id','cost2', 'date'])['cost1'] \
       .apply(lambda x: list(x) if len(x) > 1 else x.values[0]) \
       .reset_index()
df = df[['id','cost1','cost2','date']]
print (df)
   id     cost1  cost2  date
0   1        20      0  2012
1   1         0   3000  2010
2   1         0   3100  2015
3   2  [10, 20]      0  2009
4   2         0   3200  2008
5   2         0   4000  2010

关于python - 根据条件合并 Pandas 数据框,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/41795640/

10-12 18:32