Tìm dữ liệu giống nhau trong hai Khung dữ liệu có các hình dạng khác nhau

Question

Tôi có hai Khung dữ liệu Pandas mà tôi muốn so sánh. Ví dụ

a b c 
A na na na 
B na 1 1 
C na 1 na 

và

a b c 
A 1 na 1 
B na na na 
C na 1 na 
D na 1 na 

Tôi muốn tìm chỉ số cột tọa độ đối với bất kỳ giá trị được chia sẻ, trong trường hợp này

b 
C 1 

Đây có phải là có thể?

Answer 1

Nếu bạn vượt qua các tham số keys-concat, các cột của dataframe kết quả sẽ bao gồm một đa-index mà theo dõi những dataframes gốc:

In [1]: c=pd.concat([df,df2],axis=1,keys=['df1','df2']) 
     c 

Out[1]: 
    df1   df2 
    a b c a b c 
A na na na 1 na 1 
B na 1 1 na na na 
C na 1 na na 1 na 
D NaN NaN NaN na 1 na 

Kể từ khi các mảng cơ bản bây giờ có giống nhau hình dạng, bây giờ bạn có thể sử dụng để phát sóng == so sánh của bạn và sử dụng như một mặt nạ để trả lại tất cả các giá trị phù hợp:

In [171]: m=c.df1[c.df1==c.df2];m 
Out[171]: 
    a b c 
A NaN NaN NaN 
B NaN NaN NaN 
C NaN 1 NaN 
D NaN NaN NaN 

Nếu giá trị 'na' của bạn đang thực sự số không, bạn có thể sử dụng một ma trận thưa thớt để giảm này đến tọa độ của các giá trị phù hợp (bạn sẽ mất trỏ và tên cột mặc dù):

import scipy.sparse as sp 
print(sp.coo_matrix(m.where(m.notnull(),0))) 
    (2, 1) 1.0 

Answer 2

Nếu bạn chỉ muốn các chỉ số đó là khác nhau, bạn có thể làm: different_indices = [(i,j) for i in range(len((df1 != df2).columns)) for j in range(len(df1 != df2)) if (df1 != df2)[i][j]]

Hoặc, hơi dễ đọc hơn:

m = (df1 != df2) 
different_indices = [(i,j) for i in range(len(m.columns)) for j in range(len(m)) if m[i][j]]