Pandas: Sử dụng groupby trên mỗi phần tử trong danh sách

Question

Có thể tôi thiếu điều hiển nhiên.

Tôi có một dataframe gấu trúc trông như thế này:

id  product    categories 
    0  Silmarillion   ['Book', 'Fantasy'] 
    1  Headphones   ['Electronic', 'Material'] 
    2  Dune     ['Book', 'Sci-Fi'] 

Tôi muốn sử dụng chức năng groupby để đếm số lần xuất hiện của mỗi phần tử trong cột loại, vì vậy đây sẽ là kết quả

Book  2 
Fantasy 1 
Electronic 1 
Material 1 
Sci-Fi  1 

Tuy nhiên khi tôi thử sử dụng chức năng nhóm, gấu trúc đếm số lần xuất hiện của toàn bộ danh sách thay vì tách các phần tử. Tôi đã thử nhiều cách khác nhau để xử lý việc này, sử dụng các bộ dữ liệu hoặc chia tách, nhưng điều này đến nay tôi đã không thành công.

Answer 1

Bạn có thể bình thường hóa các hồ sơ bằng cách chồng sau đó họ gọi value_counts():

pd.DataFrame(df['categories'].tolist()).stack().value_counts() 
Out: 
Book   2 
Fantasy  1 
Material  1 
Sci-Fi  1 
Electronic 1 
dtype: int64 

Answer 2

thử điều này:

In [58]: df['categories'].apply(pd.Series).stack().value_counts() 
Out[58]: 
Book   2 
Fantasy  1 
Electronic 1 
Sci-Fi  1 
Material  1 
dtype: int64 

Answer 3

Bạn cũng có thể gọi pd.value_counts trực tiếp trên một danh sách.
Bạn có thể tạo danh sách thích hợp qua numpy.concatenate, itertools.chain, hoặc cytoolz.concat

from cytoolz import concat 
from itertools import chain 

cytoolz.concat

pd.value_counts(list(concat(df.categories.values.tolist()))) 

itertools.chain

pd.value_counts(list(chain(*df.categories.values.tolist()))) 

numpy.unique + numpy.concatenate

u, c = np.unique(np.concatenate(df.categories.values), return_counts=True) 
pd.Series(c, u) 

---

Tất cả mang lại

Book   2 
Electronic 1 
Fantasy  1 
Material  1 
Sci-Fi  1 
dtype: int64 

---

thời gian thử nghiệm