Phân tích cú pháp HTML với BeautifulSoup 4 và Python

Question

Tôi đang cố gắng phân tích cú pháp danh sách kết quả của http://mobile.de.

Trước tiên, tôi đã thử với Lớp học HTMLParser, nhưng tôi gặp lỗi: HTMLParser.HTMLParseError: EOF in middle of construct.

Vì vậy, tôi đã thử nó với BeautifulSoup 4 tốt hơn cho các trang web không hợp lệ, nhưng <div> Tôi đang tìm kiếm không thể truy cập được và tôi không thể biết đó là lỗi của tôi hay của trang web.

from bs4 import BeautifulSoup 
    import urllib 
    import socket 

    searchurl = "http://suchen.mobile.de/auto/search.html?scopeId=C&isSearchRequest=true&sortOption.sortBy=price.consumerGrossEuro" 
    f = urllib.urlopen(searchurl) 
    html = f.read() 
    soup = BeautifulSoup(html) 

    for link in soup.find_all("div","listEntry "): 
     print link 

listEntry là <div> với kết quả của những chiếc xe. Nhưng có vẻ như anh ấy không phân tích cú pháp <form id="parkAndCompareVehicle" name="parkAndCompareVehicle" action="">. Tôi không thể tìm thấy hình thức trong soupobject.

Lỗi ở đâu?

Answer 1

Nó phải là một cái gì đó như:

for link in soup.findAll('div', {'class': 'listEntry '}): 
    print link 

Thuộc tính được quy định trong một cuốn từ điển - findAll(self, name=None, attrs={}, recursive=True, text=None, limit=None, **kwargs)

==========

UPD. Xin lỗi nó có vẻ trong bs4 bạn có thể làm theo cách đó là tốt.

Đối với lỗi, biểu mẫu bạn đang tìm kiếm không có trong kết quả vì nó bao quanh listEntries theo như tôi thấy.

Có gì sai với điều đó:

form = soup.find('form', id='parkAndCompareVehicle') 
print len(form.find_all('div', 'listEntry '))