python: kiểm tra xem url có tồn tại jpg không.

Question

Trong trăn, làm cách nào để kiểm tra xem url có kết thúc bằng .jpg không?

ví dụ: http://www.fakedomain.com/fakeImage.jpg

nhờ

Answer 1

>>> import httplib 
>>> 
>>> def exists(site, path): 
...  conn = httplib.HTTPConnection(site) 
...  conn.request('HEAD', path) 
...  response = conn.getresponse() 
...  conn.close() 
...  return response.status == 200 
... 
>>> exists('http://www.fakedomain.com', '/fakeImage.jpg') 
False 

Nếu tình trạng này là bất cứ điều gì khác hơn là một 200, tài nguyên không tồn tại tại địa chỉ URL. Điều này không có nghĩa là nó đã biến mất hoàn toàn. Nếu máy chủ trả về 301 hoặc 302, điều này có nghĩa là tài nguyên vẫn tồn tại, nhưng tại một URL khác. Để thay đổi chức năng xử lý trường hợp này, chỉ cần thay đổi dòng kiểm tra trạng thái thành return response.status in (200, 301, 302).

Answer 2

Tôi nghĩ rằng bạn có thể thử gửi một yêu cầu http để url và đọc response.If không phải ngoại lệ bị bắt, nó có thể tồn tại.

Answer 3

Có vẻ như http://www.fakedomain.com/fakeImage.jpg được tự động chuyển hướng đến http://www.fakedomain.com/index.html mà không có bất kỳ lỗi nào.

Chuyển hướng cho 301 và 302 câu trả lời được tự động hoàn tất mà không trả lời lại cho người dùng.

Hãy xem HTTPRedirectHandler, bạn có thể cần phải phân lớp nó để xử lý điều đó.

Đây là một trong những mẫu từ Dive Into Python:

http://diveintopython3.ep.io/http-web-services.html#redirects

Answer 4

Tôi không biết tại sao bạn làm điều này, nhưng trong mọi trường hợp: cần lưu ý rằng chỉ vì yêu cầu "hình ảnh" thành công, không có nghĩa là bạn nghĩ nó là gì chuyển hướng đến bất kỳ thứ gì hoặc trả về bất kỳ dữ liệu nào thuộc bất kỳ loại nào và có thể gây ra sự cố tùy thuộc vào những gì bạn làm với phản hồi).

Xin lỗi, tôi đã đi trên một chè chén say sưa đọc về khai thác trực tuyến và làm thế nào để bảo vệ chống lại họ ngày hôm nay: P

Answer 5

Hãy thử nó với mechanize:

import mechanize 
br = mechanize.Browser() 
br.set_handle_redirect(False) 
try: 
br.open_novisit('http://www.fakedomain.com/fakeImage.jpg') 
print 'OK' 
except: 
print 'KO' 

Answer 6

nhờ cho tất cả các câu trả lời tất cả mọi người, đã kết thúc bằng như sau:

try: 
    f = urllib2.urlopen(urllib2.Request(url)) 
    deadLinkFound = False 
except: 
    deadLinkFound = True 

Answer 7

Có vấn đề với câu trả lời trước đó khi tệp nằm trong máy chủ FTP (ftp://url.com/file), đang rống hoạt động khi tập tin là trong ftp, http hoặc https:

import urllib2 

def file_exists(url): 
    request = urllib2.Request(url) 
    request.get_method = lambda : 'HEAD' 
    try: 
     response = urllib2.urlopen(request) 
     return True 
    except: 
     return False 

Answer 8

Đoạn code dưới đây là tương đương với tikiboy's answer, nhưng sử dụng một trình độ cao và dễ dàng sử dụng requests thư viện.

import requests 

def exists(path): 
    r = requests.head(path) 
    return r.status_code == requests.codes.ok 

print exists('http://www.fakedomain.com/fakeImage.jpg') 

Các requests.codes.ok bằng 200, vì vậy bạn có thể thay thế các mã trạng thái chính xác nếu bạn muốn.

requests.head có thể ném exception nếu máy chủ không phản hồi, vì vậy bạn có thể muốn thêm cấu trúc thử ngoại trừ.

Ngoài ra nếu bạn muốn bao gồm mã 301 và 302, hãy xem xét đang 303 quá, đặc biệt là nếu bạn dereference URIs mà biểu thị nguồn lực trong Linked Data. URI có thể đại diện cho một người, nhưng bạn không thể tải xuống một người, vì vậy máy chủ sẽ chuyển hướng bạn đến trang mô tả người này bằng cách sử dụng 303 redirect.

Answer 9

Điều này có thể đủ tốt để xem liệu url có tồn tại hay không.

import urllib 
if urllib.urlopen('http://www.fakedomain.com/fakeImage.jpg').code == 200: 
    print 'File exists'