Як в Python я можу використовувати urllib, щоб перевірити, чи є веб-сайт 404 чи 200?


Відповіді:


176

Метод getcode () (Додано в python2.6) повертає код статусу HTTP, який було надіслано з відповіддю, або None, якщо URL-адреса не є HTTP-URL.

>>> a=urllib.urlopen('http://www.google.com/asdfsf')
>>> a.getcode()
404
>>> a=urllib.urlopen('http://www.google.com/')
>>> a.getcode()
200

Для використання в python 3 просто використовуйте from urllib.request import urlopen.
Натанаель Фарлі

4
У python 3.4, якщо є 404, urllib.request.urlopenповертається a urllib.error.HTTPError.
mcb

Не працює в python 2.7. Якщо HTTP поверне 400,
Nadav B

86

Ви також можете використовувати urllib2 :

import urllib2

req = urllib2.Request('http://www.python.org/fish.html')
try:
    resp = urllib2.urlopen(req)
except urllib2.HTTPError as e:
    if e.code == 404:
        # do something...
    else:
        # ...
except urllib2.URLError as e:
    # Not an HTTP-specific error (e.g. connection refused)
    # ...
else:
    # 200
    body = resp.read()

Зауважте, що HTTPErrorце підклас, в URLErrorякому зберігається код статусу HTTP.


Чи є другою elseпомилкою?
Samy Bencherif

@NadavB Об'єкт винятку 'e' буде схожий на об’єкт відповіді. Тобто це схоже на файли, і ви можете «прочитати» корисне навантаження з нього.
Джо Холлоуей

37

Для Python 3:

import urllib.request, urllib.error

url = 'http://www.google.com/asdfsf'
try:
    conn = urllib.request.urlopen(url)
except urllib.error.HTTPError as e:
    # Return code error (e.g. 404, 501, ...)
    # ...
    print('HTTPError: {}'.format(e.code))
except urllib.error.URLError as e:
    # Not an HTTP-specific error (e.g. connection refused)
    # ...
    print('URLError: {}'.format(e.reason))
else:
    # 200
    # ...
    print('good')

Для URLError print(e.reason) можна використовувати.
Gitnik

Про що http.client.HTTPException?
CMCDragonkai

6
import urllib2

try:
    fileHandle = urllib2.urlopen('http://www.python.org/fish.html')
    data = fileHandle.read()
    fileHandle.close()
except urllib2.URLError, e:
    print 'you got an error with the code', e

5
TIMEX зацікавлений у захопленні коду запиту http (200, 404, 500 тощо), а не в загальній помилці, яку надсилає urllib2.
Джошуа Бернс
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.