AttributeError: об’єкт 'module' не має атрибута 'urlopen'


146

Я намагаюся використовувати Python для завантаження вихідного коду HTML веб-сайту, але я отримую цю помилку.

Traceback (most recent call last):  
    File "C:\Users\Sergio.Tapia\Documents\NetBeansProjects\DICParser\src\WebDownload.py", line 3, in <module>
     file = urllib.urlopen("http://www.python.org")
AttributeError: 'module' object has no attribute 'urlopen'

Я дотримуюся посібника тут: http://www.boddie.org.uk/python/HTML.html

import urllib

file = urllib.urlopen("http://www.python.org")
s = file.read()
f.close()

#I'm guessing this would output the html source code?
print(s)

Я використовую Python 3.

Відповіді:


245

Це працює в Python 2.x.

Для Python 3 дивіться в документах :

import urllib.request

with urllib.request.urlopen("http://www.python.org") as url:
    s = url.read()
    # I'm guessing this would output the html source code ?
    print(s)

3
Привіт Еуміро, використовуючи у програмі "з" заяву в Python, я здогадуюсь, що він автоматично закриває з'єднання, як тільки це робиться з його допомогою? Схожий на заяву про використання у C #?

@Sergio: точно! І через відступ ви бачите, де ваш файл все ще відкритий.
eumiro

Привіт @eumiro, у мене під час введення помилка "IndentationError: очікується відступний блок", я s = url.read()можу запитати, як це можна вирішити? x
Карен Чан

@KarenChan Ви раніше пропускали відступ s=url.read(); у вас є 4 пробіли до цього?
numbermaniac

19

Сумісне рішення Python 2 + 3 - це:

import sys

if sys.version_info[0] == 3:
    from urllib.request import urlopen
else:
    # Not Python 3 - today, it is most likely to be Python 2
    # But note that this might need an update when Python 4
    # might be around one day
    from urllib import urlopen


# Your code where you can use urlopen
with urlopen("http://www.python.org") as url:
    s = url.read()

print(s)

1
with urlopen("http://www.python.org") as url:не працює в python2 з AttributeError: addinfourl instance has no attribute '__exit__'. Потрібно написатиurl = urlopen("http://www.python.org")
orshachar

15
import urllib.request as ur
s = ur.urlopen("http://www.google.com")
sl = s.read()
print(sl)

У Python v3 "urllib.request" є модулем сам по собі, тому "urllib" тут не можна використовувати.


7

Щоб отримати ' dataX = urllib.urlopen (url) .read () ', що працює в python 3 (це було б правильно для python 2 ), ви повинні просто змінити 2 дрібниці.

1: Сам оператор urllib (в середині додайте .request):

dataX = urllib.request.urlopen(url).read()

2: Заява про імпорт, що передує їй (зміна з "імпорту urlib" на:

import urllib.request

І це має працювати в python3 :)


3
import urllib.request as ur

filehandler = ur.urlopen ('http://www.google.com')
for line in filehandler:
    print(line.strip())

1

Для python 3 спробуйте щось подібне:

import urllib.request
urllib.request.urlretrieve('http://crcv.ucf.edu/THUMOS14/UCF101/UCF101/v_YoYo_g19_c02.avi', "video_name.avi")

Він завантажить відео в поточний робочий каталог

Я отримав допомогу ТУТ


1

Рішення для python3:

from urllib.request import urlopen

url = 'http://www.python.org'
file = urlopen(url)
html = file.read()
print(html)

Простий і зрозумілий для початківців. Дякую
SHR

1

Змінення ДВОХ рядків:

import urllib.request #line1

#Replace
urllib.urlopen("http://www.python.org")
#To
urllib.request.urlopen("http://www.python.org") #line2

Якщо ви отримали помилку 403: виняток із забороненою помилкою, спробуйте це:

siteurl = "http://www.python.org"

req = urllib.request.Request(siteurl, headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.100 Safari/537.36'})
pageHTML = urllib.request.urlopen(req).read()

Я сподіваюся, що ваша проблема вирішена.


0

Один із можливих способів зробити це:

import urllib
...

try:
    # Python 2
    from urllib2 import urlopen
except ImportError:
    # Python 3
    from urllib.request import urlopen

0

Використовуйте шість модулів, щоб зробити код сумісним між python2 та python3

urllib.request.urlopen("<your-url>")```

Ви можете імпортувати шість модулів таким чином із six.moves import urllib
Rajat

0

свій код, який використовується в python2.x, ви можете використовувати так:

from urllib.request import urlopen
urlopen(url)

до речі, запропонуйте ще один модуль, який називається requests, більш приємний у використанні, його можна pipвстановити та використовувати так:

import requests
requests.get(url)
requests.post(url)

Я думав, що це легко у використанні, я теж початківець .... ха-ха


-1
import urllib
import urllib.request
from bs4 import BeautifulSoup


with urllib.request.urlopen("http://www.newegg.com/") as url:
    s = url.read()
    print(s)
soup = BeautifulSoup(s, "html.parser")
all_tag_a = soup.find_all("a", limit=10)

for links in all_tag_a:
    #print(links.get('href'))
    print(links)
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.