Программа должна распечатать все ссылки с сайта гугл-новости.
Однако при воспроизведении кода idle просто рестартится. Так же пробовал на терминале Linux - нет прогресса. Если взять модуль requestS
вместо request
, то выдает ошибку мол нет аттрибута (или что это) urlopen
.
Все сделал по упражнению, ошибок грамматики нет.
import urllib.request
from bs4 import BeautifulSoup
class Scraper:
def __init__(self, site):
self.site = site
def scrape(self):
r = urllib.request\
.urlopen(self.site)
html = r.read()
parser = "html.parser"
sp = BeautifulSoup(html,
parser)
for tag in sp.find_all("a"):
url = tag.get("href")
if url is None:
continue
if "html" in url:
print("\n" + url)
news = "https://news.google.ru/"
Scraper(news).scrape()
'html'
... ;-)