Есть код который получает html
код страницы сайта для дальнейшего парсинга этого кода.
Мне нужно получать код с этого сайта примерно каждые 15
секунд для того чтобы быстро узнать о появлении чего либо на сайте.
Мне его нужно поместить в цикл, то есть чтобы в цикле снова загружалась таже страница load(Qurl(url))
и я получал ее html
код
Код:
from PyQt5.QtWebEngineWidgets import QWebEnginePage
from PyQt5.QtWidgets import QApplication
from PyQt5.QtCore import QUrl
import sys
url = 'https://www.google.com'
class Page(QWebEnginePage):
def __init__(self, url):
self.app = QApplication(sys.argv)
QWebEnginePage.__init__(self)
self.html = ''
self.loadFinished.connect(self._on_load_finished)
self.load(QUrl(url))
self.app.exec_()
def _on_load_finished(self):
self.html = self.toHtml(self.Callable)
def Callable(self, html_str):
self.html = html_str
self.app.quit()
html = Page(url).html
Если сделать так:
from PyQt5.QtWebEngineWidgets import QWebEnginePage
from PyQt5.QtWidgets import QApplication
from PyQt5.QtCore import QUrl
import sys
url = 'https://www.google.com'
class Page(QWebEnginePage):
def __init__(self, url):
self.app = QApplication(sys.argv)
QWebEnginePage.__init__(self)
self.html = ''
self.loadFinished.connect(self._on_load_finished)
self.load(QUrl(url))
self.app.exec_()
def _on_load_finished(self):
self.html = self.toHtml(self.Callable)
def Callable(self, html_str):
self.html = html_str
self.app.quit()
while 1:
html = Page(url).html
print(html)
То тогда после первой итерации цикла while код завершит свое выполнение с вот таким сообщением:
Process finished with exit code -1073741819 (0xC0000005)
Нет selenium
мне не походит из за большого потребления ресурсов.
Я знаю о существовании requests
, я его не использую из-за того что мне требуется чтобы на странице выполнялся javascript
.
Сайт google.com
взят как пример.
Код выше взят тут