0

Новичок в парсинге, нужна подсказка специалистов. Хочу обнаружить теги на сайте, чтобы в дальнейшем парсить его, но soup не возращает теги.

import requests
import time
from bs4 import BeautifulSoup
import pandas as pd

time.sleep(0.3)
req = requests.get('https://old.bankrot.fedresurs.ru/ArbitrManagersList.aspx')
soup = BeautifulSoup(req.text, 'html.parser')
soup

Результат

<html><body>setting cookie...<script src="/aes.min.js" type="text/javascript"></script><script>function toNumbers(d){var e=[];d.replace(/(..)/g,function(d){e.push(parseInt(d,16))});return e}function toHex(){for(var d=[],d=1==arguments.length&&arguments[0].constructor==Array?arguments[0]:arguments,e="",f=0;f<d.length;f++)e+=(16>d[f]?"0":"")+d[f].toString(16);return e.toLowerCase()}var a=toNumbers("36540638379070ff9487296b05ef3fd5"),b=toNumbers("8d2c272c52cb3c97e659a008596763ec"),c=toNumbers("f737afaaea0529b007f07c24b86d6093"),now = new Date(), time = now.getTime();time += 3600 * 1000;now.setTime(time);document.cookie="bankrotcookie="+toHex(slowAES.decrypt(c,2,a,b))+"; expires="+now.toUTCString()+"; path=/";location.href="https://old.bankrot.fedresurs.ru/ArbitrManagersList.aspx?attempt=1";</script></body></html>

Подскажите, пожалуйста, в сторону какого метода или библиотеки копать?

1 ответ 1

1

В python есть много библиотек (даже встроенные вроде), которые вырезают из текста теги html, можете применять к разметке, и сравнивать обработанную и изначальную, по разнице понимать где теги.

Либо же написать свой метод, который будет вырезать их по спец.символам

6
  • вырезать то я вырежу, но как сначала мне получить html код? приведенный выше скрипт возвращает только код JS
    – Adi Kou
    27 янв 2022 в 4:08
  • html тоже есть в Вашем ответе, просто Вы парсите сайт на этапе загрузки, попробуйте запрашивать страницу и немного ждать
    – artemgh
    28 янв 2022 в 10:29
  • @AdiKou не правильно понял Ваш вопрос
    – artemgh
    28 янв 2022 в 10:30
  • Я пробовал парсить не на этапе загрузки страницы, а подождав пока загрузится полностью. Результат тот же, возвращает только js
    – Adi Kou
    1 фев 2022 в 11:39
  • Попробуйте парсить эту ссылку old.bankrot.fedresurs.ru/ArbitrManagersList.aspx?attempt=1
    – artemgh
    1 фев 2022 в 17:23

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.