Всем привет ! У меня такой вопрос,как сделать срез спарщенных данных? Я парсю даты 10 новостных ресурсов,и вот при парсенге одного из ресурсов у меня траблы.
Когда я парсю дату этого ресурса дата при парсинге выходят таким образом:
Я бы хотел чтобы дата была такая 23 августа 2019 10:25
Чтобы это исправить я решил использовать функцию BS4 decompose()
.
Код:
def get_item_datetime(item_page,datetime_rule,datetime1_rule):
soup = BeautifulSoup(item_page,'lxml')
item_datetime = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]})
if item_datetime is not None:
item_datetime = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]}).text
item_datetime = item_datetime.span.decompose()
print(item_datetime)
else:
if (len(datetime1_rule) == 3):
item_datetime = soup.find(datetime1_rule[0],{datetime1_rule[1]:datetime1_rule[2]})
item_datetime = dateparser.parse(item_datetime, date_formats=['%d %B %Y %H'])
else:
item_datetime = ''
return item_datetime
На выводе такая ошибка:
File "C:/Users/Администратор/PycharmProjects/Task/sql_parser.py", line 35, in get_item_datetime item_datetime = item_datetime.span.decompose() AttributeError: 'str' object has no attribute 'span'
Process finished with exit code 1
Как решить?
UPD
# < Собираем даты с страницы.
def get_item_datetime(item_page,datetime_rule,datetime1_rule):
soup = BeautifulSoup(item_page,'lxml')
item_datetime = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]})
if item_datetime is not None:
item_datetime = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]}).text
item_datetime_node = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]})
item_datetime = item_datetime_node.text
item_datetime_node.span.decompose()
print(item_datetime)
else:
if (len(datetime1_rule) == 3):
item_datetime = soup.find(datetime1_rule[0],{datetime1_rule[1]:datetime1_rule[2]})
item_datetime = dateparser.parse(item_datetime, date_formats=['%d %B %Y %H'])
else:
item_datetime = ''
return item_datetime
bs4 decompose()
, вы бы увидели там, что этот метод работает сtree
. 4. неужели самому тяжело провести небольшое исследование проблемы вместо того, чтобы сразу задавать вопрос на SO?item_datetime.span.decompose()
не сработает, т.к. выше вы вitem_datetime
положили строковой объект:item_datetime = soup.find ... .text
. Нужно использовать несколько переменных:item_datetime_node = soup.find(datetime_rule[0],{datetime_rule[1]:datetime_rule[2]})
item_datetime = item_datetime_node.text
иitem_datetime_node.span.decompose()
decompose
работает с элементами