0

Нужно спарсить ссылку на страницу для каждой пары https://www.lamoda.ru/c/5972/shoes-muzhkedy/?sitelink=topmenuM&l=4&brands=1061,1163,4035,5816,2047,1107&is_sale=1&page=1 вот здесь фото для детального рассмотрения

много раз это делал, а тут не получается `

import json
import requests
from bs4 import BeautifulSoup

headers ={
    "accept": "*/*",
    "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36" ,
  
}
def get_page(url):
    req = requests.get(url,headers = headers)
    src =req.text
    #print(src) 

    with open("lamoda2.html", "w") as file:
        file.write(src) 

    soup = BeautifulSoup(src,"lxml")

    cards = soup.find("div", class_="x-product-card__card").find("div", class_="x-product-card__link x-product-card__hit-area").find("a",class_=" x-product-card__pic x-product-card__pic-catalog").get("href")
    print(cards)
    

def main():
    get_page(url="https://www.lamoda.ru/c/5972/shoes-muzhkedy/?sitelink=topmenuM&l=4&brands=1061,1163,4035,5816,2047,1107&page=1")
    
    

if __name__ == "__main__":
    main()

`

ошибка `

File "c:/Users/Константин/Downloads/dodit/tgparser.py", line 20, in get_page
    cards = soup.find("div", class_="x-product-card__card").find("div", class_="x-product-card__link x-product-card__hit-area").find("a",class_=" x-product-card__pic x-product-card__pic-catalog").get("href")
AttributeError: 'NoneType' object has no attribute 'find'

ЗАРАНЕЕ СПАСИБО!!!!

1
  • cards = soup.find("div", class_="x-product-card__card").find("a").get("href") 26 июл 2022 в 14:20

2 ответа 2

0
import requests
from bs4 import BeautifulSoup


all_categories = []
page = 1
while True:
    url = f"https://www.lamoda.ru/c/5972/shoes-muzhkedy/?sitelink=topmenuM&l=4&" \
          f"brands=1061,1163,4035,2047,1107&is_sale=1&sort=discount&page={page}"
    res = requests.get(url)
    soup = BeautifulSoup(res.content, "lxml")
    cards = soup.find_all('a', class_="x-product-card__link")
    if not cards:
        break
    for card in cards:
        card_text = card.find(class_="x-product-card-description__product-name").text.strip()
        card_href = "https://www.lamoda.ru/" + card.get('href')
        all_categories.append([card_text, card_href])
    page += 1
-1

В переменной cards, в последнем обращении .find в названии класса впереди лишний пробел.

5
  • это так и задумано :) class=" x-product-card__pic x-product-card__pic-catalog", равносильно такой записи class=" x-product-card__pic" class=" x-product-card__pic-catalog" в HTML 26 июл 2022 в 14:18
  • Ну я проверил код прежде чем писать ответ.
    – Alex Bell
    26 июл 2022 в 16:36
  • Ну и уберем мы лишний пробел, проблема не исчезнет. find("div", class_="x-product-card__link x-product-card__hit-area") = None во всем коде HTML нет тега div с классом "x-product-card__link". 26 июл 2022 в 17:17
  • Пожалуйста попробуйте найти: a.x-product-card__pic.x-product-card__pic-catalog и ищите не div, а тег "a". Мне кажется, что вы не воспроизвели код из вопроса.
    – Alex Bell
    26 июл 2022 в 18:23
  • Даже пытатся не буду не вижу смысла. 26 июл 2022 в 18:36

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.