Пытаюсь написать парсер для извлечения названия фильмов с сайта. В результате вместо списка фильмов из 135 штук. Выходит только один. Не подскажете в чем ошибка?
import requests
from bs4 import BeautifulSoup
import csv
def get_html(url):
r = requests.get(url) # Получим метод Response
r.encoding = 'utf8'
return r.text # Вернем данные объекта text
def csv_read(data2):
with open("data2.csv", 'a') as file:
writer = csv.writer(file)
writer.writerow(data2['head'])
def get_link(html):
soup = BeautifulSoup(html, 'lxml')
head = soup.find('span', class_='name').find_all('a')
heads = []
for i in head:
heads.append(i.string)
data2 = {'head': heads}
print(i.string)
csv_read(data2)
data = get_link(get_html('https://www.kinopoisk.ru/name/31969/'))
кусок кода, с которого пытаюсь взять названия:
<span class="num">16</span>
<table>
<tr>
<td>
<span class="name">
<a href="/film/695609/" >
Джуманджи: Зов джунглей (2017)</a>, <font style='color: #393; white-space: nowrap'>$ 20 000 000 </font></span>
<span class="role">
Jumanji: Welcome to the Jungle ... Spencer<span style="font-weight:bold;">
</span>
<!-- -->
</span>
</td>
</tr>
</table>
</div>
<div class="item" data-fid="1100776" data-imdbr="6.20" data-imdbv="570">
<div class="rating kp">
<a href="/film/1100776/votes/">
5.99
</a>
<span>139</span>
</div>
<div class="vote_widget miniVoteDiv rating_user_1100776"> </div>
<div class="MyKP_Folder_Select folder_film_1100776">
<s class="dot"></s>
<div class="arrow"></div>
</div>
<span class="num">17</span>
<table>
<tr>
<td>
<span class="name">
<a href="/film/1100776/" >
Линия жизни (сериал, 2017)</a></span>
<span class="role">
Lifeline ... Lifeline Customer<span style="font-weight:bold;">
</span>
<!-- -->
</span>
</td>
</tr>
</table>
</div>
<div class="item" data-fid="468940" data-imdbr="5.50" data-imdbv="142449">
<div class="rating kp">
<a href="/film/468940/votes/">
5.74
</a>
<span>38209</span>
</div>
<div class="vote_widget miniVoteDiv rating_user_468940"> </div>
<div class="MyKP_Folder_Select folder_film_468940">
<s class="dot"></s>
<div class="arrow"></div>
</div>
Т.е. нужно названия например "Линия жизни" из
<span class="name">
<a href="/film/1100776/" >Линия жизни (сериал, 2017)</a></span>
<a>
только внути одного<span>
-find('span', class_='name')
.