1

Есть код, который парсит все таблицы с сайта, которые только может найти:

def parse(html):
    soup = BeautifulSoup(html)
    table = soup.find_all('table')
    res = []
    for row in table:
        cols = row.find_all('td')
        print(cols)
    return res

Я ищу все таблицы, затем ищу в них тэг td и записываю результат в список.

Есть проблема с тем, что если я обращаюсь к cols[1].text, то я увижу первый элемент каждой таблицы, а мне нужно получить первый элемент для всех таблиц.

Допустим, есть таблицы вида:

<table>
    <tbody>
        <tr>
            <td class="monitoring-td">1</td>
            <td class="monitoring-td">2</td>
        </tr>
        <tr>
            <td class="monitoring-td">3</td>
            <td class="monitoring-td">4</td>
        </tr>
    </tbody>
    </table>
<table>
    <tbody>
        <tr>
            <td class="monitoring-td">5</td>
            <td class="monitoring-td">6</td>
        </tr>
        <tr>
            <td class="monitoring-td">7</td>
            <td class="monitoring-td">8</td>
        </tr>
    </tbody>
</table>

При выполнении моего кода: print(cols[1].text)
я получу ответ: 2 6, а требуется только 2,
а при запуске print(cols[5].text) я вообще получу ошибку, хотя требуется 6

2
  • Приведите, пожалуйста пример того, что вы хотите получить. 27 апр 2015 в 20:48
  • я хочу получить список, который не будет начинаться с нуля при переходе на вторую таблицу, затем на третью 27 апр 2015 в 20:50

1 ответ 1

1

Для этого достаточно просто сохранить их в один список:

def parse(html):
    soup = BeautifulSoup(html)
    table = soup.find_all('table')
    all_cols = []
    for row in table:
        table_cols = row.find_all('td')
        all_cols.extend(cols)
    return all_cols

Насколько я понял, переменная res у вас для этого и была заведена. Я переименовал её и использовал для сохранения всех столбцов.

Также я убрал лишний вывод внутри функции.

1
  • спасибо, а то я уже под вечер на код смотрю как баран на новые ворота... 27 апр 2015 в 21:02

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими пользовательским соглашением, политикой конфиденциальности и политикой о куки

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.