0

Читаю большой текстовый файл по кускам с помощью Pandas.

Список:

[email protected]:1@23
[email protected]:1@23
[email protected]:123@
[email protected]:131
[email protected]:1@31
[email protected]:131
[email protected]:131

Пример - блек лист слова списком:

1@
123456@
12345678@

На выходе хочу получить:

[email protected]:1@23
[email protected]:123@
[email protected]:131
[email protected]:131

Важна быстрая работа, поэтому построчное чтение файла не подходит. Требуется регулярка для работы сразу с большим списком) Надо рассматривать только эту часть [email protected] точнее, до первого @.

8
  • 1
    Вы хотите проверять только с начала строки или на вхождение в любом месте строки? И чем обусловлен выбор Pandas? Почему не “grep” или “awk”? Они точно будут быстрее чем Pandas 11 окт 2020 в 8:11
  • 1
    И почему регулярка? В чёрном списке подстроки или регулярные выражения? 11 окт 2020 в 8:17
  • Я новичек , и ничего не слышал про “grep” или “awk”) В чёрном списке подстроки 11 окт 2020 в 11:30
  • Если 1@ в черном списке,то почему тогда в результате присутствует [email protected]:1@23? В этой строке присутствует подстрока 1@! 11 окт 2020 в 11:48
  • потому что надо рассматривать только эту часть [email protected] 11 окт 2020 в 12:23

1 ответ 1

2

Ну я бы использовал pandas.Series.startswith. Там, как ни странно, можно использовать tuple из набора строк в качестве аргумента:

import pandas as pd

email_list = """[email protected]:1@23
[email protected]:1@23
[email protected]:123@
[email protected]:131
[email protected]:1@31
[email protected]:131
[email protected]:131""".split()

black_list = ('1@', '123456@', '12345678@')

df = pd.DataFrame({'email': email_list})

df[~df.email.str.startswith(black_list)]

Результат:

    email
1   [email protected]:1@23
2   [email protected]:123@
3   [email protected]:131
5   [email protected]:131
0

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.