1

Задача такова: в файле 1.csv есть столбец с уникальными значениями типа "OR-SDR-28HD-OLEC". Каждой ячейке этого столбца соответствует значение ячейки соседнего столбца. Есть файл 2.csv, в котором есть значения из первого столбца файла 1.csv. Нужно для значений в первом столбце в файле 2.csv подтянуть соответствующие им значения из второго столбца.

1.csv выглядит следующим образом:

Overwrite=No,,"* Changing the setting to ?Overwrite=Yes? will have the added effect of deactivating all of your items from the website except for those listed on this datafeed. If this is not intended, keep ?Overwrite=No?.",,,,,,,,
Part #,Item #,Currency,MSRP,MAP,Checkout MAP,Selling Price,Inventory,Fulfillment Option,Shipping,Activation Mark
PS2-BEC-5780,9SIAFDG6V86915,USD,,0.00,False,26.98,37,Seller,free,True

2.csv должен во втором столбце содержать в себе Item # из 1.csv

Overwrite = Yes,,* Changing the setting to ?Overwrite=Yes? will have the added effect of deactivating all of your items from the website except for those listed on this datafeed. If this is not intended, keep ?Overwrite=No?.
Part #,Item #,Currency,MSRP,MAP,Checkout MAP,Selling Price,Inventory,Fulfillment Option,Shipping,Activation Mark
PS2-BEC-5780,,USD,,0.00,False,26.98,37,Seller,free,True
4
  • В чем у вас возникли затруднения? Доку и примеры уже читали? 13 фев 2018 в 13:14
  • @MaxU первое затруднение: недостаточно силён в английском. второе: количество ячеек в вышеуказанных столбцах примеро 11к и в дальнейшем будет расти 13 фев 2018 в 13:23
  • 11K строчек для Pandas - это "ни о чем"... ;-) С английским вам тут врядли помогут. Вы уже что-то попытались сделать сами? Приведите в вопросе код (попытки) и маленькие примеры входных данных и то что вы хотите получить в качестве результата... 13 фев 2018 в 13:25
  • @MaxU добавил примеры. Содержание первого столбца будет меняться и каждому Part # приравнивается свой Item # 13 фев 2018 в 14:03

2 ответа 2

1

Если я правильно понял условие задачи:

import pandas as pd

d1 = pd.read_csv(filename1, skiprows=1, usecols=['Part #','Item #'])
d2 = pd.read_csv(filename2, skiprows=1).drop('Item #',axis=1)

res = d2.merge(d1, on='Part #', how='left')

если вы хотите добавить только один столбец из другого CSV файла (DataFrame'а), то эффективнее будет использовать метод .map():

d1 = pd.read_csv(filename1, skiprows=1, usecols=['Part #','Item #'])
d2 = pd.read_csv(filename2, skiprows=1)

d2['Item #'] = d2['Part #'].map(d1.set_index('Part #')['Item #'])

Пример:

In [106]: d2['Item #'] = d2['Part #'].map(d1.set_index('Part #')['Item #'])

In [107]: d2
Out[107]:
         Part #          Item # Currency  MSRP  MAP  Checkout MAP  Selling Price  Inventory Fulfillment Option Shipping  \
0  PS2-BEC-5780  9SIAFDG6V86915      USD   NaN  0.0         False          26.98         37             Seller     free

   Activation Mark
0             True

UPDATE: pandas.DataFrame - это "табличная" структура в памяти. Чтобы сохранить DataFrame в CSV можно использовать метод DataFrame.to_csv()

d2.to_csv(r'/path/to/file.csv', index=False)
11
  • к сожалению при выполнении скрипта столбец "Item #" остаётся пустым. 13 фев 2018 в 15:08
  • @ДмитрийВладимирович, приведите в вопросе по несколько строк (4-8) из каждого CSV файла в виде текста, чтобы мы смогли его скопировать... 13 фев 2018 в 15:10
  • добавил строки. Мы же о python2.7 говорим, верно? прошу прощения за неопрятный вид текста, пока осваиваюсь на ресурсе 13 фев 2018 в 15:45
  • @ДмитрийВладимирович, в ваших примерах нет ни одного совпадающего 'Part #' :( Версия Python в данном случае не играет большой роли -методы Pandas будут работать и для Python 2 и для Python 3 одинаково... 13 фев 2018 в 15:47
  • сымитировал совпадение столбцов, поправил данные в вопросе. скрипт всё ещё не вносит изменений во второй файл 13 фев 2018 в 16:03
1

Уникальные значения можно в качестве индекса pandas.DataFrame использовать, тогда достать нужные значения, можно просто используя df.loc[]:

#!/usr/bin/env python3
import pandas as pd

# use unique keys as index
df = pd.read_csv('1.csv', index_col=0, names=['key', 'value'], header=None)
print(df)

# read as series
keys = pd.read_csv('2.csv', squeeze=True, names=['key'])
print('\nKeys:', *keys)
print('\n', df.loc[keys])

Пример вывода:

     value
key       
a        1
b        2
c        3
d        4

Keys: b d b

      value
key       
b        2
d        4
b        2
3
  • я так понял что автор хочет объединить данные из двух CSV, а не фильтровать... Хотя стоит наверное дождаться что скажет автор вопроса... 13 фев 2018 в 13:56
  • @MaxU: судя по примеру, автор хочет добавить столбец с найденными значениями. Оставлю ответ для других людей, которые также как и я словесное описание задачи поняли (автор один, гугл большой).
    – jfs
    13 фев 2018 в 14:23
  • да, может этот ответ кому-то поможет в будущем... 13 фев 2018 в 14:24

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.