Есть дневные данные из файла D
, на основе которых создается серия, и квартальные данные Q
по которым так же создается серия в pandas.
Мне нужно, используя DatetimeIndex дневных данных, получить значения массива из квартальных данных. То есть, найти ближайшее значение, при этом DatetimeIndex квартального должен быть меньше или равен дневному (не должно быть "заглядывания вперёд").
Пример:
2018-06-30, 1207.4 #квартальное значение
2018-07-02 00:00:00, 1.58479 # ближайшее дневное
2018-07-02 00:00:00, 1207.4 #синхронизировали по времени значение из квартальных данных с дневным
Сейчас я использую основной цикл по D и вложенный в него цикл по Q. Хотелось бы обойтись без циклов. Или быть может каким-либо образом numpy использовать, но у меня массивы разной длины. Возможно, в pandas есть функция наподобие этой:
index = data1.index.get_loc('1991-10-15', "nearest")
но для массива.
P.S. Нужно именно быстрое получение данных. С помощью циклов понятно, как сделать. Если есть ответ, как данную манипуляцию произвести в postgresql, то интересно было бы увидеть. Здесь задавал вопрос по этой теме.
Для лучшего понимания дополнил код функцией "def file", в которой циклы делают синхронизацию значений из квартальных данных с дневными. Если ее запустить, то наглядно видно, что мне необходимо. Данные бывают с различной частотой 7, 10 дней, месяц, квартал(не в одинаковые числа месяца).
import numpy as np
import pandas as pd
df = pd.read_csv('D.csv',
index_col='DATE',
parse_dates=True,
infer_datetime_format=True)
date = df.iloc[:, 0].index.date
z = df.iloc[:, 3].values
df1 = pd.read_csv('Q.csv',
index_col='DATE',
parse_dates=True,
infer_datetime_format=True)
date1 = df1.iloc[:, 0].index.date
z1 = df1.iloc[:, 0].values
date_ = np.array(date, dtype=np.datetime64)
data = pd.Series(z, index=date_)
date_1 = np.array(date1, dtype=np.datetime64)
data1 = pd.Series(z1, index=date_1)
def file(v,n,dv,dn): #v = z, n = z1, dv = date, dn = date1
z = np.copy(v)
news = np.copy(n)
date = dv
date_n = dn
N = len(date)
N1 = len(date_n)
x = N1 - 1
global u
u = 0
for q in range(0, N):
k = u
for i in range(k, N1):
if date_n[i - 1] <= date[q] and date_n[i] > date[q]:
u = i
z[q] = news[i - 1]
break
if x == i and date[q] >= date_n[i]:
u = i
z[q] = news[i]
break
return z
zn = file(z,z1,date,date1)
test_data = pd.Series(zn, index=date_)
print(test_data)