1

Таблица:

Id int, date date, number int, ip varchar (int невозможно из-за точек)
Primary key - id, number. 

Количество строк в таблице ~ 8.000.000.

Необходимо оптимизировать под запрос (подсказан здесь):

select t1.*, t2 from table t1, table t2
 where t1.number = значение
 and t1.number <> t2.number
 and t1.date = t2.date
 and t1.ip = t2.ip

explain:

ID| select_type| table| type| possible_keys|  key  | key_len|    ref|    rows|  Extra
 1|      SIMPLE|    t1|  ALL|        (null)| (null)|  (null)| (null)| 8029425|  Using where
 1|      SIMPLE|    t2|  ALL|        (null)| (null)|  (null)| (null)| 8029425|  Using where; Using join buffer (Block Nested Loop)

Помогите с решением

4
  • добавьте, пожалуйста, вывод explain для вашего запроса. 6 июл 2015 в 9:00
  • ID| select_type| table| type| possible_keys| key| key_len| ref| rows| Extra| 1 SIMPLE t1 ALL (null) (null) (null) (null) 8029425 Using where 1 SIMPLE t2 ALL (null) (null) (null) (null) 8029425 Using where; Using join buffer (Block Nested Loop)
    – Yuri
    6 июл 2015 в 11:39
  • прошу прощения, забыл упомянуть: «в вопрос, а не в комментарий, потому что разбивки на строки в комментариях нет». нажав править 6 июл 2015 в 11:44
  • Исправил. Спасибо за подсказку
    – Yuri
    6 июл 2015 в 11:51

3 ответа 3

1

В первую очередь следует правильно расставить индексы. Кроме того, ip хранить в числовом виде можно, и так делают: пример из PHP

4
  • Индексы по отдельным полям без суррогатного ключа невозможно расставить, так как есть совпадающие строки. Поэтому сделал столбец ID с autoincrement. По нему и по столбцу number - primary_key
    – Yuri
    6 июл 2015 в 11:41
  • Что мешает повесить простые index на date и ip?
    – Aego
    6 июл 2015 в 11:57
  • «ip хранить в числовом виде» — Потом будут проблемы с переездом на IPv6, да?
    – andreymal
    6 июл 2015 в 12:08
  • Если говорить о конкретной функции php, то да, она работает только с адресами ipv4.
    – Aego
    6 июл 2015 в 12:11
0

как показывает приложенный вывод explain select ..., при запросе вообще никаких ключей не используется: идёт прямой перебор всех строк. это долго. надо добавить индексы.

я бы предложил начать со столбца number.

и смотреть на вывод explain select ... после добавления каждого из индексов: ведь чем больше индексов закреплено за таблицей, тем дольше будет происходить insert (но, при хорошем наборе индексов, быстрее — update и select).

0

Попробуйте так:

create index number_idx on table (number);

И добавить один (можно все, потом лишние удалить) из этих:

create index date_idx on table (date);
create index ip_idx on table (ip);
create index date_ip_idx on table (date, ip);

...в порядке тяжести. Без данных о количестве отфильтрованных записей по каждому из индексов сказать, какой из них будет лучше, сложно.

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.