0

Есть вот такая таблица MySQL которая включает в себя 8 столбцов и имеет 6млн строк.
Таблица

На user_id стоит индекс, поиск по user_id вопросов не вызывает. Задача состоит в том, чтобы сделать рандомную выборку 1 строки по условиям: sex, city, age

SELECT user_id FROM users WHERE city='' and sex='' and age IN ('', '', '',..) ORDER BY RAND() LIMIT 1;

Я много раз изменял запрос, но наиболее быстрый получился этот. Время запроса составляет в районе 15-20 секунд, что очень много. Как можно оптимизировать запрос, бд, таблицу для достижения 1-3 секунд для ответа?

4
  • Комментарии не предназначены для расширенной дискуссии; разговор перемещён в чат.
    – Grundy
    19 янв 2022 в 21:36
  • Я попробовал разные запросы, и оказалось что при запросе с диапазоном between не используется ключ, ответы в консоли я прикрепил к вопросу
    – pharci
    19 янв 2022 в 21:41
  • Я могу зайти в чат, но я не могу там писать т.к. не хватает баллов репутации. Время выполнение с точным возрастом меньше на +-3 секунды. А поле city типа VARCHAR
    – pharci
    19 янв 2022 в 21:50
  • Теперь я могу писать в чате, думаю нам стоит перейти туда
    – pharci
    19 янв 2022 в 21:50

1 ответ 1

0

Вот что у меня получилось. Я использовал такую структуру (тут полный текст):

create table t (
    user_id int,
    username text,
    surname text,
    age int,
    aboutme text,
    sex bool,
    city int
);

Обратите внимание, тут изменены типы полей (в первоначальном варианте были текстовыми), чтобы уменьшить размер ключа и размер индекса:

  1. sex типа bool
  2. city - int, это должен быть внешний ключ на таблицу с городами

С такими индексами:

create unique index t_user_id_idx on t(user_id);
create index t2_idx on t(city, sex, age, user_id);

результат:

 SELECT user_id FROM t WHERE city=1 and sex=false and age between 1 and 3 order by rand() limit 1;
+---------+
| user_id |
+---------+
| 2230071 |
+---------+
1 row in set (0.45 sec)

И план:

explain SELECT user_id FROM t WHERE city=1 and sex=false and age between 1 and 3 order by rand() limit 1;
+----+-------------+-------+------------+-------+---------------+--------+---------+------+--------+----------+-----------------------------------------------------------+
| id | select_type | table | partitions | type  | possible_keys | key    | key_len | ref  | rows   | filtered | Extra                                                     |
+----+-------------+-------+------------+-------+---------------+--------+---------+------+--------+----------+-----------------------------------------------------------+
|  1 | SIMPLE      | t     | NULL       | range | t2_idx        | t2_idx | 12      | NULL | 991602 |   100.00 | Using where; Using index; Using temporary; Using filesort |
+----+-------------+-------+------------+-------+---------------+--------+---------+------+--------+----------+-----------------------------------------------------------+
1 row in set, 1 warning (0.00 sec)

Изначально время выполнения было 40 секунд (я запускал в докере, а там с диском работа медленней).

7
  • Спасибо большое за помощь
    – pharci
    19 янв 2022 в 22:57
  • 2
    а user_id во втором индексе какой смысл имеет?
    – teran
    19 янв 2022 в 23:11
  • 2
    @teran Так он же становится покрывающим...
    – Akina
    20 янв 2022 в 4:46
  • 1
    Я использовал такую структуру Плохая структура. В ней отсутствует явный первичный ключ. И я настоятельно рекомендую сделать таковым индекс по (user_id). Во-первых, он всё равно уникальный, во-вторых, он всё равно будет использоваться как кластерный. А дополнительное ограничение на поле user_id int NOT NULL ничего не попортит.
    – Akina
    20 янв 2022 в 4:49
  • 1
    @Akina ясна. в sql server оно в inlclude определяется, не сообразил сразу
    – teran
    20 янв 2022 в 6:59

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.