Вопросы с меткой [elasticsearch]

Elasticsearch поисковый сервер на базе Lucene. Поддерживает RESTful протокол, масштабирование, полнотекстовый поиск и высокую доступность данных.

Фильтрация
Сортировка
Метки
0 голосов
1 ответ
11 показов

Ошибка доступа при чтении файла: PermissionError: [Errno 13] Permission denied

Не могу понять в чем ошибка, хочу считывать содержимое файлов для индексации в Elasticsearch, но отказывает в доступе import os import chardet from elasticsearch import Elasticsearch es = ...
Jonny's user avatar
  • 1
0 голосов
0 ответов
18 показов

ElasticSearch + DRF, ограничение в 10.000, пагинация ответов

У меня есть проект на drf, с elasticsearch, он очень капризный. Всегда ловил ошибку 10.000 при желании выдать ответов больше чем 10.000, можно сменить на max_result_window на 100.000 и даже на 200.000,...
CarambaGE's user avatar
0 голосов
0 ответов
24 показа

Ускорение поиска по ключевым словам DRF api PostgeSQL

Ребят, пожалуйста, нид хелп! Есть апи, в котором нужно реализовать поиск по ключевым словам. Сейчас есть полнотекстовый поиск postgeSQL, но в 550000 записей (и поиску по огромному количеству слов) - ...
CarambaGE's user avatar
0 голосов
1 ответ
22 показа

Laravel scout, при индексации данных получаю ошибку Driver [elasticsearch] not supported

Поднял на докере проект ларавел + эластик, при попытке сделать индексы выдает ошибку что Driver [elasticsearch] not supported. в .env указал конфиги так: SCOUT_DRIVER=elasticsearch ...
Dolphin's user avatar
  • 185
2 голоса
0 ответов
40 показов

Как сделать поиск который понимает суть запроса?

На сайте есть много категорий, например автомобили, запчасти, мобильные телефоны, недвижимость. Задача сейчас стоит такая: нужно сделать поиск который будет понимать запрос и будет настраивать фильтры ...
Valeriu Vodnicear's user avatar
0 голосов
0 ответов
6 показов

Как добавить словарь для elasticsearch который создан из оператора?

Установил Elasticsearch 7.17 в openshift из Operators , 3 пода. Надо добавить словарь hunspell для каждого пода. Для хранения использую PVC volumeClaimTemplates: - metadata: ...
cosskay's user avatar
0 голосов
0 ответов
11 показов

Разложить вложенную агрегацию в Opensearch

Есть запрос с вложенной агрегацией: { "size": 0, "query": { "bool": { "filter": [ { "range&...
EUG217's user avatar
  • 117
0 голосов
0 ответов
15 показов

Слетает индекс в elasticsearch

В логах ластика ничего интересного кроме stop throttling indexing for shard [[cs_products][1]] stop throttling indexing for shard [[cs_products][2]] now throttling indexing for shard [[cs_products][...
eri's user avatar
  • 31.7k
0 голосов
1 ответ
39 показов

Есть ли в elastic search возможность посмотреть по каким ключевым словам он нашел данные по запросу?

Хотелось бы получать в ответе слова по которым нашлись совпадения, для того, чтобы посмотреть какое предложение я отправил в начале и как анализатор мог разобрать его на токены и т.д.
Mihail's user avatar
  • 33
0 голосов
0 ответов
71 показ

Какой анализатор в ES нужно использовать чтобы найти определенные слова по запросы

Какой анализатор нужно использовать, чтобы при запросе "анализ общего белка" я мог найти совпадения в поле со значением "общий белок", сейчас использую shingle и russian_stemmer, ...
Mihail's user avatar
  • 33
0 голосов
0 ответов
10 показов

Serilog+Elastic, почему не создаются индексы?

Доброго времени суток. Настройки Serilog: { "Serilog": { "Using": [ "Serilog.Sinks.Elasticsearch" ], "MinimumLevel": { "Default": &...
OwDafuq's user avatar
  • 662
0 голосов
0 ответов
14 показов

Не вставляются данные в elasticsearch пока не удалишь старые индексы. В чем может быть причина?

Использую для логирования своих сервисов ELK. В один прекрасный момент перестали сохраняться логи в эластике...Удалил несколько старых индексов и записи снова начали сохраняться. Места на диске полно. ...
BSW's user avatar
  • 59
0 голосов
0 ответов
70 показов

Как реализовать в запросе elasticsearch поиск слова по полю с логикой учёта ошибок английской раскладки

Пример: ввожу "ckjdj", оно меняется на "слово". Есть ли такая возможность в ES?
Mihail's user avatar
  • 33
0 голосов
0 ответов
21 показ

Не создается свой анализатор elasticserch через python

Не сохраняется settings когда создаю индекс в elasticsearch при помощи API python. Когда я делаю тоже и самое через postman, то все сохраняется корректно. elastic_client.indices.create(index="...
Artem Grinev's user avatar
0 голосов
2 ответа
137 показов

Вывод связанных данных из Django в Drf

Гайз, застакался в вопросе и нужна помощь Есть бэк на django Как вы видите таблицы education и experience связаны с таблицей person. И я в drf пытаюсь вывести все эти связанные данные таким образом, ...
Dara's user avatar
  • 5
0 голосов
0 ответов
25 показов

logstash останавливает elasticsearch

После запуска logstash останавливается elasticsearch. Если logstash не запускать то elasticsearch и kibana работают и я захожу на веб интерфейс кибаны. Пробовал logstash начисто удалить и установить ...
baskos's user avatar
  • 1
0 голосов
1 ответ
73 показа

Аггрегация в ElasticSearch с фильтром

Есть запрос, который возвращает количество документов каждого значения при установленном фильтре (фасет) GET product/_search { "track_total_hits": true, "sort": [], "...
Andrew's user avatar
  • 355
0 голосов
1 ответ
76 показов

Как правильно сделать сортировку в Elasticsearch

Есть продукция name | price | company_id товар 1 компании 1 | 10 | 1 товар 2 компании 1 | 10 | 1 товар 3 компании 1 | 20 | 1 товар 4 компании 2 | 10 | 2 товар 5 компании 2 | ...
nicolaa's user avatar
  • 1,454
0 голосов
0 ответов
33 показа

Opensearch dashboards - ошибка авторизации

Столкнулся с такой проблемой: при попытке входа Opensearch dashboards всегда "Invalid username or password, please try again" при этом в ответе: 401 Unauthorized и в Response headers www-...
Alvisid's user avatar
  • 11
1 голос
0 ответов
58 показов

Elasticsearch 5.5, Ошибка [nested] nested object under path [values] is not of nested type, как исправить?

Имеется сервер Elasticsearch 5.5.3 и PHP клиент elasticsearch/elasticsearch 5.5.0 На нем создается базовая структура таким запросом: [ 'index' => 'timpo', 'type' => 'adverts', 'id' =&...
Дмитрий Гвоздь's user avatar
1 голос
0 ответов
41 показ

Ошибка при выгрузке данных из PostgresQL в Elasticsearch через logstash

Подскажите, пожалуйста, может кто сталкивался с такой проблемой: при выгрузке данных из БД в elasticsearch вылетает ошибка [ERROR] 2022-10-31 16:02:14.628 [[main]>worker1] elasticsearch - ...
Alvisid's user avatar
  • 11
0 голосов
0 ответов
19 показов

Может ли Elasticsearch опрашивать сторонние API, чтобы получить данные, по расписанию?

На сколько я знаю, Elasticsearch принимает данные посредством REST API. Но вот вопрос, возможно ли настроить Elasticsearch таким образом, чтобы он сам получал данные из других API по расписанию (крону)...
Alvisid's user avatar
  • 11
0 голосов
0 ответов
17 показов

Заставить logstash отправлять только оригинальную строку

Необходимо заставить logstash 7.17 отправлять в syslog сервер только оригинальную строку из лога, без дополнительных полей. Путем гугления убрал почти все лишние поля, но некоторые остались (на скрине ...
Константин's user avatar
1 голос
1 ответ
62 показа

Индекс и сортировка в elasticsearch

есть задача сортировать по текстовому полю в алфавитном(и обратно) порядке. текстовое поле может содержать вначале пробел или кавычки, что ломает сортировку. Каким образом можно игнорировать ...
Mardul's user avatar
  • 33
0 голосов
1 ответ
31 показ

Elasticsearch. Переполнение кучи (ошибка heap is over 85%)

Всем привет. Zabbix выдает такое предупреждение: Problem started at 20:08:27 on 2022.09.28 Problem name: Elasticsearch Node Heap is over 85% on data_1 Host: CGISPT01 Severity: High Operational data: ...
chasesilvers's user avatar
0 голосов
0 ответов
42 показа

elasticsearch фильтрация если два поля зависят друг от друга

Всем привет! Переделываю фильтр интернет магазина на elasticsearch, разобрался с фильтрацией по основным параметрам, все работает, но столкнулся с проблемой сопоставления цен и объемов памяти: У ...
Александр's user avatar
0 голосов
0 ответов
31 показ

Как аутентифицироваться в elasticsearch через python requests?

Практикуюсь в elasticsearch. Через python клиент функции создания и чтения индексов работают. Я написал request к моей локальной базе данных на чтение индексов через curl но он просит меня ...
Konstantin_SH's user avatar
0 голосов
0 ответов
34 показа

Запрос в Kibana

Предположим есть класс public class Document { private String id; private String type; private String tags; private String title; private String description; private String content; } ...
ussick's user avatar
  • 1
0 голосов
0 ответов
51 показ

Как создать политику очистки индекса в opensearch через конфигурационные файлы?

Создаю кластер OpenSearch и необходимо при создании добавить политику очистки индексов. Например чтоб удалялись через 3 дня. Кластер создаю в кубере, через helm. Возможно ли это сделать через ...
Peter Homicevich's user avatar
0 голосов
1 ответ
79 показов

node js: как подключиться к БД elastic search, запущенной на удаленном ubuntu 22.04?

установил Java по инструкции установил Elasticsearch на удаленный сервер Ubuntu 22.04 64bit (4 ГБ RAM, 60 ГБ SSD, 2 CPU) по инструкции. Пока не стал устанавливать: Kibana, Logstash, Filebeat, ...
stranger's user avatar
0 голосов
1 ответ
139 показов

Как настроить кластер в Elasticsearch?

Хочу настроить кластер из 3-х машин (2 дата ноды, 1 мастер). На данный момент пытаюсь настроить минимум из 1 дата и мастер ноды. Порты пришлось поменять в силу специфики сети, но думаю проблема не в ...
Radzhab's user avatar
  • 3,722
0 голосов
1 ответ
28 показов

ElasticSearch. Не могу понять, как правильно составить запрос

Нужно найти события в ES по сложному фильтру, собрал рабочий, но не полный вариант: { "_source": [ "anyField", "secondField", "anotherField", "_id" ], "...
user512599's user avatar
0 голосов
1 ответ
62 показа

elasticsearch установка на ubuntu 20 или docker

Пытаюсь начать изучение elasticsearch соответственно первым делом надо его установить. поставил elasticsearch + kibana с помощью этого замечательного руководства: https://serveradmin.ru/ustanovka-i-...
Gayrat Vlasov's user avatar
1 голос
1 ответ
46 показов

Запрос в elasticsearch через spring data

Начал изучать elasticsearch и пытаюсь создать запрос в эластиксерч через elasticsearch-spring-data. Данные следующие : List<Long> bookId; Long authorId; Timestamp from; Timestamp to; Нужно ...
FPS Bard's user avatar
0 голосов
1 ответ
343 показа

Graylog. Поиск лога по нескольким вхождениям в full_message [закрыт]

В Graylog пишутся логи приложения о запуске методов и передающиеся параметры. Пример: Вызов Method(1, "1,2,3,4,5"). IP Клиента 8.8.8.8. Время ожидания в очереди: 00:00:000. Время исполнения: ...
Konstantin Fedorov's user avatar
0 голосов
0 ответов
26 показов

elasticsearch returning all docs with score=1 when no function matches

I use opensearch 1.2 version on aws but I think it's the behaviour of elasticsearch itself. My query looks like this. GET order/_search?explain=true { "query": { "function_score&...
user509565's user avatar
0 голосов
1 ответ
83 показа

Как подсчитать количество повторений слова в каждом из документов индекса в ElasticSearch?

У меня есть индекс. Вот пример данных с индекса: { "took" : 12, "timed_out" : false, "_shards" : { "total" : 20, "successful" : 20, &...
ivan100096's user avatar
0 голосов
0 ответов
55 показов

Как сортировать результаты поиска на основе позиции слова в запросе Elasticsearch 8.2?

Я новичок в работе с Elasticsearch 8.2, так что если я чего-то не понимаю поправьте меня Проект над которым я сейчас тружусь являться словарем со снами, логика такая Пользователь может вбить в поиск ...
Kirill's user avatar
  • 13
0 голосов
0 ответов
58 показов

Mysql, elasticsearch где хранить данные

Я прочел кучу информации в интернете о elasticsearch но никак не могу найти ответ на вопрос "где хранить данные"? Нужно использовать elasticsearch как основное хранилище данных или все же ...
DenysMak's user avatar
0 голосов
0 ответов
46 показов

Помогите с elasticsearch

Ввожу в поиск слово "Booking", и уже с 4го-5го результата возвращает "Cooking", хотя есть еще результаты с словом "Booking", содержат его в строке. $this->aQuery['...
Артур Саленко's user avatar
0 голосов
0 ответов
56 показов

Бот ищет нужное сообщение

Есть группа, в которой есть бот, но нет пользователя, который будет запрашивать необходимое сообщение (по заголовку) у бота. Через что можно реализовать данную функцию. Есть предложения через ...
sanjar38rus's user avatar
1 голос
0 ответов
81 показ

Фильтрация товаров по динамическим вложенным полям с агрегированием в elasticsearch

Есть такой mapping для индекса с товарами с динамическими nested аттрибутами 'properties' => [ 'facet' => [ 'type' => 'nested', '...
Владислав's user avatar
0 голосов
1 ответ
48 показов

Как правильно сделать подписку на фильтр?

Задача сделать подписку на фильтр, но не очень понятно как проектировать правильно структуру такого функционала. Поиск работает на основе ElasticSearch. Сами исходные данные храним в PostgreSQL. ...
Valeriu Vodnicear's user avatar
0 голосов
1 ответ
417 показов

Filebeat для кастомного лога не работает

Всем привет! Есть лог-файл C:\Users\user\Documents\Adobe\Adobe Media Encoder\15.0\AMEEncodingLog.txt, который я хочу отправить в ElasticSearch с помощью Filebeat. Проблема в том, что этот журнал не ...
Total Pusher's user avatar
  • 6,212
3 голоса
0 ответов
3k показов

Error pulling image configuration

При попытке выполнить docker-compose up -d получаю такую ошибку: ERROR: error pulling image configuration: error parsing HTTP 403 response body: invalid character '<' looking for beginning of value:...
Zeus's user avatar
  • 31
0 голосов
1 ответ
16 показов

Как нормализовать координаты для ElasticSearch?

При индексации данных ElasticSearch выплевывает ошибку: {"type":"illegal_argument_exception","reason":"illegal latitude value [129.77067] for coordinates"}} Ему ...
Nepster's user avatar
  • 1,269
0 голосов
1 ответ
85 показов

ElasticSearch 7.17, как правильно искать по списку UUID?

Создаю индекс (id это uuid): ... "mappings": { "_field_names": { "enabled": true }, "properties": { "id": {"type": &...
Nepster's user avatar
  • 1,269
1 голос
1 ответ
62 показа

Elasticsearch в java, как добавлять и удалять параметры?

Я пишу java web spring бэкенд приложение, которое будет обращаться к внешнему серверу. На том сервере, к которому я буду обращаться используется elasticsearch поэтому на своей стороне, я должен ...
BegginerProgMan's user avatar
0 голосов
1 ответ
23 показа

Как создать вложенное тело запроса с помощью bodybuilder.js (elasticsearch)

Буду благодарен, если подскажете как сделать такое тело запроса для elasticsearch: const testQuery = { query: { bool: { filter: { bool: { must: [ ...
rizetime's user avatar
0 голосов
0 ответов
57 показов

Некоторые строчки лога не записываются в Kibana через Logstash

Коллеги, такой вопрос. После полной настройки ELK решил проверить, на сколько целостно Logstash записывает и отправляет логи. Дело в том, что я пробую парсить обычный лог, одно сервиса. Там получается ...
Misha_Polutrup's user avatar