Вопросы с меткой [elasticsearch]
Elasticsearch поисковый сервер на базе Lucene. Поддерживает RESTful протокол, масштабирование, полнотекстовый поиск и высокую доступность данных.
219
вопросов
0
голосов
1
ответ
11
показов
Ошибка доступа при чтении файла: PermissionError: [Errno 13] Permission denied
Не могу понять в чем ошибка, хочу считывать содержимое файлов для индексации в Elasticsearch, но отказывает в доступе
import os
import chardet
from elasticsearch import Elasticsearch
es = ...
0
голосов
0
ответов
18
показов
ElasticSearch + DRF, ограничение в 10.000, пагинация ответов
У меня есть проект на drf, с elasticsearch, он очень капризный. Всегда ловил ошибку 10.000 при желании выдать ответов больше чем 10.000, можно сменить на max_result_window на 100.000 и даже на 200.000,...
0
голосов
0
ответов
24
показа
Ускорение поиска по ключевым словам DRF api PostgeSQL
Ребят, пожалуйста, нид хелп!
Есть апи, в котором нужно реализовать поиск по ключевым словам. Сейчас есть полнотекстовый поиск postgeSQL, но в 550000 записей (и поиску по огромному количеству слов) - ...
0
голосов
1
ответ
22
показа
Laravel scout, при индексации данных получаю ошибку Driver [elasticsearch] not supported
Поднял на докере проект ларавел + эластик, при попытке сделать индексы выдает ошибку что Driver [elasticsearch] not supported.
в .env указал конфиги так:
SCOUT_DRIVER=elasticsearch
...
2
голоса
0
ответов
40
показов
Как сделать поиск который понимает суть запроса?
На сайте есть много категорий, например автомобили, запчасти, мобильные телефоны, недвижимость.
Задача сейчас стоит такая: нужно сделать поиск который будет понимать запрос и будет настраивать фильтры ...
0
голосов
0
ответов
6
показов
Как добавить словарь для elasticsearch который создан из оператора?
Установил Elasticsearch 7.17 в openshift из Operators , 3 пода. Надо добавить словарь hunspell для каждого пода. Для хранения использую PVC
volumeClaimTemplates:
- metadata:
...
0
голосов
0
ответов
11
показов
Разложить вложенную агрегацию в Opensearch
Есть запрос с вложенной агрегацией:
{
"size": 0,
"query": {
"bool": {
"filter": [
{
"range&...
0
голосов
0
ответов
15
показов
Слетает индекс в elasticsearch
В логах ластика ничего интересного кроме
stop throttling indexing for shard [[cs_products][1]]
stop throttling indexing for shard [[cs_products][2]]
now throttling indexing for shard [[cs_products][...
0
голосов
1
ответ
39
показов
Есть ли в elastic search возможность посмотреть по каким ключевым словам он нашел данные по запросу?
Хотелось бы получать в ответе слова по которым нашлись совпадения, для того, чтобы посмотреть какое предложение я отправил в начале и как анализатор мог разобрать его на токены и т.д.
0
голосов
0
ответов
71
показ
Какой анализатор в ES нужно использовать чтобы найти определенные слова по запросы
Какой анализатор нужно использовать, чтобы при запросе "анализ общего белка" я мог найти совпадения в поле со значением "общий белок", сейчас использую shingle и russian_stemmer, ...
0
голосов
0
ответов
10
показов
Serilog+Elastic, почему не создаются индексы?
Доброго времени суток.
Настройки Serilog:
{
"Serilog": {
"Using": [ "Serilog.Sinks.Elasticsearch" ],
"MinimumLevel": {
"Default": &...
0
голосов
0
ответов
14
показов
Не вставляются данные в elasticsearch пока не удалишь старые индексы. В чем может быть причина?
Использую для логирования своих сервисов ELK. В один прекрасный момент перестали сохраняться логи в эластике...Удалил несколько старых индексов и записи снова начали сохраняться. Места на диске полно. ...
0
голосов
0
ответов
70
показов
Как реализовать в запросе elasticsearch поиск слова по полю с логикой учёта ошибок английской раскладки
Пример: ввожу "ckjdj", оно меняется на "слово". Есть ли такая возможность в ES?
0
голосов
0
ответов
21
показ
Не создается свой анализатор elasticserch через python
Не сохраняется settings когда создаю индекс в elasticsearch при помощи API python.
Когда я делаю тоже и самое через postman, то все сохраняется корректно.
elastic_client.indices.create(index="...
0
голосов
2
ответа
137
показов
Вывод связанных данных из Django в Drf
Гайз, застакался в вопросе и нужна помощь
Есть бэк на django
Как вы видите таблицы education и experience связаны с таблицей person. И я в drf пытаюсь вывести все эти связанные данные таким образом, ...
0
голосов
0
ответов
25
показов
logstash останавливает elasticsearch
После запуска logstash останавливается elasticsearch. Если logstash не запускать то elasticsearch и kibana работают и я захожу на веб интерфейс кибаны.
Пробовал logstash начисто удалить и установить ...
0
голосов
1
ответ
73
показа
Аггрегация в ElasticSearch с фильтром
Есть запрос, который возвращает количество документов каждого значения при установленном фильтре (фасет)
GET product/_search
{
"track_total_hits": true,
"sort": [],
"...
0
голосов
1
ответ
76
показов
Как правильно сделать сортировку в Elasticsearch
Есть продукция
name | price | company_id
товар 1 компании 1 | 10 | 1
товар 2 компании 1 | 10 | 1
товар 3 компании 1 | 20 | 1
товар 4 компании 2 | 10 | 2
товар 5 компании 2 | ...
0
голосов
0
ответов
33
показа
Opensearch dashboards - ошибка авторизации
Столкнулся с такой проблемой: при попытке входа Opensearch dashboards всегда "Invalid username or password, please try again"
при этом в ответе: 401 Unauthorized и в Response headers
www-...
1
голос
0
ответов
58
показов
Elasticsearch 5.5, Ошибка [nested] nested object under path [values] is not of nested type, как исправить?
Имеется сервер Elasticsearch 5.5.3 и PHP клиент elasticsearch/elasticsearch 5.5.0
На нем создается базовая структура таким запросом:
[
'index' => 'timpo',
'type' => 'adverts',
'id' =&...
1
голос
0
ответов
41
показ
Ошибка при выгрузке данных из PostgresQL в Elasticsearch через logstash
Подскажите, пожалуйста, может кто сталкивался с такой проблемой:
при выгрузке данных из БД в elasticsearch вылетает ошибка
[ERROR] 2022-10-31 16:02:14.628 [[main]>worker1] elasticsearch - ...
0
голосов
0
ответов
19
показов
Может ли Elasticsearch опрашивать сторонние API, чтобы получить данные, по расписанию?
На сколько я знаю, Elasticsearch принимает данные посредством REST API. Но вот вопрос, возможно ли настроить Elasticsearch таким образом, чтобы он сам получал данные из других API по расписанию (крону)...
0
голосов
0
ответов
17
показов
Заставить logstash отправлять только оригинальную строку
Необходимо заставить logstash 7.17 отправлять в syslog сервер только оригинальную строку из лога, без дополнительных полей. Путем гугления убрал почти все лишние поля, но некоторые остались (на скрине ...
1
голос
1
ответ
62
показа
Индекс и сортировка в elasticsearch
есть задача сортировать по текстовому полю в алфавитном(и обратно) порядке.
текстовое поле может содержать вначале пробел или кавычки, что ломает сортировку.
Каким образом можно игнорировать ...
0
голосов
1
ответ
31
показ
Elasticsearch. Переполнение кучи (ошибка heap is over 85%)
Всем привет.
Zabbix выдает такое предупреждение:
Problem started at 20:08:27 on 2022.09.28 Problem name: Elasticsearch
Node Heap is over 85% on data_1 Host: CGISPT01 Severity: High
Operational data: ...
0
голосов
0
ответов
42
показа
elasticsearch фильтрация если два поля зависят друг от друга
Всем привет!
Переделываю фильтр интернет магазина на elasticsearch, разобрался с фильтрацией по основным параметрам, все работает, но столкнулся с проблемой сопоставления цен и объемов памяти:
У ...
0
голосов
0
ответов
31
показ
Как аутентифицироваться в elasticsearch через python requests?
Практикуюсь в elasticsearch. Через python клиент функции создания и чтения индексов работают. Я написал request к моей локальной базе данных на чтение индексов через curl но он просит меня ...
0
голосов
0
ответов
34
показа
Запрос в Kibana
Предположим есть класс
public class Document {
private String id;
private String type;
private String tags;
private String title;
private String description;
private String content;
}
...
0
голосов
0
ответов
51
показ
Как создать политику очистки индекса в opensearch через конфигурационные файлы?
Создаю кластер OpenSearch и необходимо при создании добавить политику очистки индексов. Например чтоб удалялись через 3 дня. Кластер создаю в кубере, через helm.
Возможно ли это сделать через ...
0
голосов
1
ответ
79
показов
node js: как подключиться к БД elastic search, запущенной на удаленном ubuntu 22.04?
установил Java по инструкции
установил Elasticsearch на удаленный сервер Ubuntu 22.04 64bit (4 ГБ RAM, 60 ГБ SSD, 2 CPU) по инструкции. Пока не стал устанавливать: Kibana, Logstash, Filebeat, ...
0
голосов
1
ответ
139
показов
Как настроить кластер в Elasticsearch?
Хочу настроить кластер из 3-х машин (2 дата ноды, 1 мастер). На данный момент пытаюсь настроить минимум из 1 дата и мастер ноды. Порты пришлось поменять в силу специфики сети, но думаю проблема не в ...
0
голосов
1
ответ
28
показов
ElasticSearch. Не могу понять, как правильно составить запрос
Нужно найти события в ES по сложному фильтру, собрал рабочий, но не полный вариант:
{
"_source": [
"anyField",
"secondField",
"anotherField",
"_id"
],
"...
0
голосов
1
ответ
62
показа
elasticsearch установка на ubuntu 20 или docker
Пытаюсь начать изучение elasticsearch соответственно первым делом надо его установить.
поставил elasticsearch + kibana с помощью этого замечательного руководства:
https://serveradmin.ru/ustanovka-i-...
1
голос
1
ответ
46
показов
Запрос в elasticsearch через spring data
Начал изучать elasticsearch и пытаюсь создать запрос в эластиксерч через elasticsearch-spring-data.
Данные следующие :
List<Long> bookId;
Long authorId;
Timestamp from;
Timestamp to;
Нужно ...
0
голосов
1
ответ
343
показа
Graylog. Поиск лога по нескольким вхождениям в full_message [закрыт]
В Graylog пишутся логи приложения о запуске методов и передающиеся параметры.
Пример: Вызов Method(1, "1,2,3,4,5"). IP Клиента 8.8.8.8. Время ожидания в очереди: 00:00:000. Время исполнения: ...
0
голосов
0
ответов
26
показов
elasticsearch returning all docs with score=1 when no function matches
I use opensearch 1.2 version on aws but I think it's the behaviour of elasticsearch itself.
My query looks like this.
GET order/_search?explain=true
{
"query": {
"function_score&...
0
голосов
1
ответ
83
показа
Как подсчитать количество повторений слова в каждом из документов индекса в ElasticSearch?
У меня есть индекс.
Вот пример данных с индекса:
{
"took" : 12,
"timed_out" : false,
"_shards" : {
"total" : 20,
"successful" : 20,
&...
0
голосов
0
ответов
55
показов
Как сортировать результаты поиска на основе позиции слова в запросе Elasticsearch 8.2?
Я новичок в работе с Elasticsearch 8.2, так что если я чего-то не понимаю поправьте меня
Проект над которым я сейчас тружусь являться словарем со снами, логика такая
Пользователь может вбить в поиск ...
0
голосов
0
ответов
58
показов
Mysql, elasticsearch где хранить данные
Я прочел кучу информации в интернете о elasticsearch но никак не могу найти ответ на вопрос "где хранить данные"?
Нужно использовать elasticsearch как основное хранилище данных или все же ...
0
голосов
0
ответов
46
показов
Помогите с elasticsearch
Ввожу в поиск слово "Booking", и уже с 4го-5го результата возвращает "Cooking", хотя есть еще результаты с словом "Booking", содержат его в строке.
$this->aQuery['...
0
голосов
0
ответов
56
показов
Бот ищет нужное сообщение
Есть группа, в которой есть бот, но нет пользователя, который будет запрашивать необходимое сообщение (по заголовку) у бота. Через что можно реализовать данную функцию. Есть предложения через ...
1
голос
0
ответов
81
показ
Фильтрация товаров по динамическим вложенным полям с агрегированием в elasticsearch
Есть такой mapping для индекса с товарами с динамическими nested аттрибутами
'properties' => [
'facet' => [
'type' => 'nested',
'...
0
голосов
1
ответ
48
показов
Как правильно сделать подписку на фильтр?
Задача сделать подписку на фильтр, но не очень понятно как проектировать правильно структуру такого функционала.
Поиск работает на основе ElasticSearch. Сами исходные данные храним в PostgreSQL. ...
0
голосов
1
ответ
417
показов
Filebeat для кастомного лога не работает
Всем привет!
Есть лог-файл C:\Users\user\Documents\Adobe\Adobe Media Encoder\15.0\AMEEncodingLog.txt, который я хочу отправить в ElasticSearch с помощью Filebeat. Проблема в том, что этот журнал не ...
3
голоса
0
ответов
3k
показов
Error pulling image configuration
При попытке выполнить docker-compose up -d получаю такую ошибку:
ERROR: error pulling image configuration: error parsing HTTP 403 response body: invalid character '<' looking for beginning of value:...
0
голосов
1
ответ
16
показов
Как нормализовать координаты для ElasticSearch?
При индексации данных ElasticSearch выплевывает ошибку:
{"type":"illegal_argument_exception","reason":"illegal latitude value [129.77067] for coordinates"}}
Ему ...
0
голосов
1
ответ
85
показов
ElasticSearch 7.17, как правильно искать по списку UUID?
Создаю индекс (id это uuid):
...
"mappings": {
"_field_names": {
"enabled": true
},
"properties": {
"id": {"type": &...
1
голос
1
ответ
62
показа
Elasticsearch в java, как добавлять и удалять параметры?
Я пишу java web spring бэкенд приложение, которое будет обращаться к внешнему серверу. На том сервере, к которому я буду обращаться используется elasticsearch поэтому на своей стороне, я должен ...
0
голосов
1
ответ
23
показа
Как создать вложенное тело запроса с помощью bodybuilder.js (elasticsearch)
Буду благодарен, если подскажете как сделать такое тело запроса для elasticsearch:
const testQuery = {
query: {
bool: {
filter: {
bool: {
must: [
...
0
голосов
0
ответов
57
показов
Некоторые строчки лога не записываются в Kibana через Logstash
Коллеги, такой вопрос.
После полной настройки ELK решил проверить, на сколько целостно Logstash записывает и отправляет логи.
Дело в том, что я пробую парсить обычный лог, одно сервиса.
Там получается ...