Вопросы с меткой [классификация]

Классификация - раздел машинного обучения. Классификация решает задачи, в которых алгоритм должен определять для неких объектов, к какому из заранее заданных классов каждый из них относится.

Фильтрация
Сортировка
Метки
0 голосов
0 ответов
20 показов

Нужен совет какой подход использовать ML (NLP)

Имеется датасет на 1500 записей, 40 классов, не очень то уж и сбалансированный. для обучения использовал sklearn модели, и они давали результат +- 0.85acc. текс разбивал на токены, убирал стоп слова ...
SàshàRozinov's user avatar
0 голосов
0 ответов
6 показов

Не получается загрузить данные в код под knn классификацию

не могу разобраться, каким образом записать данные в X_train в виде x, y данных. У меня есть следующий массив данных. https://i.stack.imgur.com/X5cCb.png Здесь описано по 10 графиков на каждый класс, ...
Gardevar's user avatar
0 голосов
0 ответов
31 показ

Как соотнести данные

стоит задача спарсить 6 сайтов с техникой и соотнести их данные с предоставленными, делать естественно нужно автоматом и постоянно, на Python. Соотнести нужно например Предоставленный Смартфон Apple ...
Владимир Антонов's user avatar
0 голосов
0 ответов
158 показов

Ошибка 1 и 2 рода является одним и тем же в мультиклассовой классификации?

Изучая бинарные классификаторы, мы узнаем об ошибках 1 и 2 рода: FP ошибка 1 рода FN ошибка 2 рода При этом количество гипотез две. Теперь скажем , у меня есть матрица ошибок мультиклассификатора: ...
Elvin's user avatar
  • 1,754
0 голосов
1 ответ
54 показа

Классификация ближайших соседей, формула нормализации данных. Поиск среднего и среднеквадратичного отклонений

Решаю задание из летней практики. Ранее не работал с такими задачами вообще, поэтому нужна помощь В общем, хочу для начала узнать - правильно ли я нормализировал столбцы. По заданию преподавателя ...
Mono's user avatar
  • 3
0 голосов
1 ответ
45 показов

Как решать задачу бинарной классификации, зная только положительные примеры?

Необходимо решить задачу бинарной классификации, но в тренировочной выборке имеются только положительные примеры. Как быть и какие методы лучше использовать?
Вика Клюева's user avatar
0 голосов
1 ответ
74 показа

Создание выборки для обучение нейронной сети по классификации изображений

Мне нужно создать выборку для обучения моей нейронной сети классификации изображений. Так как тема достаточно специфичная, готовых изображений очень мало. Как из одного изображения получить ...
Ilya 's user avatar
  • 43
0 голосов
0 ответов
88 показов

Классификация данных по нескольким условиям. (Python)

Всем привет! Просьба помочь/ направить в какую сторону думать со следующей задачей: У меня есть исходные данные с геокординатами заказов и суммой заказов, их обычно более 20 тыс строк. Я пытаюсь ...
Владимир Юдин's user avatar
0 голосов
1 ответ
96 показов

Python 3D распознавание лиц, классификатор

Делаю распознавание лиц с помощью 3D камеры, хотел бы узнать как лучше сделать. Этап 1(готово): Что имеем на выходе этого алгоритма - массив из 68 точек с координатами x y z. Расположение точек: ...
Leonid's user avatar
  • 325
2 голоса
1 ответ
301 показ

Многоклассовая классификация

Я делаю классификатор, есть 50+ классов, у них есть 100 + массивов по 100+ элементов Подробнее: Существует dataset массивов c номерами классами к которым они относятся dataset = { "Класс 1": ...
Leonid's user avatar
  • 325
0 голосов
0 ответов
101 показ

Равномерно разделить строки на подстроки

Есть список строк, состоящий из цифр. Как распределить эти строки на достаточно равномерные классы/кластеры? Класс -- это какая-то подстрока от начала строки. Чем "уже" класс, тем больше ...
Артур's user avatar
2 голоса
1 ответ
127 показов

Как отобразить результат модели?

Есть обученная модель. Определяет где машина, где велосипед. Решил проверить на тестовых изображениях (их три, они расположены в директории, указанной в test_path). Код срабатывает, никакой ошибки не ...
Алекс's user avatar
0 голосов
1 ответ
41 показ

Прогнозирование возможных срабатываний системы (детектирование аномалий)

Подскажите пожалуйста в какую сторону смотреть при решении следующей задачи. Имеется физическая система, на ложное срабатывание которой теоретически могут влиять физические переключения смежных ...
MSA's user avatar
  • 1
1 голос
1 ответ
65 показов

Как нейросети распознать неизвестный класс? (Обработка исключений)

У меня есть нейросеть, которая классифицирует, например, изображения кошек и собак. Что нужно сделать, чтобы при подачи для классификации изображения другого объекта, например стол, нейросеть "...
Дмитрий's user avatar
0 голосов
1 ответ
67 показов

Классификация среди большого числа классов, образующих древовидную структуру

Как классифицировать текст при большом количестве классов, образующих древовидную структуру? Какое обучение тут подойдёт? Пример: таксономия для животных, больше 100'000 классов, классы связаны ...
srun's user avatar
  • 21
0 голосов
1 ответ
65 показов

Классифицировать на основе нескольких входных изображений, а не по одному изображению

Необходима такая нейросеть, которая на основе произвольного количества фото выдает прогноз. То есть например по пяти определенным фото прогноз 1, по восьми другим фото прогноз 2. Все аналогично ...
Олег's user avatar
0 голосов
1 ответ
130 показов

Как ускорить работу классификатора knn?

Я делаю задание, где нужно написать свой аналог sklearn knn. Вот основной код класса: def fit(self, X, y): self.X_train = X self.scaler = preprocessing.StandardScaler().fit(self....
Darya's user avatar
  • 117
0 голосов
1 ответ
147 показов

Методы классификации в машинном обучении

Существует некая задача классификации: на обучение классификатор получает массив строк в качестве класса и некоторые числа в качестве параметров. Есть ли такие методы, не используя нейросетей, которые ...
Егор Мартынов's user avatar
2 голоса
1 ответ
689 показов

Как запустить GridSearchCV на основе своей метрики оценки?

Двухклассовая классификация, y- цели, x - признаки, weights - веса. Собственная метрика - сумма положительных значений весов при совпадении прогноза с реальностью. Библиотеки: import numpy as np ...
Анна Лебедева's user avatar
1 голос
1 ответ
76 показов

Правильно ли так проверять точность работы модели?

Есть модель для распознования мнист цифр: %%time model = torch.nn.Sequential( nn.Linear(784, 392), nn.ReLU(), nn.Linear(392, 196), nn.ReLU(), nn.Linear(196, 98), nn.ReLU(), ...
annaFerdsf's user avatar
1 голос
1 ответ
314 показов

Почему такая большая разница в точности при применении критерия Джини и энтропии?

Всем привет. Продолжаю потихоньку изучать ML и добрался до известного дата-сета 'Wine'. И упёрся в следующий момент: если я использую энтропию в качестве критерия вместо критерия Джини, то точность ...
Sergei Zhilinski's user avatar
1 голос
0 ответов
133 показа

Выбор метрики качества для оптимизации в задаче несбалансированной бинарной классификации (10%)

Чем руководствоваться при первоначальном выборе метрики в задаче бинарной классификации в несбалансированном наборе данных (10% цели)? Веса: false negative = -20 false positive = -5 true positive ...
Анна Лебедева's user avatar
2 голоса
1 ответ
60 показов

Как сделать так, чтобы метки попадали в тестовые выборки?

xgboost.cv(params=params, dtrain=dtrain, num_boost_round=1000, nfold=8) При большом количестве разбиений, например 8, метки перестают попадать в тестовые выборки, насколько я поняла из ошибки: ...
Анна Лебедева's user avatar
2 голоса
2 ответа
293 показа

Как извлечь файлы с одинаковыми названиями, но из разных архивов, переименовывая

Есть 3 архива: Alex.zip, Toto.zip и Room.zip В каждом из них одинаковый набор разных по содержанию изображений: triangle_НОМЕР.png square_НОМЕР.png star_НОМЕР.png Где НОМЕР - цифра от нуля до ...
Alrott SlimRG's user avatar
1 голос
2 ответа
45 показов

Как отнести текстовые строки к категориям в R?

Есть ответы людей на вопрос "Почему вы не покупете моющие средства марки Х?". Необходимо отнести каждый ответ к категории, но списка категорий нет (возможно, его потребуется создать). Для решения этой ...
irinapytailo's user avatar
0 голосов
1 ответ
96 показов

С помощью каких методов машинного обучения можно решить задачу классификации видеороликов?

Мне необходимо осуществить многоклассовую классификацию видеороликов. По жестикуляции необходимо определить человека. Датасет состоит из более, чем 100 часов видео, получается больше 5 000 000 ...
Alex's user avatar
  • 3
1 голос
1 ответ
70 показов

Как решить проблему UndefinedMetricWarning при использовании GridSearchCV?

Для выбора лучших параметров модели использую GridSearchCV. Лучшие параметры модели хочу выбрать по метрике f1. Так же в процессе обучения хочу отслеживать метрики precision и recall. Для этого ...
ivan100096's user avatar
2 голоса
1 ответ
133 показа

Машинное обучение. Классификация. Ошибка при использовании модели [закрыт]

Участвую в соревновании Titanic: Machine Learning from Disaster на Kaggle. Мой kernel работал, но внезапно стали вываливаться ошибки для методов Random Forest и Gradient Boosting Classifier, каких-...
smlcrm.'s user avatar
  • 217
2 голоса
1 ответ
101 показ

Сложности при обучении нейросети для распознования тематики текста

Мне нужно обучить нейросеть для распознование текста только определённой тематики (к примеру спорт). В таком случае нейросеть должна предсказывать относиться ли тематика текста к спорту. Не понятно ...
Евсей Новиков's user avatar
1 голос
1 ответ
685 показов

Что такое метки классов(нейронная сеть)

Переворошил уже пол интернета, но все ещё не уверен, что значит термин "метки классов" в нейронной сети (классификация)... Вроде как это список ВСЕХ выходных нейронов(ответов): (например если ...
Coretex's user avatar
  • 117
1 голос
1 ответ
2k показов

Классификация кошек и собак в нейронке

Обучил нейронку, кошек и собак на фото правильно классифицирует, но что-либо где их нет не верно относит к одной категории и при этом выдает вероятность соостветствия 90%+ from tensorflow.python....
Denis Mischenko's user avatar
1 голос
1 ответ
83 показа

sklearn Classification metrics [закрыт]

В пакете sklearn есть множество метрик позволяющих оценить качество классификации. Бывает ли необходимость под конкретную задачу использовать конкретную метрику, которой нет в пакете? Учитывается ...
sevnight's user avatar
  • 582
0 голосов
1 ответ
92 показа

Привести multiclass classification в баланс в python

День добрый. У меня следующая проблема, есть задача классификации. На трэйне 50000 строк, на Y 60 лэйблов. Но данные несбалансированы (в одном классе, 35000 значений, в других 59 классах 15000 ...
Rudolf Morkovskyi's user avatar
1 голос
1 ответ
505 показов

Как посмотреть какие тестовые данные классифицируются неверно

Приветствую всех, есть вопрос касаемо нейронных сетей(библиотека keras). Имеется модель, для классификации текста(хороший отзыв или плохой). Точность на выходе не 100%, значит есть тексты, которые ...
Midnight's user avatar
  • 518
7 голосов
1 ответ
836 показов

Сравнение производительности классификаторов для эмоциональной (тональной) оценки комментариев/твитов

Отвечая на данный вопрос, захотелось сравнить эффективность разных классификаторов для эмоциональной(тональной) оценки комментариев/твитов. Не уверен, что этот вопрос полностью соответствует правилам ...
MaxU - stand with Ukraine's user avatar
2 голоса
1 ответ
715 показов

Классификация русских текстов, определение тональности.Не совсем понятно назначение параметров классификатора

Вот код из ответа на заданный ранее вопрос: # https://ru.stackoverflow.com/questions/790609 # Corpus download: http://study.mokoron.com/ # positive: https://www.dropbox.com/s/fnpq3z4bcnoktiv/...
lynx's user avatar
  • 430
2 голоса
1 ответ
410 показов

NaiveBaies не хочет обрабатывать русский текст

Пытаюсь подступиться к классификации русскоязычных текстов и т.п. Пытался скормить байесу файлик, который вручную закинул в корпус nltk. Но, не может он совладать с кодировкой utf-8, как ты его не ...
lynx's user avatar
  • 430
1 голос
2 ответа
486 показов

Классификация предложений с помощью gensim(word2vec)

Как разбить модель word2vec на кластеры методом kmeans(k средних)? Оптимален ли kmeans для классификации предложений на 10-100, не заданных заранее, классов? Как выбрать оптимальное число кластеров ...
Hertz's user avatar
  • 106
-2 голоса
1 ответ
611 показов

Два списка, необходимо сопоставить названия (Python)

Есть примерно 50000 строк, 2 столбца, в первом - наименования товаров, во втором столбце коды товаров (все коды уникальные). Есть тестовый набор - 2000 товаров, без кодов, естественно. Надо каждому ...
Rudolf Morkovskyi's user avatar
1 голос
0 ответов
576 показов

Keras - классификация текста - оверфиттинг, и как улучшить модель

Я делаю нейронную сеть для классификации текста на русском языке по этим примерам - https://github.com/jiegzhan/multi-class-text-classification-cnn-rnn https://machinelearningmastery.com/sequence-...
Эдуард Мартыненко's user avatar
0 голосов
1 ответ
81 показ

Метрика при поиске по сетке

Доброго времени суток. Я хочу организовать поиск по сетке GridSearchCV чтобы подобрать оптимальные параметры для классификатора ExtraTreesClassifier. В качестве метрики меня интересует критерий Джинни ...
taniamasmas's user avatar
1 голос
1 ответ
332 показа

Нелинейный классификатор

Какие существуют алгоритмы классификации для линейно неразделимых данных, помимо многослойного перцептрона и ядерного SVM? Ну или что бы все алгоритмы не перечислять(вдруг их много?), подскажите, ...
Merlin's user avatar
  • 5,481
0 голосов
0 ответов
78 показов

Классификация уравнений, графиков и выражений на python

Есть ввод, например: 2x+4=7 y=x^2+4 2+4 и т.д. Необходимо классифицировать этот ввод по категориям (тут уравнение, график и выражение). Всё это нужно сделать на Pyton 3.5. Хочу использовать ...
vladF's user avatar
  • 675
2 голоса
1 ответ
2k показов

Классификация текста

Доброе время суток всем. Есть текст(сообщения) и нужно их классифицировать. Например это подходит: Добрый вечер.Ищу мастера макияжа на воскресенье. Спасибо. Сегодня вечером нужно установить тв на ...
SkiesX's user avatar
  • 1,046
2 голоса
1 ответ
5k показов

Классификатор текста по стилю речи

Здравствуйте. Стоит задача разработки классификатора текста по стилю речи (художественный, публицистический и т.д.). Необходимо сделать это на основе нейронной сети. Не могу определить характеристики, ...
loginovsky's user avatar
3 голоса
1 ответ
376 показов

Где я ошибаюсь в алгоритме классификации текстов?

Здравствуйте. У меня такая проблема. В связи скудностью информации по классификации текстовых сообщений на русском языке возникли некоторые вопросы и не до конца понятен четкий алгоритм действий. ...
Oleg  Bezverhii's user avatar
2 голоса
1 ответ
866 показов

Выбор алгоритма машинного обучения

Требуется построить классификатор. Элемент данных - вектор признаков. Каждый вектор очень разреженный, то есть большая часть элементов есть нули. Классов мало: всего 2-3. Какой алгоритм лучше всего ...
yapycoder's user avatar
  • 1,905