Вопросы с меткой [машинное-обучение]

Машинное обучение посвящено разработке самообучающихся алгоритмов, основывающихся на выявлении закономерностей в данных, и использовании их для принятия решений.

Фильтрация
Сортировка
Метки
0 голосов
0 ответов
82 показа

Обучить нейросеть говорить голосом персонажа

Недавно у меня появилась идея для одного проекта и я хочу обучить говорить нейросеть голосом персонажей, "скормив" ей их разговори. Я абсолютный новичок в этой сфере, поэтому не знаю, ...
arnold's user avatar
  • 1,261
0 голосов
0 ответов
288 показов

CUDA ускорение для обучения нейросети с модулем ultralytics

Я установил ultralytics Начала обучать модель YOLOV8n Понял, что CUDA не работает, установил CUDA Toolkit и cuDNN Некоторое время догонял что torch тоже нужен не простой а с CUDA Установил torch такой ...
Firnen's user avatar
  • 3
0 голосов
0 ответов
27 показов

Нейросеть для раскраски ЧБ изображений красит все в один цвет

Обучаю модель предсказывать две цветовые компоненты H и S цветового пространства HSV(Hue, Saturation, Value, как LAB, только меньше). На вход подается V-компонента, она же ЧБ изображение. Нейросеть в ...
edgar's user avatar
  • 1
0 голосов
0 ответов
35 показов

Как графически отобразить все нейроны в виде графа?

Основная проблема заключается в том, что не хватает знаний, как можно графически показать в отдельном окне, желательно с интеграцией в pyQt5, нейроны в виде графа, которые получились в процессе ...
KofMan's user avatar
  • 21
0 голосов
0 ответов
14 показов

Будет ли оптимальным применять mean(-1) для выхода TransformerEncoder?

Классы типа Transformer имеют на выходе ту же размерность, что и на входе. Если мне нужно лишь одно значение, будет ли оптимальным применить функцию mean для сжатия всех выходящих значений? Т.е. нужно ...
Victor Telnov's user avatar
0 голосов
0 ответов
20 показов

PyTorch: обучение разделению на два класса: это и не это. Как такое сделать?

Допустим я хочу обучить сетку делить данные на два класса. Первый класс это то, что нужно. И второй класс это все прочее. Есть понятные мне варианты: Сделать бинарную функцию активации: когда x > ...
Victor Telnov's user avatar
1 голос
1 ответ
52 показа

PyTorch: Для бинарной функции активации работает ли градиентный спуск?

Возникла мысль, что для одной схемы сетки в одном специальном слое будет удобна бинарная функция активации. И возникает вопрос, будет ли такое работать для градиентного спуска, т.к. у бинарной функции ...
Victor Telnov's user avatar
0 голосов
0 ответов
19 показов

Обучение сетки на дополнительных данных

У меня есть сетка для классификации текстов. Я ее обучил на 47 классах. Суть проблемы в том, что в любой момент я хочу например до обучить ее на дополнительных классах (48,49 и т.д.), но чтобы веса ...
SàshàRozinov's user avatar
2 голоса
1 ответ
29 показов

Почему утверждается, что self-attention не умеет различать позиции, хотя на самом деле он сордежит Linear на v,k,q?

Для self-attention утверждается, что он не умеет различать позиции значений, и поэтому делается предварительный энкодинг позиций. Это было бы справедливо, если бы он только умножал матрицы. Но ведь у ...
Victor Telnov's user avatar
0 голосов
0 ответов
33 показа

Неправильная классификация данных по заданным параметрам на основе библиотеки tenserflow в python

Разрабатываю программу для классификации студентов по параметрам(Средний балл"avg_grade", подтягивания"avg_grade", количество нарядов"uniforms"). Суть программы в том, ...
KofMan's user avatar
  • 21
1 голос
1 ответ
24 показа

Как определить морфологию слова исключительно по контексту?

Существует стандартный метод определения морфологии (pos-tagging), на основе lstm, которому на вход передается: seq: [1, 2, 3, 4, 5, 6, 7, 8, 9, 10] # vocab idx out: [0, 0, 1, 2, 0, 1, 3, 2, 0, 1] #...
Lecron's user avatar
  • 1,438
0 голосов
0 ответов
18 показов

Проблема сериализации объектов питона pytorch save/load

Обучил сетку. сохраняю веса torch.save( model.state_dict(),'/path/to/mydoc/model_w.pt' ) Все это происходит в гугл колабе. Если загружать с помощью torch.load в гугл колаб, то проблем нет. Веса ...
SàshàRozinov's user avatar
0 голосов
0 ответов
17 показов

Ошибка ValueError: Cannot reshape a tensor with 26912 elements to shape [1,30,30,32] (28800 elements) for '{{node Reshape_6}} = Reshape[T=DT_FLOAT,

Пытаюсь запустить сеть. Получил сигнатурные матрицы: series_number is 30 series_length is 20000 signature_matrices_number is 2000 the shape of signature_matrices is (3, 2000, 30, 30) train dataset ...
Arno Kollins's user avatar
0 голосов
0 ответов
138 показов

Как я могу повысить точность и уменьшить loss моей нейронной сети Keras/Tensorflow при обучении на наборе данных MNIST с кириллическими буквами?

Когда я запускаю обучение модели, я получаю высокий loss и низкий val_accuracy Я использую dataset Кириллицы MNIST import tensorflow as tf from keras import layers, models, optimizers from keras....
Алексей Бобров's user avatar
0 голосов
0 ответов
32 показа

Как хранить состояния в таблице Q при обучении с подкреплением Q-learning?

Для модели обучения с подкреплением есть таблица Q из n_states (число состояний) строк и n_action (число действий) столбцов. Как я поняла, выбор действия происходит следующим образом: epsilon = 0.9 # ...
Маша's user avatar
1 голос
1 ответ
75 показов

Двоичная классификация текста

Помогите разобраться или направьте в нужное русло. Есть 100.000 строк со словом вилка. Вилка разная бывает. Столовый прибор Вилка в спортивных ставках Велосипедная вилка Вилка цен Вилка в розетку и т....
Xzizz's user avatar
  • 1,592
0 голосов
1 ответ
284 показа

Методы для NLP, удаления знаков препинания

Можете помочь и отправить свои методы для лемматизация, токенизации, определения частей речи, удаления знаков препинания, удаления не букв.
Shemen's user avatar
  • 21
0 голосов
0 ответов
22 показа

deeppavlov 'Chainer' object has no attribute 'get'

скачал конфиг модели из репозитория deeppavlolv , казалось бы. model = build_model(model_config, download=True) модель сбилдилась, но почему-то faq = train_model(model) выдает ошибку'Chainer' ...
SàshàRozinov's user avatar
5 голосов
2 ответа
146 показов

При обучении нейросети получаются огромные числа, который python воспринимает как null, inf и не может продолжать вычисления

обучаю нейросеть определять цифры на изображениях 24*24 px. Принципиальное условие: не использовать библиотеки tensorflow, keras... По мере того, как выполняется код, в промежуточных слоях нейросети ...
Кирилл М.'s user avatar
0 голосов
0 ответов
63 показа

Как решается задача квадратичного программирования?

Я пытаюсь понять метод опорных векторов при линейно неразделимой выборке. Нашел информацию, что задача метода опорных векторов эквивалентна двойственной задаче поиска седловой точки функции Лагранжа. ...
 Bonifacy's user avatar
0 голосов
0 ответов
398 показов

Помогите написать метод множественной классификации k-nearest neighbours python (KNN)

У меня тренировочная задача реализовать классификатор на основе метода K-ближайших соседей. Мы применим его к задачам бинарной классификации (два класса) и многоклассовой классификации (несколько ...
Blbrd173512's user avatar
0 голосов
0 ответов
88 показов

Ошибка при использовании optuna при подборе гиперпараметров

def objective(trial,data = X,target = y): param = { 'n_estimators': 5000, 'reg_alpha': trial.suggest_float('reg_alpha', 1e-3, 5.0), 'reg_lambda': trial.suggest_float('...
Andrey B's user avatar
0 голосов
0 ответов
22 показа

Нужен совет какой подход использовать ML (NLP)

Имеется датасет на 1500 записей, 40 классов, не очень то уж и сбалансированный. для обучения использовал sklearn модели, и они давали результат +- 0.85acc. текс разбивал на токены, убирал стоп слова ...
SàshàRozinov's user avatar
0 голосов
0 ответов
68 показов

Какую модель использовать для предсказания расхода деталей?

У меня есть данные для 500 деталей в виде: Задача по ним предсказать расход на 2024 (соотвественно обучить модель на прошлых годах). Я делаю Label Encoder для групп и для названий деталей. На вход ...
Donny_darko's user avatar
1 голос
0 ответов
245 показов

Как написать функции для DataFrame, которая будет заполнять пропуски в столбцах, при этом используя данные других столбцов? Python, pandas

Пытался написать функцию для обработки датасета (для последующего использования в машинном обучении). В процессе подготовки данных столкнулся с тем, что по некоторым важным параметрам отсутствует ...
Step1709's user avatar
  • 1,292
0 голосов
0 ответов
27 показов

Как извлечь кусок из текста по названию пункта

Решаю такую задачу У меня есть большой тренировочный набор данных, где содержится: ID документа Текст документа А так же, название оного из двух пунктов, к которому он относится: "обеспечение ...
Vladimir Chumak's user avatar
0 голосов
0 ответов
19 показов

Как определить, к какому тегу относится текст?

У меня есть список тегов, например "C++", "Природа", "Еда", "Архитектура", "Писательство", "Автомобилестроение". Как определить с помощью ...
user avatar
0 голосов
0 ответов
52 показа

Как заставить ruGPT-3 исправлять опечатки в тексте?

Я хочу попробовать заставить языковую модель ruGPT-3 исправлять опечатки в тексте. Может быть, кто-то уже пытался это сделать? Какие «затравки» использовали? Работало без дообучения? Я пробовала ...
Ml-junior's user avatar
0 голосов
0 ответов
36 показов

Не получается добиться точности от нейросети

При обучении нейросети конечная точность не более 51%. Вот код код (вырезал блок кода, где нормализовал данные) # разделение данных на признаки и целевые переменные x = data.iloc[:, :-1] # т.к ...
Иван's user avatar
1 голос
1 ответ
218 показов

При валидации резко падает точность по сравнению с тренировкой нейронной сети

Есть архитектура сети для разпознования двух отпечатков стоп на изображении. Весь набор данных очень похож. Просто разные размеры стоп немного в разном положении. Я хочу их определить. Для этого беру ...
evg7162's user avatar
  • 21
0 голосов
1 ответ
49 показов

Машинное обучение (Локализация и классификация)

Вопрос к ML специалистам. Пишу учебный проект в институте, необходимо распознать проявление студентом интереса к лекции например. Подумал классифицировать по двум классам, по типу отвернулся или ...
Антон Александрович's user avatar
-1 голос
1 ответ
63 показа

Можно ли использовать алгоритмы кластеризации для задач классификации в machine learning? [закрыт]

В интернете ничего не нашел по этому поводу.
HugeHead's user avatar
0 голосов
1 ответ
89 показов

Повлияют ли неаннотированные изображения существующих классов, на обучение модели Faster R-CNN

Нужно обучить модель для обнаружения объектов. Допустим у меня есть 300 изображений для аннотаций с изображениями различных животных На изображении может быть много различных классов: Кошка, Собака, ...
Sherlock's user avatar
  • 416
0 голосов
2 ответа
568 показов

Подогнать функцию под кривую методом curve_fit модуля scipy

Всем привет, пытаюсь решить задачу, но не могу, то ли я делаю что то не так, то ли использую не те инструменты. Есть набор данных, далее представлены в коде. Есть формула "PM+(Q-P)(x)-(Q/M)*(x**2)...
Михаил Никифоров's user avatar
3 голоса
1 ответ
117 показов

Проблема линейной регрессии

кого заинтересовал мой заголовок, сейчас я попробую как можно подробнее и интереснее описать проблему с которой я столкнулся в процессе изучения основ машинного обучения. Решая учебную задачу с kaggle,...
Gari's user avatar
  • 435
1 голос
1 ответ
144 показа

Зашумленные данные

Требуется генерировать зашумленные данные. Какие статистические методы зашумления существуют? Мне только известно о гауссовском шуме, но он подаётся определенному закону распределения.
Shakhin Gadzhiev's user avatar
0 голосов
1 ответ
475 показов

Scikit-learn.Для чего нужны параметры test_size, random_state, max_depth. И как их правильно указать на примере задачи

Никогда не изучал питон. В институте дали задачу, которую сам решить не могу - материала мало, сроки короткие. Помогите разобраться с крошечной частью алгоритма ее решения. Задача следующая "...
Человек 's user avatar
0 голосов
1 ответ
66 показов

Для заданного y найти значения x

Помогите, пожалуйста, найти подход к решению следующей задачи: Пусть есть матрица X = (x1,…,xn), состоящая из временных рядов xi и вектор y. Суть задачи в том, чтобы научиться косвенно управлять ...
onetwoonexu's user avatar
0 голосов
1 ответ
36 показов

Какая модель машинного обучение тут подойдёт?

Ребята может кто то из вас подкинет идеи Есть задачка, нужно подобрать параметр - число остатков товарной позиции для интернет магазина. (он показывается для каждой карточки при добавлении в корзину) ...
frontjss's user avatar
0 голосов
1 ответ
362 показа

Почему возникает ошибка ValueError?

Я натренировал Random Forest Classifier. Сохранил модель, используя pickle. После, в другом python-файле, загрузил модель и передал ей предложение, которое ввёл. Возникает ошибка: ValueError: X has ...
MrMr's user avatar
  • 3
0 голосов
1 ответ
149 показов

Нейросеть для анализа последовательности чисел и предсказание следующего бинарного числа

На вход должна подаваться бинарная последовательность чисел, состоящая из 50 нулей и единиц. Нужно чтобы нейросеть обучилась на этой последовательности, проанализировала ее и на выходе предсказала ...
igetfreaky's user avatar
0 голосов
1 ответ
2k показов

pytorch не видит cuda

Я совсем новичок в этой теме и начал читать книгу. Тк на моем пк есть GPU, я захотел использовать cuda для работы с pytorch, но столкнулся с проблемой, что не могу его верно установить. >>> ...
Максим Бушуев's user avatar
1 голос
1 ответ
162 показа

Визуализация функции в plotly с помощью слайдеров

Пытаюсь сделать визуализацию влияния коэффициентов линейной функции на её график в задаче линейной регрессии на подобие того как это делается в desmos Для этого использую следующий код в plotly ...
Elijah_Pris's user avatar
0 голосов
0 ответов
672 показа

TensorFlow обучение на GPU

Как в TensorFlow обучать модели, используя GPU? Данный код показывает, что GPU у меня 0, хотя видеокарта есть. import tensorflow as tf print(tf.config.list_physical_devices('GPU')) Только начал ...
crn4t's user avatar
  • 11
0 голосов
1 ответ
41 показ

Что делать если нет целевой переменой в датасете?

есть три таблицы: История активаций подписок CID -- идентификатор клиента SAP_ALLO_ID -- идентификатор активации подписки PRID -- идентификатор тарифа PRCID -- идентификатор услуги CONNECTION_DATE -- ...
SENSE's user avatar
  • 1
0 голосов
1 ответ
388 показов

Чат-бот самообучающийся по ответам оператора

Всем привет! Делаю проект, а именно - чат-бот телеграмм. Хочу туда внедрить чат с техподдержкой, но при этом, чтобы автоматизировать работу операторов мне нужно сделать так, чтобы бот обучался по ...
agfn's user avatar
  • 15
0 голосов
1 ответ
309 показов

Есть ли ноутбуки лучше для машинного обучения?

Требуется ноутбук преимущественно для задач машинного обучения и нейронных сетей, но также способный тянуть большое количество ресурсоемких рабочих приложений (blender, da vinci resolve и т.д.) ...
Andrei's user avatar
  • 61
1 голос
1 ответ
222 показа

sklearn - Как построить простой конвеер Pipeline для набора данных?

Описание: сижу на Kaggle на задаче SS Titanic, метки в наборе данных представлены как Boolean тип, поэтому нужно их превратить в числовой тип (1-0). Это я сделал просто напрямую работая с колонкой ...
hyper-cookie's user avatar
  • 1,166
-3 голоса
2 ответа
638 показов

Как обучить нейронную сеть распознованию элементов на изображении с помощью OpenCV?

Передо мной стоит задача обучить неровную сеть распознаванию элементов на изображении. Как использовать готовые модели с помощью OpenCV я нашел. Но мне нужно создать свою модель с распознаванием ...
Александр Трифонов's user avatar
0 голосов
1 ответ
152 показа

Каким образом стоит поменять последний слой resnet18 чтобы улучшить accuracy?

Задача состоит в том, чтобы улучшить обычную часть архитектуры resnet18, заменив последний линейный слой модели на несколько линейных слоёв, причём имея между этими слоями слой нелинейности. model = ...
student289's user avatar