4

Текст состоит из правильных в меру предложений русского языка. Можно использовать pymorphy2 — будут выданы варианты, как в классическом примере СТАЛИ — Veb, Noun. Как опираясь на информацию соседствующих в предложении слов правильно выбрать единственный правильный вариант. Буду благодарен за идеи, алгоритмы, примеры на python, готовые модули в которых это работает.

3
  • 1
    Косой косой косил косой косой, стекло стекло, а покрывало покрывало покрывало. 20 фев 2019 в 8:48
  • @Эникейщик попугай, попугай, попугай :)
    – andreymal
    20 фев 2019 в 8:54
  • Добавьте пример текста. Если предложения более - менее стандартные (к примеру, повествавательные, порядок слов без вариаций), то можно что-то придумать.
    – insolor
    20 фев 2019 в 9:38

2 ответа 2

3

Выбор однозначных гипотез во многих случаях - задача нетривиальная:

Он видел их семью своими глазами

Он видел их семью своими глазами

(У меня есть такая оранжевая майка с этим симпатичным семиглазиком) ;)

Вы можете использовать размеченные корпусы русского языка, чтобы составить свой алгоритм. В простейшем случае вы можете просто использовать готовые частотности на опорных текстах и полагаться на то, что и у вас будет примерно такое же совпадение.

Как человек, вручную снявший неоднозначность в сотнях тысяч разнородных примеров для открытого корпуса могу только пожелать удачи в вашей затее.

0

На python, использую pymorphy2 и машинное обучение:

https://github.com/chomechome/maru

https://github.com/IlyaGusev/rnnmorph

Инструменты для NLP с исходниками на github

http://www.solarix.ru/

1
  • 2
    Сообщения содержащие только ссылки на внешние ресурсы, ответом не считаются. Добавте основное из ссылок прямо в тело сообщения.
    – 0xdb
    18 фев 2020 в 11:49

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.