0

Как можно концептуально организовать поиск по сайту (сайт на системе управления)?

Посмотрел заданные вопросы:

Погуглил, но особо не нашел откуда можно изучить вопрос. Интересует по каким принципам это может работать.

Из пришедших в голову вариантов:

  • Поиск по полям таблиц.
  • Создать отдельную таблицу допустим search пробежаться по всем страницам сайта и записывать их содержимое в эту таблицу, поиск делать уже по этой таблице, а при обновлении контента заново индексировать страницу где, что то обновилось (но что делать если на странице динамический контент не знаю).

И как работают поисковые системы (например гугл)

1

1 ответ 1

1

Для страниц с динамическим контентом нужен алгоритм извлечения полезной информации из контента. Для HTML-текста один из лучших алгоритмов - readability. Он проставляет каждому тегу так называемый readability score, а также уделяется огромное внимание meta-данным страницы.

Для поиска неточных форм слов можно использовать Стеммер Портера. Это самый простой способ, но можно погуглить и другие способы лексического морфологического синтаксического анализа выражений.

Для поиска по всем форматам контента (html, txt, doc, xls, pdf) есть софт Sphinx.

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.