0

Как можно концептуально организовать поиск по сайту (сайт на системе управления)?

Посмотрел заданные вопросы:

Погуглил, но особо не нашел откуда можно изучить вопрос. Интересует по каким принципам это может работать.

Из пришедших в голову вариантов:

  • Поиск по полям таблиц.
  • Создать отдельную таблицу допустим search пробежаться по всем страницам сайта и записывать их содержимое в эту таблицу, поиск делать уже по этой таблице, а при обновлении контента заново индексировать страницу где, что то обновилось (но что делать если на странице динамический контент не знаю).

И как работают поисковые системы (например гугл)

1

1 ответ 1

1

Для страниц с динамическим контентом нужен алгоритм извлечения полезной информации из контента. Для HTML-текста один из лучших алгоритмов - readability. Он проставляет каждому тегу так называемый readability score, а также уделяется огромное внимание meta-данным страницы.

Для поиска неточных форм слов можно использовать Стеммер Портера. Это самый простой способ, но можно погуглить и другие способы лексического морфологического синтаксического анализа выражений.

Для поиска по всем форматам контента (html, txt, doc, xls, pdf) есть софт Sphinx.

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.