Делаю своё первое тестовое задание на позицию junior java developer. Стоит задача сделать так называемый "веб-сканер". Решил использовать jsoup, до этого с ним не сталкивался. Дана живая начальная страница url, на которой необходимо "подсчитать", сколько раз на этой странице встречаются заданные ключевые слова,и вывести их количетсво. Далее - обойти следующие URL с начальной страницы, повторить подсчёт и на них, и.т.д. Глубина обхода - n страниц. URL могут вести на разные сайты.
Пример вывода:
asd.com\page - 8 слов stack, 6 слов overflow.
asd.com\nextPage - 5 слов stack, 4 слов overflow.
qwerty.com\anotherPage - 4 слов stack, 4 слов overflow.
newsite.org\startpage - 4 слов stack, 4 слов overflow.
...
Не могу понять, как мне извлечь из URL весь текст странички, чтобы я мог в нём искать ключевые слова.Я понимаю что надо
Document document = Jsoup.connect(URL).get();
Но как теперь из этого document получить весь текст странички, чтобы я мог в нём искать ключевые слова?
И как наиболее просто искать эти слова, неужели через метод contains? Или лучше для этого вообще не jsoup использовать, а что-то другое?
Извините если вопрос покажется детским, занимаюсь java недавно, и это мой первый вопрос.