сейчас я работаю над веб-сканером. Этот должен проанализировать некоторые конкретные сайты и дать мне вывод в xml-файл. До этого момента проблем не возникало. Crawler работает, и вы можете быстро настроить его с помощью cfg-файла. Я использую Jsoup для разбора HTML-контента.

Я просто добавил еще несколько сайтов и заметил, что у меня огромная проблема с HTML-контентом, который создается с помощью JavaScript. Разве нет способа заставить Jsoup поддерживать Javascript? Или, по крайней мере, получить полный HTML-контент, который я вижу в своем браузере.

Я уже пробовал HtmlUnit, но этот не очень хорошо. Это не дало мне контент, который я бы получил в своем браузере.

Sincerly,

Ogofo