teraz pracuję nad webcrawlerem. Ten powinien przeanalizować niektóre konkretne strony i dać mi dane wyjściowe do pliku xml. Do tego momentu nie ma problemu. Robot indeksujący działa i można go szybko dostosować do własnych potrzeb za pomocą pliku cfg. Używam Jsoup do analizowania treści HTML.

Właśnie dodałem kilka dodatkowych stron i zauważyłem, że mam ogromny problem z treścią HTML tworzoną za pomocą JavaScript. Czy nie ma sposobu, aby Jsoup obsługiwał Javascript? Albo przynajmniej zdobądź pełną zawartość HTML, którą mogę zobaczyć w mojej przeglądarce.

Próbowałem już HtmlUnit, ale ten nie działał dobrze. To nie dało mi treści, które dostałbym w mojej przeglądarce.

Szczerze

Ogofo