Eu tenho uma preocupação séria aqui. Eu pesquisei todos através de estouro de pilha e muitos outros sites. em todos os lugares que eles dão a mesma solução e eu tentei todos aqueles, mas mi não sou capaz de resolver este problema.

eu tenho o seguinte código,

Document doc = Jsoup.connect(url).timeout(30000).get();

Aqui estou usando a biblioteca Jsoup e o resultado que estou recebendo não é igual à fonte da página real que podemos ver, mas clique com o botão direito do mouse na página -> fonte da página. Muitas partes estão faltando no resultado que estou recebendo com a linha de código acima. Depois de pesquisar alguns sites no Google, eu vi esse methid,

URL url = new URL(webPage);
        URLConnection urlConnection = url.openConnection();
        urlConnection.setConnectTimeout(10000);
        urlConnection.setReadTimeout(10000);
        InputStream is = urlConnection.getInputStream();
        InputStreamReader isr = new InputStreamReader(is);



        int numCharsRead;
        char[] charArray = new char[1024];
        StringBuffer sb = new StringBuffer();
        while ((numCharsRead = isr.read(charArray)) > 0) {
            sb.append(charArray, 0, numCharsRead);
        }
        String result = sb.toString();          

        System.out.println(result);   

Mas sem sorte. Enquanto eu estava pesquisando na Internet para este problema eu vi muitos sites onde ele disse que eu tinha que definir o charSet adequado e tipos de codificação da página da Web durante o download da fonte da página de uma página web. mas como vou conhecer essas coisas do meu código dinamicamente? Existe alguma classe em java para isso. Eu passei por crawler4j também um pouco, mas não muito para mim. Por favor ajude pessoal. Estou preso a este problema há mais de um mês. Eu tentei todos os meus caminhos que eu posso. então a esperança final está nos deuses do estouro de pilha que sempre ajudaram !!