Проблемы с использованием расширенного режима выхода для вывода jsoup - PullRequest
Новая
       22

Проблемы с использованием расширенного режима выхода для вывода jsoup

3 голосов
/ 14 июля 2011

Мне нужно преобразовать HTML-файл, удалив из него определенные теги. Для этого у меня есть что-то вроде этого - 

import org.jsoup.Jsoup;
import org.jsoup.helper.Validate;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Entities;
import org.jsoup.nodes.Entities.EscapeMode;

import java.io.IOException;
import java.io.File;
import java.util.*;

public class TestJsoup {
    public static void main(String[] args) throws IOException {
        Validate.isTrue(args.length == 1, "usage: supply url to fetch");
        String url = args[0];

        Document doc = null;
        if(url.contains("http")) {
           doc = Jsoup.connect(url).get();
        } else {
           File f = new File(url);
           doc = Jsoup.parse(f, null);
        }

        /* remove some tags */

        doc.outputSettings().escapeMode(Entities.EscapeMode.extended);
        System.out.println(doc.html());

        return;
    }
}

Проблема с приведенным выше кодом заключается в том, что, когда я использую расширенный режим выхода, выходные данные имеют атрибуты тега html, закодированные в формате html. Есть ли способ избежать этого? Использование escape-режима в качестве базового или xhtml не работает, так как некоторые нестандартные расширенные (например, ’) кодируют проблемы. Например, для HTML ниже, 

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
<html>
<head>
<title>Test&reg;</title>
</head>
<body style="background-color:#EDEDED;">
<P>
   <font style="color:#003698; font-weight:bold;">Testing HTML encoding - &rsquo; &copy; with a <a href="http://www.google.com">link</a>
   </font> 
   <br />
</P>
</body>
</html>

Вывод, который я получаю, 

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
<html>
 <head>&NewLine;
  <title>Test&reg;</title>&NewLine;
 </head>&NewLine;
 <body style="background-color&colon;&num;EDEDED&semi;">&NewLine;
  <p>&NewLine; <font style="color&colon;&num;003698&semi; font-weight&colon;bold&semi;">Testing HTML encoding - &rsquor; &copy; with a <a href="http&colon;&sol;&sol;www&period;g
oogle&period;com">link</a></font> <br />&NewLine;</p>&NewLine;&NewLine;&NewLine;&NewLine;
 </body>
</html>

Есть ли способ обойти эту проблему?

1 Ответ

8 голосов
/ 16 июля 2011

Какой выходной кодировкой набор символов вы используете? (По умолчанию это будет вход, который, если вы загружаете с URL, будет зависеть от сайта).

Возможно, вы захотите явно установить для него UTF-8, или ASCII, или какое-либо другое низкое значение, если вы работаете с системами, которые не могут работать с UTF-8. Если для режима выхода установлено значение base (по умолчанию), а для набора символов - ascii, то любой символ (например, rsquo), который не может быть изначально представлен в выбранном наборе символов, будет выводиться как числовой escape.

Например: 

String check = "<p>&rsquo; <a href='../'>Check</a></p>";
Document doc = Jsoup.parse(check);
doc.outputSettings().escapeMode(Entities.EscapeMode.base); // default

doc.outputSettings().charset("UTF-8");
System.out.println("UTF-8: " + doc.body().html());

doc.outputSettings().charset("ASCII");
System.out.println("ASCII: " + doc.body().html());

Дает: 

UTF-8: <p>’ <a href="../">Check</a></p>
ASCII: <p>&#8217; <a href="../">Check</a></p>

Надеюсь, это поможет!

...