Я написал небольшую функцию, которая использует ElementTree и xpath для извлечения текстового содержимого определенных элементов в XML-файле:
#!/usr/bin/env python2.5
import doctest
from xml.etree import ElementTree
from StringIO import StringIO
def parse_xml_etree(sin, xpath):
"""
Takes as input a stream containing XML and an XPath expression.
Applies the XPath expression to the XML and returns a generator
yielding the text contents of each element returned.
>>> parse_xml_etree(
... StringIO('<test><elem1>one</elem1><elem2>two</elem2></test>'),
... '//elem1').next()
'one'
>>> parse_xml_etree(
... StringIO('<test><elem1>one</elem1><elem2>two</elem2></test>'),
... '//elem2').next()
'two'
>>> parse_xml_etree(
... StringIO('<test><null>�</null><elem3>three</elem3></test>'),
... '//elem2').next()
'three'
"""
tree = ElementTree.parse(sin)
for element in tree.findall(xpath):
yield element.text
if __name__ == '__main__':
doctest.testmod(verbose=True)
Третий тест завершается неудачей со следующим исключением:
ExpatError: ссылка на недопустимый номер символа: строка 1, столбец 13
Является ли объект �
недопустимым XML?Независимо от того, есть это или нет, файлы, которые я хочу проанализировать, содержат его, и мне нужен какой-то способ их проанализировать.Любые предложения для другого парсера, кроме Expat, или настройки для Expat, которые позволили бы мне это сделать?
Обновление: я обнаружил BeautifulSoup только сейчас, парсер супа тега, как отмечалосьниже, в ответном комментарии, и для забавы я вернулся к этой проблеме и попытался использовать ее как XML-очиститель перед ElementTree, но он покорно преобразовал �
в недопустимый нулевой байт.: -)
cleaned_s = StringIO(
BeautifulStoneSoup('<test><null>�</null><elem3>three</elem3></test>',
convertEntities=BeautifulStoneSoup.XML_ENTITIES
).renderContents()
)
tree = ElementTree.parse(cleaned_s)
... приводит к
xml.parsers.expat.ExpatError: not well-formed (invalid token): line 1, column 12
В моем конкретном случае мне не нужен был разбор XPath как таковой, я мог бы пойти с самой BeautifulSoupи его довольно простой стиль адресации узлов parsed_tree.test.elem1.contents[0]
.