Ошибка декодирования строки JSON - PullRequest
0 голосов
/ 03 июля 2011

Я звоню по URL:

http://code.google.com/feeds/issues/p/chromium/issues/full/291?alt=json

с использованием urllib2 и декодированием с использованием модуля json

url = "http://code.google.com/feeds/issues/p/chromium/issues/full/291?alt=json"
request = urllib2.Request(query)
response = urllib2.urlopen(request)
issue_report = json.loads(response.read())

Я сталкиваюсь со следующей ошибкой:

ValueError: Invalid control character at: line 1 column 1120 (char 1120)

Я попытался проверить заголовок и получил следующее:

Content-Type: application/json; charset=UTF-8
Access-Control-Allow-Origin: *
Expires: Sun, 03 Jul 2011 17:38:38 GMT
Date: Sun, 03 Jul 2011 17:38:38 GMT
Cache-Control: private, max-age=0, must-revalidate, no-transform
Vary: Accept, X-GData-Authorization, GData-Version
GData-Version: 1.0
ETag: W/"CUEGQX47eCl7ImA9WxJaFEw."
Last-Modified: Tue, 04 Aug 2009 19:20:20 GMT
X-Content-Type-Options: nosniff
X-Frame-Options: SAMEORIGIN
X-XSS-Protection: 1; mode=block
Server: GSE
Connection: close

Я также попытался добавить параметр кодирования следующим образом:

issue_report = json.loads(response.read() , encoding = 'UTF-8')

Я все еще сталкиваюсь с той же ошибкой.

Ответы [ 2 ]

4 голосов
/ 03 июля 2011

На данный момент в канале есть необработанные данные из JPEG; JSON искажен, так что это не ваша вина. Сообщить об ошибке в Google.

2 голосов
/ 03 июля 2011

Можно вместо этого использовать lxml, поскольку JSON искажен. Поддержка XPath делает работу с XML довольно простой:

import lxml.etree
url = 'http://code.google.com/feeds/issues/p/chromium/issues/full/291'
doc = lxml.etree.parse(url)
ns = {'issues': 'http://schemas.google.com/projecthosting/issues/2009'}
issues = doc.xpath('//issues:*', namespaces=ns)

Довольно легко манипулировать элементами, например, чтобы убрать пространство имен из тегов, преобразовать в dict:

>>> dict((x.tag[len(ns['issues'])+2:], x.text) for x in issues)
<<<    
{'closedDate': '2009-08-04T19:20:20.000Z',
 'id': '291',
 'label': 'Area-BrowserUI',
 'stars': '13',
 'state': 'closed',
 'status': 'Verified'}
...