推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 4595 天前的主题，其中的信息可能已经有所发展或是发生改变。
用PyQuery解析一个有日文的网站，然后报错：ValueError: Unicode strings with encoding declaration are not supported.
从http://lxml.de/parsing.html网站上得知，解析的文件在parse之前是不能用utf-8的。
用requests抓的网页不都已经自动转成utf-8了么，原来都没有什么问题的啊，为啥会出问题呢？我用了decode encode什么的转成其他格式也不行。
从http://lxml.de/parsing.html网站上得知，解析的文件在parse之前是不能用utf-8的。
用requests抓的网页不都已经自动转成utf-8了么，原来都没有什么问题的啊，为啥会出问题呢？我用了decode encode什么的转成其他格式也不行。
 | 1 cloverfisher OP |
 | 2 timonwong 2013-03-14 08:13:06 +08:00 问题是网页中的这一行： <?xml version="1.0" encoding="UTF-8"?> |
| 3 cloverfisher OP @timonwong 这一行有什么严重的问题么？？真的没法解析本来就是utf-8的xml？？那么如何解决这个问题呢 |
 | 4 for4 2013-03-14 13:29:12 +08:00 r = requests.get('http://cn.shindanmaker.com') 用r.content 别用r.text |
| 5 timonwong 2013-03-14 14:14:24 +08:00  1 @cloverfisher 因为是字符串是unicode类型了（转码后的了）, lxml找到encoding的相关申明还会尝试转到unicode一次，自然会失败，给这些解析器的都该是raw string. 所以请使用 @for4 介绍的 r.content |
| 6 cloverfisher OP @for4 谢谢~ |
| 7 cloverfisher OP @timonwong 3Q :） |
Select Language