会员

贴心博客(Imblog)

基于`Imcat(贴心猫)+(微样式)Weys`开发

Python模块Requests的中文乱码问题

2019-09-06 08:02 学习

Python模块Requests的中文乱码问题

终极解决方法
以上的方法虽然不会出现乱码,但是保存下来的网页,图片不显示,只显示文本。而且打开速度慢,找到了一篇博客,提出了一个终极方法,非常棒。

来自博客 
http://blog.chinaunix.net/uid-13869856-id-5747417.html的解决方案:

def page(url, head={}, proxy={}):
    agent = {"User-Agent": "Mozilla/5.0 (Window 7) Chrome/72.0"}
    if head:
        head = dict(agent, **head)
    r = requests.get(url)
    if r.encoding == 'ISO-8859-1':
        encodes = requests.utils.get_encodings_from_content(r.text)
        if encodes:
            encode = encodes[0]
        else:
            encode = r.apparent_encoding
        html = r.content.decode(encode, 'replace') #如果设置为replace,则会用?取代非法字符;
        return html;
        '''
        c = re.search(r'charset=["\']?([^\'"]*)', r.text)
        if c:
            r.encoding = c.group(1)
        '''
    html = r.text
    return html


来源:(原创) 编辑:peace 关键词:Python,Requests,中文乱码

    More 心情墙

  • 71 不想授权的伙伴,你也多了一条免费之路 ---`贴心博客(Imblog)`!
  • 14 尊重版权,没有任何借口:支持织梦授权。
  • 8 某镇教育网[2007] vs [2021]某校教育平台; 一个成功的作品,和一个成功的项目管理过程,是完全两回事。
  • 10 计划不如变化;说好的[下午]开会,却有意安排到[晚上]。
  • 有所为,有所不为,是为华为! 凝心聚力,中华有为!

    22 2019-06-02

  • 2019愿望: 1.多健身少生病;2.学习英语,心理学;3.发布`贴心博客`,`贴心企业网`,`贴心房产网`(部分合作开发)...

    27 2018-12-31

  • 愿与[企业,客户]三方利益达到最佳平衡!

    4 2018-12-16

    More 和平鸽小语

  • 4 业余系统,开源分享;从未忘记,初心梦想。
  • 3 中国年=人民币: Happy CNY, I get a CNY 8.8 red envelope. 慢慢去体会,用一生去体会!
  • 2 2019:经济危机后;Android,鸿蒙,iOS将三足鼎立 想起:非暴力不合作;该赶美企,抵美货了...
  • 6 修桥、修路、修房子,已经习惯了,只要砸钱就行了; 这个芯片砸钱不行的,得砸数学家、物理学家、化学家... (任正非)
导航
博客文章
便笺墙
家族亲友树
联系我们
地址:银河县太阳镇地球村
电话:135-37****47
邮箱:80893510@qq.com

Copyright@贴心博客(Imblog)

Run:1.877/19.789(ms); 6(sql)/2.093(MB); comm:info/detail; Upd:2021-10-26 11:13:51