解决Python爬虫处理文件时候中文名称出现乱码问题

当下如果需要批量处理文件,爬虫网页和图片的时候使用Python是最为简单和高效的。但是在处理过程中还是有一些细节问题,比如在爬虫中文名称和处理中文文件URL的时候会出现乱码。实际上就是因为编码的问题。我们在使用的Python3版本默认编码是utf-8。爬虫到的所有的数据他都会以utf-8进行编码。
这样的话,Pyt[文]hon3处理文件[章]的时候会将目标网[来]站爬取进行utf[自]-8编码,如果我[有]们爬取的目标网站[资]是GB2312编[源]码,这样编码不同[网]就会造成乱码。那[文]我们如何处理呢?[章]
第一种、授予编码
import requests
req= requests.get("http://example.com")
req_text=req.text.encode("latin1").decode("GBK")
print(req_text)
第二种、添加字体
参考:https://www.ywowl.com/prolan/python/2018/03/550.html
上传字体simhei.ttf到:
/opt/python3.5/lib/python3.5/site-packages/matplotlib/mpl-data/fonts/ttf
然后修改matplotlibrc配置:
/opt/python3.5/lib/python3.5/site-packages/matplotlib/mpl-data/matplotlibrc
然后将backend的TkAgg换成Agg、注释掉font.family : sans-serif,添加font.sans-serif : SimHei。最后清理清除~/.cache/matplotlib目录缓存。解决图片中文乱码问题的。
声明: 本站仅为分享信息绝非推荐,网站不参与交易绝非中介,内容均仅代表个人观点绝非权威,读者请自行考虑后入手并自担风险!关于安全: 任何IDC都有倒闭和跑路的可能,出口线路更不可控,月付和备份是您的最佳选择,请保持良好的、有规则的备份习惯.
相关文章
- RAKSmart 日本VPS主机速度、下载回程及跑分综合评测
- Hostodo 新年拉斯维加斯NVMe VPS主机六折且送DirectAdmin授权
- PacificRack 新年元旦两款年付套餐 2GB 5TB 年15美元
- 网站打开提示"This account has been suspended"问题
- HawkHost老鹰主机2020圣诞节四折优惠 略逊黑五活动
- Namecheap圣诞节域名活动专场 难得的商家活动
- Megalayer香港服务器再次评测 默认3IP地址 8GB内存
- Megalayer独立服务器重新安装系统及端口查看步骤
- 国外域名注册商哪个好(注册国外域名几个原因)
- PacificRack圣诞节限时特价1G内存洛杉矶VPS 年付$10