Python requests乱码的五种解决办法, resp.content.decode() 和 resp.text 如何选择
resp.text工作原理: requests 库会尝试根据 HTTP 响应头中的 Content-Type例如 text/html; charsetutf-8或通过 Chardet 库自动猜测响应内容的编码。然后它会将原始的字节内容自动解码成 Unicode 字符串。优点:方便快捷: 大多数情况下这是获取文本内容最直接、最方便的方式无需手动处理编码。自动编码检测: 能够智能地处理多种编码情况。缺点:可能出现乱码: 如果 requests 自动检测到的编码不正确或者响应头中没有明确指定编码就可能出现乱码问题。选择当您确定响应内容是文本如 HTML、JSON、XML、纯文本等并且requests能够正确识别其编码时这是最推荐和最方便的方式。快速获取文本: 如果您只是想快速查看响应内容不关心具体的编码细节可以先尝试resp.text。首选resp.text乱码时考虑resp.content.decode()如果是内容确定的页面 resp.content.decode(encoding) 中的encoding 可以通过chardet手动获取一下然后把结果硬编码到 resp.content.decode(“通过chardet获取的编码”)中例如chardet.detect(res.content)[encoding] 得到的是“gbk”那么就直接硬编码resp.content.decode(gbk)如果想尽量一招通杀例如直接在写日志的函数中可以log_txt resp.content.decode(cchardet.detect(resp.content)[encoding])如果在传给写日志函数前就将resp.encoding属性设置好就更佳了。# 如果已知 resp.text 无乱码, 可以什么都不做 # 如果已知 utf-8 可以解决乱码则可写: resp.encodingutf-8 # 如果未知,则 resp.encoding cchardet.detect(resp.content)[encoding] # 然后统一用 resp.text log_txtresp.text使用requests模块请求网页内容经常会出现乱码例如import requests res requests.get(https://www.baidu.com/) print(res.text)乱码的原因是内容编码和解码方式不一致导致的解决办法有以下几种解决办法第一种apparent_encodingimport requests res requests.get(https://www.baidu.com/) res.encoding res.apparent_encoding print(res.text)另有解释r.encoding是直接套用response的charset字段如果response没有charset那么r.encoding 就会不管三七二十一想当然地设为ISO-8859-1这种情况下r.encoding不值得信任。所以先判断r.encoding是否等于ISO-8859-1如果是再用 r.apparent_encoding替换感觉这样应该更好if r.encoding ISO-8859-1: r.encoding r.apparent_encoding;我们看看官方源代码具体来看r.encoding和r.apparent_encoding的值是怎么来的1先说r.encodingresponse.encoding get_encoding_from_headers(response.headers)https://github.com/requests/requests/blob/d55de2d391d1350766221ce0aa36e670dc2a0169/requests/adapters.py#L2732再说r.apparent_encodingchardet.detect(self.content)[encoding]#调用了chardet模块的detect方法参数给的是r.contenthttps://github.com/requests/requests/blob/d55de2d391d1350766221ce0aa36e670dc2a0169/requests/models.py#L719github.com/requests/requests/blob/d55de2d391d1350766221ce0aa36e670dc2a0169/requests/models.py#L719可以知道r.apparent_encoding是否准确其实就是看chardet.detect是否准确。第二种content utf-8解码一种临时性的解决办法不建议用这种方法相当于写死代码了。import requests res requests.get(https://www.baidu.com/) try: txt res.content.decode(gbk) except UnicodeDecodeError as e: # print(e) txt res.content.decode(utf-8) print(txt)第三种chardetimport requests import chardet res requests.get(https://www.baidu.com/) encoding chardet.detect(res.content)[encoding] print(res.content.decode(encoding))第四种cchardetcchardet需要提前安装一下​​pip install cchardet​​。import requests import cchardet res requests.get(https://www.baidu.com/) encoding cchardet.detect(res.content)[encoding] print(res.content.decode(encoding))chardet和cchardet的区别cchardet是chardet的一个加速版本使用了C语言实现因此性能更高chardet和cchardet都是 Python 库用于字符编码检测主要用于确定文本数据的字符编码格式如UTF-8、ISO-8859-1等以便正确地解析和处理文本数据。它们之间的主要区别在于性能和实现语言。chardet:chardet是一个用 Python 编写的字符编码检测库。它的性能相对较慢因为它是一个纯Python库不是特别适合处理大型文本数据。chardet基于统计模型和启发式算法通过分析字符的分布和出现频率来猜测文本的编码。你可以使用chardet安装它通常是通过pippip install chardet。cchardet:cchardet是chardet的一个加速版本使用了C语言实现因此性能更高。由于它是用C编写的所以在处理大型文本文件时速度更快适用于需要高性能字符编码检测的应用。cchardet通常被认为是chardet的替代品可以无缝替代chardet因为它提供了相同的接口。你可以使用cchardet安装它通常是通过pippip install cchardet。总之如果你需要进行字符编码检测并且对性能有较高要求可以考虑使用cchardet。如果性能不是首要考虑因素或者你需要在某些环境中使用纯Python库那么chardet仍然是一个不错的选择。第五种encode decodeimport requests import cchardet res requests.get(https://www.baidu.com/) res_encoding res.encoding # 响应的编码方式 con_encoding cchardet.detect(res.content)[encoding] # 内容的编码方式 print(res.text.encode(res_encoding).decode(con_encoding)) # 重新编解码text

相关新闻

GPU占用率上不去?从资源排查到参数调优的实用指南

GPU占用率上不去?从资源排查到参数调优的实用指南

先说一个很多人容易误判的地方:GPU占用率上不去,不一定是显卡性能不行,很可能是任务切得不够细,或者数据搬运、CPU预处理、显存分配这些环节把GPU给“晾”在了一边。这篇文章就围绕一件事:怎么让GPU在普通开发环境和服…

2026/11/21 17:47:49 阅读更多 →
Vue3文本省略(Ellipsis)

Vue3文本省略(Ellipsis)

效果如下图: 在线预览 APIs Ellipsis 参数说明类型默认值maxWidth文本最大宽度,单位 pxstring | number‘100%’tooltipMaxWidth弹出提示最大宽度,单位 px,默认为 文本宽度 24string | numberundefinedline最大行数numberunde…

2026/10/25 15:44:07 阅读更多 →
充放电特效-支持滑动设置充放电值

充放电特效-支持滑动设置充放电值

效果&#xff1a; findViewById<FlickerProgressBar>(R.id.flicker_view).apply {//设置动画模式&#xff08;0&#xff1a;左侧进入&#xff0c;1&#xff1a;右侧进入&#xff09;setFlickerAnimMode(0)//设置滑块是否可用&#xff0c;是否显示setIndicatorScrollEnabl…

2026/10/24 12:28:21 阅读更多 →

最新新闻

Electron桌面应用开发实战:从环境搭建到打包发布全流程

Electron桌面应用开发实战:从环境搭建到打包发布全流程

做前端这些年&#xff0c;我大部分时间都在跟浏览器标签页打交道&#xff0c;直到第一次把桌面应用跑起来&#xff0c;才发现原来自己一直被限制在地址栏和刷新按钮围起来的框框里。Electron这个词&#xff0c;最开始是在某段时间频繁出现在同事的讨论里&#xff0c;一个用HTML…

2026/11/20 23:27:28 阅读更多 →
滑盖智能锁T109深度解析:结构原理、安装调试与故障排查

滑盖智能锁T109深度解析:结构原理、安装调试与故障排查

简介&#xff1a;亚太天能T109滑盖智能锁产品说明书是一份PDF格式的官方技术文档&#xff0c;主要面向智能锁安装人员、终端用户及售后维护者&#xff0c;帮助快速掌握产品安装、配置与常见故障处理。全包仅1个PDF文件&#xff0c;大小4.37MB&#xff0c;内容结构清晰&#xff…

2026/11/20 23:27:28 阅读更多 →
PMSM弱磁控制原理与Simulink建模:高速AGV驱动系统设计指南

PMSM弱磁控制原理与Simulink建模:高速AGV驱动系统设计指南

上个月我在调试一台高速AGV的驱动系统&#xff0c;整车要求空载跑到8m/s&#xff0c;电机转速已经拉到额定点&#xff0c;驱动器的输出电压也顶到了母线电压极限附近。再往上踩速度指令&#xff0c;转速纹丝不动&#xff0c;三相电流反而开始震荡。那会儿我的第一反应就是&…

2026/11/20 23:27:28 阅读更多 →
C++核心知识点:从内存管理到STL的实战指南

C++核心知识点:从内存管理到STL的实战指南

C 这门语言我前前后后折腾了十几年&#xff0c;用它写过嵌入式驱动、做过游戏服务端&#xff0c;也搭过基础组件库。每次看到新人一头扎进"C 核心知识点"这个搜索词&#xff0c;我其实挺感慨的——这门语言的难点从来不是语法多&#xff0c;而是知识点之间的耦合太深…

2026/11/20 21:55:32 阅读更多 →
T109滑盖智能锁怎么装?安装调试与故障排查全攻略

T109滑盖智能锁怎么装?安装调试与故障排查全攻略

简介&#xff1a;亚太天能T109滑盖智能锁产品说明书以PDF格式发布&#xff0c;适合智能锁用户、安装人员与售后维修人员阅读。内容围绕T109系列指纹密码刷卡锁展开&#xff0c;先介绍前面板、后面板、锁体、机械钥匙、电池盒盖等部件名称与功能&#xff0c;再给出完整安装步骤&…

2026/11/20 23:27:28 阅读更多 →
LLM知识降熵:从信息垄断到理解权下放

LLM知识降熵:从信息垄断到理解权下放

你有没有过这种经历&#xff1a;翻开源码注释、论文摘要或者一份专业报告&#xff0c;每个字都认识&#xff0c;连在一起却像天书。想找人聊聊&#xff0c;身边要么没人懂&#xff0c;要么懂的懒得跟你解释。后来我试着把同一段内容丢给一个大语言模型&#xff0c;几秒钟之后&a…

2026/11/20 22:59:12 阅读更多 →

日新闻

周新闻

月新闻