位置: 编程技术 - 正文
推荐整理分享python抓取并保存html页面时乱码问题的解决方法(python抓视频保存本地),希望有所帮助,仅作参考,欢迎阅读内容。
文章相关热门搜索词:怎么样用python抓取图片,python抓取视频教程,python抓取数据教程,python抓取文件内容,python抓取文件内容,python抓取文件内容,怎么样用python抓取图片,python抓取数据教程,内容如对您有帮助,希望把文章链接给更多的朋友!
本文实例讲述了python抓取并保存html页面时乱码问题的解决方法。分享给大家供大家参考,具体如下:
在用Python抓取html页面并保存的时候,经常出现抓取下来的网页内容是乱码的问题。出现该问题的原因一方面是自己的代码中编码设置有问题,另一方面是在编码设置正确的情况下,网页的实际编码和标示的编码不符合造成的。html页面标示的编码在这里:
这里提供一种简单的办法解决:使用chardet判断网页的真实编码,同时从url请求返回的info判断标示编码。如果两种编码不同,则使用bs模块扩展为GB编码;如果相同则直接写入文件(这里设置系统默认编码为utf-8)。
得到的test.html文件打开如下,可以看到使用的是UTF-8无BOM编码格式存储的,也就是我们设置的默认编码:
更多关于Python相关内容感兴趣的读者可查看本站专题:《Python编码操作技巧总结》、《Python图片操作技巧总结》、《Python数据结构与算法教程》、《Python Socket编程技巧总结》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》
希望本文所述对大家Python程序设计有所帮助。
python在Windows下安装setuptools(easy_install工具)步骤详解 本文讲述了python在Windows下安装setuptools(easy_install工具)的方法。分享给大家供大家参考,具体如下:【题外话介绍下setuptools】setuptools是一组由PEAK(PythonEnt
Android模拟器无法启动,报错:Cannot set up guest memory ‘android_arm’ Invalid argument的解决方法 本文实例讲述了Android模拟器无法启动,报错:Cannotsetupguestmemory‘android_arm':Invalidargument的解决方法。分享给大家供大家参考,具体如下:【错误】模拟
Python字符编码判断方法分析 本文实例讲述了Python字符编码判断方法。分享给大家供大家参考,具体如下:方法一:isinstance(s,str)用来判断是否为一般字符串isinstance(s,unicode)用来判断
标签: python抓视频保存本地
本文链接地址:https://www.jiuchutong.com/biancheng/387008.html 转载请保留说明!上一篇:python处理html转义字符的方法详解(python html转markdown)
下一篇:python在Windows下安装setuptools(easy_install工具)步骤详解(python win)
友情链接: 武汉网站建设