位置: 编程技术 - 正文

Python使用BeautifulSoup库解析HTML基本使用教程(s='python is beautiful!')

编辑:rootadmin

推荐整理分享Python使用BeautifulSoup库解析HTML基本使用教程(s='python is beautiful!'),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm中beautifulsoup,python beautifulsoup用法,python中beautifulsoup,pycharm中beautifulsoup,s='python is beautiful!',python中beautifulsoup,pycharm中beautifulsoup,pycharm中beautifulsoup,内容如对您有帮助,希望把文章链接给更多的朋友!

BeautifulSoup是Python的一个第三方库,可用于帮助解析html/XML等内容,以抓取特定的网页信息。目前最新的是v4版本,这里主要总结一下我使用的v3版本解析html的一些常用方法。

准备

1.Beautiful Soup安装

为了能够对页面中的内容进行解析,本文使用Beautiful Soup。当然,本文的例子需求较简单,完全可以使用分析字符串的方式。

执行

即可安装。

2.requests模块的安装

requests模块用于加载要请求的web页面。

在python的命令行中输入import requests,报错说明requests模块没有安装。

我这里打算采用easy_install的在线安装方式安装,发现系统中并不存在easy_install命令,输入sudo apt-get install python-setuptools来安装easy_install工具。

执行sudo easy_install requests安装requests模块。

基础

1.初始化 导入模块

Python使用BeautifulSoup库解析HTML基本使用教程(s='python is beautiful!')

创建对象:str初始化,常用urllib2或browser返回的html初始化BeautifulSoup对象。

指定编码:当html为其他类型编码(非utf-8和asc ii),比如GB的话,则需要指定相应的字符编码,BeautifulSoup才能正确解析。

2.获取tag内容 寻找感兴趣的tag块内容,返回对应tag块的剖析树

返回内容:hello 说明一下,contents属性是一个列表,里面保存了该剖析树的直接儿子。

3.获取关系节点 使用parent获取父节点

使用nextSibling, previousSibling获取前后兄弟

contents[]的灵活运用也可以寻找关系节点,寻找祖先或者子孙可以采用findParent(s), findNextSibling(s), findPreviousSibling(s)

4.find/findAll用法详解 函数原型:find(name=None, attrs={}, recursive=True, text=None, **kwargs),findAll会返回所有符合要求的结果,并以list返回。 tag搜索

attrs搜索

text搜索文字的搜索会导致其他搜索给的值如:tag, attrs都失效。方法与搜索tag一致

recursive和limit属性recursive=False表示只搜索直接儿子,否则搜索整个子树,默认为True。当使用findAll或者类似返回list的方法时,limit属性用于限制返回的数量,如findAll('p', limit=2): 返回首先找到的两个tag。

实例本文以博客的文档列表页面为例,利用python对页面中的文章名进行提取。

文章列表页中的文章列表部分的url如下:

代码:

python基于隐马尔可夫模型实现中文拼音输入 在网上看到一篇关于隐马尔科夫模型的介绍,觉得简直不能再神奇,又在网上找到大神的一篇关于如何用隐马尔可夫模型实现中文拼音输入的博客,无

python制作爬虫并将抓取结果保存到excel中 学习Python也有一段时间了,各种理论知识大体上也算略知一二了,今天就进入实战演练:通过Python来编写一个拉勾网薪资调查的小爬虫。第一步:分析

python文件的md5加密方法 本文实例讲述了python文件的md5加密方法。分享给大家供大家参考,具体如下:简单模式:fromhashlibimportmd5defmd5_file(name):m=md5()a_file=open(name,'rb')#需要使用二

标签: s='python is beautiful!'

本文链接地址:https://www.jiuchutong.com/biancheng/385264.html 转载请保留说明!

上一篇:Python使用Mechanize模块编写爬虫的要点解析(python mem)

下一篇:python基于隐马尔可夫模型实现中文拼音输入(python 隐函数作图)

  • 换了公司后个税还要申请申报吗
  • 企业所得税中资产折旧调整明细表中提示折旧年限
  • 使用权资产和租赁负债的计税基础
  • 月末存款余额
  • 员工自己全额承担社保可以在个税申报吗
  • 建筑劳务公司开劳务发票税率是多少
  • 中药饮片增值税税率
  • 月末计提账务处理
  • 汇票和支票的区别是什么
  • 债务清偿抵充的案例
  • 应收款抹零计入什么会计科目
  • 营改增后房地产公司税种及税率
  • 购货方申请红字发票怎么申报
  • 公司三季度亏损20个亿这股票值得买吗
  • 优化技巧
  • 递延所得税资产怎么计算
  • 小规模纳税人废品站卖废品发票开什么项目
  • 代收代付水电费会计分录
  • 企业所得税减免政策
  • 小贷公司贷款的流程是什么
  • 电子汇票贴现怎样操作
  • 抄报汇总对比通用怎么写
  • 城镇土地使用税每年都要交吗
  • php命令行执行文件
  • win10桌面没有我的电脑图标怎么办
  • 二级资本债记哪个科目
  • 应交所得税和所得税费用的区别计算公式
  • 借支单还款后借支单要还么
  • php文件上传用什么请求方法
  • 固定资产多少可以费用化
  • php公众号推送完整示例
  • 鼓励证券投资基金的政策
  • 利得是什么举个例子
  • php递归算法经典题目
  • phpcms怎么用
  • mongodb分页查询count太慢
  • 税务新法规
  • 金蝶系统结账之后反结账
  • 购买银行短期理财产品的会计处理
  • 培训费属于什么
  • 丢失增值税发票怎么办
  • sqlserver 数据集字符集种类
  • 预收工程款的会计分录
  • 残保金如何做会计分录
  • 固定资产计提完折旧残值怎么处理
  • 民间非营利组织会计制度
  • 生产成本里面的直接人工
  • 投资收益 增加
  • 利润表的营业成本包括管理费用吗
  • 账户设置的三种情况
  • mysql newid()
  • sql比较数值大小
  • sql you
  • win8无法识别的usb设备 怎么解决
  • win10改win8.1
  • XP系统怎么调节屏幕亮度
  • mac安装mysql详细教程
  • dwm exe是什么
  • xp系统1
  • 老旧的诗琴五个琴谱大全
  • 微软反盗xp黑屏怎么办
  • linux igb
  • win8.1无法关机怎么回事
  • 安卓运行环境搭建
  • Unity3D游戏开发标准教程吴亚峰于复兴人民邮电出版社
  • nodequery
  • margin使用
  • JAVAscript字符串类型单引号和双引号意一样吗
  • 网管的功能
  • 动态创建类对象
  • js取反运算符
  • js 编程
  • 粮食企业所得税税率
  • 广西电子税务局登陆入口
  • 契税和耕地占用税由谁负责征收
  • 个体工商户两处所得,如何减半个税
  • 即征即退的留抵税额是否可以抵一般计税的税额
  • 个体户是否需要缴纳企业所得税
  • 建筑公司材料发票
  • 上海房产税交易中心电话
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设