位置: 编程技术 - 正文

利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容)

编辑:rootadmin

推荐整理分享利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:php爬取,php如何获取百度的查询结果,php 抓取别的网站的内容,php 抓取别的网站的内容,php如何获取百度的查询结果,利用php抓取百度网盘资源,利用php抓取百度网盘文件,利用php抓取百度网盘资源,内容如对您有帮助,希望把文章链接给更多的朋友!

前言

这篇文章主要介绍的是,如何利用PHP抓取百度阅读的方法,下面话不多说,来一起看看吧。

抓取方法如下

首先在浏览器里打开阅读页面,查看源代码后发现小说的内容并不是直接写在页面里的,也就是说小说的内容是通过异步加载而来的。

利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容)

于是将chrome的开发者工具切到network一栏,刷新阅读页面,主要关注的是XHR和script两个分类下。

经过排查,发现在script分类下有个jsonp请求比较像是小说内容,请求的地址是

div等等,c属性就是内容了,但也有两种可能,一个是字符串,另一个是数组,数组的每个元素都是一个节点。

这种结构最好解析了,用一个递归就搞定

最终代码如下:

这个类前两个参数可以从小说的介绍页面获得,第一个参数bookId就是url里ebook后面跟着的字符串,第二个参数bookToken在页面源代码搜索bdjsonUrl,m参数后面的那个字符串就是。

注:如果不传入百度cookie或者百度cookie无效,则只能抓取免费阅读部分,要抓完整的内容必须保证cookie可以正常使用。

总结

标签: php 抓取别的网站的内容

本文链接地址:https://www.jiuchutong.com/biancheng/296381.html 转载请保留说明!

上一篇:Yii2中datetime类的使用(datetime2(7))

下一篇:Yii2——使用数据库操作汇总(增删查改、事务)

  • 应纳税额减征额包括哪些内容
  • 税务师考几科几分及格
  • 建筑安装服务的发票
  • 增值税发票怎么抵扣
  • 开票资料银行必须填写吗
  • 税盘抵扣的会计分录
  • 印花税2021年需要计提吗
  • 国外客户付款方式
  • 哪些车辆可退还车款
  • 确认销售收入的重要依据是什么
  • 转账支票支付购货款填制什么凭证
  • 共同控制合营企业的合营者
  • 公司购入汽车分录
  • 涉外收入申报单填写模板
  • 无偿使用期限为多少年
  • 印花税应税凭证填是还是否
  • 计算房产税时容积率怎么算
  • 临时工工资个税怎么算
  • 税号里面字母是大写吗
  • 还在讨论“税务金四”上线?税务和银行要联手清查单位和个人账户了!
  • 当期净资产收益率怎么算
  • 福利费用属于什么费用
  • 更正申报以前个税的处理方法
  • 增值税进项抵扣完了还上附加税吗
  • 公司开业期间的费用入管理费用其他行吗
  • 高新技术企业取消认定
  • 企业所得税季度申报表A类
  • 永恒之蓝是
  • win 11 中文
  • system进程占用cpu突然变高
  • 企业计提房产税的会计处理正确的是
  • 收回财政结余资金账务处理
  • 大沙丘国家公园在哪里
  • 为什么链接网线后无法链接网络
  • win7为什么现在不能用了
  • PHP:curl_multi_exec()的用法_cURL函数
  • 前端数据统计图
  • 股权投资的收益回收方式
  • php上传图片大小限制
  • windows nginx php配置
  • thinkphp yii
  • 外管证预缴税费怎么算
  • vue面试题视频
  • php批量删除文件
  • 出口退税的会计科目一般记为什么
  • 商贸公司用什么名字最好
  • 保险公司发票能在异开吗
  • 个税申报需要什么资料
  • 工会经费月月都缴纳吗?
  • phpcms编辑器
  • 公司年度汇算
  • 科技公司技术服务费税率
  • 兼职老师工资小时多少钱
  • 一次性医疗补助金怎么计算
  • 销售产品领用单独计价的包装物2000元,售价2400元
  • 暂估收入的会计分录怎么写
  • 库存现金管理是财务分析的吗
  • 增值税专用发票抵扣期限
  • 实际上缴税费总额怎么算
  • linux的安装
  • 关闭5gwifi
  • shell脚本用法
  • node.js的express
  • perl的哈希
  • jquery使用jsonp
  • dos命令中的cd命令
  • android面试题及答案2021
  • python干嘛用
  • python如何开发
  • vue 分页 实现
  • js拖拽效果
  • shell读取文本内容到变量
  • [置顶]马粥街残酷史
  • jabsorb笔记_几个小例子第1/2页
  • jquery 选择
  • js如何使用
  • 我国就业制度的演变
  • 成品油消费税税目税率表2023
  • 加拿大海关关税税率查询
  • 新车购置税是在4s店交吗
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设