位置: 编程技术 - 正文

利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容)

编辑:rootadmin

推荐整理分享利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:php爬取,php如何获取百度的查询结果,php 抓取别的网站的内容,php 抓取别的网站的内容,php如何获取百度的查询结果,利用php抓取百度网盘资源,利用php抓取百度网盘文件,利用php抓取百度网盘资源,内容如对您有帮助,希望把文章链接给更多的朋友!

前言

这篇文章主要介绍的是,如何利用PHP抓取百度阅读的方法,下面话不多说,来一起看看吧。

抓取方法如下

首先在浏览器里打开阅读页面,查看源代码后发现小说的内容并不是直接写在页面里的,也就是说小说的内容是通过异步加载而来的。

利用PHP抓取百度阅读的方法示例(php 抓取别的网站的内容)

于是将chrome的开发者工具切到network一栏,刷新阅读页面,主要关注的是XHR和script两个分类下。

经过排查,发现在script分类下有个jsonp请求比较像是小说内容,请求的地址是

div等等,c属性就是内容了,但也有两种可能,一个是字符串,另一个是数组,数组的每个元素都是一个节点。

这种结构最好解析了,用一个递归就搞定

最终代码如下:

这个类前两个参数可以从小说的介绍页面获得,第一个参数bookId就是url里ebook后面跟着的字符串,第二个参数bookToken在页面源代码搜索bdjsonUrl,m参数后面的那个字符串就是。

注:如果不传入百度cookie或者百度cookie无效,则只能抓取免费阅读部分,要抓完整的内容必须保证cookie可以正常使用。

总结

标签: php 抓取别的网站的内容

本文链接地址:https://www.jiuchutong.com/biancheng/296381.html 转载请保留说明!

上一篇:Yii2中datetime类的使用(datetime2(7))

下一篇:Yii2——使用数据库操作汇总(增删查改、事务)

  • 非居民企业享受协定待遇
  • 股票印花税是多少最新
  • 银行代发工资必须交社保吗
  • 展位费怎么入账
  • 汇算清缴税费怎么入账
  • 中央空调折旧年限是多久
  • 中小企业免税证明
  • 财务费用中的汇兑损益记在现金流表哪里
  • 出口货款收不回来怎么办
  • 应付账款收不回,可否转营业外收入
  • 固定资产折旧成本费用科目
  • 仓储业有哪些
  • 企业代缴个人所得税打印完税证明
  • 进口货物的增值税是进项税还是销项税
  • 报销发票只准报一部分怎么做账?
  • 小规模的企业所得税税率
  • 城镇土地使用税征收标准及计算方法
  • 营改增后租金收入交什么税
  • 小微企业分公司 企业所得税优惠
  • 国有划拨地是否能转让土地
  • 本月暂估入库,下月
  • 工程施工企业人力资源管理
  • 预收账款预提费用
  • 怎么把过期银行卡的钱取出来
  • 个人可以做代理吗
  • 新版edge浏览器兼容性视图怎么设置
  • 物流公司的财务能学到东西吗
  • 赠与合同的法定撤销和任意撤销
  • macos big sur操作
  • 如何修复面部毛孔粗大
  • 增值税一般纳税人资格登记表
  • ryzen3 2200配显卡
  • 税务行政罚款会罚多少
  • php编程中的_横线表示什么
  • 合伙搞养殖
  • 商业汇票计入什么科目技能高考
  • php代码生成
  • 租用办公设备
  • linux调试工具有哪些
  • 数据库查询框架
  • php无限分类实现不实用递归
  • 旅游业哪些发票需要交税
  • 工程竣工决算会计账务处理
  • 结转生产成品
  • 大气污染物排放2020标准
  • 代开运输发票会不会造成重复征税
  • 交通费中的高速费指什么
  • 以前年度未入账固定资产账务处理
  • 在软件中的操作有哪些
  • 资本公积形成的原因有哪些
  • 出口退回的增值税计入哪个会计科目
  • 收到所得税退税的账务处理
  • 企业构建固定资产无形资产和其他长期资产支付
  • 锅炉设备销售
  • mysql %d
  • sql忽略null
  • win7系统如何恢复桌面图标
  • windows mobile应用下载
  • Win10 Build 10565版Edge浏览器完整更新日志一览
  • 强化系统设计
  • win7安装软件提示停止工作
  • linux压缩文件tar命令
  • win7任务管理器怎么打开
  • win8设置开机启动程序
  • win7系统步骤
  • nodejs模拟浏览器环境
  • js隐写
  • express的中间件
  • Linux进程间通信——使用流套接字
  • python发送mq消息
  • 在javascript中如何定义并调用函数
  • python怎么爬
  • 4种JavaScript实现简单tab选项卡切换的方法
  • javascript电商项目
  • 深度定制Python的Flask框架开发环境的一些技巧总结
  • 河北电子税务局手机app
  • 廊坊银行辟谣了吗
  • 成都高新区税务局办税服务厅电话
  • 省税务局属于什么级别
  • 金三是什么鱼竿?
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设