位置: 编程技术 - 正文

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

编辑:rootadmin

推荐整理分享pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm安装完后怎么打开,pycharm怎么打开文件夹,pycharm运行窗口调出,pycharmrun运行窗口怎么打开,pycharm安装完后怎么打开,pycharm打开没反应,pycharm打开没反应,pycharm 打开,内容如对您有帮助,希望把文章链接给更多的朋友!

首先得有一个Scrapy项目,我在Desktop上新建一个Scrapy的项目叫test,在Desktop目录打开命令行,键入命令:scrapy startproject test1

目录结构如下:

打开Pycharm,选择open

选择项目,ok

打开如下界面之后,按alt + 1, 打开project 面板

在test1/spiders/,文件夹下,新建一个爬虫spider.py, 注意代码中的name="dmoz"。这个名字后面会用到。

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

在test1目录和scrapy.cfg同级目录下面,新建一个begin.py文件(便于理解可以写成main.py),注意箭头2所指的名字和第5步中的name='dmoz'名字是一样的。

7. 上面把文件搞定了,下面要配置一下pycharm了。点击Run->Edit Configurations

8. 新建一个运行的python模块

9. Name:改成spider; script:选择刚才新建的那个begin.py文件;Working Direciton:改成自己的工作目录

. 至此,大功告成了,点击下图,右上角的按钮就能运行了。

调试

可以在其他代码中设置断点,就可以debug运行

遇到问题

1. Unknown command: crawl

调试运行,断点并未命中,控制台输出信息如下:

工作目录设置有误,造成无法识别 scrapy 命令,按照上文所说,将工作目录设置为包含 scrapy.cfg,重新运行,问题解决。

标签: pycharm打开文件怎么运行

本文链接地址:https://www.jiuchutong.com/biancheng/375468.html 转载请保留说明!

上一篇:Python快速排序算法实例分析(python快速排序算法代码)

下一篇:Scrapy框架CrawlSpiders的介绍以及使用详解(Scrapy框架可以用于数据挖掘、监测和自动化测试)

  • 预交所得税分录怎么写
  • 个人开具服务费发票税率
  • 小规模纳税人公户的钱怎么转出来
  • 待抵扣税金怎么算
  • 收到退回的款项怎么做分录
  • 公司每年需要交钱吗
  • 影响年度损益的金额有哪些
  • 股票交易费用计算器
  • 利润表没有资产减值损失这一栏,需要增加吗
  • 为什么生产车间地板是绿色的
  • 软件和硬件可以用什么代名词
  • 汽车折旧年限 税法
  • 劳务报酬所得如何计税
  • 发票报销哪些能用专票
  • 记账凭证广告费
  • 本年累计应交税费需要加上年初数吗
  • 增值税专用发票和普通发票的区别
  • 差额纳税的会计处理
  • 房地产企业回迁房税收规定
  • 广告业发生错账怎么办
  • 广告费和业务宣传费
  • 年度利润总额是会计利润吗
  • wifan
  • 无形资产的摊销计入什么科目
  • 制造业成本核算明细表
  • 非贸付汇代扣代交哪些税
  • 民办非盈利组织税收政策
  • 累计应缴预缴所得税怎么算
  • 小规模纳税人的企业所得税怎么算
  • xch 未来
  • 大屏制作教程视频
  • python3.9怎么清屏
  • 工程公司收到工程款会计分录
  • 事业单位收到的罚款收入应纳入
  • 测验3: 基本数据类型 (第3周)
  • python搞自动化
  • 我们买得起一辆新车吗?英文
  • mysql @参数
  • mysql客户端怎么使用
  • mysql字符集详解
  • 帝国cms伪静态规则
  • 公司处置汽车
  • 脚手架租赁费用超过购买价格
  • 电子发票该怎么打印出来
  • 空白发票作废怎么处理
  • 登记会计账簿的基本要求
  • 暂估成本的账务怎么处理
  • 代建项目谁付款
  • 借支单是会计算做还是出纳做
  • 净资产收益率多少才是好股
  • 劳务公司发放农民工工资要交个税吗
  • 加计抵减需要计税吗
  • 无形资产摊销怎么做记账凭证
  • 工程施工中购入固定资产
  • 分公司人数要求
  • 公开发行企业债券,发行人累计债券余额
  • 什么是固定资产?其特征有哪些
  • 如何设计高效合理的未来课程
  • MySQL thread_stack连接线程的优化
  • qq windows
  • windows server 2003 密钥
  • dos命令提示符窗口怎么打开
  • macbook快捷操作大全
  • msworks.exe - msworks是什么进程 有什么用
  • msng.exe是什么
  • win7息屏不断网
  • jquery手风琴折叠菜单
  • perl getoption
  • jquery实现(textarea)placeholder自动换行
  • jquery怎么获取
  • python urllib urlopen
  • javascript中对象的含义
  • javascript函数怎么写
  • jquery解析html文本
  • android/data/wifipwd
  • 安卓作业电量广播
  • 地税局属于哪个部门管
  • 合伙企业所得税账务处理
  • 广东省外经贸厅官网
  • 禅城有什么小孩好玩的地方
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设