位置: 编程技术 - 正文

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

编辑:rootadmin

推荐整理分享pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm安装完后怎么打开,pycharm怎么打开文件夹,pycharm运行窗口调出,pycharmrun运行窗口怎么打开,pycharm安装完后怎么打开,pycharm打开没反应,pycharm打开没反应,pycharm 打开,内容如对您有帮助,希望把文章链接给更多的朋友!

首先得有一个Scrapy项目,我在Desktop上新建一个Scrapy的项目叫test,在Desktop目录打开命令行,键入命令:scrapy startproject test1

目录结构如下:

打开Pycharm,选择open

选择项目,ok

打开如下界面之后,按alt + 1, 打开project 面板

在test1/spiders/,文件夹下,新建一个爬虫spider.py, 注意代码中的name="dmoz"。这个名字后面会用到。

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

在test1目录和scrapy.cfg同级目录下面,新建一个begin.py文件(便于理解可以写成main.py),注意箭头2所指的名字和第5步中的name='dmoz'名字是一样的。

7. 上面把文件搞定了,下面要配置一下pycharm了。点击Run->Edit Configurations

8. 新建一个运行的python模块

9. Name:改成spider; script:选择刚才新建的那个begin.py文件;Working Direciton:改成自己的工作目录

. 至此,大功告成了,点击下图,右上角的按钮就能运行了。

调试

可以在其他代码中设置断点,就可以debug运行

遇到问题

1. Unknown command: crawl

调试运行,断点并未命中,控制台输出信息如下:

工作目录设置有误,造成无法识别 scrapy 命令,按照上文所说,将工作目录设置为包含 scrapy.cfg,重新运行,问题解决。

标签: pycharm打开文件怎么运行

本文链接地址:https://www.jiuchutong.com/biancheng/375468.html 转载请保留说明!

上一篇:Python快速排序算法实例分析(python快速排序算法代码)

下一篇:Scrapy框架CrawlSpiders的介绍以及使用详解(Scrapy框架可以用于数据挖掘、监测和自动化测试)

  • 施工企业的临时设施,属于企业的固定资产
  • 税收负担影响企业的利润吗
  • 工地上用的辅材
  • 所得税的账务处理流程
  • 不得抵扣的进项税额转出会计分录
  • 境外企业转让非居民企业
  • 个人独资公司需要报税吗
  • 股息红利税补缴什么意思
  • 劳务派遣用工的岗位只能在哪些工作岗位上实施
  • 支付给对方的押金
  • 出售无形资产的会计科目
  • 非生产用设备及器具
  • 银行利息收入要开票吗
  • 无偿受让股权的股东对发起股东没有出资承担责任
  • 营业外收入是否报增值税
  • 滴滴客运服务费发票税率
  • 公司合作建房什么意思
  • 小规模纳税人发票图片
  • 固定资产内部转移单
  • 外贸企业出口退税账务处理
  • 附加税退款分录
  • 增值税红字发票是什么意思
  • windows家庭版最新版本
  • 电脑桌面点击鼠标右键就闪退
  • mac文本文件
  • 飞机票开电子发票是电子行程单吗
  • 任务栏音量图标点击无反应
  • windows10 电脑
  • deepin怎么使用
  • 纳税人转让不动产增值税征收管理暂行办
  • ConquerCam.exe进程的详细介绍 ConquerCam进程信息介绍
  • 材料成本差异如何做账
  • fetchall的用法
  • php常用时间函数
  • 爬坑图片卡通
  • 管理费用销售费用
  • stacking 集成
  • vue使用计算属性声明在什么配置项中
  • 横看成横看成岭侧成峰的下一句
  • php的运算符主要包括哪些?
  • 固定资产处置缴纳增值税政策依据
  • 没有初级会计证可以从事会计工作吗
  • 城镇土地使用税优惠政策
  • 福利部门的福利有哪些
  • 条码续展费用
  • 公司转让注册海外公司
  • 一般户可以转账给员工报销吗
  • python repeat函数
  • mysql主要支持哪些数据类型?
  • mongodb 教程
  • 甲供材入账
  • 微信红包是否缴纳个税
  • 交易性金融资产属于流动资产
  • 工资每月变动社保怎么变
  • 建筑工程承包合同保证保险中,承保工程所有人
  • 权益性无形资产包括哪些?
  • 企业中的消费环境分析
  • 跨年度的项目如何做
  • 现金流量表和利润表的勾稽关系
  • 应付款多付了怎么入账
  • mac如何设置启动系统
  • win7修改sid
  • win8.1如何关闭开机密码
  • xp系统1
  • Linux操作系统中怎么永久设置环境变量?
  • cocos2d-x2.2.3和android平台环境的搭建
  • u3d手游开发
  • 表单元素的属性
  • linux py
  • unity游戏开发的技术
  • [置顶]JM259194
  • python如何编写
  • Jquery+ajax+JAVA(servlet)实现下拉菜单异步取值
  • 电子发票怎么汇总清卡
  • 全国税务系统12366纳税服务热线工作规范
  • 国家税务局内蒙古税务
  • 国家税务总局政策法规司
  • 学什么专业可以在税务局上班
  • 江苏国家税务局电子税务局电话
  • 2018城镇土地使用税减免政策
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设