位置: 编程技术 - 正文

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

编辑:rootadmin

推荐整理分享pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:pycharm安装完后怎么打开,pycharm怎么打开文件夹,pycharm运行窗口调出,pycharmrun运行窗口怎么打开,pycharm安装完后怎么打开,pycharm打开没反应,pycharm打开没反应,pycharm 打开,内容如对您有帮助,希望把文章链接给更多的朋友!

首先得有一个Scrapy项目,我在Desktop上新建一个Scrapy的项目叫test,在Desktop目录打开命令行,键入命令:scrapy startproject test1

目录结构如下:

打开Pycharm,选择open

选择项目,ok

打开如下界面之后,按alt + 1, 打开project 面板

在test1/spiders/,文件夹下,新建一个爬虫spider.py, 注意代码中的name="dmoz"。这个名字后面会用到。

pycharm下打开、执行并调试scrapy爬虫程序的方法(pycharm打开文件怎么运行)

在test1目录和scrapy.cfg同级目录下面,新建一个begin.py文件(便于理解可以写成main.py),注意箭头2所指的名字和第5步中的name='dmoz'名字是一样的。

7. 上面把文件搞定了,下面要配置一下pycharm了。点击Run->Edit Configurations

8. 新建一个运行的python模块

9. Name:改成spider; script:选择刚才新建的那个begin.py文件;Working Direciton:改成自己的工作目录

. 至此,大功告成了,点击下图,右上角的按钮就能运行了。

调试

可以在其他代码中设置断点,就可以debug运行

遇到问题

1. Unknown command: crawl

调试运行,断点并未命中,控制台输出信息如下:

工作目录设置有误,造成无法识别 scrapy 命令,按照上文所说,将工作目录设置为包含 scrapy.cfg,重新运行,问题解决。

标签: pycharm打开文件怎么运行

本文链接地址:https://www.jiuchutong.com/biancheng/375468.html 转载请保留说明!

上一篇:Python快速排序算法实例分析(python快速排序算法代码)

下一篇:Scrapy框架CrawlSpiders的介绍以及使用详解(Scrapy框架可以用于数据挖掘、监测和自动化测试)

  • 清理化粪池交什么印花税
  • 文化事业建设费减免政策
  • 金税盘不用了之后要抄报税吗
  • 非专利技术转让计入什么科目
  • 行政单位利息收入是非税收入吗
  • 报关单上消费使用单位可以交税么
  • 加计抵扣进项税额怎么算
  • 库存现金盘盈盘亏的账务处理
  • 营改增试点纳税人提供有形动产租赁服务,税率为
  • 动漫产业增值税优惠政策
  • 外币折算会计处理例题
  • 主营业务收入如何红冲
  • 特别纳税调整后 需要更正申报吗
  • 工会费入账科目
  • 国税能代开什么费用的发票?
  • 代驾公司增值税怎么交
  • 无票费用如何做凭证分录
  • 个人缴纳的公积金可以贷款吗
  • 无票收入增值税申报表怎么填小规模纳税人
  • 固定资产清理产生的费用
  • 应付工资和实付工资的差额叫什么
  • 坏账核销的依据
  • 模具费属于什么费用
  • 逆流交易合并报表调整少数损益
  • 加工费计入成本怎么计算所得税
  • 手撕定额发票能不能报销
  • 未开票收入缴纳增值税怎么冲减补开发票
  • win7系统中怎样没有智能卡这一选项
  • 设备安装需要预缴吗
  • 员工租房管理规定
  • php读取word
  • 债券到期收回本息计算单
  • 出售短期债券投资发生的净损失计入哪里
  • 间接人工费用预算工时分配率将提高10%
  • 梅萨维德国家公园特点
  • 增值税上期留抵税额
  • 特定业务计算的应纳税所得额是指
  • 应付账款零头怎么处理
  • 一天撸一个财务APP系统【安卓端+前端+后端】
  • 非常好看的头像
  • 广告系统源码
  • 接口二次封装
  • 公司电脑配件也要交税吗
  • 人力资源公司代办
  • php防盗链
  • js日期选择
  • 工业生产的含义
  • 个体工商户需要给员工交社保吗
  • 车辆保险费用查询
  • 没有收据不开发票
  • 计提银行存款利息
  • 营利性养老机构有补贴吗
  • 收客户逾期利息会计分录
  • 银行扣款能撤回吗
  • 税务局收款收据
  • 施工单位食堂管理要求
  • 原始凭证按什么分
  • 建筑公司劳务费怎么做账
  • sql中的视图提高了数据库的
  • linux大型软件
  • win8的开机启动项在哪里
  • win10打开命令提示符窗口
  • 如何安装win95系统
  • win7任务栏跑到右边了
  • win7旗舰版好不好
  • windows7安全更新服务
  • cocos2dx4.0教程
  • 简单总结译码器和数据选择器的作用
  • jqueryon事件
  • 电脑怎么自动清除垃圾
  • 对xmlHttp对象的理解
  • 简述jquery的常用方法
  • 成都燃气在线查询
  • 农机行业的利润
  • 残保金申报表填写
  • uk开票网络连接异常怎么回事
  • 严守纪律守规矩
  • 北京朝阳区电话区号是多少?
  • 甘肃税务政策
  • 国税局和地税局有什么区别
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设