• pycharm下运行和调试scrapy项目


    1. 新建项目

    默认在本地已经新建了一个scrapy爬虫项目

    2. 打开项目

    点击open à 选择刚刚那个本地的scrapy项目meijutt100

    3. 项目结构

    各个py文件的作用不作介绍,不懂的请看入门教程

    4. 创建启动脚本

    在第二个meijutt100和scrapy.cfg同级目录下,新建一个文件,如begin.py(名字随便)用于模拟命令行启动scrapy项目

    5. 配置pycharm

    点击Run --> Edit Configurations

    点击 + 号,选择python

     继续配置

    第一步:给自己的启动配置起个名字,

    第二步:选择启动脚本,就是刚刚创建的begin.py,

    第三步:选择默认的python运行环境,这里最好用系统自己装的,不要用pycharm自带的,不然会出现很多多余的文件夹

    第四步:选择工作空间,一般默认为当前项目目录

    6. 运行和调试

    点击运行或者debug调试该项目,可以在代码中打断点调试。

    初学srapy,有错误之处还望各位读者指出。附上项目源码:https://github.com/weiliangchun/scrapy-meiju100.git

  • 相关阅读:
    java获取文件夹下所有目录
    java下载zip文件
    oracle 递归查询数据
    easyUi刷新 tabs
    jsp引入本地图片
    zabbix web监测设置
    jenkins部署
    ss 异常活动端口查询-std
    logrotate 日志分割
    rsync删除大量小文件
  • 原文地址:https://www.cnblogs.com/vevy/p/10004148.html
Copyright © 2020-2023  润新知