怎么用scrapyd+gerapy进行项目部署

本篇内容介绍了“怎么用scrapyd+gerapy进行项目部署”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

创新互联建站10多年成都定制网页设计服务;为您提供网站建设,网站制作,网页设计及高端网站定制服务,成都定制网页设计及推广,对主动防护网等多个领域拥有丰富的网站推广经验的网站建设公司。

scrapyd+gerapy的项目部署:

环境配置:

scrapyd下载:

pip install scrapyd -i https://pypi.com/simple

scrapyd部署:

scrapyd-deploy -p 项目名

注意:需要切换到项目的根目录下运行

scrapyd遇到的问题:
  1. 'scrapyd-deploy' 不是内部或外部命令,也不是可运行的程序,

  2. 解决方法:

    1. 找到scrapyd-deploy文件(Scripts文件夹下),这里每个人配置的pip安装路径不同 ;

    2. 然后在这个文件夹内创建两个文件,scrapy.bat 和 scrapyd-deploy.bat (新建 txt 文本文档,然后更改后缀名为 .bat)

    3. 编辑scrapyd-deloy.bat:

       @echo off
       #python.exe路径 scrapyd-deploy路径
       C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe    C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd-deploy %*
       

    4. scrapy.bat编辑:

       @echo off
       #python.exe路径 scrapyd路径
       C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd %*

      注意:上面路径没有分行,两个路径之间有空格!

    5. 保存,新起cmd,运行scrapyd-deploy -h,出现以下信息即成功:

       1  Usage: scrapyd-deploy [options] [ [target] | -l | -L  ] 2   3  Deploy Scrapy project to Scrapyd server 4   5  Options: 6    -h, --help            show this help message and exit 7    -p PROJECT, --project=PROJECT 8                          the project name in the target 9    -v VERSION, --version=VERSION10                          the version to deploy. Defaults to current timestamp11    -l, --list-targets    list available targets12    -a, --deploy-all-targets13                          deploy all targets14    -d, --debug           debug mode (do not remove build dir)15    -L TARGET, --list-projects=TARGET16                          list available projects on TARGET17    --egg=FILE            use the given egg, instead of building it18    --build-egg=FILE      only build the egg, don't deploy it

       

  3. 运行部署命令后报错:

    1  C:\Users\Administrator\PycharmProjects\code\xbhog>scrapyd-deploy -p xbhog2  Packing version 15950626593  Deploying to project "xbhog" in http://localhost:6800/addversion.json4  Deploy failed: 5  C:\Users\Administrator\AppData\Local\Programs\Python\Python37\python.exe: can't open file 'C:\Users\Administrator\AppData\Local\Programs\Python\Python37\Scripts\scrapyd': [Errno 2] No such file or directory

     

     

  4. 解决方法:

    1. 先在一个cmd窗口执行scrapyd

    2. 然后再用另一个cmd窗口部署项目

gerapy安装以及使用:
  pip install gerapy -i https://pypi.com/simple
使用:
  • 1.在本地创建空文件夹

  • 2.进入文件夹,建立项目(gerapy init)

  • 3.进入生成的gerapy文件中

  • 4.对数据库进行初始化(gerapy migrate)

  • 5.创建超级管理员(gerapy initadmin)---账号密码:admin

  • 6.运行:gerapy runserver

scrapyd+gerapy搭配使用的效果图:

怎么用scrapyd+gerapy进行项目部署

 怎么用scrapyd+gerapy进行项目部署

“怎么用scrapyd+gerapy进行项目部署”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注创新互联网站,小编将为大家输出更多高质量的实用文章!


网页名称:怎么用scrapyd+gerapy进行项目部署
网页网址:http://hbruida.cn/article/gdidhs.html