嘿,亲!知识可是无价之宝呢,但咱这精心整理的资料也耗费了不少心血呀。小小地破费一下,绝对物超所值哦!如有下载和支付问题,请联系我们QQ(微信同号):813200300
本次赞助数额为: 2 元微信扫码支付:2 元
请留下您的邮箱,我们将在2小时内将文件发到您的邮箱
leopardv:分布式爬虫管理系统
分布式爬虫管理系统
介绍
SpiderMAN是基于Django scrapyd bootstrap的分布式爬虫管理系统,能实现分布式任务调度,对数据的监控等
功能
用户登录
管理服务器节点
管理爬虫,爬虫部署
查看数据统计
容器快速部署
用户登录
官员管理
查看所有上游服务器得状态,在上游上部署scrapy项目
官方清单
查看摘要详细情况
爬虫管理
可以启动,停止爬虫,选择爬虫
作业管理
查看爬虫的作业情况
日志查看
查看作业日志
.
├── Python-leopardv分布式爬虫管理系统_leopardv-master.zip
└── leopardv-master
├── README.md
├── anything
│ ├── __init__.py
│ ├── admin.py
│ ├── apps.py
│ ├── migrations
│ │ ├── 0001_initial.py
│ │ ├── 0002_node.py
│ │ ├── 0003_delete_node.py
│ │ ├── 0004_delete_userporfile.py
│ │ └── __init__.py
│ ├── models.py
│ ├── tests.py
│ └── views.py
├── api
│ ├── __init__.py
│ ├── admin.py
│ ├── apps.py
│ ├── migrations
│ │ ├── 0001_initial.py
│ │ ├── 0002_deploy.py
│ │ ├── 0003_project.py
│ │ ├── 0004_project_add_date.py
│ │ ├── 0005_auto_20190928_0844.py
│ │ ├── 0006_project_node.py
│ │ ├── 0007_remove_project_node.py
│ │ ├── 0008_auto_20190928_1416.py
│ │ ├── 0009_auto_20190928_1439.py
│ │ ├── 0010_auto_20190929_1438.py
│ │ ├── 0011_auto_20190930_1142.py
│ │ ├── 0012_job_node.py
│ │ ├── 0013_auto_20191011_1819.py
│ │ ├── 0014_auto_20191012_1746.py
│ │ ├── 0015_job_jid.py
│ │ └── __init__.py
│ ├── models.py
│ ├── serializers.py
│ ├── tests.py
│ ├── urls.py
│ ├── utils.py
│ └── views.py
├── client
│ ├── __init__.py
│ └── client.py
├── db.sqlite3
├── leopardv
│ ├── __init__.py
│ ├── settings.py
│ ├── urls.py
│ └── wsgi.py
├── manage.py
├── requirements.txt
├── server
│ ├── __init__.py
│ └── server.py
├── statics
│ ├── css
│ │ ├── AdminLTE.css
│ │ ├── AdminLTE.min.css
│ │ ├── adminlte.css.map
│ │ ├── adminlte.min.css.map
│ │ ├── alt
│ │ │ ├── AdminLTE-bootstrap-social.css
│ │ │ ├── AdminLTE-bootstrap-social.min.css
│ │ │ ├── AdminLTE-fullcalendar.css
│ │ │ ├── AdminLTE-fullcalendar.min.css
│ │ │ ├── AdminLTE-select2.css
│ │ │ ├── AdminLTE-select2.min.css
│ │ │ ├── AdminLTE-without-plugins.css
│ │ │ └── AdminLTE-without-plugins.min.css
│ │ ├── blue.css
│ │ ├── blue.png
│ │ ├── blue@2x.png
│ │ ├── bootstrap.min.css
│ │ ├── dataTables.bootstrap.min.css
│ │ ├── font-awesome.min.css
│ │ ├── ionicons.min.css
│ │ ├── select2.min.css
│ │ └── skins
│ │ ├── _all-skins.css
│ │ ├── _all-skins.min.css
│ │ ├── skin-black-light.css
│ │ ├── skin-black-light.min.css
│ │ ├── skin-black.css
│ │ ├── skin-black.min.css
│ │ ├── skin-blue-light.css
│ │ ├── skin-blue-light.min.css
│ │ ├── skin-blue.css
│ │ ├── skin-blue.min.css
│ │ ├── skin-green-light.css
│ │ ├── skin-green-light.min.css
│ │ ├── skin-green.css
│ │ ├── skin-green.min.css
│ │ ├── skin-purple-light.css
│ │ ├── skin-purple-light.min.css
│ │ ├── skin-purple.css
│ │ ├── skin-purple.min.css
│ │ ├── skin-red-light.css
│ │ ├── skin-red-light.min.css
│ │ ├── skin-red.css
│ │ ├── skin-red.min.css
│ │ ├── skin-yellow-light.css
│ │ ├── skin-yellow-light.min.css
│ │ ├── skin-yellow.css
│ │ └── skin-yellow.min.css
│ ├── fonts
│ │ ├── FontAwesome.otf
│ │ ├── fontawesome-webfont.eot
│ │ ├── fontawesome-webfont.svg
│ │ ├── fontawesome-webfont.ttf
│ │ ├── fontawesome-webfont.woff
│ │ ├── fontawesome-webfont.woff2
│ │ ├── glyphicons-halflings-regular.eot
│ │ ├── glyphicons-halflings-regular.svg
│ │ ├── glyphicons-halflings-regular.ttf
│ │ ├── glyphicons-halflings-regular.woff
│ │ └── glyphicons-halflings-regular.woff2
│ ├── img
│ │ ├── default-50x50.gif
│ │ ├── job.PNG
│ │ ├── log.PNG
│ │ ├── login.PNG
│ │ ├── node.PNG
│ │ ├── node_detail.PNG
│ │ ├── spider.PNG
│ │ └── spider1.PNG
│ └── js
│ ├── adminlte.js
│ ├── adminlte.min.js
│ ├── bootstrap.min.js
│ ├── dataTables.bootstrap.min.js
│ ├── demo.js
│ ├── echarts.common.min.js
│ ├── fastclick.js
│ ├── icheck.min.js
│ ├── jquery.dataTables.min.js
│ ├── jquery.min.js
│ ├── jquery.slimscroll.min.js
│ ├── jquery.validate.js
│ ├── macarons.js
│ ├── pages
│ │ ├── dashboard.js
│ │ └── dashboard2.js
│ └── select2.full.min.js
└── templates
├── index.html
├── job.html
├── log.html
├── login.html
├── node.html
├── node_detail.html
└── project.html
17 directories, 137 files