GitHub - Aeizzz/spider-admin: 使用flask编写爬虫管理

Name		Name	Last commit message	Last commit date
Latest commit History 4 Commits
app		app
manager		manager
pipeline		pipeline
processor		processor
utils		utils
README.md		README.md
celery_worker.py		celery_worker.py
requirments.txt		requirments.txt
run.py		run.py
settings.py		settings.py

Repository files navigation

使用flask完成爬虫的管理

主要功能

单个爬虫启动和停止
使用celery启动多个爬虫
使用vuejs完成界面

未完成功能

登陆，注册
爬虫定时启动
爬虫日志
使用celery启动单个爬虫，而不适用多线程

About

使用flask编写爬虫管理

flask

Report repository

Releases

No releases published

Packages

No packages published

Languages

Python 100.0%