wyzq Crawler 初次开发时先运行crawler目录下的 ./dev_init.sh proxy爬虫抓取并验证代理地址,生成proxies.txt book爬虫抓取过程必须使用proxies 与 user-agents, 否则会被ban Server 使用virtualenv + pip 管理项目依赖 初次开发时先运行server 目录下的 ./dev_init.sh 开发时需先进入virtualenv 环境,执行 source bin/activate