GitHub - SenQi-666/TaoBao_Spider

Name		Name	Last commit message	Last commit date
Latest commit History 1 Commit
.idea		.idea
conf		conf
.DS_Store		.DS_Store
CleanData.py		CleanData.py
Header.py		Header.py
MongoClient.py		MongoClient.py
README.md		README.md
Spider.py		Spider.py
analysis.py		analysis.py
fake_useragent.json		fake_useragent.json
stop_words.txt		stop_words.txt
word_cloud.py		word_cloud.py
价格频率分布图.html		价格频率分布图.html
商品词云.html		商品词云.html
店铺商品销量Top10.html		店铺商品销量Top10.html
表格汇总.html		表格汇总.html
销售分布地图.html		销售分布地图.html
销售地Top10.html		销售地Top10.html

Repository files navigation

针对淘宝某关键字爬虫

项目技术点

post模拟登陆淘宝，抓包获取加密参数
数据清洗，并存入Mongodb
利用UA池以及代理池稳定爬取数据
数据分析可视化

数据分析可视化

分为六种

店铺商品销量Top10
店铺销售地Top10
价格频率分布直方图
商品详情词云图
销售分布Map
数据可视化表格

About

No description, website, or topics provided.

Report repository

Releases

No releases published

Packages

No packages published

Languages