Skip to content

WeiXu94/crawler

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

72 Commits
 
 
 
 
 
 
 
 

Repository files navigation

python的数据抓取小助手

概述

这是我基于对python爬虫的兴趣,为自己获取网上的数据写的一个小项目。最初的目的是通过python抓取一些论坛或者内 容消费等网站的数据,然后进行一些可视化分析,从而帮助决策与思考。

现在我们试图抓取虎扑论坛上的一些帖子,然后用web的形式将其可视化的表达出来,以有趣的心态去探索,严谨的思维去实现 并学习python爬虫吧!

learn_processing # 这个主要是学习过程的小记录,不必在意

webdata
    --hupu 抓取虎扑的程序,论坛帖子数据
    --wxb  抓取微小宝,微信数据

About

crawler hupu and shop

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 99.5%
  • Shell 0.5%