- 异步爬取湖南科技大学招聘网中的正式、实习职位& 校内、校外宣讲会& 湖南各地宣讲会
- 数据写入 MySql 和 ElasticSearch
- 使用 elasticsearch-analysis-ik 中文分词系统分词关键字
- 提供关键字搜索职位、宣讲会和宣讲会信息
- 简单 Admin 页更新数据
爬虫通过修改数据获取接口 count参数控制爬取数量
# 爬取前两万条岗位信息
for i in range(2):
yield scrapy.Request("http://jy.hnust.edu.cn/module/getjobs?start_page=1&type_id=-1&k=&is_practice={0}&count=20000&start=1".format(i),
callback=self.handle_jobs)搜索主页
提供职位，宣讲会，双选会搜索和个人搜索记录
搜索建议
结果页
简陋的更新页
新增图表页
