Skip to content

kamendula/myJobCrawler

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

24 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Crawler_Job


简介:

myJobCrawler是获取北邮人以及水木清华论坛招聘信息的爬虫
Crawler_Job使用Python编写,Python版本号为2.7

实现方案:

1、采用Python的requests库抓取数据。 2、北邮人论坛以及水木论坛都采用一套框架,因此抓取方式可服用; 3、抓取到的数据使用beautifulsoup进行 4、抓取到的数据使用redis存储,存储键值使用来源+抓取的码 5、展示采用webpy+bootstrap的形式进行展现。 6、可以设置感兴趣的关键字进行过滤显示。

##########################

About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published