典型文献
基于Python的网络招聘信息爬虫分析设计
文献摘要:
随着网络招聘信息量的迅猛增长,给从海量的信息中准确地搜索到毕业学生、社会人员、招聘企业等需要的信息提出了极大的挑战,并且随着大量毕业生进入社会,使得企业用工需求与实际用户的需求存在很难匹配的问题。网络招聘信息爬虫具有自动提取招聘网页信息的能力,本文通过对现在流行的网络爬虫框架进行分析和选择,选用Scrapyredis对爬虫进行拓展,在现有框架的基础上设计了一种适合资源库建设的爬虫系统,利用Redis实现对目标招聘网站资源的分布式爬取,并且利用爬虫的自动化特性完成网络招聘信息的内容获取及入库工作,提高了网络招聘获取信息资源的速度。
文献关键词:
Python;网络招聘信息;爬虫分析;分布式;Scrapyredis框架
中图分类号:
作者姓名:
张勇
作者机构:
快乐沃克人力资源有限公司
文献出处:
引用格式:
[1]张勇-.基于Python的网络招聘信息爬虫分析设计)[J].计算机产品与流通,2022(06):84-86
A类:
爬虫分析,Scrapyredis
B类:
Python,网络招聘信息,分析设计,信息量,猛增,社会人员,企业用工,用工需求,自动提取,网页信息,网络爬虫,合资,资源库建设,Redis,招聘网站,爬取,入库,库工,获取信息,信息资源
AB值:
0.257968
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。