典型文献
基于Scrapy的研招网硕士目录爬虫的设计与实现
文献摘要：
研招网作为中国最大的研究生招考信息公布平台,资源丰富.目前主流的爬虫框架有Scrapy、pyspider与crawley,其中Scrapy为目前最流行的爬虫框架.因此,文中主要研究Python语言开发的开源爬虫框架Scrapy所开发的爬虫,对研招网硕士目录进行爬取,举例说明爬虫如何应对网站的反爬措施.
文献关键词：
网络爬虫;Scrapy;Python;反反爬;研招网
中图分类号：
作者姓名：
伍高巍;刘杰;葛晓龙;徐望成
作者机构：
南华大学计算机学院,湖南衡阳421001
文献出处：
引用格式：
[1]伍高巍;刘杰;葛晓龙;徐望成-.基于Scrapy的研招网硕士目录爬虫的设计与实现)[J].电脑知识与技术,2022(17):53-55
A类：
研招网,pyspider,crawley,反爬措施,反反爬
B类：
Scrapy,招考,考信,Python,开源,爬取,举例说明,网络爬虫
AB值：
0.165226
相似文献
机标中图分类号，由域田数据科技根据网络公开资料自动分析生成，仅供学习研究参考。
