数据词典：网络爬虫框架（Web Crawler Framework）

大麦哥

网络爬虫框架就是一些爬虫项目的半成品，它已经将一些爬虫常用的功能写好，然后留下一些接口，在不同的爬虫项目当中调用适合自己项目的接口，再编写少量代码就可以实现自己所需要的功能。因为框架中已经实现了爬虫常用的功能，所以为开发人员节省了很多时间和精力。常用的网络爬虫开发框架包括Scrapy、Crawley、PySpider等。

【出处】林子雨.大数据导论.人民邮电出版社,2020年9月第1版