快速使用Scrapy爬虫模拟cookies登录爬取页面

使用Scrapy爬虫读取网页时,如果目标数据是需要登录才能查看的页面,就需要处理cookies信息。很多人因此安装了其他更多的工具来处理cookies,其实仅凭Scrapy本身就可以完美实现爬取需要登[……]

继续阅读