redis

python爬虫入门教程（scrapy+redis）实战爬取腾讯视频评论

这套python爬虫入门教程讲解如何编写定向爬虫。首先讲解爬虫的基本原理，并使用Python的Requests模块和正则表达式编写简单的爬虫。然后使用Scrapy开源爬虫框架与Redis数据库提高爬取效率，最后讲解动态加载网页内容的爬取和应对一些反扒虫机制的方法。

相伴醉晚风 ⋅ 2018-05-26