scrapy(scrapy框架安装时报错该如何处理)

scrapy，scrapy框架安装时报错该如何处理？

python安装时advanced option这一步勾选最后那个和vs2015相关的选项即可。这样下载scrapy的时候直接pip install scrapy即可正确安装，不用单独安装twised之类的，方便又快捷。勾选了vs2015选项后能解决所有和其相关的问题，不勾选的话其它需要vs2015的包安装也会出现问题。

scrapy是什么？

Scrapy是适用于Python的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。

Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、sitemap爬虫等，最新版本又提供了web2.0爬虫的支持。

Scrapy占内存大吗？

内存很大，可以用很久都用不完。

scrapy和selenium区别？

scrapy能够产生电势。而selenium不会产生电势

python的scrapy框架怎么安装？

最简单的安装方式pip install scrapy,如果安装了anaconda,可以使用conda install scrapy。如果安装过程中出现了错误，不要担心，依次使用pip 或者conda命令进行安装缺失的包即可。