Scrapy是一个由python语言编写的通用爬虫框架，最近项目组的一个兄弟在帮大数据那边从一些大型电商网站上爬取商口信息，就是使用scrapy来操作的。由于帮其修改了一点该项目的东西，这里也顺便记录下scray的一些内容，能写多少是多少吧。scrayp源码托管在GitHub上，……

Continue reading