scrapy-shn 自用的,请勿用于其他违法用途,使用的时候请遵守网站的robot协议,出现任何触犯法律法规的事与本人无关 一个电商平台的商品数据爬虫 以前用requests + beautifulSoup写过,但是代码没有保存,现在用scrapy框架重新写一个 主要用到scrapy + xpath 后面看下时间情况应该会加入mangodb