关注各种黑科技
B站UP主,编程教学,游戏玩家,挂B,金牛座

scrapy 项目建立

scrapy玩了很多年了,目前还不是最佳实践,还是用django比较熟一点。

mkdir myspiders

scrapy startproject steamspiders myspiders

cd myspiders/steamspiders 

scrapy genspider -t crawl  steamstore store.steampowered.com

scrapy crawl steamstore

爬虫模板

scrapy genspider -l
Available templates:
  basic   #默认
  crawl
  csvfeed
  xmlfeed

参考
https://doc.scrapy.org/en/latest/topics/commands.html

转载请注明出处
分享到: 更多 (0)

评论 0