1.创建scrapy项目：
终端输入 scrapy startproject 项目名称
在spiders文件夹下创建py文件
scrapy genspider baidu http://www.baidu.com
settings.py
ROBOTSTXT_OBEY = False
4.运行爬虫文件：
scrapy crawl 爬虫名称
scrapy crawl baidu
scrapy框架入门
发布时间 2023-10-04 00:55:48作者: sgj191024