项目

• 基于 scrapy 框架创建项目

命令行创建

scrapy startproject <项目名称>

# 示例
scrapy startproject my_spider

项目目录

my_spider/
    scrapy.cfg                  # 部署配置文件
    my_spider/                  # 项目目录
        __init__.py             # 项目初始化文件
        items.py                # 项目数据模型文件
        middlewares.py          # 项目中间件文件
        pipelines.py            # 项目管道文件
        settings.py             # 项目配置文件
        spiders/                # 项目爬虫目录
            __init__.py         # 爬虫初始化文件