python爬虫框架Scrapy怎么安装使用

这篇文章主要介绍了python爬虫框架scrapy怎么安装使用的相关知识，内容详细易懂，操作简单快捷，具有一定借鉴价值，相信大家阅读完这篇python爬虫框架Scrapy怎么安装使用文章都会有所收获，下面我们一起来看看吧。

1.Scrapy框架结构示意图

官方示意图：

自制示意图：

2.安装 Scrapy 框架

直接在命令行pip即可，此外还需要安装一个依赖库pypiwin32，也是直接pip即可

pip install scrapy
pip install pypiwin32

3.创建项目和爬虫

1. 创建项目：

scrapy startproject [爬虫项目名称]

2. 创建爬虫

注意：要先进入到项目所在的路径，再执行命令

scrapy genspider [爬虫名称] "[爬取的域名]"

4.操作示意图：

打开PyCharm以后即可看到：

5.项目目录结构

关于“Python爬虫框架Scrapy怎么安装使用”这篇文章的内容就介绍到这里，感谢各位的阅读！相信大家对“python爬虫框架Scrapy怎么安装使用”知识都有一定的了解，大家如果还想学习更多知识，欢迎关注编程网Python频道。