pythoy如何利用scrapy构建网络爬虫

2024-11-15 21:43:14

1、命令:startproject格式:scrapy startproject<name>[dir]说明:创建一个新工程首囗寝嗵若先打开命令提示符,方法是在运行窗口输入"cmd"回车打开命令行窗口,进入准备好的文件夹下输入命令scrapy startproject name这里的那么指自己想要创建的scrapy文件名称,这样就创建好了scrapy框架

pythoy如何利用scrapy构建网络爬虫

2、创建好的name文件夹中会生成如下文件

pythoy如何利用scrapy构建网络爬虫pythoy如何利用scrapy构建网络爬虫

3、其中Spiders是Scrapy的最核心部件,所有关于网页访问和页面解析的功能都包含在Spiders中这样我们的scrapy框架就创建好了

猜你喜欢