python3爬虫中如何搭建scrapy框架

2024年07月05日 Scrapy Python51

早在很久之前,因为道路不通畅的原因,山与山、陆地与水都是无法轻易越过的阻碍。似乎从桥梁出现开始,这种无形中的阻隔感渐渐的消失了。如果我们只局限于理论的学习,而不去借助一些工具,就不能轻易的把知识点间的壁垒打破和贯通。所以今天小编为大家带来了python3爬虫中搭建scrapy框架的方法以及需要注意的事项。

安装教程:

1. 直接使用Pycharm进行安装,省去不必要的麻烦,点击File->Settings For Project。然后点击+号,搜索scrapy进行安装即可。

2. 安装完成后,进入我们已经建立好的目录,在目录下面输入cmd命令。

scrapy startproject douban

3. 我们用pycharm打开该项目,具体看一下:

相信小伙伴们下载安装好scrapy框架后,在使用python爬虫获取数据方面也会更加注意技巧的运用。

本文链接:http://so.lmcjl.com/news/7884/

展开阅读全文
相关内容