本篇文章小编给大家分享一个python3中安装scrapy的方法,如果有需求的小伙伴可以收藏本篇文章以便以后需要的时候更方便查阅 。我们废话少说,直接往下看 。
【python3中如何安装scrapy?超详细的方法来了】
文章插图
python3安装scrapy的方法:1、使用“conda install scrapy”命令进行安装;2、先安装Twisted再利用“pip install scrapy”命令进行安装 。
Scrapy框架是目前Python中最受欢迎的爬虫框架之一,那么我们今天就来具体了解一下Scrapy框架 。
首先让我们来了解一下什么是Scrapy框架?
Scrapy是一个快速、高层次、轻量级的屏幕抓取和web抓取的python爬虫框架 。
Scrapy的用途:
Scrapy用途非常广泛,主要用于抓取特定web站点的信息并从中提取特定结构的数据,除此之外,还可用于数据挖掘、监测、自动化测试、信息处理和历史片段(历史记录)打包等 。
了解完Scrapy框架后,我们就来看看怎么安装和使用吧 。
安装Scrapy方法有两种:
1. 如果你电脑上有Anaconda的话,可以使用这种方法 。
windows+r >>> cmd >>> 输入 conda install scrapy >>> 回车
2.第二种方法使用pip安装,不过你需要先下载Twisted插件 。
下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
(1)点击下载地址,进入后按 ctrl+f ,搜索twisted,然后下载对应版本
cp27:表示python2.7版本 cp36:表示python3.6版本
win32:表示Windows32位操作系统
(2)下载完成后进入终端,输入pip install Twisted-18.7.0-cp36-cp36m-win32.whl
Twisted-18.7.0-cp36-cp36m-win32.whl:文件名(你下载哪个文件就输入哪个文件的文件名,要输入全部路径)
安装完成后再输入pip install scrapy,回车即可 。
以上就是小编给大家带来的在python3中安装scrapy的方法,希望大家通过阅读小编的文章之后能够有所收获!如果大家觉得小编的文章不错的话,可以多多分享给有需要的人 。
推荐阅读
- python如何下载模块?超详细的教程来了
- 如何在Mongodb中求和?这两个方法轻松实现
- python编写开发的过程中中如何换行?通过俩个小技巧轻松实现
- 京东到家订单取消审核要多久?如何入驻京东到家?
- 淘宝补单流量下降怎么回事?如何解决?
- 抖音如何搜索用户?抖音的功能有哪些?
- 抖音如何根据用户画像选品?选品有哪些技巧?
- 快手商家要如何修改客服电话?附操作步骤
- 抖音商城怎么隐藏?抖音商城如何运营?
- 蓝湖如何上传设计图?蓝湖怎样上传AdobeXD设计图?