大家都知道python爬虫是用来在互联网上抓取数据的一个工具或者是程序，那么互联网上的数据浩如烟海，python爬虫一般会抓取什么信息呢 。其实根据Python爬虫的功能和抓取数据的方式划分除了四种爬虫方向，下方会来讲解一下这些知识 。
文章插图
一、深层网络爬虫
这里的深层指的并不是互联网上哪些需要经过层层链接跳转和验证才能进去的网站，爬虫上的深层网络其实指的是哪些需要关键词才能进入和得到的网页 。例如像是搜索引擎和站内查询等等，因为它们并不是直接就能拿到数据 。
二、通用网络爬虫
这个爬虫方向就有些比较特殊了，它的通用指的是通过抓取一些url链接，然后用这个链接去不断地扩展 。直到将整个网络的页面都给获取到，实际上百度和Google等搜索引擎使用的就是通用网络爬虫 。
三、增量网络爬虫
这个爬虫方向是比较好理解的，这个爬虫方向主要做的事情就是将已经抓取过的页面给记录下来 。然后隔一段时间就去这些页面上进行扫描，如果有更新的话就将新的数据给抓取下来，一些新闻和资源聚合网站就是这么做的 。
四、垂直网络爬虫
这爬虫方向实际上才是大部分python爬虫会去做的事情，它的工作就是针对某一个领域或者是网站进行抓取 。因为互联网上的数据是无限多的，就算是使用python爬虫也要有目标才能精准的获取数据了 。
【Python爬虫一般抓取什么信息？Python爬虫方向介绍】以上就是关于“Python爬虫一般抓取什么信息？Python爬虫方向介绍”的全部内容了，希望对你有所帮助 。
推荐阅读
- Python怎么用回车结束输入？Python回车结束循环方法
- Python怎么判断一个文件是否为空？Python判断空文件的方法
- Python怎么计算加减乘除？Python算术运算符基本使用教程
- Python怎么打开csv文件并读取？Python如何读csv文件
- Python编辑器jupyter怎么使用？jupyter基本使用教程
- Python架构是什么意思？Python架构有哪些
- 如何用Python画出样本的散点图？一文看完代码示例解析
- Python随机数怎么求和？Python随机数求和代码示例
- Python中有double类型吗？Python怎么表示double类型
- Python3.6版本和3.7有什么区别？Python3.7版本新特性介绍