猿问
下载APP

爬虫什么用

一直没明白爬虫有什么用,把别人网站里的东西爬到自己的网站里?

桂圆
浏览 2947回答 10
10回答

tianwenjun0909

举个例子,迅雷他能下载有BT或者磁力链接的资源,但是如果你没有这些东西,迅雷就无能为力了吧;简单说,爬虫就是一个定向的下载器,可以下载一切你需要的资源,前提是合法呀;既然是定向,那你肯定知道为啥需要这些资源或者是数据,所以,你是有目的在写爬虫,你问这个问题的时候你就明白,你可能是需要写一个网站,而需要其他网站的一些数据,因此你才写爬虫;这么讲可以明白的吧?

秋名山车神

在互联网普及的今天,爬虫用的好,在网上你就是神一般的存在。无所不知,无所不能。

_糖衣_

如果你觉得很厉害,那就试试爬虫暗网吧。网络爬虫:是一种按照一定的规则,自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁,自动索引,模拟程序或者蠕虫。做法:传统爬虫从一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。聚焦爬虫的工作流程较为复杂,需要根据一定的网页分析算法过滤与主题无关的链接,保留有用的链接并将其放入等待抓取的URL队列。然后,它将根据一定的搜索策略从队列中选择下一步要抓取的网页URL,并重复上述过程,直到达到系统的某一条件时停止。另外,所有被爬虫抓取的网页将会被系统存贮,进行一定的分析、过滤,并建立索引,以便之后的查询和检索;对于聚焦爬虫来说,这一过程所得到的分析结果还可能对以后的抓取过程给出反馈和指导。

Sxy97

我不会告诉你,我的爬虫入门,是为了爬美女

码农_白兰度

对了,量化投资的基础,也就是制作稳定而符合投资逻辑的网络爬虫哦。

码农_白兰度

思维不要局限在现有显而易见的应用上,我就写过爬虫自动发消息自动加好友蹂躏知乎的程序,后来限制发消息次数操蛋了。

Menzel3

网络爬虫是一种通过某些算法快速获取网页内容来收集相应数据的程序

撩梦

假如你要做的项目和某个网站差不多,你是不是也避免了费脑细胞去做了!爬虫主要是用到那种场景!

PzZZ

整理数据啊,有了数据啥都能干

橋本奈奈未

你想怎么用就怎么用咯。一般是爬一些数据,大数据时代数据很值钱
打开App,查看更多内容
随时随地看视频慕课网APP
我要回答