人人网爬虫是干什么的？
网络爬虫其实就是爬取网页的信息。
如果把互联网比作蜘蛛网，爬虫就是蜘蛛网上爬行的蜘蛛，网络节点则代表网页。当通过客户端发出任务需求命令时，ip将通过互联网到达终端服务器，找到客户端交代的任务。1个节点是1个网页。蜘蛛通过1个节点后，可以沿着几点连线还是爬行到达下1个节点。
简而言之，爬虫首先需要获得终端服务器的网页，从那里获得网页的源代码，若是源代码中有有用的信息，就在源代码中提取任务所需的信息。然后ip就会将获得的有用信息送回客户端存储，然后再返回，反复频繁访问网页获取信息，直到任务完成。ipidea代理提供全球高匿名动态ip。
0