您的位置: 首页 > 新闻资讯 > > 正文

爬虫工作中遇到这些状态码的含义是什么?

发布时间:2020年11月19日 来源:互联网

    在爬虫工作中经常遇到一些问题,我们可以通过返回的状态码找到出问题的原因以及解决方法,我们一起来看看都有哪些状态码,其代表的含义是什么。

   

爬虫工作中遇到这些状态码的含义是什么?


    200:请求成功,处理方式:获得响应的内容,进行处理。


    201:请求完成,结果是创建了新资源。新创建资源的URI可在响应的实体中得到。处理方式:爬虫中不会遇到。


    202:请求被接受,但处理尚未完成。处理方式:阻塞等待。


    204:服务器端已经实现了请求,但是没有返回新的信息。如果客户是用户代理,则无须为此更新自身的文档视图。处理方式:丢弃。


    300:该状态码不被HTTP/1.0的应用程序直接使用,只是作为3XX类型回应的默认解释。存在多个可用的被请求资源。处理方式:若程序中能够处理,则进行进一步处理,如果程序中不能处理,则丢弃。


    301:请求到的资源都会分配一个永久的URL,这样就可以在将来通过该URL来访问此资源。处理方式:重定向到分配的URL。


    302:请求到的资源在一个不同的URL处临时保存。处理方式:重定向到临时的URL。


    304:请求的资源未更新,处理方式:丢弃。


    400:非法请求,处理方式:丢弃。


    401:未授权,处理方式:丢弃。


    403:禁止,处理方式:丢弃。


    404:没有找到,处理方式:丢弃。


    500:服务器内部错误,服务器遇到了一个未曾预料的状况,导致了它无法完成对请求的处理。一般来说,这个问题都会在服务器端的源代码出现错误时出现。


    501:服务器无法识别,服务器不支持当前请求所需要的某个功能。当服务器无法识别请求的方法,并且无法支持其对任何资源的请求。


    502:错误网关,作为网关或者代理工作的服务器尝试执行请求时,从上游服务器接收到无效的响应。


    503:服务出错,由于临时的服务器维护或者过载,服务器当前无法处理请求。这个状况是临时的,并且将在一段时间以后恢复。


    以上就是爬虫工作中经常遇到的一些状态码,最为常见的是200和403,200代表请求成功,403一般是触发反爬策略被限制了IP。


相关文章内容简介

1 代理IP不仅仅解决网络限制

    代理IP不仅仅解决网络限制,很多人都知道使用代理IP可以解决网络的限制问题,例如注册帐号、访问外国网站、软件等。这是代理IP的主要用途,但其实还有很多用途供我们使用。    代理IP不仅仅解决网络限制    1.加快下载速度。有部分网站对下载是有限制的,例如限制一个IP只能下载一个,出现这样的情况可以通过代理IP工具,同时多IP一起下载了。    2.隐藏真实IP。代理IP开启后,真正的IP会被代理IP完全隐藏,这样保证了上网及个人信息的安全。    3.共享上网。通过代理服务器,可以对局域网有线宽带加以利用,提高内网用户的上网速度。同时还可以当做防火墙,保护内网的安全。    通过以上的介绍,相信大家都了解了代理IP的用途有很多。万变ip代理IP覆盖全国多城市,IP可用率高达97%,还可以自动切换IP,操作简单,再也不用担心IP被封的困扰。... [阅读全文]

2 私密代理ip适合大众使用吗?

    私密代理ip适合大众使用吗?其实私密代理而且这种http代理ip资源在之前的人们耳中并不时常听到,随着时代的发展,他开始在人们的生活中活跃起来,越来越多的人开始对它有所了解。    如今信息非常的发达,科技的发展也日新月异,人们借助科技的发展和信心为自己的生活也带来了很多改变。但是在社会发展越来越好的时候,由于人们对信息的广泛使用,会出现泄露信息的一些现象。    人们在使用互联网的过程中,自己的照片或者是银行账号等,都有可能在不经意间泄露出去。那么我们应该如何改变这一现象的发生呢?这个时候我们就可以借助私密代理ip了。    那是很多人肯定都了解到了,HTTP代理IP服务都非常贵,只有一些大公司或是大企业才能负担得起费用,因此很多大众都对于这个平台望而却步。或许这也是万变云私密代理ip上市不久就受到了很多人欢迎的原因,这个平台按照使用的次数来收费,为大众节省了不少费用的同时才能很好地保护大家的隐私。... [阅读全文]

推荐阅读

  1. 31

    2020-01

    Flutter版本不一致错误

    有时在我们在github下载源码后,发现应该好用的代码但是在我们的机器上却出现莫名其妙的报错,有可能是我们的版本号不一致的问题。

  2. 17

    2020-02

    网络爬虫是什么工作原理,如何展开工作?

    我们可以将庞大的互联网比喻成一张一望无际的网络蜘蛛网,而爬虫就是在蜘蛛网上爬行的蜘蛛,把网的节

  3. 09

    2020-03

    动态性换IP的功能有多强大?

    动态性换 IP 的功效有许多 ,而动态性ip就是指在电脑时时刻刻、每台电脑上常有一个唯一的 IP地址 ,这一地址的功效就是说用于明确这台电脑上的部位。用ADSL等方法拨号连接的情况下,每一次

  4. 03

    2020-09

    为什么独享代理IP的有效率那么高

    用过站大爷的独享IP池的用户都知道,独享代理IP虽然价格比共享代理IP更贵,但它的有效率是真的高,绝对的物有所值。独享IP池的有效连通率很高,业务成功率也很高,我们一起来看看吧。

  5. 05

    2020-06

    代理IP有什么妙用之处?

    代理IP作为一种网络工具,随着使用的越来越广泛,普及的也越来越广泛。它的主要作用是通过代理服务器来掩盖用户的真实IP地址,保证用户的IP地址安全,从而保证用户的隐私数据安全。但其

  6. 03

    2020-04

    网络换ip的几种方式?

    很多人在使用电脑的过程都遇到过需要换IP的情况,但一个电脑只有一个IP,就需要找其他的IP来替代。而我们平时的联网方式也是很多种的,联网的方式可以决定我们换IP的方法。下面就为大家

因为专业! 所以简单! 产品至上,价格实惠 是我们服务追求的宗旨

免费试用