收藏 400-998-9776 转2 服务时间 周一至周日 9:00-23:00 注意:本站不提供境外服务
您的位置:首页 >文章内容
单IP频繁爬取某网站,多久会被限制住?
来源:互联网 作者:admin 时间:2019-04-22 18:01:00

  单IP频繁爬取某网站,多久会被限制住?IP被不被封,这需要看你使用的频率,越快越容易被封,这基本上是个常规了。


  因为很多网站都设了IP防刷的,也就是在短时间内有大量相同ip的请求,可能是恶意的,网站自然会把这频繁访问的IP地址给封了。一般上被封了,短时间内是不会放出来的。


  对于IP被封了一个问题,也不用太担心,虽然现在很多都没有固定的IP使用,但是换个动态IP还是很简单的,这就是个换IP的问题。怎么换IP呢?比如:


单IP频繁爬取某网站,多久会被限制住?


  如果是局域网,带路由器的,可以控制路由器重新拨号,换IP,这其实是一种折中的办法,曲线救国。


  如果是通过ADSL拨号的,可以重新拨号一次的,每拨一次就会有一个新IP,较好解决IP单一问题。


  又或者,使用代理IP,利用购买的或者网上抓取的免费代理IP,实现多IP爬虫,这种形式是最常见的。


  从这里看到,其实换个IP很简单的,但是要杜绝短时间内大量请求的问题,也难。既然有这个需求,网站也不配合,自然是免不了要大量请求的,但是被限制了,怎么办呢?


  当然是换IP了,既然同IP被封,那么我就多换一些,从这个角度看来路由器换IP和ADSL拨号换IP就不适用了,还得使用代理IP的。


  由上可见,单IP频繁爬取某网站,多久会被限制住?只要超过网站设置的频率,马上就会被封了,因此要进行爬取网站,还是需要大量IP的。


推荐阅读
  • 22 2019-11
    怎么搭建代理ip​服务器?

    怎么搭建代理ip​服务器?随着网络的高速发展同时也伴随着一些问题,如IP地址耗尽,海量的主机同时访问带宽的争用和个单位网络无费用的剧增等,那么如何解决这些上网问题,提高网络的安

  • 29 2018-12
    用静态IP上不了网怎么回事

    上网需要使用IP,然而IP资源稀少,许多人都只能使用动态IP上网,但有些人不喜欢自动获取IP,想用静态IP上网,在设置的过程中,也许会出现用静态IP上不了网,这是怎么回事呢?

  • 06 2019-09
    代理IP的种类有哪几种划分?

    代理IP的种类有哪几种划分?随着互联网的普及与高速发展,人们对于网络的依赖也愈加强。很多人都利用了代理IP​来保护自己的个人信息不被泄露,那么代理IP的种类有哪些,大家了解吗?

  • 08 2019-11
    代理ip软件​的作用有哪些?

    代理ip软件​的作用有哪些?代理ip就是通过代理网络用户去取得网络信息,它是网络信息的中转站,代理服务器就好象一个大的Cache,这样就能显著提高浏览速度和效率。那么,除此之外代理ip软

  • 31 2019-05
    营销号要不要换IP?

    营销号要不要换IP?这主要看你怎么使用营销号咯,还是就是手上的营销号数量多不多,如果就一个,这就不要担心了,正常使用即可。但如果是营销号数量比较多,这就麻烦了。

  • 11 2019-08
    新手使用代理ip工具注意事项

    新手使用代理ip工具注意事项!对于营销界领域的朋友来讲,经常使用代理ip工具应该是家常便饭的事情,但对于一些营销新人来说,可能还是头一次听说代理ip工具这种东西,那么下面就由智连