收藏 400-998-9776 转2 服务时间 周一至周日 9:00-23:00 注意:本站不提供境外服务
您的位置:首页 >文章内容
HTTP和HTTPS初次访问速度为何这么慢
来源:互联网 作者:admin 时间:2019-01-11 16:00:09

    互联网推广时代,公司线上推广依靠数据的采集和深入分析,网络爬虫早已成为现在搜集海量数据最基础的一种方式。网络爬虫的运营从来都是相对正反两面的事情,有网络爬虫就会有反网络爬虫。反网络爬虫中,普遍的就是从HTTP去进行。今日我们就来详细聊聊HTTP和HTTPS初次访问速度为何这么慢。


    一、HTTP和HTTPS


    HTTP属于应用层协议,在传输层运用TCP协议,在网络层运用IP协议。HTTP协议是无状态的,开启一个服务器上的网页页面和上一次开启这个服务器上的网页页面两者之间都没有任何联系,但HTTP是一个无状态的面向连接(传输层为tcp协议)的协议。


    HTTP=TCP握手+http发送数据,http第一次访问比较慢


    HTTPS是以安全为目标的HTTP通道,简单讲是HTTP的安全版。即HTTP下加入SSL层(传输过程加密双匙加密),HTTPS的安全基础是SSL,因此加密的详细内容就需要SSL。


    HTTPS=TCP握手+SSL握手+http发送数据


    第一次测试:1258ms第二次625ms,https第一次访问会比较慢。


    二、TCP握手


    http和https传输层均为TCP,因此在正式传输数据前,TCP都会三次握手建立链接


HTTP和HTTPS初次访问速度为何这么慢


    http和https具有比较突出的差异,http和https第一访问用时性能差距非常明显,但再次访问用时差距不大了。初次差距明显的根本原因是SSL握手较为耗时,而再次访问时间均下降并相差不多的原因由于保持了Http长连接均未再次握手,因此差距不大。nginx对ssl握手后的状态用sessionID进行了缓存,https访问不会差异较大。


    三、怎样优化http用时


    1.nginx配置长连接参数


    http{


    keepalive_timeout20;--长连接timeout


    keepalive_requests8192;--每个连接最大请求数


    }


    2.https握手时间优化


    https握手非常耗时的原始在:RSA算法,它对性能的影响占了75%左右。


    以上文章提出的优化策略:


    首先第一步也是最简单的一个优化策略,就是减少完全握手的发生,因为完全握手它非常消耗时间;对于不能减少的完全握手,对于必须要发生的完全握手,对于需要直接消耗CPU进行的握手,我们使用代理计算;对称加密的优化。


    本来HTTP优化仅仅其中一个方法而已,别的方法也有从访问网络爬虫速度等方面去反网络爬虫。不过不论是网络爬虫还是反网络爬虫,都离不开代理ip的使用,这是网络爬虫能够真正充分发挥效能的强力辅助!


推荐阅读
  • 25 2019-10
    怎样获取高质量爬虫代理ip​?

    怎样获取高质量爬虫代理ip​?在Python爬虫浏览中经常会遇到网站ip受限的现象,这是因为网站的反爬机制发生作用,限制了爬虫的继续访问。如果想要继续进行爬取,那么可以使用高质量的代理i

  • 18 2019-03
    几百亿的播放量怎么来的?代理IP刷流量技巧

    在这个流量时代,很多时候流量代表了利益,流量越高,获得的利益越高。有时候你可能会很纳闷,我们才十几亿的人,为何哪些电视却又几百亿的播放量?

  • 18 2019-10
    爬虫可以不用代理ip​吗?

    爬虫可以不用代理ip吗?大数据时代下,爬虫的作用和使用频率越来越高,很多人都喜欢使用爬虫为自己的采集数据加以分析,然而,一物降一物,反爬虫应运而生,并且不断进化,爬虫工作举步

  • 07 2019-03
    IPv4的所有ip早已分完,我们需要换IP怎么办?

    上网是必须要使用到IP地址的,即使如今IP地址不够用,使用动态IP,也是一定要有IP地址的。因此,很多平台在限制方面就会使用IP限制,通过IP限制,可以有效的保护网站,避免用户访问过快给

  • 15 2019-01
    对于局域网限制,使用代理可以全部突破吗

    很多从事互联网工作者而言,使用的基本上都是局域网,有些还被限制了网络的使用,不能访问某某网站,不能登陆某某软件等等。对于局域网限制,大家常用的方法就是使用代理,是可以突破

  • 18 2019-06
    在哪里找代理ip来换ip?

    在哪里找代理ip来换ip?有些可能会碰到一些需要换ip的,尤其是访问比较频繁的时候,那么大家是在哪里找代理ip来换ip呢?