收藏 400-998-9776 转2 服务时间 周一至周日 9:00-23:00 注意:本站不提供境外服务
您的位置:首页 >文章内容
何为线程死锁?如何避免多线程发生死锁情况?
来源:互联网 作者:admin 时间:2019-03-09 15:35:43

  多线程的使用,让网络爬虫可以快速的获取到信息,因此不管是什么项目,获取哪些数据,只要获取的数据量比较大,都是需要使用多线程的,但是使用多线程有个问题,那就是容易死锁。


  何为线程死锁?


  所谓死锁是指多个线程因竞争资源而造成的一种僵局(互相等待),若无外力作用,这些进程都将无法向前推进。举个例子:


  2个人一起吃饭但是只有一双筷子,2人轮流吃(同时拥有2只筷子才能吃)。某一个时候,一个拿了左筷子,一人拿了右筷子,2个人都同时占用一个资源,等待另一个资源,这个时候甲在等待乙吃完并释放它占有的筷子,同理,乙也在等待甲吃完并释放它占有的筷子,这样就陷入了一个死循环,谁也无法继续吃饭。


何为线程死锁?如何避免多线程发生死锁情况?


  在计算机系统中也存在类似的情况。例如,某计算机系统中只有一台打印机和一台输入设备,进程P1正占用输入设备,同时又提出使用打印机的请求,但此时打印机正被进程P2所占用,而P2在未释放打印机之前,又提出请求使用正被P1占用着的输入设备。这样两个进程相互无休止地等待下去,均无法继续执行,此时两个进程陷入死锁状态。


  如何避免多线程发生死锁情况?


  1.设定等待时间


  如果两个线程使用 thread join 无限期互相等待也会造成死锁,我们可以设定等待的最大时间来避免这种情况。


  2.避免嵌套锁


  这是死锁最常见的原因,如果您已经持有一个资源,请避免锁定另一个资源。如果只使用一个对象锁,则几乎不可能出现死锁情况,比如以下代码对上边的循环嵌套部分进行修改,则避免了死锁的情况:


何为线程死锁?如何避免多线程发生死锁情况?


  3.锁定部分资源


  只获对需要的资源加锁,例如在上面的程序中,我们锁定了完整的对象资源,但是如果我们只需要其中一个字段,那么我们应该只锁定那个特定的字段而不是完整的对象


  对于多线程的使用,我们要小心线程死锁的问题,若是能避免,可以更加高效率的使用多线程,避免影响爬虫的抓取工作。故,我们在编写爬虫代码时要注意合理化,否则使用了代理IP也是不管用了。


相关文章内容简介
推荐阅读
  • 21 2019-06
    薅羊毛为什么要用ip代理

    有些人想要通过薅羊毛赚钱,这需要使用ip代理,薅羊毛为什么要用ip代理?很多金融行业、电子商城、p2p平台等等渠道为了达到推广的目的,推出了各种优惠促销活动,人们通过获取优惠码、

  • 11 2019-09
    代理服务器的原理是什么?

    代理服务器的原理是什么?代理IP​对很多人来说都不陌生,它是我们在网络营销或者爬虫等方面的好帮手,代理IP是通过代理服务器进行中转访问的,对于代理服务器的工作原理很多人都感到很

  • 18 2019-11
    代理ip​对网络安全有什么好处吗?

    代理ip​对网络安全有什么好处吗?如今随着网络犯罪的猖獗,普通用户也应该非常重视自己的网络安全隐私,一旦被不法分子获取了自己的安全信息,就会造成非常严重的后果。那么我们该怎么

  • 23 2019-11
    动态代理ip​的优势!

    动态代理ip​的优势!很多从事python爬虫工作的人都会遇到非常头疼的事情,就是当他们去爬一个网站数据的时候,可能没过多久,自己的ip就会被目标网站封死,但是有的时候又不得不爬

  • 29 2020-02
    免费代理好用吗?

    现在在网络上搜索,可以找到很多免费代理,相信很多人对于国内换ip的了解,都是先从免费的资源入门的。那么,我们首先来使用代理ip有哪些优势?

  • 14 2019-10
    免费代理ip不可用于爬虫!

    免费代理ip不可用于爬虫!进行爬虫都需要使用大量的代理ip这点我相信大家都知道,如果没有足够的代理ip那么我们的爬虫极其容易就被封禁,对于代理ip的选择无论是谁都推荐收费的代理ip,为