收藏 400-998-9776 转2 服务时间 周一至周日 9:00-23:00 注意:本站不提供境外服务
您的位置:首页 >文章内容
何为线程死锁?如何避免多线程发生死锁情况?
来源:互联网 作者:admin 时间:2019-03-09 15:35:43

  多线程的使用,让网络爬虫可以快速的获取到信息,因此不管是什么项目,获取哪些数据,只要获取的数据量比较大,都是需要使用多线程的,但是使用多线程有个问题,那就是容易死锁。


  何为线程死锁?


  所谓死锁是指多个线程因竞争资源而造成的一种僵局(互相等待),若无外力作用,这些进程都将无法向前推进。举个例子:


  2个人一起吃饭但是只有一双筷子,2人轮流吃(同时拥有2只筷子才能吃)。某一个时候,一个拿了左筷子,一人拿了右筷子,2个人都同时占用一个资源,等待另一个资源,这个时候甲在等待乙吃完并释放它占有的筷子,同理,乙也在等待甲吃完并释放它占有的筷子,这样就陷入了一个死循环,谁也无法继续吃饭。


何为线程死锁?如何避免多线程发生死锁情况?


  在计算机系统中也存在类似的情况。例如,某计算机系统中只有一台打印机和一台输入设备,进程P1正占用输入设备,同时又提出使用打印机的请求,但此时打印机正被进程P2所占用,而P2在未释放打印机之前,又提出请求使用正被P1占用着的输入设备。这样两个进程相互无休止地等待下去,均无法继续执行,此时两个进程陷入死锁状态。


  如何避免多线程发生死锁情况?


  1.设定等待时间


  如果两个线程使用 thread join 无限期互相等待也会造成死锁,我们可以设定等待的最大时间来避免这种情况。


  2.避免嵌套锁


  这是死锁最常见的原因,如果您已经持有一个资源,请避免锁定另一个资源。如果只使用一个对象锁,则几乎不可能出现死锁情况,比如以下代码对上边的循环嵌套部分进行修改,则避免了死锁的情况:


何为线程死锁?如何避免多线程发生死锁情况?


  3.锁定部分资源


  只获对需要的资源加锁,例如在上面的程序中,我们锁定了完整的对象资源,但是如果我们只需要其中一个字段,那么我们应该只锁定那个特定的字段而不是完整的对象


  对于多线程的使用,我们要小心线程死锁的问题,若是能避免,可以更加高效率的使用多线程,避免影响爬虫的抓取工作。故,我们在编写爬虫代码时要注意合理化,否则使用了代理IP也是不管用了。


相关文章内容简介
推荐阅读
  • 30 2020-01
    解决ip问题,需要用http代理

    做网络推广,通常都会遇到ip的问题,因为推广需要频繁操作,而一旦超出了网站的允许范围,ip就会被禁用。所以,想要做好网络推广,要懂得怎么解决ip问题。

  • 07 2019-08
    哪个商家提供高匿代理ip

    哪个商家提供高匿代理ip?在目前的网络上,使用高匿代理ip的时候,需要选择合适的服务商。在这个时候,我们需要去网上搜寻相关的服务商。但是在网络上有着太多的服务商。如何选择合适

  • 20 2020-05
    网络时代的ip代理

    互联网时代,我们经常说无奇不有,很多新鲜的事物都会发生。虽然一开始会觉得很新奇,但是到了普遍使用之后,就会变为日常。

  • 18 2020-02
    电脑跟手机需要换ip要怎么办?

    电脑ip地址要怎么更改?手机ip地址要怎么修改?这是网络时代很多人都需要掌握的小技能,虽然这个通过ip代理来切换的操作并不复杂,但是挑选合适的http代理确实需要很仔细的进行。

  • 01 2019-09
    什么是代理IP的匿名度?

    什么是代理IP的匿名度?我们都知道代理IP​是通过代理服务器这个平台来进行访问,所以代理IP都会拥有不同的匿名度,匿名度可以用来分辨我们在访问网络时能否被对方服务器发现,所以判断

  • 20 2019-08
    为什么爬虫要用ip代理?

    为什么爬虫要用ip代理?IP代理简单点说就是利用服务器的平台将自己电脑的ip地址隐藏,用另一个IP地址去访问目标,这样做可以让网站不能发现自己的真实IP地址,在大数据爬虫当中十分有用,

您好,当前有客服在线,请问有什么需要咨询的吗?