Java多线程--资源限制可能影响多线程效率
来源:互联网 发布:js.10000网上营业厅 编辑:程序博客网 时间:2024/05/21 14:48
前言
本文来自方腾飞老师《Java并发编程的艺术》第一章。
资源限制的挑战
(1)什么是资源限制
资源限制是指在进行并发编程时,程序的执行速度受限于计算机硬件资源或软件资源。例如,服务器的带宽只有2Mb/s,某个资源的下载速度是1Mb/s每秒,系统启动10个线程下载资源,下载速度不会变成10Mb/s,所以在进行并发编程时,要考虑这些资源的限制。硬件资源限制有带宽的上传/下载速度、硬盘读写速度和CPU的处理速度。软件资源限制有数据库的连接数和socket连接数等。
(2)资源限制引发的问题
在并发编程中,将代码执行速度加快的原则是将代码中串行执行的部分变成并发执行,但是如果将某段串行的代码并发执行,因为受限于资源,仍然在串行执行,这时候程序不仅不会加快执行,反而会更慢,因为增加了上下文切换和资源调度的时间。例如,之前看到一段程序使用多线程在办公网并发地下载和处理数据时,导致CPU利用率达到100%,几个小时都不能运行完成任务,后来修改成单线程,一个小时就执行完成了。
(3)如何解决资源限制的问题
对于硬件资源限制,可以考虑使用集群并行执行程序。既然单机的资源有限制,那么就让程序在多机上运行。比如使用ODPS、Hadoop或者自己搭建服务器集群,不同的机器处理不同的数据。可以通过“数据ID%机器数”,计算得到一个机器编号,然后由对应编号的机器处理这笔数据。对于软件资源限制,可以考虑使用资源池将资源复用。比如使用连接池将数据库和Socket连接复用,或者在调用对方webservice接口获取数据时,只建立一个连接。
(4)在资源限制情况下进行并发编程
如何在资源限制的情况下,让程序执行得更快呢?方法就是,根据不同的资源限制调整程序的并发度,比如下载文件程序依赖于两个资源——带宽和硬盘读写速度。有数据库操作时,涉及数据库连接数,如果SQL语句执行非常快,而线程的数量比数据库连接数大很多,则某些线程会被阻塞,等待数据库连接
- Java多线程--资源限制可能影响多线程效率
- Java多线程死锁与资源限制详解
- Java多线程资源收集
- JAVA 多线程学习资源
- java多线程之效率讨论
- Java多线程共享受限资源
- java TheadLocal 多线程资源使用
- java多线程以及资源加锁
- java 多线程 解决资源冲突
- JAVA 多线程下载单个资源
- Java重排序对多线程的影响
- Java多核cpu多线程运行效率分析
- 多线程的作用,对资源cpu的利用效率
- Java多线程编程之限制优先级
- JAVA多线程不安全问题解决方案(多线程并发同一资源)。
- Python 多线程效率不高吗?
- 关于python多线程效率
- windows/linux避免多线程应用程序在多核间切换,影响程序效率
- xGBoost GBDT
- linux内核中的active_mm的作用
- Spark日志分析项目Demo(6)--页面单跳转化率分析
- redis集群搭建及注意事项
- 二、SQL语句映射文件(2)增删改查、参数、缓存
- Java多线程--资源限制可能影响多线程效率
- leetcode 42. Trapping Rain Water 正反循环遍历求解
- TCP和UDP的区别
- [贪心]codeforces
- 关于abstract为什么不能和static连用
- Moves in squared strings (I) -- 7Kyu
- 拦截导弹(规律:下降子序列的个数等于最长上升子序列的长度)
- 使用 eclipse 编写 xtend
- SSM整合时的xml配置参考