Java 多线程设计模式Master-Slave

来源:互联网 发布:php开发环境 编辑:程序博客网 时间:2024/05/19 19:55

为了避免Slave 线程占用过多的资源,我们主要采取了两个措施。一个是,Master 类所创建的Slave 线程数量为JVM 所在主机的CPU 个数(通过Runtime.getRuntime().availableProcessor()获取); 另一个是Slave 线程的doRun() 方法每处理完10万条记录就会休眠80ms,这是为了避免其使得CPU 过于繁忙。

Master-Slave 模式的应用场景包括:
1. 并行计算(Parallel Computation)
2. 容错计算(Fault Tolerance)
3. 计算精度 (Computational Accuracy)
使用Master-Slave 模式能够带来以下几点好处:
1. 可交换性(Exchangeability) 和 可扩展性(Extensibility)
2. 提升计算性能

12.4.1 子任务的处理结果的收集

Master 收集子任务的处理结果通常有两种方法。
1. 使用存储仓库(Repository),即master 参与者和Slave 都能访问的数据结构,如ConcurrentMap)
2. 使用Promise 模式。如Slave 返回Master 一个 java.util.concurrent.Future 是来,Master 调用返回值的get() 方法获取子任务处理的结果。这种方法还有一个好处就是Master 可以轻松捕捉到Slave 的异常,如果get() 方法抛出异常则说明相应的子任务处理失败。