中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

SpringBoot 多任務并行+線程池處理的實現

發布時間:2020-10-21 23:59:59 來源:腳本之家 閱讀:598 作者:小柒 欄目:編程語言

前言

前幾篇文章著重介紹了后端服務數據庫和多線程并行處理優化,并示例了改造前后的偽代碼邏輯。當然了,優化是無止境的,前人栽樹后人乘涼。作為我們開發者來說,既然站在了巨人的肩膀上,就要寫出更加優化的程序。

SpringBoot開發案例之JdbcTemplate批量操作
SpringBoot開發案例之CountDownLatch多任務并行處理

改造

理論上講,線程越多程序可能更快,但是在實際使用中我們需要考慮到線程本身的創建以及銷毀的資源消耗,以及保護操作系統本身的目的。我們通常需要將線程限制在一定的范圍之類,線程池就起到了這樣的作用。

程序邏輯

SpringBoot 多任務并行+線程池處理的實現

多任務并行+線程池處理.png

一張圖能解決的問題,就應該盡可能的少BB,當然底層原理性的東西還是需要大家去記憶并理解的。

Java 線程池

Java通過Executors提供四種線程池,分別為:

  1. newCachedThreadPool創建一個可緩存線程池,如果線程池長度超過處理需要,可靈活回收空閑線程,若無可回收,則新建線程。
  2. newFixedThreadPool 創建一個定長線程池,可控制線程最大并發數,超出的線程會在隊列中等待。
  3. newScheduledThreadPool 創建一個定長線程池,支持定時及周期性任務執行。
  4. newSingleThreadExecutor 創建一個單線程化的線程池,它只會用唯一的工作線程來執行任務,保證所有任務按照指定順序(FIFO, LIFO, 優先級)執行。

優點

  1. 重用存在的線程,減少對象創建、消亡的開銷,性能佳。
  2. 可有效控制最大并發線程數,提高系統資源的使用率,同時避免過多資源競爭,避免堵塞。
  3. 提供定時執行、定期執行、單線程、并發數控制等功能。

代碼實現

方式一(CountDownLatch)

/**
 * 多任務并行+線程池統計
 * 創建時間  2018年4月17日
 */
public class StatsDemo {
  final static SimpleDateFormat sdf = new SimpleDateFormat(
      "yyyy-MM-dd HH:mm:ss");
  
  final static String startTime = sdf.format(new Date());
  
  /**
   * IO密集型任務 = 一般為2*CPU核心數(常出現于線程中:數據庫數據交互、文件上傳下載、網絡數據傳輸等等)
   * CPU密集型任務 = 一般為CPU核心數+1(常出現于線程中:復雜算法)
   * 混合型任務 = 視機器配置和復雜度自測而定
   */
  private static int corePoolSize = Runtime.getRuntime().availableProcessors();
  /**
   * public ThreadPoolExecutor(int corePoolSize,int maximumPoolSize,long keepAliveTime,
   *              TimeUnit unit,BlockingQueue<Runnable> workQueue)
   * corePoolSize用于指定核心線程數量
   * maximumPoolSize指定最大線程數
   * keepAliveTime和TimeUnit指定線程空閑后的最大存活時間
   * workQueue則是線程池的緩沖隊列,還未執行的線程會在隊列中等待
   * 監控隊列長度,確保隊列有界
   * 不當的線程池大小會使得處理速度變慢,穩定性下降,并且導致內存泄露。如果配置的線程過少,則隊列會持續變大,消耗過多內存。
   * 而過多的線程又會 由于頻繁的上下文切換導致整個系統的速度變緩——殊途而同歸。隊列的長度至關重要,它必須得是有界的,這樣如果線程池不堪重負了它可以暫時拒絕掉新的請求。
   * ExecutorService 默認的實現是一個無界的 LinkedBlockingQueue。
   */
  private static ThreadPoolExecutor executor = new ThreadPoolExecutor(corePoolSize, corePoolSize+1, 10l, TimeUnit.SECONDS,
      new LinkedBlockingQueue<Runnable>(1000));
  
  public static void main(String[] args) throws InterruptedException {
    CountDownLatch latch = new CountDownLatch(5);
    //使用execute方法
     executor.execute(new Stats("任務A", 1000, latch));
     executor.execute(new Stats("任務B", 1000, latch));
     executor.execute(new Stats("任務C", 1000, latch));
     executor.execute(new Stats("任務D", 1000, latch));
     executor.execute(new Stats("任務E", 1000, latch));
    latch.await();// 等待所有人任務結束
    System.out.println("所有的統計任務執行完成:" + sdf.format(new Date()));
  }

  static class Stats implements Runnable {
    String statsName;
    int runTime;
    CountDownLatch latch;

    public Stats(String statsName, int runTime, CountDownLatch latch) {
      this.statsName = statsName;
      this.runTime = runTime;
      this.latch = latch;
    }

    public void run() {
      try {
        System.out.println(statsName+ " do stats begin at "+ startTime);
        //模擬任務執行時間
        Thread.sleep(runTime);
        System.out.println(statsName + " do stats complete at "+ sdf.format(new Date()));
        latch.countDown();//單次任務結束,計數器減一
      } catch (InterruptedException e) {
        e.printStackTrace();
      }
    }
  }
}

方式二(Future)

/**
 * 多任務并行+線程池統計
 * 創建時間  2018年4月17日
 */
public class StatsDemo {
  final static SimpleDateFormat sdf = new SimpleDateFormat(
      "yyyy-MM-dd HH:mm:ss");
  
  final static String startTime = sdf.format(new Date());
  
  /**
   * IO密集型任務 = 一般為2*CPU核心數(常出現于線程中:數據庫數據交互、文件上傳下載、網絡數據傳輸等等)
   * CPU密集型任務 = 一般為CPU核心數+1(常出現于線程中:復雜算法)
   * 混合型任務 = 視機器配置和復雜度自測而定
   */
  private static int corePoolSize = Runtime.getRuntime().availableProcessors();
  /**
   * public ThreadPoolExecutor(int corePoolSize,int maximumPoolSize,long keepAliveTime,
   *              TimeUnit unit,BlockingQueue<Runnable> workQueue)
   * corePoolSize用于指定核心線程數量
   * maximumPoolSize指定最大線程數
   * keepAliveTime和TimeUnit指定線程空閑后的最大存活時間
   * workQueue則是線程池的緩沖隊列,還未執行的線程會在隊列中等待
   * 監控隊列長度,確保隊列有界
   * 不當的線程池大小會使得處理速度變慢,穩定性下降,并且導致內存泄露。如果配置的線程過少,則隊列會持續變大,消耗過多內存。
   * 而過多的線程又會 由于頻繁的上下文切換導致整個系統的速度變緩——殊途而同歸。隊列的長度至關重要,它必須得是有界的,這樣如果線程池不堪重負了它可以暫時拒絕掉新的請求。
   * ExecutorService 默認的實現是一個無界的 LinkedBlockingQueue。
   */
  private static ThreadPoolExecutor executor = new ThreadPoolExecutor(corePoolSize, corePoolSize+1, 10l, TimeUnit.SECONDS,
      new LinkedBlockingQueue<Runnable>(1000));
  
  public static void main(String[] args) throws InterruptedException {
    List<Future<String>> resultList = new ArrayList<Future<String>>(); 
    //使用submit提交異步任務,并且獲取返回值為future
    resultList.add(executor.submit(new Stats("任務A", 1000)));
    resultList.add(executor.submit(new Stats("任務B", 1000)));
    resultList.add(executor.submit(new Stats("任務C", 1000)));
    resultList.add(executor.submit(new Stats("任務D", 1000)));
    resultList.add(executor.submit(new Stats("任務E", 1000)));
     //遍歷任務的結果
    for (Future<String> fs : resultList) { 
      try { 
        System.out.println(fs.get());//打印各個線任務執行的結果,調用future.get() 阻塞主線程,獲取異步任務的返回結果
      } catch (InterruptedException e) { 
        e.printStackTrace(); 
      } catch (ExecutionException e) { 
        e.printStackTrace(); 
      } finally { 
        //啟動一次順序關閉,執行以前提交的任務,但不接受新任務。如果已經關閉,則調用沒有其他作用。
        executor.shutdown(); 
      } 
    } 
    System.out.println("所有的統計任務執行完成:" + sdf.format(new Date()));
  }

  static class Stats implements Callable<String> {
    String statsName;
    int runTime;

    public Stats(String statsName, int runTime) {
      this.statsName = statsName;
      this.runTime = runTime;
    }

    public String call() {
      try {
        System.out.println(statsName+ " do stats begin at "+ startTime);
        //模擬任務執行時間
        Thread.sleep(runTime);
        System.out.println(statsName + " do stats complete at "+ sdf.format(new Date()));
      } catch (InterruptedException e) {
        e.printStackTrace();
      }
      return call();
    }
  }
}

執行時間

以上代碼,均是偽代碼,下面是2000+個學生的真實測試記錄。

2018-04-17 17:42:29.284 INFO   測試記錄81e51ab031eb4ada92743ddf66528d82-單線程順序執行,花費時間:3797
2018-04-17 17:42:31.452 INFO   測試記錄81e51ab031eb4ada92743ddf66528d82-多線程并行任務,花費時間:2167
2018-04-17 17:42:33.170 INFO   測試記錄81e51ab031eb4ada92743ddf66528d82-多線程并行任務+線程池,花費時間:1717

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持億速云。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

襄樊市| 屯昌县| 延边| 虞城县| 望谟县| 策勒县| 塔城市| 什邡市| 阿拉善左旗| 桃园县| 肥城市| 科技| 梅州市| 桐庐县| 巫溪县| 林西县| 河间市| 无棣县| 南充市| 屯留县| 萍乡市| 咸阳市| 赞皇县| 乌海市| 新绛县| 乌兰察布市| 南康市| 宝丰县| 甘南县| 正蓝旗| 富蕴县| 金昌市| 兴隆县| 宁乡县| 应用必备| 江达县| 武夷山市| 大石桥市| 汉中市| 汶上县| 阳西县|