日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

G1垃圾回收日志分析

發布時間:2024/3/13 编程问答 44 豆豆
生活随笔 收集整理的這篇文章主要介紹了 G1垃圾回收日志分析 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

標準 gc 日志

使用G1垃圾回收器最難的地方是讀懂回收日志。G1回收雖然也是分代的,但是打印出來的日志卻不像其他回收器那樣明顯。所以需要好好配置JVM參數才行。先看下面一段日志,這段日志是通過配置好的JVM參數輸出的,分隔明確,很容易分辨出每次回收過程。

# 每次回收以 花括號開始 # invocations=2302 代表第2302次回收 {Heap before GC invocations=2302 (full 0):garbage-first heap total 32768K, used 30719K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 18 young (18432K), 0 survivors (0K)Metaspace used 7722K, capacity 7936K, committed 8064K, reserved 1056768Kclass space used 1013K, capacity 1068K, committed 1152K, reserved 1048576K# 代表是一次 yong GC ,原因是: 疏散停頓(Evacuation Pause)是將活著的對象從一個區域(young or young + old)拷貝到另一個區域的階段。 2020-10-09T20:13:01.203-0800: 22.971: [GC pause (G1 Evacuation Pause) (young) (to-space exhausted), 0.0062834 secs]# 4 個線程回收[Parallel Time: 0.9 ms, GC Workers: 4][GC Worker Start (ms): Min: 22970.7, Avg: 22970.8, Max: 22971.0, Diff: 0.3][Ext Root Scanning (ms): Min: 0.0, Avg: 0.2, Max: 0.2, Diff: 0.2, Sum: 0.6][Update RS (ms): Min: 0.5, Avg: 0.6, Max: 0.6, Diff: 0.1, Sum: 2.4][Processed Buffers: Min: 4, Avg: 7.5, Max: 10, Diff: 6, Sum: 30][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Termination (ms): Min: 0.0, Avg: 0.0, Max: 0.1, Diff: 0.1, Sum: 0.1][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 0.6, Avg: 0.8, Max: 0.9, Diff: 0.3, Sum: 3.2][GC Worker End (ms): Min: 22971.6, Avg: 22971.6, Max: 22971.6, Diff: 0.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 5.3 ms][Evacuation Failure: 5.0 ms][Choose CSet: 0.0 ms][Ref Proc: 0.2 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms]# 這一行比較簡單,不再解釋[Eden: 18.0M(18.0M)->0.0B(16.0M) Survivors: 0.0B->0.0B Heap: 30.0M(32.0M)->10.7M(32.0M)] Heap after GC invocations=2303 (full 0):garbage-first heap total 32768K, used 10994K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 0 young (0K), 0 survivors (0K)Metaspace used 7722K, capacity 7936K, committed 8064K, reserved 1056768Kclass space used 1013K, capacity 1068K, committed 1152K, reserved 1048576K }# 回收結束標志,各階段耗時[Times: user=0.01 sys=0.00, real=0.00 secs] # 下面是一段mix gc ,以一個yong gc 開始,開始的原因是大對象分配失敗 (G1 Humongous Allocation) {Heap before GC invocations=2303 (full 0):garbage-first heap total 32768K, used 20906K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 9 young (9216K), 0 survivors (0K)Metaspace used 7722K, capacity 7936K, committed 8064K, reserved 1056768Kclass space used 1013K, capacity 1068K, committed 1152K, reserved 1048576K# 初始標記 + yong gc 2020-10-09T20:13:01.212-0800: 22.980: [GC pause (G1 Humongous Allocation) (young) (initial-mark), 0.0008588 secs][Parallel Time: 0.7 ms, GC Workers: 4][GC Worker Start (ms): Min: 22980.2, Avg: 22980.2, Max: 22980.2, Diff: 0.0][Ext Root Scanning (ms): Min: 0.0, Avg: 0.2, Max: 0.3, Diff: 0.3, Sum: 0.9][Update RS (ms): Min: 0.2, Avg: 0.3, Max: 0.3, Diff: 0.1, Sum: 1.0][Processed Buffers: Min: 3, Avg: 4.5, Max: 5, Diff: 2, Sum: 18][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Termination (ms): Min: 0.0, Avg: 0.0, Max: 0.1, Diff: 0.1, Sum: 0.2][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.1, Max: 0.2, Diff: 0.2, Sum: 0.2][GC Worker Total (ms): Min: 0.6, Avg: 0.6, Max: 0.6, Diff: 0.1, Sum: 2.3][GC Worker End (ms): Min: 22980.8, Avg: 22980.8, Max: 22980.8, Diff: 0.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 0.2 ms][Choose CSet: 0.0 ms][Ref Proc: 0.1 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 9216.0K(16.0M)->0.0B(15.0M) Survivors: 0.0B->1024.0K Heap: 21.4M(32.0M)->10.7M(32.0M)] Heap after GC invocations=2304 (full 0):garbage-first heap total 32768K, used 10996K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 7722K, capacity 7936K, committed 8064K, reserved 1056768Kclass space used 1013K, capacity 1068K, committed 1152K, reserved 1048576K }[Times: user=0.00 sys=0.00, real=0.00 secs] # 掃描根節點 2020-10-09T20:13:01.213-0800: 22.981: [GC concurrent-root-region-scan-start] 2020-10-09T20:13:01.213-0800: 22.981: [GC concurrent-root-region-scan-end, 0.0000529 secs] # 并發標記 2020-10-09T20:13:01.213-0800: 22.981: [GC concurrent-mark-start] 2020-10-09T20:13:01.215-0800: 22.983: [GC concurrent-mark-end, 0.0018968 secs] # 重新標記 2020-10-09T20:13:01.215-0800: 22.983: [GC remark 2020-10-09T20:13:01.215-0800: 22.983: [Finalize Marking, 0.0000987 secs] 2020-10-09T20:13:01.215-0800: 22.983: [GC ref-proc, 0.0000624 secs] 2020-10-09T20:13:01.216-0800: 22.983: [Unloading, 0.0018305 secs], 0.0021155 secs][Times: user=0.01 sys=0.00, real=0.00 secs] # 并發清除 2020-10-09T20:13:01.218-0800: 22.985: [GC cleanup 20M->12M(32M), 0.0003173 secs][Times: user=0.00 sys=0.00, real=0.00 secs] 2020-10-09T20:13:01.218-0800: 22.986: [GC concurrent-cleanup-start] 2020-10-09T20:13:01.218-0800: 22.986: [GC concurrent-cleanup-end, 0.0000095 secs] # 再來一次yong gc {Heap before GC invocations=2305 (full 0):garbage-first heap total 32768K, used 22697K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 16 young (16384K), 1 survivors (1024K)Metaspace used 7712K, capacity 7918K, committed 8064K, reserved 1056768Kclass space used 1010K, capacity 1061K, committed 1152K, reserved 1048576K 2020-10-09T20:13:01.220-0800: 22.988: [GC pause (G1 Evacuation Pause) (young), 0.0012414 secs][Parallel Time: 1.0 ms, GC Workers: 4][GC Worker Start (ms): Min: 22988.0, Avg: 22988.0, Max: 22988.1, Diff: 0.0][Ext Root Scanning (ms): Min: 0.1, Avg: 0.1, Max: 0.2, Diff: 0.0, Sum: 0.6][Update RS (ms): Min: 0.6, Avg: 0.7, Max: 0.7, Diff: 0.1, Sum: 2.7][Processed Buffers: Min: 8, Avg: 8.8, Max: 9, Diff: 1, Sum: 35][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Termination (ms): Min: 0.0, Avg: 0.1, Max: 0.1, Diff: 0.1, Sum: 0.3][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 0.9, Avg: 0.9, Max: 0.9, Diff: 0.1, Sum: 3.6][GC Worker End (ms): Min: 22988.9, Avg: 22988.9, Max: 22989.0, Diff: 0.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.1 ms][Other: 0.2 ms][Choose CSet: 0.0 ms][Ref Proc: 0.1 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 15.0M(15.0M)->0.0B(3072.0K) Survivors: 1024.0K->1024.0K Heap: 22.2M(32.0M)->5214.5K(32.0M)] Heap after GC invocations=2306 (full 0):garbage-first heap total 32768K, used 5214K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 7712K, capacity 7918K, committed 8064K, reserved 1056768Kclass space used 1010K, capacity 1061K, committed 1152K, reserved 1048576K }[Times: user=0.00 sys=0.00, real=0.00 secs] # 然后是mix gc {Heap before GC invocations=2306 (full 0):garbage-first heap total 32768K, used 8286K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 4 young (4096K), 1 survivors (1024K)Metaspace used 7712K, capacity 7918K, committed 8064K, reserved 1056768Kclass space used 1010K, capacity 1061K, committed 1152K, reserved 1048576K 2020-10-09T20:13:01.223-0800: 22.991: [GC pause (G1 Evacuation Pause) (mixed), 0.0009352 secs][Parallel Time: 0.6 ms, GC Workers: 4][GC Worker Start (ms): Min: 22990.7, Avg: 22990.7, Max: 22990.8, Diff: 0.1][Ext Root Scanning (ms): Min: 0.1, Avg: 0.2, Max: 0.3, Diff: 0.1, Sum: 0.8][Update RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Processed Buffers: Min: 0, Avg: 0.2, Max: 1, Diff: 1, Sum: 1][Scan RS (ms): Min: 0.0, Avg: 0.1, Max: 0.1, Diff: 0.1, Sum: 0.2][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.2, Diff: 0.2, Sum: 0.2][Object Copy (ms): Min: 0.1, Avg: 0.3, Max: 0.4, Diff: 0.3, Sum: 1.1][Termination (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 0.5, Avg: 0.6, Max: 0.6, Diff: 0.1, Sum: 2.3][GC Worker End (ms): Min: 22991.3, Avg: 22991.3, Max: 22991.3, Diff: 0.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 0.2 ms][Choose CSet: 0.0 ms][Ref Proc: 0.1 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 3072.0K(3072.0K)->0.0B(18.0M) Survivors: 1024.0K->1024.0K Heap: 8286.5K(32.0M)->4441.5K(32.0M)] Heap after GC invocations=2307 (full 0):garbage-first heap total 32768K, used 4441K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 7712K, capacity 7918K, committed 8064K, reserved 1056768Kclass space used 1010K, capacity 1061K, committed 1152K, reserved 1048576K }[Times: user=0.00 sys=0.00, real=0.00 secs]

觀察上面的gc日志可以總結出以下幾點

  • mix gc 開始的標志是 initial-mark ,每次要從一次yong gc開始
  • mix gc 中間可能還夾雜著 yong gc (除了開始的那一次)
  • [Times: user=0.01 sys=0.00, real=0.00 secs] 字樣 代表的時長并不每個階段都有。
    4 上面的JVM參數是
  • -XX:+PrintHeapAtGC # 每次gc前后輸出堆信息,對分隔G1的gc過程很有用 -XX:+PrintGCDetails -XX:+UseG1GC -Xmx32m -Xloggc:gc.log # gc日志輸出到指定文本 -XX:+PrintGCDateStamps

    詳細GC日志

    上面的日志基本上已經夠用了,如果想更精細一點可以加上 -XX:+PrintAdaptiveSizePolicy 打印內存調節的過程。然后日志如下所示
    對于普通的yong gc ,日志如下:

    {Heap before GC invocations=823 (full 0):garbage-first heap total 32768K, used 26794K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 19 young (19456K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K# 根據現有的內存狀態,預測要回收15.62 ms, 目標是停頓小于 200ms,還有184.38的調整空間。根據這個可以適當調整堆棧比例。 2020-10-09T20:09:58.017-0800: 24.625: [GC pause (G1 Evacuation Pause) (young) 24.625: [G1Ergonomics (CSet Construction) start choosing CSet, _pending_cards: 0, predicted base time: 15.62 ms, remaining time: 184.38 ms, target pause time: 200.00 ms]24.625: [G1Ergonomics (CSet Construction) add young regions to CSet, eden: 18 regions, survivors: 1 regions, predicted young region time: 0.03 ms]24.625: [G1Ergonomics (CSet Construction) finish choosing CSet, eden: 18 regions, survivors: 1 regions, old: 0 regions, predicted pause time: 15.65 ms, target pause time: 200.00 ms]# gc消耗的時間太長了,說明內存不夠用了,可以嘗試擴容24.648: [G1Ergonomics (Heap Sizing) attempt heap expansion, reason: recent GC overhead higher than threshold after GC, recent GC overhead: 39.83 %, threshold: 10.00 %, uncommitted: 0 bytes, calculated expansion amount: 0 bytes (20.00 %)] , 0.0230167 secs][Parallel Time: 11.5 ms, GC Workers: 4][GC Worker Start (ms): Min: 24624.8, Avg: 24625.5, Max: 24626.2, Diff: 1.4][Ext Root Scanning (ms): Min: 0.0, Avg: 0.2, Max: 0.8, Diff: 0.8, Sum: 0.8][Update RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Processed Buffers: Min: 0, Avg: 0.2, Max: 1, Diff: 1, Sum: 1][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Termination (ms): Min: 0.0, Avg: 3.0, Max: 10.7, Diff: 10.7, Sum: 12.0][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 0.0, Avg: 3.2, Max: 10.7, Diff: 10.7, Sum: 12.9][GC Worker End (ms): Min: 24626.2, Avg: 24628.7, Max: 24636.2, Diff: 10.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 11.5 ms][Choose CSet: 0.0 ms][Ref Proc: 11.4 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 18.0M(18.0M)->0.0B(18.0M) Survivors: 1024.0K->1024.0K Heap: 26.2M(32.0M)->6315.7K(32.0M)] Heap after GC invocations=824 (full 0):garbage-first heap total 32768K, used 6315K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K }[Times: user=0.00 sys=0.00, real=0.03 secs]

    對于普通的yong gc日志就是上面這樣一個接一個。但是mix gc完全不一樣,開始的時候回打印gc開始的原因,結束的時候會打印gc結束的原因。

    # 觸發了concurrent cycle。開始concurrent cycle有2個條件: # 申請H-OBJ(申請的內存大于Region的一半) # 堆占用率達到45%。 # 這里的原因是堆占用率達到45%24.658: [G1Ergonomics (Concurrent Cycles) request concurrent cycle initiation, reason: occupancy higher than threshold, occupancy: 12582912 bytes, allocation request: 3549488 bytes, threshold: 15099480 bytes (45.00 %), source: concurrent humongous allocation]24.658: [G1Ergonomics (Concurrent Cycles) request concurrent cycle initiation, reason: requested by GC cause, GC cause: G1 Humongous Allocation]# 一個yong gc開始,標志 initial-mark {Heap before GC invocations=824 (full 0):garbage-first heap total 32768K, used 25048K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 17 young (17408K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K24.658: [G1Ergonomics (Concurrent Cycles) initiate concurrent cycle, reason: concurrent cycle initiation requested] 2020-10-09T20:09:58.050-0800: 24.658: [GC pause (G1 Humongous Allocation) (young) (initial-mark) 24.658: [G1Ergonomics (CSet Construction) start choosing CSet, _pending_cards: 0, predicted base time: 17.61 ms, remaining time: 182.39 ms, target pause time: 200.00 ms]24.658: [G1Ergonomics (CSet Construction) add young regions to CSet, eden: 16 regions, survivors: 1 regions, predicted young region time: 0.03 ms]24.658: [G1Ergonomics (CSet Construction) finish choosing CSet, eden: 16 regions, survivors: 1 regions, old: 0 regions, predicted pause time: 17.64 ms, target pause time: 200.00 ms]24.681: [G1Ergonomics (Heap Sizing) attempt heap expansion, reason: recent GC overhead higher than threshold after GC, recent GC overhead: 44.10 %, threshold: 10.00 %, uncommitted: 0 bytes, calculated expansion amount: 0 bytes (20.00 %)] , 0.0231035 secs][Parallel Time: 11.7 ms, GC Workers: 4][GC Worker Start (ms): Min: 24658.3, Avg: 24658.5, Max: 24658.7, Diff: 0.4][Ext Root Scanning (ms): Min: 0.0, Avg: 0.8, Max: 1.4, Diff: 1.3, Sum: 3.1][Update RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Processed Buffers: Min: 0, Avg: 0.2, Max: 1, Diff: 1, Sum: 1][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.1, Diff: 0.1, Sum: 0.1][Termination (ms): Min: 0.0, Avg: 3.0, Max: 10.9, Diff: 10.9, Sum: 12.0][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 1.1, Avg: 3.8, Max: 11.6, Diff: 10.6, Sum: 15.3][GC Worker End (ms): Min: 24659.8, Avg: 24662.4, Max: 24669.9, Diff: 10.1][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 11.3 ms][Choose CSet: 0.0 ms][Ref Proc: 11.2 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 16.0M(18.0M)->0.0B(18.0M) Survivors: 1024.0K->1024.0K Heap: 25.5M(32.0M)->3625.0K(32.0M)] Heap after GC invocations=825 (full 0):garbage-first heap total 32768K, used 3625K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K }[Times: user=0.01 sys=0.00, real=0.02 secs] 2020-10-09T20:09:58.074-0800: 24.682: [GC concurrent-root-region-scan-start] 2020-10-09T20:09:58.075-0800: 24.683: [GC concurrent-root-region-scan-end, 0.0008813 secs] 2020-10-09T20:09:58.075-0800: 24.683: [GC concurrent-mark-start] 2020-10-09T20:09:58.084-0800: 24.692: [GC concurrent-mark-end, 0.0091770 secs] 2020-10-09T20:09:58.084-0800: 24.692: [GC remark 2020-10-09T20:09:58.084-0800: 24.692: [Finalize Marking, 0.0018289 secs] 2020-10-09T20:09:58.086-0800: 24.694: [GC ref-proc, 0.0001201 secs] 2020-10-09T20:09:58.086-0800: 24.694: [Unloading, 0.0022931 secs], 0.0045892 secs][Times: user=0.01 sys=0.00, real=0.00 secs] 2020-10-09T20:09:58.089-0800: 24.697: [GC cleanup 15M->15M(32M), 0.0002603 secs][Times: user=0.00 sys=0.00, real=0.00 secs] {Heap before GC invocations=826 (full 0):garbage-first heap total 32768K, used 27824K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 19 young (19456K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K# 再來一次yong gc 2020-10-09T20:09:58.095-0800: 24.703: [GC pause (G1 Evacuation Pause) (young) 24.703: [G1Ergonomics (CSet Construction) start choosing CSet, _pending_cards: 3, predicted base time: 18.84 ms, remaining time: 181.16 ms, target pause time: 200.00 ms]24.703: [G1Ergonomics (CSet Construction) add young regions to CSet, eden: 18 regions, survivors: 1 regions, predicted young region time: 0.03 ms]24.703: [G1Ergonomics (CSet Construction) finish choosing CSet, eden: 18 regions, survivors: 1 regions, old: 0 regions, predicted pause time: 18.87 ms, target pause time: 200.00 ms]24.707: [G1Ergonomics (Heap Sizing) attempt heap expansion, reason: recent GC overhead higher than threshold after GC, recent GC overhead: 50.01 %, threshold: 10.00 %, uncommitted: 0 bytes, calculated expansion amount: 0 bytes (20.00 %)]# 正??苫厥盏膶ο蟛怀^5%,停止 mixed 回收。24.707: [G1Ergonomics (Mixed GCs) do not start mixed GCs, reason: reclaimable percentage not over threshold, candidate old regions: 3 regions, reclaimable: 1661096 bytes (4.95 %), threshold: 5.00 %] , 0.0043467 secs][Parallel Time: 1.5 ms, GC Workers: 4][GC Worker Start (ms): Min: 24702.6, Avg: 24703.3, Max: 24704.0, Diff: 1.4][Ext Root Scanning (ms): Min: 0.0, Avg: 0.7, Max: 1.4, Diff: 1.4, Sum: 2.9][Update RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Processed Buffers: Min: 0, Avg: 0.5, Max: 1, Diff: 1, Sum: 2][Scan RS (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Code Root Scanning (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][Object Copy (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.1][Termination (ms): Min: 0.0, Avg: 0.0, Max: 0.1, Diff: 0.1, Sum: 0.2][Termination Attempts: Min: 1, Avg: 1.0, Max: 1, Diff: 0, Sum: 4][GC Worker Other (ms): Min: 0.0, Avg: 0.0, Max: 0.0, Diff: 0.0, Sum: 0.0][GC Worker Total (ms): Min: 0.0, Avg: 0.8, Max: 1.5, Diff: 1.5, Sum: 3.2][GC Worker End (ms): Min: 24704.0, Avg: 24704.1, Max: 24704.1, Diff: 0.0][Code Root Fixup: 0.0 ms][Code Root Purge: 0.0 ms][Clear CT: 0.0 ms][Other: 2.8 ms][Choose CSet: 0.0 ms][Ref Proc: 2.7 ms][Ref Enq: 0.0 ms][Redirty Cards: 0.0 ms][Humongous Register: 0.0 ms][Humongous Reclaim: 0.0 ms][Free CSet: 0.0 ms][Eden: 18.0M(18.0M)->0.0B(18.0M) Survivors: 1024.0K->1024.0K Heap: 27.2M(32.0M)->5925.8K(32.0M)] Heap after GC invocations=827 (full 0):garbage-first heap total 32768K, used 5925K [0x00000007be000000, 0x00000007be100100, 0x00000007c0000000)region size 1024K, 1 young (1024K), 1 survivors (1024K)Metaspace used 11630K, capacity 11998K, committed 12160K, reserved 1060864Kclass space used 1511K, capacity 1588K, committed 1664K, reserved 1048576K }[Times: user=0.01 sys=0.00, real=0.00 secs]
  • 什么時候發生Mixed GC?
    -XX:G1HeapWastePercent
    通過-XX:G1HeapWastePercent指定觸發Mixed GC的堆垃圾占比,默認值5%,也就是在全局標記結束后能夠統計出所有Cset內可被回收的垃圾占整對的比例值,如果超過5%,那么就會觸發之后的多輪Mixed GC,如果不超過,那么會在之后的某次Young GC中重新執行全局并發標記。可以嘗試適當的調高此閾值,能夠適當的降低Mixed GC的頻率。
  • 由一些參數控制,另外也控制著哪些老年代Region會被選入CSet(收集集合)。
    G1HeapWastePercent:在global concurrent marking結束之后,我們可以知道old gen regions中有多少空間要被回收,在每次YGC之后和再次發生Mixed GC之前,會檢查垃圾占比是否達到此參數,只有達到了,下次才會發生Mixed GC。
    G1MixedGCLiveThresholdPercent:old generation region中的存活對象的占比,只有在此參數之下,才會被選入CSet。
    G1MixedGCCountTarget:一次global concurrent marking之后,最多執行Mixed GC的次數。
    G1OldCSetRegionThresholdPercent:一次Mixed GC中能被選入CSet的最多old generation region數量。

  • 什么樣的region會納入cSet
    通過-XX:G1MixedGCLiveThresholdPercent指定被納入Cset的Region的存活空間占比閾值,不同版本默認值不同,有65%和85%。在全局并發標記階段,如果一個Region的存活對象的空間占比低于此值,則會被納入Cset。 此值直接影響到Mixed GC選擇回收的區域,當發現GC時間較長時,可以嘗試調低此閾值,盡量優先選擇回收垃圾占比高的Region,但此舉也可能導致垃圾回收的不夠徹底,最終觸發Full GC。但是納入的region還是有上限的,由G1MixedGCCountTarget控制,默認不超過全部Region的10%。
  • 什么時候觸發全局標記
    通過-XX:InitiatingHeapOccupancyPercent指定觸發全局并發標記的老年代使用占比,默認值45%,也就是老年代占堆的比例超過45%。如果Mixed GC周期結束后老年代使用率還是超過45%,那么會再次觸發全局并發標記過程,這樣就會導致頻繁的老年代GC,影響應用吞吐量。同時老年代空間不大,Mixed GC回收的空間肯定是偏少的??梢赃m當調高IHOP的值,當然如果此值太高,很容易導致年輕代晉升失敗而觸發Full GC,所以需要多次調整測試。
  • 一次全局標記后可以多次mix回收
    通過-XX:G1MixedGCCountTarget指定一個周期內觸發Mixed GC最大次數,默認值8。一次全局并發標記后,最多接著8次Mixed GC,把全局并發標記階段生成的Cset里的Region拆分為最多8部分,然后在每輪Mixed GC里收集一部分。這個值要和上一個參數配合使用,8*10%=80%,應該來說會大于每次標記階段的Cset集合了。一般此參數也不需額外調整。
  • 參考:https://zhuanlan.zhihu.com/p/181305087

    總結

    以上是生活随笔為你收集整理的G1垃圾回收日志分析的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

    亚洲aⅴ在线观看 | 精品视频国产一区 | 日韩在线精品 | 亚洲片在线 | 欧美最猛性xxxx | 狠狠狠狠干 | 91av观看| www黄| 欧美日韩一区二区三区在线观看视频 | 日韩影视在线观看 | 国产亚洲欧美在线视频 | 精品一二区 | 91丨九色丨高潮丰满 | 日韩中文字幕免费视频 | 欧美一级淫片videoshd | 999视频在线播放 | 久久免费视频6 | 日韩欧美极品 | 亚洲成人资源在线观看 | 久久综合久久综合九色 | 天天色天天艹 | 天天射天天干天天 | 精品久久久久国产免费第一页 | 美女视频黄免费的 | 九九热免费在线视频 | 在线国产视频 | 天天超碰| 日韩av网站在线播放 | 亚洲最大免费成人网 | 久久久久久久久久久久99 | 国产一区高清在线观看 | 国产精品毛片久久久久久久 | 天天爱天天操天天干 | 免费视频97| 99av在线视频 | 久久情爱 | 综合色亚洲 | 国产精品第7页 | 中文字幕精品一区 | 久久久久国产精品免费网站 | av大全在线看| 91中文在线 | 亚洲免费色 | 欧美极品一区二区三区 | 日韩av电影中文字幕 | 国产精品免费观看在线 | 亚洲日韩中文字幕在线播放 | 日韩久久精品一区 | 亚洲欧洲精品视频 | 精品96久久久久久中文字幕无 | 精品91 | 国产精品mv在线观看 | 国产一区二区三区在线免费观看 | 香蕉97视频观看在线观看 | 91av精品 | 伊人成人久久 | 久久精品99精品国产香蕉 | av福利电影 | 狠狠躁天天躁 | 九九免费精品 | 91精品啪在线观看国产线免费 | 精品国产伦一区二区三区观看方式 | 亚洲日本成人网 | 日韩精品免费一线在线观看 | 日韩精品免费在线视频 | 国产中文字幕第一页 | 日韩欧美精选 | 精品999 | 成人a级网站 | 2021国产精品 | 日韩精品专区 | 91九色porny蝌蚪主页 | 久久试看 | 久久精品国产一区二区 | 国际精品久久久久 | 在线视频观看成人 | 五月天丁香亚洲 | 国产成人久久av免费高清密臂 | 中文字幕av最新更新 | 精品一区电影国产 | 午夜久久电影网 | 精品国产欧美一区二区三区不卡 | 国产在线观看网站 | 九九热只有精品 | 色狠狠久久av五月综合 | 亚州精品在线视频 | 在线观看午夜 | 国产视频色 | 日韩免| 最近高清中文字幕在线国语5 | 中文字幕视频三区 | 国产精品国产三级国产不产一地 | 在线免费高清一区二区三区 | 免费精品人在线二线三线 | 99中文字幕在线观看 | 中文字幕在线视频国产 | 国产一级一片免费播放放a 一区二区三区国产欧美 | 少妇自拍av | 国内久久久 | 日本三级大片 | 91av福利视频 | 久久久久黄色 | 亚洲成熟女人毛片在线 | 最新久久久 | 黄色免费观看网址 | 久久99久久99精品免费看小说 | 99色在线观看视频 | 日韩乱码在线 | 成人毛片a | 99久久精品久久久久久清纯 | 五月天综合色激情 | 亚洲一级黄色大片 | 国产成人精品一区二区三区网站观看 | 日本精品va在线观看 | a天堂最新版中文在线地址 久久99久久精品国产 | av手机版| 999视频网| 福利一区二区 | 国产视频不卡 | 高清不卡毛片 | 懂色av一区二区在线播放 | 久久久精品欧美一区二区免费 | a在线一区| 99色在线播放 | 精品在线一区二区三区 | 欧美在线不卡一区 | 亚洲女人av | 国产精品一级在线 | 天天干天天操天天射 | 免费三级a | 国产91学生粉嫩喷水 | 国产一区二区中文字幕 | 日韩有码第一页 | 999在线视频 | 国产高清无线码2021 | 午夜久久久久久久久久影院 | 天无日天天操天天干 | 免费看黄色小说的网站 | 人人干人人上 | 国产精品美女免费看 | 亚洲精品无 | 国产精品免费看久久久8精臀av | 五月婷婷丁香网 | 日韩欧美v | 精品一区二区av | 免费观看视频的网站 | 亚洲三级视频 | 久久精品最新 | 亚洲在线精品 | 国产精品96久久久久久吹潮 | 日韩在线观看精品 | 91少妇精拍在线播放 | 操久久免费视频 | 久久久久久久久久久高潮一区二区 | 99精品视频在线观看免费 | 日日干日日| 国产黄色片久久久 | 亚洲精品视频免费观看 | 日韩午夜网站 | 中文字幕视频一区 | 中文字幕在线网址 | 日韩成人精品 | 欧美日韩1区 | 91av免费观看 | 天天干夜夜夜操天 | 狠狠狠色丁香综合久久天下网 | 国产首页 | 亚洲国产精品电影 | 欧美精品在线观看一区 | 国产91区 | 精品久久久久久国产偷窥 | 丁香九月婷婷综合 | 在线播放国产一区二区三区 | www色网站| 亚洲乱码中文字幕综合 | 亚洲砖区区免费 | 视频在线99re| 日韩精品专区在线影院重磅 | 黄污网站在线观看 | 欧美a级在线 | 波多野结衣综合网 | 久草国产在线观看 | 一级黄色在线免费观看 | 夜夜看av | 成人午夜在线电影 | 午夜视频在线观看一区二区 | 亚洲电影一区二区 | 久久久免费精品视频 | 在线免费高清一区二区三区 | 涩涩网站在线 | 国产一级特黄电影 | 激情在线免费视频 | 成人午夜片av在线看 | 婷婷综合亚洲 | 国产成人61精品免费看片 | 久久免费试看 | 国产69精品久久app免费版 | www狠狠操 | 亚洲激情六月 | 亚洲精品午夜久久久 | 国产麻豆精品在线观看 | 日日干av| 热99在线| 国产精品成人国产乱一区 | 久久久www免费电影网 | 国产成人精品午夜在线播放 | 国产一区二区三区久久久 | 亚洲高清视频在线观看免费 | 国产精品一区二区久久国产 | 国产精品18久久久久白浆 | 偷拍精品一区二区三区 | 88av视频| 狠狠狠狠狠狠狠狠干 | 国产免费观看高清完整版 | 亚洲精品乱码久久久久久写真 | av在线播放中文字幕 | 成人在线观看你懂的 | 狠狠网 | 国产精品igao视频网入口 | 91免费的视频在线播放 | 日韩系列 | 99久久国产免费看 | 亚洲国产精品人久久电影 | 一区二区三区四区在线免费观看 | av中文在线影视 | 91av99| 国产精品毛片久久久 | av福利免费 | 久久五月天婷婷 | 国产成人精品久久 | 亚洲黄色免费网站 | 久久天天操 | 国内精品久久久久久久久久久久 | 免费高清无人区完整版 | 日本高清久久久 | 国产精品不卡在线播放 | a天堂在线看 | 色偷偷888欧美精品久久久 | 久久国产视屏 | 怡红院成人在线 | 国产视频一区在线播放 | 久久综合狠狠综合久久激情 | 亚洲激情五月 | 日韩精品免费一区二区 | 97超碰在线免费 | 中文字幕一区二区三区四区 | 午夜精品视频一区 | av电影免费看 | 午夜精品视频福利 | 中文字幕一区二区三区视频 | 激情五月***国产精品 | 婷婷激情久久 | 成人av电影网址 | 久久私人影院 | 久久av在线 | 午夜av免费在线观看 | 日韩成人不卡 | 久久久久综合精品福利啪啪 | 国产香蕉在线 | 欧美一级片免费 | 国产综合香蕉五月婷在线 | 黄色片网站大全 | 国产91精品一区二区 | 国产在线国偷精品产拍 | 91福利社在线观看 | 久草在线观看视频免费 | 人人插人人费 | 亚洲国内精品在线 | 超碰在线最新地址 | 在线日本看片免费人成视久网 | 久久国产精品偷 | 久久a v电影 | 97色婷婷 | 天天插伊人| 成人精品影视 | 久久婷婷色综合 | 亚洲国产av精品毛片鲁大师 | 在线观看的黄色 | 国产精品涩涩屋www在线观看 | 久久久伊人网 | av丁香| 国产精品免费久久久久影院仙踪林 | 伊人在线视频 | 日韩av资源站 | 黄色av在 | 午夜91在线 | 五月天色综合 | aaa亚洲精品一二三区 | 国产精品国产自产拍高清av | 99综合视频 | 亚洲成人动漫在线观看 | 日本三级中文字幕在线观看 | 99r精品视频在线观看 | 天天干天天爽 | 色噜噜狠狠狠狠色综合久不 | 久久精品视频在线看 | 草在线| 国产一级视频在线免费观看 | 91九色免费视频 | 日韩在线无 | 亚洲情婷婷 | www.夜夜| 国产精品久久久久久久久久免费 | 91看片黄色 | 婷婷在线网站 | 97夜夜澡人人爽人人免费 | 欧美福利在线播放 | 亚洲精品黄色片 | 欧美午夜精品久久久久久浪潮 | 久久天天操 | 亚洲 欧美变态 另类 综合 | 天天操夜 | 玖玖视频精品 | 亚洲免费av电影 | 五月亚洲婷婷 | 99色免费视频 | www.天天操| av+在线播放在线播放 | 中文字幕超清在线免费 | 久久精品免费看 | 综合五月婷婷 | 日本精品一区二区三区在线播放视频 | 狠狠地操| 日日夜夜草 | 国产精品麻豆果冻传媒在线播放 | 国内99视频| 欧美激情第一区 | 婷婷六月综合亚洲 | 色视频网址 | 久久久久久高潮国产精品视 | 日本中文字幕网 | 国产一级一片免费播放放a 一区二区三区国产欧美 | 国产专区在线播放 | 久草视频在线资源 | 中文字幕欧美激情 | av一级片网站 | www欧美色 | 亚洲精品成人在线 | 久久99久久99精品 | 奇米网网址 | 久久久久久久久久久高潮一区二区 | 国产精品麻豆果冻传媒在线播放 | 天天操天天射天天 | 日韩av电影中文字幕 | www夜夜操com| 99精彩视频| av大全在线播放 | 成人蜜桃视频 | 精品1区二区 | 日本久久久久久久久久 | 特级西西444www大胆高清无视频 | 中文字幕视频一区二区 | 国模精品一区二区三区 | adn—256中文在线观看 | 欧美日本在线观看视频 | 狠狠躁日日躁 | 亚洲高清在线观看视频 | 久久r精品 | 亚洲精品综合一区二区 | 日韩中文字幕免费看 | 国产中文 | 午夜精品福利一区二区 | 又黄又色又爽 | 精精国产xxxx视频在线播放 | 99色精品视频 | 亚洲人视频在线 | 国产精品完整版 | 丁香久久久 | 午夜.dj高清免费观看视频 | 热久久免费国产视频 | 中文字幕在线免费看线人 | 91中文字幕网 | 伊人天天干 | 日韩精品一区二区三区三炮视频 | 精品久久免费看 | 毛片无卡免费无播放器 | 日韩av电影中文字幕 | 最近高清中文字幕 | 日韩网站一区二区 | 亚洲四虎在线 | 人人爽人人澡人人添人人人人 | 亚洲精品在线观看网站 | 操操碰| 成全免费观看视频 | 天天色天天草天天射 | 在线精品视频免费播放 | 色综合天 | 中文字幕欧美日韩va免费视频 | 成人网在线免费视频 | 日日骑 | 91网在线观看 | 日韩中文在线电影 | 一级特黄aaa大片在线观看 | 日韩免费网址 | 樱空桃av| 天天插天天| 亚洲理论片在线观看 | 国产人免费人成免费视频 | 国产高清免费在线观看 | 久久精品中文字幕免费mv | av中文字幕第一页 | 中国一级片在线观看 | 91插插视频 | 久草在线精品观看 | 成人黄视频 | 久久精品亚洲精品国产欧美 | 日韩动态视频 | 福利视频区 | 国产亚洲精品日韩在线tv黄 | 怡红院av| 日本婷婷色 | 日韩高清在线不卡 | 久草在线视频在线 | 成人午夜电影在线观看 | 亚洲黄色在线观看 | 狠狠干成人综合网 | 中文字幕观看av | 国产 日韩 欧美 中文 在线播放 | 成人97人人超碰人人99 | 中文国产成人精品久久一 | 国产精品久久久久永久免费观看 | 天天综合网天天综合色 | 婷婷在线视频 | 91毛片在线观看 | 日本mv大片欧洲mv大片 | 成人免费观看网站 | 亚洲午夜久久久久久久久 | 国产高清不卡在线 | 日韩精品免费在线视频 | 免费视频网 | 91九色视频在线 | 色综合激情网 | 国产精品久久久av | 青青河边草免费 | 五月激情在线 | 视频在线播放国产 | 国产99久久九九精品免费 | 精品福利在线视频 | 国产一区二区午夜 | 天天色官网 | 美女很黄免费网站 | 亚洲成人一二三 | 中文字幕精品视频 | 日韩成人免费在线电影 | 国产香蕉视频在线播放 | 国内精品久久久久久中文字幕 | 天堂av一区二区 | 久久精品3| 免费看国产一级片 | 久久亚洲区 | 日韩精品免费在线观看视频 | 国产在线欧美 | 国产成人在线一区 | 国产黄色理论片 | 97在线免费视频观看 | 亚洲h视频在线 | 91久久精品一区二区二区 | 国产明星视频三级a三级点| 91视频xxxx| av电影一区| 97超碰.com| 丁香六月婷婷开心婷婷网 | 久久99久久99精品免视看婷婷 | 国产精品热 | 日韩手机视频 | 在线只有精品 | 在线a人v观看视频 | 久久噜噜少妇网站 | 干干日日| 91麻豆视频网站 | 在线三级播放 | 在线观看视频国产 | 就要干b | 国产一级黄 | 亚洲精品字幕 | 国产精品成人免费精品自在线观看 | 日韩色在线 | 欧美一级黄色网 | 欧美永久视频 | 毛片二区| 18pao国产成视频永久免费 | 69久久99精品久久久久婷婷 | 99精品国产99久久久久久福利 | 91视频网址入口 | 六月丁香六月婷婷 | 成人免费视频播放 | 国产精品久久久久久久久久久久午夜 | aaa毛片视频 | 亚洲成人免费在线 | 精品uu | 免费在线观看一级片 | 午夜精品视频在线 | 综合色在线观看 | 四虎在线影视 | 波多野结衣在线观看一区 | 久久综合五月婷婷 | 日韩激情中文字幕 | 国产99久久精品 | 成人理论在线观看 | 成人黄性视频 | 国内精品久久久精品电影院 | 国产亚洲精品久久久久久久久久 | 久久夜色精品国产欧美乱极品 | 97视频免费观看2区 亚洲视屏 | 国产美女在线观看 | 噜噜色官网| 92中文资源在线 | 国产手机在线 | 日日夜夜天天久久 | www.日韩免费 | 亚洲精品99久久久久中文字幕 | 国产小视频免费观看 | 精品国偷自产国产一区 | 久久精品日产第一区二区三区乱码 | 久久久视频在线 | 亚洲aⅴ一区二区三区 | 夜夜爽天天爽 | 亚洲精品一区二区三区四区高清 | 精品福利视频在线观看 | 一区二区三区四区在线免费观看 | 日韩精品字幕 | 国产美女精品视频免费观看 | 午夜免费福利视频 | 久操久 | 人人舔人人插 | 免费在线日韩 | 色视频网站在线 | 九九热只有这里有精品 | 综合色在线 | 久久精视频| 免费在线精品视频 | 国产黄色精品网站 | 激情图片qvod | 久久高清毛片 | 美女黄久久 | 久久久久久久久久久免费视频 | 亚洲美女久久 | 91干干干| 综合色在线观看 | 免费看黄20分钟 | 玖玖在线免费视频 | 欧美性生活小视频 | 又污又黄网站 | av资源中文字幕 | 免费在线精品视频 | 天天射天天射天天 | 欧美日韩在线免费观看视频 | 97超碰人人澡 | 男女全黄一级一级高潮免费看 | 天天激情综合网 | 97精品国产97久久久久久免费 | 国产精品美女久久久免费 | 天天干天天操天天爱 | 午夜黄色大片 | 亚洲一区二区视频 | 国产99久久精品一区二区300 | 丁香婷婷综合色啪 | www.夜色321.com | 综合激情 | 在线直播av| 啪啪免费视频网站 | 97超碰色偷偷| 99精品免费观看 | 日韩在线观看中文 | 久久久亚洲影院 | 日本公乱妇视频 | 久久精品艹 | 国产精品日韩欧美一区二区 | 人人插人人澡 | 激情五月视频 | 久久久久久高清 | 亚洲97在线 | 日本动漫做毛片一区二区 | 99精品欧美一区二区三区 | 久久女同性恋中文字幕 | 视频在线99re | 欧美日韩久久不卡 | 丁香六月在线观看 | 天天干天天操天天射 | 免费情缘| 人人澡人人舔 | 超碰官网| 99久久精品免费看国产麻豆 | 黄色一级大片在线观看 | 天天综合网久久综合网 | 亚洲高清视频一区二区三区 | 一级免费片| 亚洲成aⅴ人片久久青草影院 | 国产大尺度视频 | 福利一区二区 | 日日夜夜天天干 | 久久免费看视频 | 天堂在线免费视频 | 欧美日韩天堂 | 国产白浆视频 | 91人人澡| 麻豆91精品91久久久 | 中文字幕资源在线 | 国产成人亚洲精品自产在线 | 亚洲精品麻豆视频 | 干天天 | 日韩欧美在线视频一区二区三区 | 美女久久 | 久久视频精品在线 | 欧美精品久久久久久久久久久 | 欧美久久99 | 黄色亚洲大片免费在线观看 | 色欧美成人精品a∨在线观看 | 国产视频精品久久 | 中文字幕观看av | 国产精品爽爽久久久久久蜜臀 | 丁香婷婷激情啪啪 | 国产污视频在线观看 | 国产精品乱码在线 | 国产成人无码AⅤ片在线观 日韩av不卡在线 | 国产精品综合久久久久 | 超碰在线日本 | 麻豆 videos| 亚洲最新合集 | 亚洲激情视频在线观看 | 一级片观看 | 黄色av电影在线 | 欧美激情片在线观看 | 亚洲成人第一区 | 国内精品久久久久影院一蜜桃 | 日韩中文在线字幕 | 中文字幕在线免费观看 | 黄色大片网 | 最新国产精品亚洲 | 成人在线免费av | 91日韩精品视频 | 免费在线观看黄网站 | 色国产在线 | 久久久精品国产免费观看同学 | 久久久久久久久爱 | www.香蕉视频在线观看 | 久草电影网 | 深爱激情亚洲 | 欧美日韩高清一区二区三区 | 青春草国产视频 | 国产精品成久久久久三级 | 久久伊人五月天 | 日韩区在线观看 | 在线不卡视频 | 成年人免费在线观看 | 国产又粗又硬又长又爽的视频 | 日韩精品一区二区久久 | 国产精品久久久久久久久大全 | 国产免费成人 | 亚洲成av人影院 | 91在线九色 | 黄色的视频网站 | 亚洲成人av电影 | a久久久久 | 日韩乱码在线 | 亚洲精品1区2区3区 超碰成人网 | 97操操操 | 伊人五月天综合 | 911香蕉视频 | 国产精品毛片一区二区在线看 | 亚洲人av免费网站 | www.777奇米 | 亚洲人xxx | av超碰在线观看 | 久艹视频免费观看 | 国产黑丝一区二区三区 | 91激情视频在线播放 | 999在线精品 | 亚洲欧洲一区二区在线观看 | 夜色.com | 久久99热精品这里久久精品 | 亚洲激情电影在线 | 亚洲天堂自拍视频 | 久综合网 | 亚洲影音先锋 | 亚洲成人国产精品 | 亚洲在线精品视频 | 国产精品久久久久久模特 | 免费亚洲一区二区 | 99久久日韩精品视频免费在线观看 | 国产精品久久99综合免费观看尤物 | av中文字幕在线看 | 亚洲精品乱码久久 | 国产黄色观看 | 91精品啪在线观看国产 | www黄在线 | 色www. | 国产一级免费视频 | 99精品一区二区 | 久久久亚洲影院 | 亚洲精品福利在线观看 | 久久伦理 | 久久精品久久综合 | 天天干,夜夜操 | 久久久久久久影院 | 有码一区二区三区 | av电影免费| 免费国产在线精品 | 四虎精品成人免费网站 | 天天干天天拍天天操天天拍 | 深夜免费小视频 | 干综合网| 亚洲永久精品一区 | 成人亚洲网 | 欧美三级高清 | 成人动图| 免费看三级黄色片 | 国产视频99| 91精品国产92久久久久 | 999久久久久久久久6666 | 99久在线精品99re8热视频 | www.久久com | 99视频黄| av大片网站 | 亚洲爱av | 国产一区 在线播放 | 99在线免费观看 | 在线观看网站黄 | 久久精品免费 | 亚州精品视频 | av中文字幕网 | 丝袜美女视频网站 | 九九视频网 | 日韩区欧美久久久无人区 | 九色在线 | 中文字幕乱在线伦视频中文字幕乱码在线 | 在线观看中文字幕2021 | 国产区网址 | 欧美成人xxxx | 国产中文字幕久久 | 麻豆视频在线免费 | 免费av在线网 | 日韩理论片 | 探花视频在线观看免费版 | 国产高清视频免费在线观看 | 成人性生交大片免费观看网站 | 中文字幕免费高 | 亚洲五月 | 美女久久久久久久 | 国产在线观看h | 8x成人免费视频 | 97免费| 精品久久一二三区 | 综合亚洲视频 | 国产三级国产精品国产专区50 | 国产一区二区精品久久91 | 日韩激情三级 | 97偷拍视频 | 国产精品丝袜久久久久久久不卡 | 成人免费影院 | 日韩精品一区二区在线观看 | 黄色软件视频网站 | 中文字幕在线观看完整版电影 | 国产专区视频 | 特级黄色视频毛片 | 欧美成人久久 | 久久伊人操 | 丁香综合网 | 成年人在线观看视频免费 | 久久女同性恋中文字幕 | 丰满少妇在线观看网站 | 中文字幕黄色网 | 国产福利久久 | 日韩xxxx视频| 国产成人一区二区三区免费看 | 国产一区二区免费 | 久久久人 | 一级黄色片在线免费观看 | 欧美日韩国产一区二区三区 | 欧洲亚洲女同hd | 亚洲mv大片欧洲mv大片免费 | 国产精品欧美 | 国产一级大片免费看 | 色网址99| 激情五月***国产精品 | 久久视频精品 | 国产精品国产三级国产专区53 | 日日碰狠狠添天天爽超碰97久久 | 欧美一级视频免费 | 成人h动漫在线看 | 亚洲性xxxx | 精品在线免费视频 | 亚洲午夜久久久久久久久 | 精品国产电影 | 97超碰资源网 | 中文在线免费观看 | 日韩美女免费线视频 | 一区二区三区免费网站 | 麻豆av一区二区三区在线观看 | 欧美精品在线观看一区 | 国产香蕉97碰碰碰视频在线观看 | 菠萝菠萝蜜在线播放 | 久久激情视频免费观看 | 国产精品久久久影视 | 午夜精品区 | 91网址在线| 96视频在线 | 国产精品99久久久久的智能播放 | 狠狠色丁香久久婷婷综合丁香 | 日韩午夜在线播放 | 91成人免费看片 | 免费观看日韩av | 日韩欧美在线视频一区二区三区 | 国产资源免费 | 久久免费视频在线观看30 | 免费看片亚洲 | 99国产精品免费网站 | 国产精品岛国久久久久久久久红粉 | 欧美最爽乱淫视频播放 | 美女免费视频一区二区 | 在线播放一区二区三区 | 999免费视频 | av中文字幕在线电影 | 91免费在线播放 | 啪啪资源 | 国产精品国产精品 | 久久99免费视频 | 亚洲国产网站 | 亚洲精品一区二区三区高潮 | 久久日韩精品 | www.成人久久 | 精品国产自 | 午夜精品一区二区国产 | www夜夜操 | 天天躁日日躁狠狠躁av中文 | 91在线播 | 日韩精品一区二区三区电影 | 中文字幕精品久久 | www.888av| 亚洲三级在线免费观看 | 久久精品日产第一区二区三区乱码 | 欧美日产一区 | 婷婷天天色 | 日韩日韩日韩日韩 | 欧美va在线观看 | 丁香六月激情婷婷 | 日本一区二区不卡高清 | 麻豆播放 | 五月婷婷六月丁香 | 丁香婷婷成人 | 天天操夜夜曰 | www.com在线观看 | 国产亚洲视频在线免费观看 | 欧美日韩国产综合网 | 涩涩成人在线 | 久久成人福利 | 欧美男女爱爱视频 | 国产综合激情 | av资源中文字幕 | 婷婷在线资源 | 在线观看福利网站 | 欧美a级成人淫片免费看 | 国产精品一区二区免费看 | 亚洲国产精久久久久久久 | 亚洲精品乱码白浆高清久久久久久 | 视色网站 | 久久久免费av | 99久久久久久久久 | 91视频久久久久 | 精品国产伦一区二区三区观看方式 | 中日韩男男gay无套 日韩精品一区二区三区高清免费 | 久草在线91 | 96香蕉视频 | 91九色pron| 国产欧美精品xxxx另类 | 国产精品av免费 | 91久久爱热色涩涩 | 免费观看成人 | 91精品天码美女少妇 | 最新色站 | 亚洲免费婷婷 | 在线观看网站av | 欧美激情视频在线观看免费 | 日本在线观看中文字幕无线观看 | 中文字幕人成乱码在线观看 | 日韩动态视频 | 成人v| 丁香久久婷婷 | 日日天天狠狠 | 欧美日韩国产精品一区 | 成人一区影院 | 黄色大片免费播放 | 中文字幕在线看片 | 人人澡人人草 | 国产一区二区三区在线免费观看 | 欧美一二区在线 | 色妞色视频一区二区三区四区 | 国产黄色免费观看 | 99国产精品久久久久久久久久 | 亚洲国产99 | 亚洲视频久久久 | 成人黄大片视频在线观看 | 欧美另类xxxx | 顶级欧美色妇4khd | 日日夜夜网站 | 伊人色综合久久天天网 | 91完整视频| 欧美在线观看小视频 | 亚洲视频综合 | 欧美热久久 | 97电影院在线观看 | 国产一区二区久久 | 久久999精品 | 91在线播放国产 | 91免费的视频在线播放 | 国产剧情一区在线 | 亚洲资源片 | 欧美日韩久久久 | 中文字幕色在线视频 | 久久精品一二三区 | 丰满少妇在线 | 国产视频欧美视频 | 国产96在线观看 | 在线观看网站你懂的 | 久草在线视频国产 | 亚洲码国产日韩欧美高潮在线播放 | 中文字幕资源网在线观看 | 亚洲毛片一区二区三区 | 欧美日韩国内在线 | 欧美国产精品一区二区 | 免费国产在线观看 | 成人免费一区二区三区在线观看 | 国产黄色一级大片 | 在线免费黄色毛片 | 97超碰人人澡人人爱 | 久免费视频 | 久久久久久久18 | 国产成人久 | 久久久久久综合网天天 | 久久免费视频在线观看 | 精品久久久久久亚洲综合网 | 91精品视频播放 | 成人午夜电影在线播放 | 欧美另类一二三四区 | 中文在线字幕免费观 | 国产91精品看黄网站在线观看动漫 | 国产伦精品一区二区三区无广告 | 久久97精品 | 波多野结衣一区二区 | av黄色国产 | 三级av免费观看 | 国产精品自产拍在线观看中文 | 97在线观看视频免费 | 久久精品国产一区二区 | 美女在线观看av | 97超级碰碰碰视频在线观看 | 日韩精品一区电影 | 国产成人一区二区三区免费看 | 黄色资源网站 | 国产欧美精品一区aⅴ影院 99视频国产精品免费观看 | 四虎成人精品在永久免费 | 国产福利一区二区三区在线观看 | 久久成人久久 | 高清国产午夜精品久久久久久 | 四川妇女搡bbbb搡bbbb搡 | 免费a视频在线观看 | 成人黄色在线观看视频 | 久久久网址 | 国产精品亚洲精品 | 久久免费视频这里只有精品 | 亚洲性视频 | 久久久99国产精品免费 | 黄色在线看网站 | 亚洲 av网站| 免费在线观看av网站 | 中文字幕中文字幕在线一区 | 五月天综合网 | 久草在线在线精品观看 | 999精品| 日本午夜免费福利视频 | 91香蕉视频在线 | 91大神精品视频在线观看 | 精品国产一区二区三区久久影院 | 亚洲男男gⅴgay双龙 | 黄色官网在线观看 | 欧美日韩一区二区三区不卡 | 免费在线观看日韩视频 | 成人网在线免费视频 | 国产精品成人免费精品自在线观看 | 99久久久国产精品免费观看 | 免费看的黄色小视频 | 超碰97免费在线 | 国产成人在线精品 | 久久久受www免费人成 | 国产性天天综合网 | 在线视频久 | 国产亚洲成av片在线观看 | 91精品国产乱码久久 | 四虎亚洲精品 | 免费a网 | 中文字幕中文字幕在线中文字幕三区 | 黄色av网站在线观看免费 | 国产成人精品一区二 | 免费看片亚洲 | 亚洲精品自在在线观看 | 欧美极度另类性三渗透 | 欧美国产日韩中文 | 超碰97在线人人 |