日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪(fǎng)問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

记一次mogodb占用cpu高问题

發(fā)布時(shí)間:2023/12/31 编程问答 42 豆豆
生活随笔 收集整理的這篇文章主要介紹了 记一次mogodb占用cpu高问题 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

?公司服務(wù)器上安裝了contly,是一個(gè)開(kāi)源的node.js項(xiàng)目,用于統(tǒng)計(jì)手機(jī)app使用情況,后端數(shù)據(jù)儲(chǔ)存使用的mongodb,使用的時(shí)候經(jīng)常發(fā)現(xiàn)mongodb占用cpu非常高,打到了210%的爆表值

top - 13:42:39 up 308 days, 23:01, 2 users, load average: 2.84, 2.96, 2.93 Tasks: 209 total, 1 running, 208 sleeping, 0 stopped, 0 zombie %Cpu(s): 59.4 us, 2.7 sy, 0.0 ni, 36.9 id, 0.2 wa, 0.7 hi, 0.0 si, 0.0 st KiB Mem: 8173524 total, 6095460 used, 2078064 free, 133752 buffers KiB Swap: 1048572 total, 750536 used, 298036 free. 3480688 cached MemPID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 16870 root 20 0 48.452g 2.643g 2.490g S 210.5 33.9 38607:41 mongod 28508 root 20 0 891316 110272 5976 S 5.0 1.3 10:07.08 nodejs 28589 root 20 0 893736 114044 5972 S 5.0 1.4 13:19.13 nodejs 28566 root 20 0 959004 113128 5976 S 4.0 1.4 11:16.49 nodejs 28670 root 20 0 1189932 383820 5980 S 4.0 4.7 26:00.97 nodejs 16367 www-data 20 0 86960 2952 996 S 1.0 0.0 237:47.74 nginx 16368 www-data 20 0 87028 3212 996 S 1.0 0.0 235:54.43 nginx 16370 www-data 20 0 86964 2952 996 S 1.0 0.0 245:46.74 nginx 16371 www-data 20 0 86960 2948 996 S 1.0 0.0 246:40.89 nginx 1154 root 20 0 23792 1764 1144 R 0.7 0.0 0:00.23 top 7 root 20 0 0 0 0 S 0.3 0.0 1053:48 rcu_sched 8 root 20 0 0 0 0 S 0.3 0.0 229:02.41 rcuos/0 6559 root 20 0 3957096 217820 5668 S 0.3 2.7 230:37.95 jsvc 1 root 20 0 37348 3704 976 S 0.0 0.0 0:19.37 init 2 root 20 0 0 0 0 S 0.0 0.0 0:02.51 kthreadd 3 root 20 0 0 0 0 S 0.0 0.0 68:42.78 ksoftirqd/0 5 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 kworker/0:0H 9 root 20 0 0 0 0 S 0.0 0.0 225:56.62 rcuos/1 10 root 20 0 0 0 0 S 0.0 0.0 217:26.86 rcuos/2 11 root 20 0 0 0 0 S 0.0 0.0 228:57.90 rcuos/3 12 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/4 13 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/5 14 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/6 15 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/7 16 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/8 17 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/9 18 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/10 19 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/11 20 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/12 21 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/13 22 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/14 23 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/15 24 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/16 25 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/17 26 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/18 27 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/19 28 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/20 29 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/21 30 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/22 31 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/23 32 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/24 33 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/25 34 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/26 35 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/27 36 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/28 37 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/29 38 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/30 39 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuos/31 40 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcu_bh 41 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/0 42 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/1 43 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/2 44 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/3 45 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/4 46 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/5 47 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/6 48 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/7 49 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/8 50 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/9 51 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/10 52 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcuob/11

仔細(xì)查看是中斷很多,命令是pid -w 1

root@localhost:~# pidstat -w 1 Linux 3.13.0-24-generic (localhost) 07/14/2017 _x86_64_ (4 CPU)01:44:41 PM UID PID cswch/s nvcswch/s Command 01:44:42 PM 0 7 260.40 0.00 rcu_sched 01:44:42 PM 0 8 78.22 0.00 rcuos/0 01:44:42 PM 0 9 49.50 0.00 rcuos/1 01:44:42 PM 0 10 88.12 0.00 rcuos/2 01:44:42 PM 0 11 96.04 0.00 rcuos/3 01:44:42 PM 0 74 0.99 0.00 watchdog/0 01:44:42 PM 0 75 0.99 0.00 watchdog/1 01:44:42 PM 0 77 7.92 0.00 ksoftirqd/1 01:44:42 PM 0 80 0.99 0.00 watchdog/2 01:44:42 PM 0 82 39.60 0.00 ksoftirqd/2 01:44:42 PM 0 85 0.99 0.00 watchdog/3 01:44:42 PM 0 87 9.90 0.00 ksoftirqd/3 01:44:42 PM 0 1103 7.92 0.00 kworker/u64:2 01:44:42 PM 0 1213 0.99 4.95 pidstat 01:44:42 PM 0 1265 0.99 0.00 supervisord 01:44:42 PM 0 1279 9.90 0.00 vmtoolsd 01:44:42 PM 0 1373 0.99 0.00 fail2ban-server 01:44:42 PM 0 1954 18.81 0.00 xfsaild/sdb1 01:44:42 PM 0 2132 9.90 0.00 kworker/1:1H 01:44:42 PM 0 6800 0.99 0.00 kworker/0:1 01:44:42 PM 0 6807 0.99 0.00 kworker/2:2 01:44:42 PM 1000 14269 0.99 0.00 zabbix_agentd 01:44:42 PM 1000 14273 0.99 0.00 zabbix_agentd 01:44:42 PM 33 16367 154.46 0.00 nginx 01:44:42 PM 33 16368 178.22 0.00 nginx 01:44:42 PM 33 16370 166.34 0.00 nginx 01:44:42 PM 33 16371 168.32 0.00 nginx 01:44:42 PM 0 16870 100.00 0.00 mongod 01:44:42 PM 0 28498 0.99 0.00 supervisord 01:44:42 PM 0 28508 126.73 39.60 nodejs 01:44:42 PM 0 28566 141.58 46.53 nodejs 01:44:42 PM 0 28589 137.62 110.89 nodejs 01:44:42 PM 0 28670 123.76 96.04 nodejs 01:44:42 PM 0 28716 6.93 0.00 kworker/3:1 01:44:42 PM 0 28732 0.99 0.00 kworker/1:0

vmstat

root@localhost:~#?vmstat 1 procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----r b swpd free buff cache si so bi bo in cs us sy id wa st3 1 750536 2089980 133864 3482948 0 0 8 738 0 0 14 4 81 1 03 0 750536 2089932 133864 3482948 0 0 0 2062 6793 9336 67 5 28 0 03 0 750536 2086820 133864 3482952 0 0 0 1767 6125 8760 72 5 23 0 04 0 750536 2084232 133864 3482952 0 0 0 1611 6227 8686 60 4 37 0 03 0 750536 2088264 133864 3482952 0 0 0 140 5974 8556 65 4 31 0 04 0 750536 2083864 133864 3482956 0 0 0 2635 9100 10589 78 5 17 0 02 0 750536 2085624 133864 3482916 0 0 0 168 8152 11602 63 5 33 0 0

中斷和上下文切換多,是因?yàn)閚odejs一直在被從sleep中喚醒,實(shí)際上是countly要接受手機(jī)端返回來(lái)的數(shù)據(jù),不斷被IO喚醒,每次喚醒都要上下文切換,所以表象是上下文頻繁切換,實(shí)質(zhì)上是counly負(fù)擔(dān)比較重。

不過(guò)這個(gè)貌似和mongodb沒(méi)有關(guān)系,只能說(shuō)明countly的負(fù)擔(dān)比較重,一直在寫(xiě)入mongodb,所以現(xiàn)在mongodb的負(fù)擔(dān)也比較大。其實(shí)io算不上高,cpu的iowait也不多,硬盤(pán)寫(xiě)入并不是瓶頸,可能是mongodb本身的問(wèn)題

查看mongostat

root@localhost:~# mongostat connected to: 127.0.0.1 insert query update delete getmore command flushes mapped vsize res faults locked db idx miss % qr|qw ar|aw netIn netOut conn time 13 171 424 2 0 15|0 0 24g 48.5g 2.64g 0 countly:11.9% 0 0|0 3|0 102k 67k 12 13:51:04 9 225 1358 105 0 13|0 0 24g 48.5g 2.65g 0 countly:6.5% 0 0|0 0|1 255k 177k 12 13:51:05 218 967 3056 11 0 82|0 0 24g 48.5g 2.63g 0 countly:20.7% 0 0|0 2|0 807k 965k 12 13:51:06 19 158 315 2 0 12|0 0 24g 48.5g 2.65g 0 countly:1.7% 0 0|0 1|0 88k 92k 12 13:51:07 17 132 270 2 0 8|0 0 24g 48.5g 2.58g 0 countly:2.1% 0 0|0 2|0 77k 115k 12 13:51:08 14 151 433 2 0 11|0 0 24g 48.5g 2.64g 0 countly:2.2% 0 0|0 3|0 106k 89k 12 13:51:09 22 181 335 3 0 17|0 0 24g 48.5g 2.66g 0 countly:7.9% 0 0|0 3|0 96k 105k 12 13:51:10 36 230 765 3 0 8|0 0 24g 48.5g 2.66g 0 countly:3.6% 0 1|0 0|1 184k 224k 12 13:51:11 122 567 1580 1 0 56|0 0 24g 48.5g 2.67g 0 countly:16.4% 0 0|0 2|0 440k 559k 12 13:51:12 8 124 286 4 0 8|0 0 24g 48.5g 2.65g 0 countly:2.0% 0 0|0 2|0 67k 61k 12 13:51:13 insert query update delete getmore command flushes mapped vsize res faults locked db idx miss % qr|qw ar|aw netIn netOut conn time 21 193 450 1 0 18|0 0 24g 48.5g 2.66g 0 countly:5.0% 0 0|0 3|0 119k 126k 12 13:51:14 156 774 950 1 0 67|0 0 24g 48.5g 2.65g 0 countly:18.5% 0 0|0 3|0 414k 623k 12 13:51:15 7 69 194 2 0 12|0 0 24g 48.5g 2.65g 0 countly:1.4% 0 0|0 3|0 49k 40k 12 13:51:16 33 280 525 2 0 12|0 0 24g 48.5g 2.64g 0 countly:4.8% 0 0|0 3|0 145k 187k 12 13:51:17 18 201 563 5 0 17|0 0 24g 48.5g 2.66g 0 countly:5.5% 0 0|0 3|0 141k 126k 12 13:51:18 10 144 334 2 0 15|0 0 24g 48.5g 2.65g 0 countly:4.4% 0 0|0 4|0 84k 103k 12 13:51:19 14 210 525 4 0 19|0 0 24g 48.5g 2.63g 0 countly:5.8% 0 0|0 1|0 125k 96k 12 13:51:20 563 1959 2259 2 0 222|0 0 24g 48.5g 2.61g 0 countly:49.2% 0 0|0 1|0 1m 2m 12 13:51:21 227 692 1326 2 0 60|0 0 24g 48.5g 2.68g 3 countly:14.3% 0 0|0 2|0 647k 652k 12 13:51:22 17 146 315 1 0 8|0 0 24g 48.5g 2.65g 0 countly:3.5% 0 2|0 0|1 87k 95k 12 13:51:23 insert query update delete getmore command flushes mapped vsize res faults locked db idx miss % qr|qw ar|aw netIn netOut conn time 23 166 376 1 0 10|0 0 24g 48.5g 2.65g 0 countly:7.4% 0 0|0 2|0 104k 104k 12 13:51:24 18 113 212 *0 0 7|0 0 24g 48.5g 2.64g 0 countly:12.6% 0 0|0 2|0 65k 75k 12 13:51:25 13 177 375 *0 0 19|0 0 24g 48.5g 2.64g 0 countly:2.4% 0 3|0 0|1 93k 110k 12 13:51:26 20 147 299 5 0 5|0 0 24g 48.5g 2.63g 0 countly:1.9% 0 0|0 2|0 85k 103k 12 13:51:27 40 280 476 2 0 15|0 1 24g 48.5g 2.63g 0 countly:2.9% 0 0|0 1|0 157k 247k 12 13:51:28 7 108 263 2 0 5|0 0 24g 48.5g 2.64g 0 countly:1.6% 0 0|0 2|0 62k 78k 12 13:51:29 17 181 394 *0 0 8|0 0 24g 48.5g 2.59g 0 countly:5.4% 0 0|0 2|0 101k 147k 12 13:51:30 17 152 350 1 0 12|0 0 24g 48.5g 2.63g 0 countly:3.7% 0 0|0 1|0 90k 80k 12 13:51:31 14 123 261 4 0 11|0 0 24g 48.5g 2.58g 0 countly:4.0% 0 2|0 0|1 72k 108k 12 13:51:32 184 741 1220 21 0 84|0 0 24g 48.5g 2.67g 0 countly:25.3% 0 0|0 4|0 492k 654k 12 13:51:33

mongodb的鎖很多,懷疑是因?yàn)閷?xiě)入慢,一直在等待,浪費(fèi)了大量的cpu時(shí)間

進(jìn)入到mongodb中查看

root@localhost:~# mongo MongoDB shell version: 2.4.14 connecting to: test > db.serverStatus() {"host" : "localhost","version" : "2.4.14","process" : "mongod","pid" : 16870,"uptime" : 1551490,"uptimeMillis" : NumberLong(1551489627),"uptimeEstimate" : 1537152,"localTime" : ISODate("2017-07-14T06:12:34.348Z"),"asserts" : {"regular" : 0,"warning" : 0,"msg" : 0,"user" : 1,"rollovers" : 0},"backgroundFlushing" : {"flushes" : 25858,"total_ms" : 6413133,"average_ms" : 248.01349679016164,"last_ms" : 111,"last_finished" : ISODate("2017-07-14T06:12:27.580Z")},"connections" : {"current" : 12,"available" : 19988,"totalCreated" : NumberLong(660)},"cursors" : {"totalOpen" : 2,"clientCursors_size" : 2,"timedOut" : 125,"totalNoTimeout" : 2},"dur" : {"commits" : 29,"journaledMB" : 0.28672,"writeToDataFilesMB" : 0.272729,"compression" : 0.9344831856907262,"commitsInWriteLock" : 0,"earlyCommits" : 0,"timeMs" : {"dt" : 3071,"prepLogBuffer" : 0,"writeToJournal" : 49,"writeToDataFiles" : 4,"remapPrivateView" : 5}},"extra_info" : {"note" : "fields vary by platform","heap_usage_bytes" : 174045352,"page_faults" : 37855},"globalLock" : {"totalTime" : NumberLong("1551489627000"),"lockTime" : NumberLong("28450005021"),"currentQueue" : {"total" : 0,"readers" : 0,"writers" : 0},"activeClients" : {"total" : 2,"readers" : 2,"writers" : 0}},"indexCounters" : {"accesses" : 2559023213,"hits" : 2559023356,"misses" : 0,"resets" : 0,"missRatio" : 0},"locks" : {"." : {"timeLockedMicros" : {"R" : NumberLong(1631854144),"W" : NumberLong("28450005021")},"timeAcquiringMicros" : {"R" : NumberLong(1839692044),"W" : NumberLong(269051643)}},"admin" : {"timeLockedMicros" : {},"timeAcquiringMicros" : {}},"local" : {"timeLockedMicros" : {"r" : NumberLong(2235967),"w" : NumberLong(0)},"timeAcquiringMicros" : {"r" : NumberLong(856059),"w" : NumberLong(0)}},"countly" : {"timeLockedMicros" : {"r" : NumberLong("4052844846798"),"w" : NumberLong("77669514748")},"timeAcquiringMicros" : {"r" : NumberLong("2069545770119"),"w" : NumberLong("82155316804")}},"countly_drill" : {"timeLockedMicros" : {"r" : NumberLong(874145401),"w" : NumberLong("19474885608")},"timeAcquiringMicros" : {"r" : NumberLong(271347249),"w" : NumberLong(1475646788)}},"test" : {"timeLockedMicros" : {"r" : NumberLong(68640),"w" : NumberLong(79192)},"timeAcquiringMicros" : {"r" : NumberLong(146),"w" : NumberLong(26)}}},"network" : {"bytesIn" : 233060269131,"bytesOut" : 258427384819,"numRequests" : 1384182586},"opcounters" : {"insert" : 43661297,"query" : 434433635,"update" : 877502004,"delete" : 4880964,"getmore" : 1023,"command" : 26378757},"opcountersRepl" : {"insert" : 0,"query" : 0,"update" : 0,"delete" : 0,"getmore" : 0,"command" : 0},"recordStats" : {"accessesNotInMemory" : 8466,"pageFaultExceptionsThrown" : 3696,"countly" : {"accessesNotInMemory" : 1231,"pageFaultExceptionsThrown" : 221},"countly_drill" : {"accessesNotInMemory" : 7235,"pageFaultExceptionsThrown" : 3475},"local" : {"accessesNotInMemory" : 0,"pageFaultExceptionsThrown" : 0},"test" : {"accessesNotInMemory" : 0,"pageFaultExceptionsThrown" : 0}},"writeBacksQueued" : false,"mem" : {"bits" : 64,"resident" : 2692,"virtual" : 49774,"supported" : true,"mapped" : 24630,"mappedWithJournal" : 49260},"metrics" : {"document" : {"deleted" : NumberLong(4398459),"inserted" : NumberLong(43661297),"returned" : NumberLong(249187499),"updated" : NumberLong(868225290)},"getLastError" : {"wtime" : {"num" : 1332687,"totalMillis" : 154},"wtimeouts" : NumberLong(0)},"operation" : {"fastmod" : NumberLong(846861873),"idhack" : NumberLong(1085704909),"scanAndOrder" : NumberLong(0)},"queryExecutor" : {"scanned" : NumberLong(1095979673)},"record" : {"moves" : NumberLong(1249911)},"repl" : {"apply" : {"batches" : {"num" : 0,"totalMillis" : 0},"ops" : NumberLong(0)},"buffer" : {"count" : NumberLong(0),"maxSizeBytes" : 268435456,"sizeBytes" : NumberLong(0)},"network" : {"bytes" : NumberLong(0),"getmores" : {"num" : 0,"totalMillis" : 0},"ops" : NumberLong(0),"readersCreated" : NumberLong(0)},"oplog" : {"insert" : {"num" : 0,"totalMillis" : 0},"insertBytes" : NumberLong(0)},"preload" : {"docs" : {"num" : 0,"totalMillis" : 0},"indexes" : {"num" : 0,"totalMillis" : 0}}},"ttl" : {"deletedDocuments" : NumberLong(10),"passes" : NumberLong(25857)}},"ok" : 1 }

鎖確實(shí)比較多,查看mongotop

root@localhost:/mnt/mongodb/log# mongotop connected to: 127.0.0.1ns total read write 2017-07-14T06:46:41countly.online_users55d2e563292d6b2c7d1d132d 1669ms 1665ms 4mscountly.online_users5770b587f4a7f02a6a2b9cce 53ms 52ms 1mscountly.carriers 42ms 0ms 42mscountly.online_users5506ab1979a3a67e5214cda6 40ms 38ms 2mscountly.devices 16ms 0ms 16mscountly.apps 9ms 9ms 0mscountly.users 8ms 0ms 8mscountly.device_details 7ms 0ms 7mscountly.app_users55d2e563292d6b2c7d1d132d 4ms 0ms 4msns total read write 2017-07-14T06:46:42countly.online_users55d2e563292d6b2c7d1d132d 3671ms 3669ms 2mscountly.online_users5770b587f4a7f02a6a2b9cce 64ms 63ms 1mscountly.online_users5506ab1979a3a67e5214cda6 26ms 25ms 1mscountly.devices 19ms 0ms 19mscountly.carriers 16ms 0ms 16mscountly.users 6ms 0ms 6mscountly.apps 6ms 6ms 0mscountly.app_users55d2e563292d6b2c7d1d132d 4ms 1ms 3ms countly_drill.drill_eventse02cd05a335f76036692df25f94be2b3d5c20bd2 3ms 0ms 3msns total read write 2017-07-14T06:46:43countly.online_users55d2e563292d6b2c7d1d132d 1709ms 1705ms 4mscountly.online_users5506ab1979a3a67e5214cda6 33ms 31ms 2mscountly.carriers 19ms 0ms 19mscountly.devices 10ms 0ms 10mscountly.users 10ms 0ms 10mscountly.online_users54feb14879a3a67e52f6f7cd 7ms 7ms 0mscountly.apps 5ms 5ms 0mscountly.app_users55d2e563292d6b2c7d1d132d 4ms 0ms 4ms countly_drill.drill_eventsbb446ae67767dec699789c496e6c067b32dee999 3ms 0ms 3msns total read write 2017-07-14T06:46:44countly.online_users55d2e563292d6b2c7d1d132d 2301ms 2298ms 3mscountly.online_users5770b587f4a7f02a6a2b9cce 262ms 261ms 1mscountly.online_users5506ab1979a3a67e5214cda6 35ms 34ms 1ms countly_drill.drill_eventse02cd05a335f76036692df25f94be2b3d5c20bd2 22ms 0ms 22mscountly.online_users54feb14879a3a67e52f6f7cd 8ms 7ms 1mscountly.users 7ms 0ms 7ms countly_drill.drill_eventscc860280b73e64c3413b38f2e9959acb7babd3f9 6ms 0ms 6mscountly.app_users55d2e563292d6b2c7d1d132d 5ms 2ms 3mscountly.apps 4ms 4ms 0ms

是讀的時(shí)間很長(zhǎng),這個(gè)懷疑是沒(méi)有建立索引,另外mongodb本身有一個(gè)bug

https://docs.mongodb.com/manual/administration/production-notes/

解決方法如下所示

#numactl --interleave all command

原理如下

http://www.cnblogs.com/Lifehacker/p/database_swap_insanity_on_Linux.html

這么操作了好像也沒(méi)什么效果,最后想到之前這個(gè)數(shù)據(jù)庫(kù)因?yàn)榇疟P(pán)爆滿(mǎn)清空過(guò),之前聽(tīng)說(shuō)過(guò)mongodb遷移后會(huì)丟失索引,要重建索引,我查了一下索引

> db.online_users55d2e563292d6b2c7d1d132d.find() { "_id" : "4e5d3922-6553-430a-849f-8b1007373d7c", "la" : ISODate("2017-06-30T00:55:08.933Z"), "n" : 0 } { "_id" : "55d7d514-f75c-432a-b557-17c036437a32", "la" : ISODate("2017-06-29T16:38:12.863Z"), "n" : 0 } { "_id" : "0118022e-54d2-4fb9-998d-a544d9a76d42", "la" : ISODate("2017-07-05T17:17:44.307Z"), "n" : 0 } { "_id" : "2a160945-fcc1-42f5-8fd5-693f97c4c332", "la" : ISODate("2017-07-02T07:01:35.619Z"), "n" : 0 } { "_id" : "14cd09d4-fd09-43b8-9259-8a007fc08b45", "la" : ISODate("2017-06-28T01:23:29.400Z"), "n" : 0 } { "_id" : "b9fa7cc9-cd8c-4a1b-83fb-fc4c4f929715", "la" : ISODate("2017-06-26T13:38:32.887Z"), "n" : 1 } { "_id" : "1d968b85-2571-4cf7-9520-bfeb44d893bc", "la" : ISODate("2017-07-13T13:08:18.807Z"), "n" : 0 } { "_id" : "0b1a3d07-8e5d-4e78-a93f-d13811a81b86", "la" : ISODate("2017-07-13T03:10:39.927Z"), "n" : 0 } { "_id" : "18d8f9fb-dff3-46e6-a3c7-bb19db748c4a", "la" : ISODate("2017-07-08T17:59:37.518Z"), "n" : 0 } { "_id" : "a81349ac-9d83-4ef7-be0b-1b9bf64f867f", "la" : ISODate("2017-07-13T23:27:35.174Z"), "n" : 0 } { "_id" : "dd841258-36a6-45de-bc45-450441d9bf33", "la" : ISODate("2017-07-14T06:34:23.838Z"), "n" : 0 } { "_id" : "75720c9f-69af-4833-ae14-78a381cc31b6", "la" : ISODate("2017-07-13T15:57:28.700Z"), "n" : 0 } { "_id" : "ef37ff3d-979d-4275-9991-398ccb2d5576", "la" : ISODate("2017-07-14T04:45:38.872Z"), "n" : 0 } { "_id" : "465f923e-b0f1-4aa7-8f68-2d7db95973b2", "la" : ISODate("2017-07-07T11:47:53.029Z"), "n" : 0 } { "_id" : "e6b5fd38-bb56-4634-9232-7eeceb8cf46a", "la" : ISODate("2017-07-09T03:27:04.545Z"), "n" : 0 } { "_id" : "d4957c5d-154f-4c4f-8843-9792beab4817", "la" : ISODate("2017-07-11T21:49:35.417Z"), "n" : 0 } { "_id" : "08d0d626-b37b-4761-81b2-98b5ee426df8", "la" : ISODate("2017-06-29T13:56:14.974Z"), "n" : 0 } { "_id" : "6d2eef45-cb25-4ff6-b8cd-497ab3b938ae", "la" : ISODate("2017-07-07T02:19:16.154Z"), "n" : 0 } { "_id" : "6f444a2b-e2fc-4ab0-8b1d-d4334bf095e3", "la" : ISODate("2017-07-09T12:17:05.711Z"), "n" : 0 } { "_id" : "85e06ac1-7158-42fb-95ed-2cd39a7f0687", "la" : ISODate("2017-06-26T02:27:25.389Z"), "n" : 1 } Type "it" for more > db.online_users55d2e563292d6b2c7d1d132d.find({"_id" : "4e5d3922-6553-430a-849f-8b1007373d7c"}).explain() {"cursor" : "BtreeCursor _id_","isMultiKey" : false,"n" : 1,"nscannedObjects" : 1,"nscanned" : 1,"nscannedObjectsAllPlans" : 1,"nscannedAllPlans" : 1,"scanAndOrder" : false,"indexOnly" : false,"nYields" : 0,"nChunkSkips" : 0,"millis" : 0,"indexBounds" : {"start" : {"_id" : "4e5d3922-6553-430a-849f-8b1007373d7c"},"end" : {"_id" : "4e5d3922-6553-430a-849f-8b1007373d7c"}},"server" : "localhost:27017" }

明明是走索引的,可能是la這一列沒(méi)有加索引(這個(gè)我當(dāng)時(shí)沒(méi)有看,但是從現(xiàn)在來(lái)看這個(gè)思路應(yīng)該是正確的)

加上索引

db.online_users547c2a634dcc1eef3d000001.ensureIndex({la:?1},?{expireAfterSeconds:?180});

因?yàn)檫@個(gè)是cache性質(zhì)頻繁讀寫(xiě)的表,要轉(zhuǎn)成Capped Collection,自動(dòng)老化移出,優(yōu)化性能,并設(shè)置最大記錄數(shù)

db.runCommand({"convertToCapped":"online_users547c2a634dcc1eef3d000001",size:60})

 db.runCommand({"convertToCapped":"live_data547c2a634dcc1eef3d000001",size:60})

這樣之后結(jié)果就是好多了,再觀察一段時(shí)間吧

轉(zhuǎn)載于:https://www.cnblogs.com/wuxie1989/p/7204682.html

總結(jié)

以上是生活随笔為你收集整理的记一次mogodb占用cpu高问题的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。

国产又粗又猛又爽又黄的视频先 | 美女精品网站 | 国产视频中文字幕 | 亚洲黄色影院 | 日韩欧美精品在线 | 全久久久久久久久久久电影 | 久久三级视频 | 午夜久久久久久久久久影院 | 亚洲激情av | 成人污视频在线观看 | 久久五月婷婷丁香 | 福利一区二区 | 精品视频亚洲 | 精品久久久久久久久亚洲 | 超碰在线色 | 亚洲精品网站 | 十八岁免进欧美 | 国产精品久久久久久av | 狠狠的日 | 992tv在线| 天天视频色| 草久久精品 | 国产精彩视频一区二区 | 日韩视频在线不卡 | 欧洲不卡av| 天天碰天天操视频 | 亚洲一区视频免费观看 | 超碰公开在线观看 | 成人三级网站在线观看 | 国产精品久久久久久久久久久久午 | 不卡中文字幕av | 欧美一区二区免费在线观看 | 国产最新在线观看 | 五月婷婷激情五月 | 婷婷六月色 | 亚洲国产高清在线观看视频 | 久草视频在线免费播放 | 亚洲精品免费视频 | 97福利视频| 最近更新的中文字幕 | 99re视频在线观看 | 国产日韩欧美在线播放 | 特级xxxxx欧美 | 96国产在线 | 色婷婷久久一区二区 | 国产高清视频网 | 久久久九色精品国产一区二区三区 | 视频在线99re | 国产精品少妇 | 久久午夜国产精品 | 亚洲性xxxx| 国产剧情在线一区 | 毛片www | a亚洲视频 | 久久99精品久久久久久清纯直播 | 中文字幕免费高 | 91视频在线免费下载 | 在线观看黄色国产 | 超碰在线观看97 | 麻豆va一区二区三区久久浪 | 五月天电影免费在线观看一区 | 超碰av在线播放 | 欧美成人h版在线观看 | 亚州精品天堂中文字幕 | 久久成人一区二区 | 人人舔人人| 欧美精品v国产精品v日韩精品 | 国产精品久久久区三区天天噜 | 8x8x在线观看视频 | 丁香五月网久久综合 | а天堂中文最新一区二区三区 | 国产九九在线 | 国产精品免费在线视频 | 国产成人精品久久久久 | 日韩久久午夜一级啪啪 | 激情文学综合丁香 | 久久www免费视频 | 国产视频不卡 | 一区二区日韩av | 久久久久久久久网站 | 美女视频黄在线观看 | 久久人人爽人人爽人人 | 亚洲国产中文字幕在线视频综合 | 亚洲视频免费在线观看 | 成人免费看片98欧美 | 中文字幕在线视频免费播放 | 国产精品黑丝在线观看 | 日韩色一区二区三区 | 啪啪肉肉污av国网站 | 天天五月天色 | 欧美人交a欧美精品 | 日韩有码欧美 | 91在线小视频 | 日韩av一区二区三区四区 | 四虎www. | 久久久久区 | 免费麻豆网站 | 欧美日在线观看 | 免费在线观看av网站 | 色吊丝av中文字幕 | 视频在线观看入口黄最新永久免费国产 | 中文字幕久久久精品 | 99久久精品网 | 亚洲成av片人久久久 | 免费成人在线电影 | 99精品欧美一区二区三区黑人哦 | 国产传媒中文字幕 | 人人人爽 | 国产一级不卡视频 | 免费热情视频 | 国产精品1000| 热久久国产 | 久久线视频 | 久久久久久久久久免费视频 | 人人超碰在线 | 亚洲一级片在线看 | 久久国产麻豆 | 91视频啪 | 婷婷深爱激情 | 91精品久久久久久综合乱菊 | 久久综合亚洲鲁鲁五月久久 | 黄色毛片在线观看 | 欧美aⅴ在线观看 | 久久深夜| 国产精品黄色av | 国产老熟| 欧美中文字幕久久 | 亚洲欧美va| 九九精品在线观看 | 成年人在线观看视频免费 | 美女av免费| 色婷婷国产在线 | 午夜视频在线观看一区二区三区 | 天天爽天天爽天天爽 | 亚洲永久精品在线 | 亚洲黄色av网址 | 一级片免费视频 | 久久久高清一区二区三区 | 国产精品成人一区二区 | 国产精品女人久久久久久 | 在线天堂中文在线资源网 | 亚洲午夜久久久久 | 久久久久福利视频 | 三级a毛片 | 精品国产一区二区三区四区在线观看 | 91在线在线观看 | 久久综合久久综合久久 | 911av视频| 国产午夜精品一区二区三区四区 | 日本巨乳在线 | 黄色毛片电影 | 99精品免费久久久久久日本 | 亚洲天天做 | 一级免费黄视频 | 日日夜夜草 | 精品在线视频观看 | 久久精品综合 | 蜜臀av性久久久久av蜜臀妖精 | 精品久久精品久久 | 狠狠干夜夜 | 91av超碰| 免费看的黄色片 | 欧美专区国产专区 | 欧美日韩高清不卡 | 成人在线观看资源 | 不卡av在线| 正在播放 久久 | 亚洲成人网在线 | 国产精品毛片一区二区 | 久久国产精品一区二区三区四区 | 精品美女在线视频 | 国产一级电影网 | 狠狠夜夜 | 91mv.cool在线观看 | 免费看片日韩 | 亚州av网站 | 国外av在线 | 久久久久国产成人精品亚洲午夜 | 国产成人av在线影院 | 亚洲成av人片一区二区梦乃 | 人人干干人人 | 日韩区欧美久久久无人区 | 91麻豆精品国产自产在线 | 激情xxxx| 国产伦精品一区二区三区四区视频 | 六月天色婷婷 | 91在线日本| 国产精品久久久久久久久久久久午 | 国产在线2020 | 精品中文字幕在线 | 欧美动漫一区二区三区 | 毛片一区二区 | 超碰在线99 | 色多视频在线观看 | 国产精品9999 | 69精品视频在线观看 | 日韩色高清 | 97超碰中文字幕 | 国产精品自在线拍国产 | 婷婷精品国产欧美精品亚洲人人爽 | 99久久这里有精品 | 99r在线| 婷婷激情综合 | av福利网址导航 | 久久夜夜夜| 激情亚洲综合在线 | 亚洲精品美女在线观看播放 | 欧美日韩在线视频免费 | 探花在线观看 | 91av在线国产| japanesexxx乱女另类| 国产精品入口久久 | 国产综合91 | 午夜影院一级 | 精品国产乱子伦一区二区 | 一区二区三区在线观看免费 | 波多野结衣久久精品 | 黄色三级久久 | 中文字幕在线看视频 | 中文字幕日韩精品有码视频 | 久久99精品国产 | 国产护士在线 | 国产精品久久久久亚洲影视 | 欧美大片aaa | 国产精品淫 | 国产免费成人 | 在线www色 | 在线免费观看国产 | 日本精品一区二区在线观看 | av大全在线观看 | 国产黄影院色大全免费 | 日日噜噜噜噜夜夜爽亚洲精品 | 97精品在线观看 | 天天操月月操 | 四虎免费在线观看视频 | 久久久久一区二区三区 | 美女久久久久久久久久久 | 在线视频中文字幕一区 | 成人免费视频免费观看 | 成人观看 | 久久中文字幕视频 | 91精品在线观看视频 | 毛片网在线播放 | 91精品欧美一区二区三区 | 在线观看国产高清视频 | 欧美一区免费在线观看 | 国产日产精品一区二区三区四区的观看方式 | 最新久久免费视频 | 国产精品免费观看视频 | 国产精品视频大全 | 免费看黄的视频 | 91成品人影院 | 成年人视频免费在线 | 黄色网免费 | 精品国产乱码一区二区三区在线 | 欧美色综合天天久久综合精品 | 91精品入口 | 最新av免费在线 | 中文字幕资源在线 | 欧洲精品码一区二区三区免费看 | 久久久这里有精品 | 视频在线观看亚洲 | 色噜噜在线观看视频 | 色婷婷激情四射 | 欧美精品国产精品 | 免费色视频 | 婷婷丁香六月 | 四虎影视成人精品 | 欧美一级日韩三级 | 亚洲一片黄 | 中文字幕无吗 | 国产美女精彩久久 | 欧美美女视频在线观看 | www99久久| 久久久久久久电影 | 一级片免费观看视频 | 日韩肉感妇bbwbbwbbw | 91色综合 | 亚洲视频大全 | 国内精品在线观看视频 | 久艹在线观看视频 | 国产色综合天天综合网 | 亚洲三级av | 久久人人艹 | 国产少妇在线观看 | 在线观av | 亚洲精品欧美成人 | 99热在线网站 | 国产欧美综合在线观看 | 在线视频精品播放 | 国产午夜精品一区二区三区 | 天天弄天天操 | 粉嫩av一区二区三区四区 | 一区二区三区日韩视频在线观看 | 午夜精品福利一区二区三区蜜桃 | 亚洲免费公开视频 | 亚洲国产精品女人久久久 | 亚洲综合在线五月天 | a成人v在线 | 久久99国产精品视频 | 九热精品| 视频在线99re | 女人高潮一级片 | 国产在线观看免费 | 亚洲aⅴ在线观看 | 精品久久久久久久久久岛国gif | 91传媒在线播放 | 亚州人成在线播放 | 亚洲精品tv| 婷婷丁香av | 涩五月婷婷 | 日本精品视频免费 | 偷拍福利视频一区二区三区 | 日韩在线视频网站 | 国产高清视频免费最新在线 | 在线观看福利网站 | 美腿丝袜一区二区三区 | 亚洲欧美精品一区二区 | 欧美a√在线 | 欧美性做爰猛烈叫床潮 | 亚洲一区二区视频在线播放 | 9在线观看免费高清完整版在线观看明 | 91漂亮少妇露脸在线播放 | h文在线观看免费 | 亚洲播放一区 | 亚洲第一区在线播放 | 国产精品视频免费 | 免费av在线网 | 久久免费视频5 | 亚洲精品国产视频 | 欧美激情视频免费看 | 天天综合区 | 99免费在线观看视频 | 国产精品6999成人免费视频 | 久久视频99 | 在线看一区二区 | a级国产乱理伦片在线播放 久久久久国产精品一区 | 欧美精品你懂的 | 91在线看视频免费 | 久草视频2| 337p日本大胆噜噜噜噜 | 日韩网站在线免费观看 | 手机av资源 | 成人日韩av| 日本久久久久久久久久久 | 久操视频在线观看 | 美女视频黄免费的 | www亚洲视频| 天天干干 | 99久久久久 | 久久99深爱久久99精品 | 不卡的av在线 | 国产无限资源在线观看 | 一区二区三区免费在线 | 国产免费三级在线观看 | 国产1级视频 | 在线中文字幕一区二区 | 久久综合久久久 | 一二区av | 婷婷色中文 | 91在线视频免费91 | 99在线免费视频 | 精品日韩视频 | 国产在线观看,日本 | 中文字幕在线观看免费高清完整版 | 国产精品高清在线观看 | 久久久精品国产一区二区三区 | 丁香国产视频 | 国产一级特黄毛片在线毛片 | 狠狠五月婷婷 | 亚洲综合色视频 | 91av在线免费 | 伊人天天操| 色99在线 | 一区二区精品在线视频 | 中文字幕久久网 | 99精品久久99久久久久 | 久久精品久久99精品久久 | 天天鲁天天干天天射 | 在线观看香蕉视频 | 97香蕉久久国产在线观看 | 97超碰人人澡人人爱学生 | 免费一级片观看 | 最近更新好看的中文字幕 | a黄色大片| 欧美日韩国产精品一区二区亚洲 | 中文字幕日韩国产 | 成人污视频在线观看 | 91精品秘密在线观看 | 免费av在线播放 | 国产一区不卡在线 | 97精品超碰一区二区三区 | 国产一区二区观看 | 精品视频免费看 | 69精品久久久 | 天天色草| 国产福利一区二区三区在线观看 | 成人影视免费 | 蜜臀av麻豆 | 亚洲精品99久久久久久 | 天天干天天操天天射 | 日韩欧美视频免费观看 | 99精品在线视频观看 | 国产四虎影院 | 久久国色夜色精品国产 | 国外av在线 | 成人av在线网址 | 国产免费区 | 亚洲黄色一级大片 | 国产午夜视频在线观看 | 久久国产精品二国产精品中国洋人 | 伊人久操 | 韩国在线视频一区 | 久久精品男人的天堂 | 国产黄色免费看 | 国产福利中文字幕 | 亚洲高清av在线 | www.福利 | 综合久色 | 黄色亚洲精品 | 免费网址你懂的 | 亚洲免费一级电影 | 国产在线观看你懂得 | 狠狠搞,com| 国内精品免费久久影院 | av 一区二区三区四区 | 国产网红在线观看 | 国产精品九九视频 | 色天天中文 | 97精品久久人人爽人人爽 | 亚洲一区网站 | 日韩高清国产精品 | 国产成人av网站 | 九九九九九九精品 | 99久久久久 | 国产成人精品aaa | 国产小视频在线观看 | 成人午夜精品福利免费 | av丝袜在线| 激情欧美一区二区免费视频 | 欧美性免费 | 久久国产视频网站 | 久久草在线精品 | 天天色官网 | 天无日天天操天天干 | 日韩视频在线观看免费 | 精品人人人| 五月开心六月婷婷 | 亚洲欧美国内爽妇网 | 91视频观看免费 | 成人一区二区三区中文字幕 | 91最新网址在线观看 | 日韩成人精品一区二区三区 | 丝袜美腿av | 日韩黄色免费电影 | 伊人六月 | 国产成人精品在线观看 | 激情综合婷婷 | 欧美日韩不卡在线观看 | 精品久久久久久久久久 | 国产精品1000 | 天天se天天cao天天干 | 日韩av黄 | 国产视频久久久久 | 国产成人无码AⅤ片在线观 日韩av不卡在线 | 久久久久久久久久久黄色 | 五月婷影院 | 天天操天天干天天玩 | 激情五月开心 | 91亚洲免费 | 欧美成年网站 | 久草新在线 | 亚洲狠狠操 | 在线视频 91 | 黄色av网站在线观看 | 成人国产电影在线观看 | 精品久久五月天 | 中文字幕一区二区三区四区 | 又粗又长又大又爽又黄少妇毛片 | a电影在线观看 | 欧美一级免费高清 | 亚洲四虎影院 | 999免费视频| 亚洲一级在线观看 | 9999在线 | 亚洲国产精品成人女人久久 | 日韩电影在线看 | 99操视频 | 久久综合精品国产一区二区三区 | 99re久久精品国产 | 国产高清av在线播放 | 综合网伊人 | 国产精品久久久久久久久搜平片 | 天天干天天干天天色 | 国产精品久久久久久av | 亚洲高清在线精品 | 日韩黄色影院 | 91精品一区二区三区蜜臀 | 免费观看第二部31集 | 在线 视频 一区二区 | 91九色国产在线 | 97夜夜澡人人双人人人喊 | 日韩一区二区免费在线观看 | 91亚洲视频在线观看 | av免费网| 久久久久综合精品福利啪啪 | 亚洲成年人免费网站 | 国产高清久久久 | 精品国产一区在线观看 | 国产不卡在线观看 | 免费视频91蜜桃 | 最近中文国产在线视频 | 国产午夜剧场 | 色综合www | 国产亚洲精品日韩在线tv黄 | 丁香婷婷网 | 欧美一级片| 中文字幕一区在线观看视频 | 精品久久一二三区 | 国产亚洲精品久久久久久久久久久久 | 午夜久久福利视频 | 97在线观看免费高清完整版在线观看 | 91亚洲在线观看 | 日本特黄一级 | 久久久久国产a免费观看rela | 96久久欧美麻豆网站 | 国产视频久久久 | 天堂中文在线视频 | 天天激情站| 亚洲免费观看视频 | 精品国产伦一区二区三区观看体验 | 米奇四色影视 | 精品少妇一区二区三区在线 | 又黄又爽又刺激的视频 | 精品自拍sae8—视频 | 日韩免费在线观看 | 日韩手机在线观看 | 伊人久久国产精品 | 伊人影院得得 | 中文字幕日韩精品有码视频 | 国产中文字幕在线看 | 天天操比| 久久免费精品视频 | 久草99| 99久久精品国 | 香蕉视频在线看 | 美女视频a美女大全免费下载蜜臀 | 国产在线观看a | 丁香激情综合国产 | 欧美日韩91 | 天堂素人在线 | 成人午夜剧场在线观看 | 日日夜夜狠狠操 | 久久福利电影 | 美女网站色免费 | 国产第一福利 | 色婷婷狠狠五月综合天色拍 | 国产不卡在线观看视频 | 久久夜色精品国产欧美一区麻豆 | 亚洲精品视频网站在线观看 | 免费看的黄网站软件 | 中文字幕国产视频 | 成人av动漫在线 | 日本精品视频免费 | 亚洲国产网站 | 欧美日性视频 | av在线免费在线观看 | 婷婷丁香色综合狠狠色 | 国产精品不卡在线播放 | 国产精品九九热 | 国产精品久久久久久久久费观看 | 在线观看视频你懂得 | 国产成人精品久久亚洲高清不卡 | 天天干天天干天天射 | 天天操天天干天天摸 | 人人澡人人草 | 亚洲一级电影视频 | 黄色毛片视频 | 久久8| 激情五月av | 欧美99热 | 午夜久久视频 | 国产日韩视频在线 | 久久字幕 | 黄色软件视频大全免费下载 | 久草综合在线 | 国产亚州精品视频 | 999国内精品永久免费视频 | 人人藻人人澡人人爽 | 在线不卡中文字幕播放 | 日韩视频在线观看免费 | 久久av免费 | 天天操天天操天天操天天操天天操 | 天天干天天碰 | 欧洲精品二区 | 久草在线中文视频 | 久久精品xxx | 天天爱综合 | 在线观看成人国产 | 日韩免费二区 | 国内精品中文字幕 | 国产成人免费网站 | 成人h视频在线播放 | 国产一区在线播放 | 国产精品视频内 | 欧美成亚洲 | 国产成人一区二区精品非洲 | 香蕉网址 | 国产精品久久片 | av免费在线看网站 | 在线观看一区视频 | 国产精品免费观看国产网曝瓜 | a天堂中文在线 | 国精产品满18岁在线 | 日韩av高清 | 久久大视频 | 九九视频在线观看视频6 | 精品v亚洲v欧美v高清v | 97精品久久人人爽人人爽 | 992tv人人网tv亚洲精品 | 国产v视频| 丁香六月在线观看 | 91在线视频网址 | 精品久久久久久久久久岛国gif | 黄色一区二区在线观看 | 天天艹日日干 | 中文字幕在线日 | 中文字幕在线观看的网站 | 精品无人国产偷自产在线 | 国产一级在线看 | 最近中文字幕免费av | 日韩免费一级电影 | 国产黄色av | 欧美日韩一级在线 | 一区二区三区在线免费 | 国产精品爽爽久久久久久蜜臀 | 国产免费黄色 | 搡bbbb搡bbb视频 | 成人av免费在线 | 日韩激情小视频 | 国产美女永久免费 | 青青草在久久免费久久免费 | 成人黄色在线观看视频 | 天天干天天做天天爱 | 国产欧美久久久精品影院 | 五月婷婷另类国产 | 欧美男男tv网站 | 久草在线免费看视频 | 免费一级特黄毛大片 | 国产成人在线播放 | 久久视频| 精品国产免费一区二区三区五区 | 国产精品18毛片一区二区 | 日本视频久久久 | 91av免费观看 | 免费日韩在线 | 99热这里有精品 | 天天操综合网站 | 国产高清黄| 黄污网站在线 | 91香蕉国产在线观看软件 | 精品视频 | 午夜久久久精品 | 久久国产精品99国产 | 亚洲精品高清视频 | 在线观看日本高清mv视频 | av观看在线观看 | 久久五月婷婷丁香 | 黄色小说在线观看视频 | 在线亚洲观看 | 中文字幕欲求不满 | 天天操综| 久久理论影院 | 久久女同性恋中文字幕 | 国产又粗又猛又爽 | 88av视频 | 在线视频久 | 国产999精品久久久久久绿帽 | 日韩高清网站 | 97超碰在线久草超碰在线观看 | 国产亚洲精品电影 | 久久国产精品99久久久久久丝袜 | 2019av在线视频 | 免费在线观看的av网站 | 超碰在线最新地址 | 久久综合久久久 | 亚洲国产日韩一区 | 日韩视频免费 | 97狠狠干| 黄网站污 | 国产盗摄精品一区二区 | 国产女做a爱免费视频 | 永久免费av在线播放 | 国产婷婷在线观看 | www日韩精品 | 亚洲视频一 | 成人福利在线 | 午夜av免费在线观看 | 亚洲欧美激情精品一区二区 | 98久久| 手机看片1042| 婷婷午夜天 | 日韩欧美在线免费观看 | av解说在线 | a精品视频| 91福利小视频 | 欧美日韩国产精品一区二区亚洲 | 免费能看的黄色片 | 狠狠狠综合 | 欧美一级日韩三级 | 中文字幕中文中文字幕 | 九九视频免费在线观看 | 日韩电影久久 | 最近免费在线观看 | 啪啪免费视频网站 | 中文字幕91在线 | 国产99久久久欧美黑人 | 丝袜精品视频 | 九九日韩 | 9999在线视频| 激情五月色播五月 | 久久tv| 精品久久久久久久久久久院品网 | 亚洲精品国产成人 | 婷婷在线免费视频 | 国产精品网站 | 欧美日韩调教 | 国语自产偷拍精品视频偷 | 国产精品久久久精品 | 国产高清精品在线观看 | 中文字幕精品一区二区三区电影 | 日本精品视频在线观看 | 国产精品网红直播 | 九九热1 | 久免费| 97成人精品区在线播放 | 在线看国产日韩 | 欧美一区免费在线观看 | 亚洲天天在线日亚洲洲精 | www.久久视频| 深爱激情站 | 欧美午夜精品久久久久 | 97色在线| 国产日韩精品久久 | 成人a在线观看高清电影 | 成人小视频在线观看免费 | 一本一本久久a久久精品综合 | 91精品视频在线 | 成年人在线免费看视频 | 手机在线看片日韩 | 国产午夜精品一区二区三区 | aa级黄色大片 | 欧洲亚洲女同hd | 欧美日韩视频在线播放 | 99精品在线免费 | 国产99久久精品一区二区永久免费 | 婷婷免费在线视频 | 夜夜骑日日 | 午夜久久成人 | 伊人五月天婷婷 | 亚洲黄色片一级 | 天天爽天天爽 | 免费a网站| 天堂av在线网站 | ,午夜性刺激免费看视频 | 黄色av在| 在线免费黄 | 色婷婷丁香 | 久久电影网站中文字幕 | 日日干激情五月 | .精品久久久麻豆国产精品 亚洲va欧美 | 最近更新的中文字幕 | 久草新在线 | 午夜精品久久久久久久99水蜜桃 | 亚洲精品99久久久久中文字幕 | 中文字幕免费观看视频 | 亚洲成人精品久久久 | 香蕉网在线播放 | 精品欧美一区二区三区久久久 | 日本一区二区三区免费看 | 97视频免费观看 | 日韩在线一级 | 国产婷婷精品av在线 | 99精品乱码国产在线观看 | 91久久精品一区二区二区 | 最近能播放的中文字幕 | 中文字幕乱码视频 | 天天插天天爱 | 欧美日韩免费一区二区三区 | 免费视频你懂的 | 美女网站一区 | 久久精品视频4 | 91成年人视频 | 久久国产欧美日韩精品 | 亚洲在线不卡 | 久久国产精品视频 | 麻豆国产网站入口 | 国产精品系列在线观看 | 中文字幕一区二区三区在线播放 | av中文在线播放 | www.久久久com | 久久久国产一区二区 | 免费av小说| 中文字幕免费国产精品 | 又黄又刺激的视频 | 亚洲精品国产精品国自产在线 | 日韩大片在线播放 | 五月婷婷六月综合 | 国产精品视频区 | 日韩av片无码一区二区不卡电影 | 午夜精品三区 | 美国人与动物xxxx | 99久e精品热线免费 99国产精品久久久久久久久久 | 在线观看一区 | 91精品福利在线 | 综合久色 | 麻豆综合网 | 怡红院av久久久久久久 | 国产精品一区二区免费视频 | 另类五月激情 | 国产一级片播放 | 中文字幕精品一区 | 91漂亮少妇露脸在线播放 | 国产中文字幕一区二区三区 | 香蕉视频色 | 久久久国产精品一区二区三区 | 久久免费视频1 | 五月婷婷另类国产 | 欧美性大战 | 五月开心综合 | 91中文字幕永久在线 | 免费看十八岁美女 | 天天色成人网 | 国产91粉嫩白浆在线观看 | 中文字幕欧美日韩va免费视频 | 日韩免费在线一区 | 国产区精品在线 | 久久久久久久久久久网站 | 天天曰视频 | 黄av免费| 久热久草在线 | 成年人黄色免费看 | 国产精品 欧美 日韩 | 国产精品嫩草55av | 午夜精品久久久久久久99 | 深夜免费福利 | 综合视频在线 | 日本在线精品视频 | 国产精品免费观看久久 | 一区二区中文字幕在线播放 | 成人av动漫在线 | 欧美99精品 | 久久99国产精品久久99 | 国产成人精品av | 日韩欧美一区二区在线播放 | 91网站免费观看 | 久久爽久久爽久久av东京爽 | 国产美腿白丝袜足在线av | 黄色字幕网| 久久久久网站 | 色狠狠久久av五月综合 | 99视频精品全部免费 在线 | 国产91亚洲精品 | 国产精品久久久久久吹潮天美传媒 | 国产黄免费在线观看 | 免费色婷婷 | 美州a亚洲一视本频v色道 | 国产盗摄精品一区二区 | 中文在线8资源库 | 在线观看av免费观看 | 亚洲国产操 | 九九色网| 成人免费看片网址 | 91精品国产99久久久久久红楼 | 国产91对白在线播 | 精品成人a区在线观看 | 手机色在线 | 日韩在线第一 | 久久精选视频 | 91爱看片| 丁香在线观看完整电影视频 | 波多野结衣在线观看一区 | 国产 日韩 在线 亚洲 字幕 中文 | 成人在线免费视频 | 91视频在线免费下载 | 久久成人免费视频 | 日韩黄色一级电影 | 免费观看一区二区 | 成人免费视频播放 | 精品999久久久 | 亚洲深爱激情 | 日韩一区二区三区观看 | 一区二区三区四区在线免费观看 | 亚洲一区二区三区四区精品 | 波多野结衣在线观看一区 | 久久久久成人精品 | 岛国av在线免费 | 手机色在线 | 久久久91精品国产一区二区精品 | 黄色在线网站噜噜噜 | 午夜av大片 | 久久久久免费精品国产小说色大师 | 久精品视频 | 在线午夜 | 色综合婷婷 | a在线观看视频 | 亚洲精品男人天堂 | 亚洲激情视频在线观看 | 99激情网 | 成人免费在线观看电影 | 亚洲一级片在线观看 | 久久视频这里有久久精品视频11 | 日韩高清国产精品 | 日韩美女免费线视频 | 精品免费视频 | 久久综合久色欧美综合狠狠 | 中国一级片视频 | 国产精品欧美久久久久无广告 | 91成人网在线播放 | 国产精品手机视频 | 伊人色综合久久天天 | 水蜜桃亚洲一二三四在线 | 国产一区二区三区免费在线观看 | 久操综合| 最近中文字幕视频网 | 91av看片 | 日韩一级理论片 | 久久国产片 | 日韩高清三区 | 中国一级特黄毛片大片久久 | 蜜臀久久99精品久久久无需会员 | 99国产在线视频 | 久久影院中文字幕 | 午夜精品久久久99热福利 | 国产成人一区二区精品非洲 | 国产成人免费观看 | 精品国产免费观看 | 九九在线精品视频 | 中文字幕日本在线观看 | 在线精品视频在线观看高清 | 日韩毛片在线播放 | 天天操天天操天天 | 久久久色| 精品国产乱码一区二区三区在线 | 日韩美女黄色片 | 亚洲精品乱码久久久久 | 国内精品中文字幕 | 日韩一区在线免费观看 | 国产色影院 | 成人网页在线免费观看 | 亚洲成人999 | 国产精品亚洲人在线观看 | 亚洲精品乱码久久 | 亚洲 欧美日韩 国产 中文 | 午夜av免费看 | 国内精品亚洲 | 在线观看av网站 | 欧美日韩中文国产 | 精品在线观看国产 | 麻花豆传媒一二三产区 | 中文字幕一区二区三 | 久久精品人 | 成人黄色大片在线免费观看 | 国产精品1024| 激情视频亚洲 | 欧美精品久久久久久久久久白贞 | 天天综合网国产 | 欧美性生活大片 | 色噜噜在线观看视频 | 久久综合加勒比 | 亚州日韩中文字幕 | 色资源二区在线视频 | 人人爽影院 | 四虎影视成人永久免费观看亚洲欧美 | 俺要去色综合狠狠 | 国产日产精品一区二区三区四区 | 国产日韩在线视频 | 欧美日韩一区三区 | 久久理论影院 | 九九日韩 | 丁香六月中文字幕 | a级国产乱理伦片在线观看 亚洲3级 | 日韩视频中文字幕在线观看 | 成人午夜电影在线播放 | 国产精品嫩草影院99网站 | 女人18毛片a级毛片一区二区 | 九九热免费在线观看 | 亚洲欧美乱综合图片区小说区 | 亚洲春色综合另类校园电影 | 天天操天天吃 | 99精品一区二区三区 | 成片免费 | 久久久国产精品一区二区中文 | 日本婷婷色 | 亚洲精品高清一区二区三区四区 | 欧美va日韩va | 欧美视频18 | 国产亚洲婷婷 |