You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2022-01-23 - 19:30

Intel(R) Core(TM) i5-8365UE CPU @ 1.60GHz, Linux 5.10.41-rt42 (Profile)

Latency plot of system in rack #a, slot #8
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackaslot8.osadl.org (updated Sun Jan 23, 2022 12:44:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
277752294262,21sleep10-21swapper/107:08:141
276022293266,17sleep20-21swapper/207:06:052
277422281255,17sleep00-21swapper/007:07:530
276292263229,20sleep30-21swapper/307:06:263
122362600,0sleep00-21swapper/011:02:380
159382570,0sleep00-21swapper/010:26:140
180742560,0sleep10-21swapper/110:27:511
31532550,0sleep30-21swapper/310:19:123
216492540,0sleep10-21swapper/112:05:451
39972530,0sleep20-21swapper/211:16:482
132512520,0sleep10-21swapper/110:05:251
128082450,0sleep00-21swapper/009:26:270
296672200,0sleep00-21swapper/011:51:140
189252180,0sleep10-21swapper/111:06:181
118152170,0sleep10-21swapper/112:20:031
26522140,0sleep20-21swapper/211:55:132
28236290,0sleep00-21swapper/009:15:500
280429996,2cyclictest22-21ksoftirqd/107:15:011
29956270,0sleep10-21swapper/109:55:441
280489973,3cyclictest283-21systemd-journal08:49:333
280489973,3cyclictest283-21systemd-journal07:59:533
280489973,3cyclictest10659-21cat07:40:153
280489972,3cyclictest283-21systemd-journal10:09:113
280489972,3cyclictest283-21systemd-journal08:27:383
280469976,1cyclictest28-21ksoftirqd/209:40:012
280469975,2cyclictest28-21ksoftirqd/208:25:012
280469975,2cyclictest28-21ksoftirqd/208:25:012
280469975,1cyclictest28-21ksoftirqd/210:55:012
280469974,2cyclictest28-21ksoftirqd/207:15:012
280469974,2cyclictest1355-21apt-get09:20:162
280469973,3cyclictest668-21runrttasks10:43:092
280469973,3cyclictest665-21snmpd12:19:262
280469973,3cyclictest665-21snmpd07:57:032
280469973,3cyclictest665-21snmpd07:39:022
280469972,3cyclictest5730-21ntpq12:35:222
280469972,3cyclictest283-21systemd-journal08:29:132
280469970,6cyclictest29966-21apt-get10:35:172
280429974,2cyclictest559-21gdbus10:20:011
280429973,3cyclictest283-21systemd-journal11:18:511
280429973,3cyclictest283-21systemd-journal10:33:131
280429973,3cyclictest16580-21pluginstate11:25:011
280429970,7cyclictest0-21swapper/110:13:491
280379975,1cyclictest12-21ksoftirqd/010:54:590
280379975,1cyclictest10062-21ssh09:44:560
280379973,3cyclictest665-21snmpd07:26:290
280379973,3cyclictest559-21gdbus08:40:010
280379973,1cyclictest0-21swapper/010:10:040
280379972,3cyclictest283-21systemd-journal10:44:560
280379970,7cyclictest0-21swapper/012:01:200
25200270,0sleep30-21swapper/312:27:453
29730260,0sleep10-21swapper/112:30:201
280489966,0cyclictest0-21swapper/311:49:513
280489966,0cyclictest0-21swapper/311:36:373
280489966,0cyclictest0-21swapper/310:43:493
280489966,0cyclictest0-21swapper/310:26:373
280489963,2cyclictest9192-21users07:35:233
280489963,2cyclictest7890-21ssh12:36:333
280489963,2cyclictest665-21snmpd07:27:533
280489963,2cyclictest508-21dbus-daemon08:35:013
280489963,2cyclictest31725-21sh12:31:223
280489963,2cyclictest308-21systemd-udevd11:28:143
280489963,2cyclictest27476-21ssh12:10:033
280489963,2cyclictest27476-21ssh12:10:023
280489963,2cyclictest25575-21sshd08:11:333
280489963,2cyclictest2392-21ssh09:20:223
280489963,2cyclictest0-21swapper/311:59:063
280489963,2cyclictest0-21swapper/311:11:283
280489963,2cyclictest0-21swapper/309:51:323
280489962,3cyclictest665-21snmpd12:20:173
280489962,3cyclictest665-21snmpd12:06:103
280489962,3cyclictest665-21snmpd11:42:283
280489962,3cyclictest665-21snmpd10:23:223
280489962,3cyclictest665-21snmpd09:36:113
280489962,3cyclictest665-21snmpd08:09:243
280489962,3cyclictest6081-21cat07:30:223
280489962,3cyclictest5599-21cat08:40:223
280489962,3cyclictest5200-21sed12:15:273
280489962,3cyclictest508-21dbus-daemon10:59:043
280489962,3cyclictest31776-21cat07:15:233
280489962,3cyclictest30117-21expr10:35:183
280489962,3cyclictest28363-21ls07:10:173
280489962,3cyclictest283-21systemd-journal10:00:253
280489962,3cyclictest283-21systemd-journal09:40:103
280489962,3cyclictest27096-21ls11:50:173
280489962,3cyclictest26815-21cat08:15:223
280489962,3cyclictest23249-21expr10:50:183
280489962,3cyclictest2120-21mailstats07:20:263
280489962,3cyclictest20125-21cat08:00:213
280489962,3cyclictest17161-21ntpd08:50:243
280489962,3cyclictest0-21swapper/309:47:363
280489962,2cyclictest23083-1kworker/u9:009:10:053
280489962,1cyclictest0-21swapper/309:18:123
280489961,3cyclictest503-21rm11:15:193
280489961,3cyclictest283-21systemd-journal09:04:213
280489961,3cyclictest283-21systemd-journal07:45:523
280489961,3cyclictest27901-21rm10:14:433
280489960,2cyclictest16095-21xargs10:45:273
280489960,0cyclictest0-21swapper/311:31:043
280469965,1cyclictest28-21ksoftirqd/211:25:012
280469963,2cyclictest665-21snmpd10:32:532
280469963,2cyclictest28391-21sh09:15:572
280469963,2cyclictest283-21systemd-journal08:50:032
280469963,2cyclictest283-21systemd-journal07:28:462
280469963,2cyclictest15761-21memory07:50:162
280469963,2cyclictest0-21swapper/212:25:462
280469963,1cyclictest0-21swapper/209:56:172
280469962,3cyclictest9191-21cut08:50:002
280469962,3cyclictest665-21snmpd12:24:142
280469962,3cyclictest665-21snmpd12:12:562
280469962,3cyclictest665-21snmpd12:12:562
280469962,3cyclictest665-21snmpd12:09:102
280469962,3cyclictest665-21snmpd11:20:572
280469962,3cyclictest665-21snmpd11:06:332
280469962,3cyclictest665-21snmpd10:21:362
280469962,3cyclictest665-21snmpd10:05:432
280469962,3cyclictest665-21snmpd09:48:362
280469962,3cyclictest665-21snmpd07:32:172
280469962,3cyclictest4508-21cat10:00:212
280469962,3cyclictest3205-21head08:35:202
280469962,3cyclictest3195-21cat09:40:242
280469962,3cyclictest283-21systemd-journal10:26:342
280469962,3cyclictest20111-21cat08:00:212
280469962,3cyclictest11112-21basename12:00:162
280469962,1cyclictest0-21swapper/212:32:382
280469962,1cyclictest0-21swapper/210:17:022
280469962,1cyclictest0-21swapper/209:31:122
280469961,4cyclictest2435-21head11:35:192
280469961,2cyclictest28988-21ssh11:12:342
280469960,6cyclictest0-21swapper/210:55:282
280469960,5cyclictest4918-21/usr/sbin/munin08:40:262
280469960,5cyclictest15511-21cat10:45:222
280469960,0cyclictest0-21swapper/211:34:122
280429966,0cyclictest0-21swapper/111:12:241
280429966,0cyclictest0-21swapper/109:40:311
280429963,2cyclictest8036-21awk07:35:161
280429963,2cyclictest665-21snmpd10:00:491
280429963,2cyclictest25554-21rm09:53:581
280429963,2cyclictest25505-21ssh11:30:041
280429963,2cyclictest20399-21ssh11:45:341
280429963,2cyclictest16526-21sh11:43:591
280429963,2cyclictest10958-21sh12:00:111
280429963,2cyclictest10790-21ntpq09:25:231
280429962,3cyclictest683-21lldpd12:25:451
280429962,3cyclictest665-21snmpd11:56:061
280429962,3cyclictest665-21snmpd11:26:421
280429962,3cyclictest665-21snmpd09:31:141
280429962,3cyclictest665-21snmpd09:23:141
280429962,3cyclictest665-21snmpd09:16:131
280429962,3cyclictest665-21snmpd08:47:191
280429962,3cyclictest665-21snmpd08:42:191
280429962,3cyclictest665-21snmpd08:13:001
280429962,3cyclictest665-21snmpd07:55:211
280429962,3cyclictest665-21snmpd07:46:591
280429962,3cyclictest665-21snmpd07:19:411
280429962,3cyclictest508-21dbus-daemon08:20:011
280429962,3cyclictest4908-21expr12:35:161
280429962,3cyclictest328-21date08:30:011
280429962,3cyclictest283-21systemd-journal08:57:391
280429962,3cyclictest283-21systemd-journal08:37:381
280429962,3cyclictest25615-11brltty07:42:321
280429962,3cyclictest24373-21wc10:50:261
280429962,3cyclictest12569-21cut10:25:011
280429962,1cyclictest0-21swapper/110:40:201
280429961,3cyclictest283-21systemd-journal12:19:001
280429960,6cyclictest0-21swapper/112:10:011
280429960,6cyclictest0-21swapper/112:10:011
280429960,6cyclictest0-21swapper/110:35:141
280429960,6cyclictest0-21swapper/109:12:431
280429960,2cyclictest26421-21/usr/sbin/munin09:35:241
280429960,0cyclictest0-21swapper/111:50:391
280429960,0cyclictest0-21swapper/111:37:251
280379966,0cyclictest0-21swapper/009:52:230
280379964,2cyclictest12-21ksoftirqd/012:25:160
280379964,2cyclictest12-21ksoftirqd/008:10:170
280379963,2cyclictest665-21snmpd12:17:290
280379963,2cyclictest665-21snmpd11:45:360
280379963,2cyclictest665-21snmpd11:40:520
280379963,2cyclictest665-21snmpd11:32:340
280379963,2cyclictest665-21snmpd10:58:050
280379963,2cyclictest514-21in:imuxsock07:37:560
280379963,2cyclictest415-21apt08:30:180
280379963,2cyclictest283-21systemd-journal12:12:060
280379963,2cyclictest283-21systemd-journal12:12:060
280379963,2cyclictest283-21systemd-journal08:58:260
280379963,2cyclictest283-21systemd-journal08:20:340
280379963,2cyclictest283-21systemd-journal08:20:340
280379963,2cyclictest283-21systemd-journal07:56:420
280379963,2cyclictest283-21systemd-journal07:17:550
280379963,2cyclictest24127-21sh10:31:040
280379963,2cyclictest20053-21fschecks_time12:05:220
280379963,2cyclictest14377-21fschecks_time09:00:200
280379963,2cyclictest12457-21perf12:40:000
280379963,2cyclictest12-21ksoftirqd/009:05:180
280379962,3cyclictest665-21snmpd12:21:020
280379962,3cyclictest665-21snmpd11:24:330
280379962,3cyclictest665-21snmpd11:15:360
280379962,3cyclictest665-21snmpd10:35:410
280379962,3cyclictest665-21snmpd10:20:250
280379962,3cyclictest665-21snmpd10:02:540
280379962,3cyclictest665-21snmpd09:45:180
280379962,3cyclictest665-21snmpd08:47:490
280379962,3cyclictest665-21snmpd07:54:000
280379962,3cyclictest665-21snmpd07:40:560
280379962,3cyclictest4251-21munin-run10:20:010
280379962,3cyclictest283-21systemd-journal11:25:380
280379962,3cyclictest283-21systemd-journal11:07:250
280379962,3cyclictest13258-21cat10:05:250
280379962,1cyclictest0-21swapper/011:56:190
280379962,1cyclictest0-21swapper/009:37:420
280379960,6cyclictest18083-21diskmemload10:46:450
280379960,6cyclictest0-21swapper/011:39:190
280379960,6cyclictest0-21swapper/009:24:280
280379960,5cyclictest25056-21smartctl11:10:200
280379960,5cyclictest22681-21ls08:05:260
280379960,5cyclictest0-21swapper/008:25:300
280379960,3cyclictest283-21systemd-journal07:22:110
280379960,0cyclictest0-21swapper/009:30:360
20107260,0sleep30-21swapper/309:30:383
280489952,2cyclictest9399-21ssh09:25:033
280489952,2cyclictest7382-21ssh11:00:083
280489952,2cyclictest668-21runrttasks08:55:063
280489952,2cyclictest665-21snmpd12:00:103
280489952,2cyclictest28742-21expr08:20:203
280489952,2cyclictest28742-21expr08:20:203
280489952,2cyclictest27591-21ssh09:55:083
280489952,2cyclictest22524-21needreboot10:30:223
280489951,3cyclictest8560-21ssh11:20:083
280489951,3cyclictest16095-21find07:50:183
280489951,3cyclictest16094-21/usr/sbin/munin09:05:183
280489951,3cyclictest15959-21/usr/sbin/munin11:05:163
280489950,4cyclictest3877-21mailstats08:35:293
280469954,1cyclictest28-21ksoftirqd/207:50:012
280469953,1cyclictest23897-21acpi08:10:182
280469953,1cyclictest18331-21ssh09:10:012
280469953,1cyclictest10718-21sh09:25:212
280469952,2cyclictest665-21snmpd07:42:462
280469952,2cyclictest665-21snmpd07:20:532
280469952,2cyclictest30629-21cpuspeed07:15:012
280469952,2cyclictest28-21ksoftirqd/211:00:012
280469952,2cyclictest23244-21/usr/sbin/munin08:05:302
280469952,2cyclictest19018-21ssh11:45:212
280469952,2cyclictest16298-21cpuspeed_turbos09:05:182
280469952,2cyclictest13857-21chrt09:00:102
280469952,2cyclictest13486-21chrt08:58:542
280469952,2cyclictest10106-21apt-get11:40:142
280469952,1cyclictest0-21swapper/210:10:062
280469951,3cyclictest848-21diskstats08:30:192
280469951,3cyclictest665-21snmpd09:50:092
280469951,3cyclictest27102-21expr11:50:172
280429952,2cyclictest7249-21ssh11:00:031
280429952,2cyclictest665-21snmpd09:05:191
280429952,2cyclictest665-21snmpd08:50:221
280429952,2cyclictest665-21snmpd08:20:121
280429952,2cyclictest665-21snmpd08:20:111
280429952,2cyclictest665-21snmpd07:20:081
280429952,2cyclictest6030-21ls07:30:201
280429952,2cyclictest3260-21cat07:25:151
280429952,2cyclictest31246-21packagekitd10:55:011
280429952,2cyclictest22357-21cat08:05:221
280429952,2cyclictest19454-21apt-get08:00:171
280429952,2cyclictest15635-21cat07:50:161
280429952,2cyclictest14917-21expr10:45:181
280429952,2cyclictest13983-21wc09:00:181
280429952,1cyclictest0-21swapper/109:45:191
280429951,3cyclictest372-21sshd08:30:051
280379953,1cyclictest18083-21diskmemload12:30:010
280379952,2cyclictest665-21snmpd08:50:130
280379952,2cyclictest28638-21df07:10:180
280379952,2cyclictest27513-21ssh09:55:040
280379952,2cyclictest26962-21expr08:15:220
280379952,2cyclictest20128-21cat08:00:210
280379952,2cyclictest18327-21ssh09:10:010
280379952,2cyclictest0-21swapper/007:30:220
280379951,3cyclictest13151-21cat07:45:170
280379950,5cyclictest0-21swapper/008:40:120
280469942,1cyclictest283-21systemd-journal08:15:042
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional