You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-03 - 21:10
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rack1slot1.osadl.org (updated Mon Nov 03, 2025 12:45:07)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
212402200162,24sleep00-21swapper/007:06:080
194292200159,27sleep20-21swapper/207:05:092
214052198161,24sleep10-21swapper/107:08:181
214022197159,26sleep30-21swapper/307:08:163
241502680,1sleep10-21swapper/111:35:151
16632170,0sleep30-21swapper/311:05:133
176082160,0sleep20-21swapper/208:05:212
21656991414,0cyclictest28-21ksoftirqd/211:41:292
21656991313,0cyclictest28-21ksoftirqd/210:35:172
21635991312,1cyclictest9-21ksoftirqd/009:05:000
21667991210,1cyclictest26919-21aten_r1power_fr10:55:133
21656991211,1cyclictest28-21ksoftirqd/211:55:142
21656991211,1cyclictest28-21ksoftirqd/210:48:092
21656991210,1cyclictest28-21ksoftirqd/211:25:192
2164699120,11cyclictest0-21swapper/112:30:221
21667991110,1cyclictest35-21ksoftirqd/310:45:003
2165699119,1cyclictest28-21ksoftirqd/211:10:132
21656991111,0cyclictest28-21ksoftirqd/212:07:252
21656991111,0cyclictest28-21ksoftirqd/210:40:212
21656991111,0cyclictest28-21ksoftirqd/209:31:332
21656991110,1cyclictest28-21ksoftirqd/212:25:002
21656991110,1cyclictest28-21ksoftirqd/211:35:002
21656991110,1cyclictest28-21ksoftirqd/210:16:442
21656991110,1cyclictest28-21ksoftirqd/210:16:442
21656991110,1cyclictest28-21ksoftirqd/209:55:172
2165699110,11cyclictest0-21swapper/210:25:212
2163599119,1cyclictest9-21ksoftirqd/012:00:010
2163599113,4cyclictest30152-21latency_hist11:00:010
2163599112,4cyclictest15874-21wc08:05:000
21635991111,0cyclictest9-21ksoftirqd/011:15:130
21635991111,0cyclictest21685-21ssh11:30:280
2166799100,6cyclictest8484-21apt-get10:30:113
2165699109,1cyclictest28-21ksoftirqd/212:38:372
2165699109,1cyclictest28-21ksoftirqd/212:10:252
2165699109,1cyclictest28-21ksoftirqd/211:20:182
2165699109,1cyclictest28-21ksoftirqd/211:03:332
2165699109,1cyclictest28-21ksoftirqd/210:55:162
2165699109,1cyclictest28-21ksoftirqd/210:30:122
2165699109,1cyclictest28-21ksoftirqd/210:20:132
2165699109,1cyclictest28-21ksoftirqd/209:50:062
2165699109,1cyclictest19110-21snmpd09:13:182
2165699108,1cyclictest28-21ksoftirqd/210:10:142
2165699108,1cyclictest28-21ksoftirqd/209:10:002
21656991010,0cyclictest60950irq/123-eno111:50:132
21656991010,0cyclictest28-21ksoftirqd/209:40:192
21656991010,0cyclictest28-21ksoftirqd/209:26:252
21656991010,0cyclictest28-21ksoftirqd/209:15:132
2163599109,1cyclictest9-21ksoftirqd/012:25:150
2163599109,1cyclictest9-21ksoftirqd/011:40:170
2163599109,1cyclictest9-21ksoftirqd/011:20:410
2163599109,1cyclictest9-21ksoftirqd/011:00:150
2163599108,1cyclictest9-21ksoftirqd/011:50:000
21635991010,0cyclictest9-21ksoftirqd/010:38:030
947290,1sleep00-21swapper/012:32:190
216679998,1cyclictest742-21runrttasks10:04:083
216679997,1cyclictest35-21ksoftirqd/307:20:003
216569999,0cyclictest28-21ksoftirqd/212:30:532
216569999,0cyclictest28-21ksoftirqd/212:15:162
216569999,0cyclictest28-21ksoftirqd/210:00:162
216569999,0cyclictest28-21ksoftirqd/209:23:082
216569999,0cyclictest0-21swapper/210:50:022
216569999,0cyclictest0-21swapper/208:30:132
216569998,1cyclictest28-21ksoftirqd/211:35:202
216569998,1cyclictest28-21ksoftirqd/211:09:132
216569998,1cyclictest28-21ksoftirqd/210:05:232
216569998,1cyclictest28-21ksoftirqd/209:45:132
216569998,1cyclictest28-21ksoftirqd/207:55:002
216569997,1cyclictest28-21ksoftirqd/207:25:122
216569997,1cyclictest13475-21munin-run08:00:012
216569997,1cyclictest1250-21stty09:35:142
216569990,8cyclictest23986-21munin-node11:47:212
216359999,0cyclictest9-21ksoftirqd/012:15:120
216359999,0cyclictest9-21ksoftirqd/010:40:330
216359999,0cyclictest9-21ksoftirqd/009:30:130
216359998,1cyclictest9-21ksoftirqd/011:50:140
216359998,1cyclictest9-21ksoftirqd/010:00:150
216359998,1cyclictest9-21ksoftirqd/009:40:180
216359998,1cyclictest9-21ksoftirqd/009:15:220
216359998,1cyclictest9-21ksoftirqd/008:30:000
216359990,8cyclictest9-21ksoftirqd/009:35:140
216359990,6cyclictest19110-21snmpd11:29:330
216679986,1cyclictest19110-21snmpd09:21:183
216679986,1cyclictest19110-21snmpd08:32:373
216679984,2cyclictest14390-21diskmemload10:27:593
216679980,8cyclictest0-21swapper/309:45:573
216679980,3cyclictest11735-21taskset09:04:063
216679980,3cyclictest0-21swapper/312:20:003
216679980,3cyclictest0-21swapper/309:41:163
216679980,3cyclictest0-21swapper/309:39:163
216679980,2cyclictest22456-21taskset10:49:113
216569988,0cyclictest28-21ksoftirqd/212:00:112
216569987,1cyclictest28-21ksoftirqd/212:25:132
216569987,1cyclictest28-21ksoftirqd/208:50:152
216569987,1cyclictest28-21ksoftirqd/207:45:172
216569987,1cyclictest28-21ksoftirqd/207:40:122
216569981,6cyclictest30257-21apt-get08:35:142
216469987,1cyclictest200-21jbd2/sda2-811:14:131
216469986,1cyclictest112152sleep111:17:101
216469981,3cyclictest0-21swapper/107:15:191
216469980,5cyclictest200-21jbd2/sda2-807:25:001
216469980,4cyclictest0-21swapper/109:25:011
216359988,0cyclictest9-21ksoftirqd/009:53:450
216359988,0cyclictest9-21ksoftirqd/009:20:150
216359987,1cyclictest9-21ksoftirqd/012:05:150
216359987,1cyclictest9-21ksoftirqd/008:10:000
216359987,1cyclictest15653-1kworker/u9:012:10:230
216359987,1cyclictest14635-1kworker/u9:109:12:500
216359986,1cyclictest9-21ksoftirqd/008:40:000
216359981,4cyclictest0-21swapper/012:04:450
216359980,7cyclictest30010-21ssh10:15:020
216359980,7cyclictest30010-21ssh10:15:020
216359980,7cyclictest25410-21ssh11:35:470
216359980,7cyclictest14390-21diskmemload09:45:200
216359980,4cyclictest14390-21diskmemload12:23:210
216359980,1cyclictest254-21systemd-journal07:40:000
216359980,0cyclictest0-21swapper/010:27:580
26917270,2sleep10-21swapper/112:24:431
216679976,1cyclictest19110-21snmpd09:56:193
216679976,1cyclictest19110-21snmpd07:56:153
216679975,1cyclictest32767-21ssh11:46:113
216679975,1cyclictest19110-21snmpd11:59:343
216679975,1cyclictest19110-21snmpd11:10:383
216679975,1cyclictest19110-21snmpd10:10:073
216679973,3cyclictest14390-21diskmemload11:18:163
216679972,4cyclictest557-21nscd10:05:203
216679972,1cyclictest14390-21diskmemload12:22:463
216679971,3cyclictest22931-21latency_hist08:20:003
216679971,3cyclictest0-21swapper/308:45:113
216679970,4cyclictest14390-21diskmemload11:30:143
216679970,3cyclictest0-21swapper/312:25:593
216679970,3cyclictest0-21swapper/311:27:163
216679970,3cyclictest0-21swapper/311:00:283
216679970,3cyclictest0-21swapper/307:25:103
216679970,2cyclictest0-21swapper/311:39:363
216679970,2cyclictest0-21swapper/309:52:543
216679970,2cyclictest0-21swapper/309:12:373
216679970,2cyclictest0-21swapper/308:25:123
216679970,1cyclictest0-21swapper/311:41:043
216679970,1cyclictest0-21swapper/309:15:123
216679970,0cyclictest0-21swapper/312:30:053
216569976,1cyclictest28-21ksoftirqd/211:15:202
216569976,1cyclictest28-21ksoftirqd/209:00:162
216569976,1cyclictest28-21ksoftirqd/208:55:152
216569976,1cyclictest28-21ksoftirqd/208:10:142
216569976,1cyclictest28-21ksoftirqd/208:00:152
216569976,1cyclictest19110-21snmpd07:11:502
216569975,1cyclictest4483-21kworker/2:008:40:162
216569975,1cyclictest4483-21kworker/2:008:40:162
216569975,1cyclictest28-21ksoftirqd/208:50:002
216569975,1cyclictest27669-21perf08:30:002
216569975,1cyclictest21927-21ntpq08:15:162
216569973,3cyclictest24978-21taskset08:20:572
216469971,3cyclictest0-21swapper/110:15:201
216469971,3cyclictest0-21swapper/110:15:201
216469971,3cyclictest0-21swapper/109:55:131
216469970,6cyclictest0-21swapper/110:00:221
216469970,4cyclictest0-21swapper/109:20:131
216469970,2cyclictest0-21swapper/111:40:211
216469970,0cyclictest0-21swapper/107:10:141
216359977,0cyclictest9-21ksoftirqd/011:05:470
216359976,1cyclictest9-21ksoftirqd/008:30:140
216359976,1cyclictest9-21ksoftirqd/007:20:150
216359976,1cyclictest7200-1kworker/u9:011:11:180
216359976,1cyclictest4440-21ssh12:37:070
216359976,1cyclictest11475-21telnet07:55:150
216359973,1cyclictest254-21systemd-journal07:30:000
216359970,7cyclictest14390-21diskmemload10:10:200
216359970,6cyclictest8992-21/usr/sbin/munin07:50:210
216359970,6cyclictest4315-21telnet07:40:130
216359970,6cyclictest32631-21/usr/sbin/munin08:40:180
216359970,6cyclictest32631-21/usr/sbin/munin08:40:180
216359970,6cyclictest24875-21/usr/sbin/munin07:15:120
216359970,6cyclictest23017-21/usr/sbin/munin10:50:150
216359970,6cyclictest21829-21/usr/sbin/munin07:10:230
216359970,6cyclictest20791-21/usr/sbin/munin08:15:140
216359970,6cyclictest15729-21ssh09:55:090
216359970,6cyclictest0-21swapper/010:22:010
216359970,6cyclictest0-21swapper/009:25:020
216359970,6cyclictest0-21swapper/008:55:310
216359970,6cyclictest0-21swapper/008:10:140
216359970,6cyclictest0-21swapper/007:45:190
216359970,1cyclictest8479-21/usr/sbin/munin10:30:180
216359970,1cyclictest0-21swapper/010:45:160
216359970,1cyclictest0-21swapper/010:05:100
216359970,1cyclictest0-21swapper/007:30:130
216679965,1cyclictest4364-21ssh10:24:213
216679965,1cyclictest35-21ksoftirqd/308:55:123
216679965,1cyclictest19110-21snmpd08:16:223
216679965,1cyclictest19110-21snmpd07:20:443
216679965,1cyclictest14701-21ssh11:21:123
216679964,1cyclictest31775-21ssh09:31:033
216679964,1cyclictest19110-21snmpd11:51:183
216679963,1cyclictest570-21systemd-logind08:35:203
216679962,0cyclictest4923-21apt-get08:50:123
216679961,3cyclictest1905-21/usr/sbin/munin07:35:203
216679961,2cyclictest14390-21diskmemload09:25:143
216679961,1cyclictest22329-21df07:10:143
216679960,2cyclictest0-21swapper/312:10:193
216679960,2cyclictest0-21swapper/312:00:093
216679960,2cyclictest0-21swapper/310:16:443
216679960,2cyclictest0-21swapper/310:16:443
216679960,1cyclictest0-21swapper/312:37:433
216679960,1cyclictest0-21swapper/312:05:153
216679960,1cyclictest0-21swapper/310:50:583
216679960,1cyclictest0-21swapper/310:37:223
216569965,1cyclictest4483-21kworker/2:007:35:142
216569965,1cyclictest19110-21snmpd07:23:022
216569964,1cyclictest28-21ksoftirqd/207:15:142
216469965,1cyclictest0-21swapper/107:50:161
216469963,1cyclictest0-21swapper/109:13:161
216469961,3cyclictest0-21swapper/110:05:131
216469960,6cyclictest0-21swapper/110:14:551
216469960,6cyclictest0-21swapper/108:50:161
216469960,6cyclictest0-21swapper/108:03:151
216469960,5cyclictest0-21swapper/112:10:521
216469960,5cyclictest0-21swapper/111:45:181
216469960,5cyclictest0-21swapper/110:35:171
216469960,5cyclictest0-21swapper/108:05:161
216469960,4cyclictest0-21swapper/108:30:141
216469960,3cyclictest0-21swapper/112:35:171
216469960,3cyclictest0-21swapper/112:15:331
216469960,3cyclictest0-21swapper/111:50:151
216469960,3cyclictest0-21swapper/110:56:051
216469960,3cyclictest0-21swapper/108:55:121
216469960,2cyclictest0-21swapper/110:29:361
216469960,2cyclictest0-21swapper/109:50:211
216469960,1cyclictest0-21swapper/110:46:261
216469960,1cyclictest0-21swapper/108:23:101
216359965,1cyclictest23213-21telnet08:20:120
216359960,6cyclictest0-21swapper/009:05:040
216359960,6cyclictest0-21swapper/008:50:100
216359960,2cyclictest0-21swapper/008:45:120
216679954,1cyclictest35-21ksoftirqd/307:41:123
216679953,1cyclictest32731-21/usr/sbin/munin08:40:153
216679953,1cyclictest32731-21/usr/sbin/munin08:40:143
216679953,1cyclictest32010-21aten_r1power_en07:30:143
216679952,1cyclictest254-21systemd-journal08:14:553
216679951,3cyclictest13884-21kworker/u8:208:05:263
216679951,2cyclictest10162-21/usr/sbin/munin07:50:183
216679950,1cyclictest15269-21/usr/sbin/munin08:00:213
216569952,3cyclictest271rcuc/207:30:142
216469952,3cyclictest0-21swapper/108:40:221
216469952,3cyclictest0-21swapper/108:40:221
216469951,2cyclictest0-21swapper/111:05:321
216469951,0cyclictest0-21swapper/107:25:181
216469950,5cyclictest0-21swapper/109:01:321
216469950,5cyclictest0-21swapper/107:57:461
216469950,5cyclictest0-21swapper/107:43:151
216469950,5cyclictest0-21swapper/107:30:571
216469950,4cyclictest0-21swapper/111:00:141
216469950,4cyclictest0-21swapper/109:33:251
216469950,4cyclictest0-21swapper/109:18:591
216469950,3cyclictest200-21jbd2/sda2-810:30:361
216469950,3cyclictest0-21swapper/111:59:371
216469950,2cyclictest0-21swapper/112:08:571
216469950,2cyclictest0-21swapper/111:22:281
216469950,2cyclictest0-21swapper/110:51:291
216469950,2cyclictest0-21swapper/109:45:131
216469950,1cyclictest0-21swapper/112:25:091
216469950,1cyclictest0-21swapper/111:26:341
216469950,1cyclictest0-21swapper/110:21:011
216469950,0cyclictest0-21swapper/110:40:151
216469950,0cyclictest0-21swapper/109:43:031
216679943,1cyclictest6951-21grep07:45:163
216679943,1cyclictest13508-21grep09:05:223
216469944,0cyclictest0-21swapper/107:49:381
216469940,4cyclictest0-21swapper/108:10:371
216469940,4cyclictest0-21swapper/107:36:141
216469940,3cyclictest0-21swapper/112:03:211
216469940,2cyclictest0-21swapper/109:35:161
216469940,2cyclictest0-21swapper/108:25:121
216469940,1cyclictest0-21swapper/111:30:341
216469940,1cyclictest0-21swapper/108:45:191
216469940,0cyclictest0-21swapper/109:09:481
216469932,1cyclictest20785-21chrt08:15:061
216469931,1cyclictest0-21swapper/108:35:171
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional