You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-30 - 12:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Sun Nov 30, 2025 00:45:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
427791205172,22phc2sys0-21swapper/319:06:093
262202202168,22sleep10-21swapper/119:09:511
262142202167,23sleep00-21swapper/019:09:460
261282202169,22sleep20-21swapper/219:08:402
2536721570,2sleep12652599cyclictest20:10:241
427291690,1ptp4l401ktimersoftd/300:01:523
26525996611,12cyclictest23914-21/usr/sbin/munin21:10:291
26525996411,19cyclictest21656-21sendmail-mta22:14:171
26525996311,12cyclictest19738-21/usr/sbin/munin00:20:121
2652599629,12cyclictest23612-21/usr/sbin/munin23:20:251
26525995811,12cyclictest22422-21apt00:25:141
26525995811,11cyclictest17590-21/usr/sbin/munin21:00:191
26524995831,9cyclictest9-21ksoftirqd/022:20:280
2652599569,15cyclictest3944-21taskset22:41:231
2652599569,10cyclictest29030-21chrt22:28:241
26525995610,11cyclictest29112-21seq21:23:041
106092560,1sleep00-21swapper/000:00:220
2652599559,12cyclictest25707-21/usr/sbin/munin22:20:221
2652599559,11cyclictest28659-21seq20:17:171
26525995510,11cyclictest14188-21seq21:58:461
2652499558,5cyclictest9-21ksoftirqd/021:05:190
2652599548,10cyclictest22379-21if_enp1s020:05:191
26525995411,11cyclictest1007-21/usr/sbin/munin23:40:271
26525995410,12cyclictest28743-21seq19:14:391
26525995410,11cyclictest31408-21seq21:25:571
26524995451,2cyclictest111rcuc/020:00:300
2652499542,6cyclictest101ktimersoftd/022:20:000
26524995424,9cyclictest9-21ksoftirqd/022:10:260
147202540,3sleep3391rcuc/323:05:123
2652599539,12cyclictest24018-21seq22:17:591
2652599539,11cyclictest14240-21seq00:09:081
26525995310,11cyclictest14309-21seq23:03:381
26525995310,10cyclictest11235-21seq19:41:351
212462530,3sleep20-21swapper/223:15:272
2652599529,10cyclictest26774-21seq23:29:451
26525995210,11cyclictest16504-21seq20:58:371
26525995210,11cyclictest1199-21seq20:27:201
36922510,2sleep20-21swapper/219:25:282
26525995111,11cyclictest5474-21/usr/sbin/munin20:35:231
2652499512,6cyclictest101ktimersoftd/021:20:170
2652599509,9cyclictest9103-21chrt21:47:491
2652599509,11cyclictest21465-21seq21:08:071
2652599497,9cyclictest19651-21cat00:20:001
2652499495,3cyclictest0-21swapper/022:30:000
101282490,3sleep125-21ksoftirqd/121:50:171
2652599489,8cyclictest11616-21chrt00:03:001
2652599488,9cyclictest1812-21chrt21:34:281
2652599488,9cyclictest11438-21taskset20:47:461
2652599488,8cyclictest13800-21taskset20:51:281
2652599488,8cyclictest1318-21taskset22:35:311
2652599488,10cyclictest26780-21taskset00:30:531
2652499486,5cyclictest9-21ksoftirqd/023:50:170
26524994817,4cyclictest9-21ksoftirqd/020:10:040
2652599478,9cyclictest31387-21chrt23:35:391
2652599478,8cyclictest6629-21chrt23:52:401
2652599478,7cyclictest9275-21taskset23:59:511
2652599477,10cyclictest29372-21taskset00:37:251
26525994710,10cyclictest6503-21chrt22:47:251
2652499479,6cyclictest9-21ksoftirqd/022:45:290
2652499472,42cyclictest1880-21cron23:45:000
26524994717,3cyclictest9-21ksoftirqd/021:57:260
2652599469,15cyclictest21596-21chrt23:17:101
26525994610,12cyclictest7154-21chrt22:50:031
26525994610,11cyclictest16662-21chrt23:07:151
26525994610,10cyclictest11814-21chrt22:59:181
2652499466,5cyclictest9-21ksoftirqd/023:05:170
2652499465,5cyclictest9-21ksoftirqd/021:45:220
2652499463,7cyclictest9-21ksoftirqd/019:30:140
53002450,2sleep25301-21cat21:40:182
2652599458,8cyclictest26720-21chrt21:19:201
2652599458,10cyclictest16808-21grep19:55:131
26525994510,11cyclictest13775-21chrt19:47:291
2652499455,5cyclictest9-21ksoftirqd/021:44:030
2652499453,5cyclictest9-21ksoftirqd/019:10:140
26524994518,3cyclictest9-21ksoftirqd/023:39:070
427291440,0ptp4l401ktimersoftd/322:45:013
2652599448,8cyclictest29116-21taskset23:33:151
26524994441,1cyclictest111rcuc/000:18:410
26524994418,3cyclictest9-21ksoftirqd/023:33:470
26524994416,4cyclictest9-21ksoftirqd/021:13:080
26524994416,3cyclictest9-21ksoftirqd/020:48:460
26524994414,3cyclictest9-21ksoftirqd/021:25:430
26524994413,3cyclictest9-21ksoftirqd/023:57:050
2652599439,9cyclictest30908-21taskset19:15:521
2652599439,9cyclictest30908-21taskset19:15:521
2652499437,5cyclictest9-21ksoftirqd/019:15:250
2652499437,5cyclictest9-21ksoftirqd/019:15:250
2652499435,5cyclictest9-21ksoftirqd/021:35:240
26524994337,4cyclictest19247-21cron22:10:000
26524994317,3cyclictest9-21ksoftirqd/023:20:390
427291420,0ptp4l401ktimersoftd/320:05:153
26527994237,3cyclictest41-21ksoftirqd/323:25:003
2652599427,10cyclictest0-21swapper/122:03:061
2652499429,6cyclictest9-21ksoftirqd/021:30:160
2652499428,5cyclictest9-21ksoftirqd/023:15:010
2652499425,5cyclictest9-21ksoftirqd/020:40:270
26524994238,2cyclictest111rcuc/019:35:160
2652499422,6cyclictest9-21ksoftirqd/020:25:210
36998410,5rtkit-daemon18979-21users23:10:271
26527994137,2cyclictest19479-21dump-pmu-power00:20:003
26527994135,4cyclictest41-21ksoftirqd/321:36:503
2652599419,9cyclictest4054-21taskset23:46:241
2652599419,11cyclictest31205-21taskset20:22:511
2652599419,10cyclictest1375-21taskset19:22:561
2652599419,10cyclictest1375-21taskset19:22:561
26525994110,11cyclictest1831-21taskset19:25:041
2652499415,6cyclictest9-21ksoftirqd/000:10:190
26524994137,2cyclictest111rcuc/000:26:190
2652499413,5cyclictest9-21ksoftirqd/020:19:170
2652499413,5cyclictest9-21ksoftirqd/019:57:100
2652499413,4cyclictest9-21ksoftirqd/023:49:440
2652499412,6cyclictest9-21ksoftirqd/020:35:180
427291400,1ptp4l401ktimersoftd/321:50:093
427291400,0ptp4l401ktimersoftd/322:20:243
427291400,0ptp4l401ktimersoftd/319:30:153
26527994035,3cyclictest41-21ksoftirqd/322:44:593
26527994034,4cyclictest41-21ksoftirqd/323:13:033
26526994034,4cyclictest33-21ksoftirqd/223:45:002
26525994010,11cyclictest4305-21taskset19:30:051
2652499404,4cyclictest9-21ksoftirqd/020:30:290
26524994037,2cyclictest111rcuc/019:25:400
26524994036,2cyclictest111rcuc/021:19:570
26524994036,2cyclictest111rcuc/020:22:170
2652499403,5cyclictest9-21ksoftirqd/022:38:160
2652499403,5cyclictest9-21ksoftirqd/000:20:540
2652499403,5cyclictest9-21ksoftirqd/000:06:190
22822400,1sleep12280-21tune2fs20:30:181
427291390,0ptp4l401ktimersoftd/323:50:293
26527993933,4cyclictest41-21ksoftirqd/323:01:243
26527993933,4cyclictest41-21ksoftirqd/321:42:173
26527993933,4cyclictest41-21ksoftirqd/321:28:493
26527993933,4cyclictest41-21ksoftirqd/320:28:513
26527993933,4cyclictest41-21ksoftirqd/319:48:483
26527993932,5cyclictest41-21ksoftirqd/319:41:223
26526993933,4cyclictest33-21ksoftirqd/220:43:032
26526993932,5cyclictest33-21ksoftirqd/220:35:002
2652599399,10cyclictest16845-21taskset00:13:151
26525993913,13cyclictest8955-21sshd20:42:451
2652499394,5cyclictest9-21ksoftirqd/020:05:130
26524993936,2cyclictest111rcuc/020:52:450
26524993936,2cyclictest111rcuc/000:34:220
26524993934,3cyclictest9-21ksoftirqd/023:05:000
260942393,2sleep341-21ksoftirqd/323:25:273
427291380,0ptp4l401ktimersoftd/321:15:233
26527993832,4cyclictest41-21ksoftirqd/322:59:443
26527993832,4cyclictest41-21ksoftirqd/322:17:183
26526993832,4cyclictest33-21ksoftirqd/223:31:362
26526993832,4cyclictest33-21ksoftirqd/222:44:022
26526993832,4cyclictest33-21ksoftirqd/221:13:162
26526993831,4cyclictest33-21ksoftirqd/220:45:112
2652599389,10cyclictest21119-21taskset20:00:431
2652499385,5cyclictest9-21ksoftirqd/022:40:280
2652499383,5cyclictest9-21ksoftirqd/019:45:000
26524993833,3cyclictest9-21ksoftirqd/022:05:010
26524993831,4cyclictest9-21ksoftirqd/021:03:550
26524993814,5cyclictest9-21ksoftirqd/022:59:360
26527993732,3cyclictest41-21ksoftirqd/323:33:143
26527993732,3cyclictest41-21ksoftirqd/300:13:173
26527993731,4cyclictest41-21ksoftirqd/323:49:333
26527993731,4cyclictest41-21ksoftirqd/323:16:043
26527993731,4cyclictest41-21ksoftirqd/322:13:383
26527993731,4cyclictest41-21ksoftirqd/321:04:413
26527993731,4cyclictest41-21ksoftirqd/320:12:513
26527993731,4cyclictest41-21ksoftirqd/300:37:313
26527993731,3cyclictest41-21ksoftirqd/322:30:013
26527993730,4cyclictest41-21ksoftirqd/323:59:573
26527993730,4cyclictest41-21ksoftirqd/321:46:143
26526993732,3cyclictest33-21ksoftirqd/223:52:222
26526993731,4cyclictest33-21ksoftirqd/221:56:362
26526993731,4cyclictest33-21ksoftirqd/220:55:052
26526993731,4cyclictest33-21ksoftirqd/219:43:242
26526993731,4cyclictest33-21ksoftirqd/200:34:462
26526993730,4cyclictest33-21ksoftirqd/222:57:252
2652599379,10cyclictest4172-21taskset21:38:051
2652599379,10cyclictest19017-21taskset22:07:121
26525993711,11cyclictest6682-21seq21:43:181
2652499379,6cyclictest9-21ksoftirqd/023:29:490
2652499374,4cyclictest9-21ksoftirqd/022:50:290
2652499374,4cyclictest9-21ksoftirqd/019:20:290
2652499374,4cyclictest9-21ksoftirqd/019:20:280
2652499373,5cyclictest9-21ksoftirqd/020:56:200
26524993732,3cyclictest9-21ksoftirqd/023:15:280
26524993732,3cyclictest9-21ksoftirqd/021:50:240
26527993631,3cyclictest41-21ksoftirqd/319:11:403
26527993631,3cyclictest41-21ksoftirqd/300:08:413
26527993630,4cyclictest41-21ksoftirqd/321:59:093
26527993630,4cyclictest41-21ksoftirqd/321:33:253
26527993630,4cyclictest41-21ksoftirqd/320:58:313
26527993630,4cyclictest41-21ksoftirqd/319:28:373
26526993630,4cyclictest33-21ksoftirqd/223:55:102
26526993630,4cyclictest33-21ksoftirqd/222:00:572
26526993630,4cyclictest33-21ksoftirqd/221:05:052
26526993629,5cyclictest33-21ksoftirqd/221:24:582
26525993629,4cyclictest25-21ksoftirqd/119:36:501
2652499364,4cyclictest9-21ksoftirqd/019:49:200
2652499363,4cyclictest9-21ksoftirqd/000:39:360
26527993530,3cyclictest41-21ksoftirqd/322:30:443
26527993530,3cyclictest41-21ksoftirqd/321:14:173
26527993530,3cyclictest41-21ksoftirqd/321:10:003
26527993530,3cyclictest41-21ksoftirqd/319:58:393
26527993529,4cyclictest41-21ksoftirqd/320:52:343
26527993529,4cyclictest41-21ksoftirqd/320:43:193
26527993529,4cyclictest41-21ksoftirqd/320:35:463
26527993529,4cyclictest41-21ksoftirqd/320:32:003
26527993529,4cyclictest41-21ksoftirqd/319:37:443
26526993530,3cyclictest33-21ksoftirqd/219:17:012
26526993530,3cyclictest33-21ksoftirqd/219:17:012
26526993529,4cyclictest33-21ksoftirqd/223:08:532
26526993529,4cyclictest33-21ksoftirqd/200:08:502
26526993529,3cyclictest33-21ksoftirqd/221:50:372
26526993528,4cyclictest33-21ksoftirqd/221:26:272
26524993530,3cyclictest9-21ksoftirqd/019:52:410
98182340,7sleep22652699cyclictest00:00:162
26527993429,3cyclictest41-21ksoftirqd/323:36:533
26527993429,3cyclictest41-21ksoftirqd/320:49:523
26527993429,3cyclictest41-21ksoftirqd/320:24:033
26527993429,3cyclictest41-21ksoftirqd/320:02:353
26527993429,3cyclictest41-21ksoftirqd/300:35:013
26527993428,4cyclictest41-21ksoftirqd/322:35:453
26527993428,4cyclictest41-21ksoftirqd/321:21:273
26527993428,4cyclictest41-21ksoftirqd/319:16:223
26527993428,4cyclictest41-21ksoftirqd/319:16:223
26527993427,5cyclictest41-21ksoftirqd/322:09:233
26526993430,3cyclictest33-21ksoftirqd/200:10:322
26526993429,3cyclictest33-21ksoftirqd/222:15:442
26526993429,3cyclictest33-21ksoftirqd/219:33:312
26526993428,4cyclictest33-21ksoftirqd/222:37:152
26526993428,4cyclictest33-21ksoftirqd/220:27:182
26526993428,4cyclictest33-21ksoftirqd/200:18:462
26526993427,5cyclictest33-21ksoftirqd/200:30:002
26526993427,4cyclictest33-21ksoftirqd/220:16:512
26527993328,3cyclictest41-21ksoftirqd/300:20:263
26526993328,3cyclictest33-21ksoftirqd/222:46:472
26526993328,3cyclictest33-21ksoftirqd/220:36:052
26526993328,3cyclictest33-21ksoftirqd/219:54:402
26526993327,4cyclictest33-21ksoftirqd/221:49:572
26526993327,4cyclictest33-21ksoftirqd/221:18:482
26526993327,4cyclictest33-21ksoftirqd/220:51:332
26526993327,4cyclictest33-21ksoftirqd/219:12:282
26526993325,6cyclictest33-21ksoftirqd/222:35:002
26525993327,4cyclictest25-21ksoftirqd/122:31:311
26524993328,3cyclictest9-21ksoftirqd/022:25:140
26527993227,3cyclictest41-21ksoftirqd/323:44:053
26527993226,4cyclictest41-21ksoftirqd/322:02:353
26527993226,4cyclictest41-21ksoftirqd/319:21:323
26527993226,4cyclictest41-21ksoftirqd/319:21:323
26527993225,4cyclictest41-21ksoftirqd/319:50:363
26526993228,3cyclictest33-21ksoftirqd/220:05:222
26526993228,3cyclictest33-21ksoftirqd/200:38:402
26526993227,3cyclictest33-21ksoftirqd/222:14:362
26526993227,3cyclictest33-21ksoftirqd/219:56:432
26526993226,4cyclictest33-21ksoftirqd/223:24:482
26526993226,4cyclictest33-21ksoftirqd/223:10:342
26526993226,4cyclictest33-21ksoftirqd/221:05:012
26526993225,4cyclictest33-21ksoftirqd/222:07:182
26525993226,4cyclictest25-21ksoftirqd/119:53:591
26526993126,3cyclictest33-21ksoftirqd/223:36:422
26526993126,3cyclictest33-21ksoftirqd/223:25:152
26526993126,3cyclictest33-21ksoftirqd/220:11:352
26526993126,3cyclictest33-21ksoftirqd/219:21:442
26526993126,3cyclictest33-21ksoftirqd/219:21:432
26526993125,4cyclictest33-21ksoftirqd/222:51:272
26526993125,4cyclictest33-21ksoftirqd/222:23:482
26526993125,4cyclictest33-21ksoftirqd/221:39:512
26527993025,3cyclictest41-21ksoftirqd/300:29:143
26526993025,3cyclictest33-21ksoftirqd/223:04:532
26526993024,4cyclictest33-21ksoftirqd/221:34:142
26526992924,3cyclictest33-21ksoftirqd/220:03:112
26526992923,4cyclictest33-21ksoftirqd/219:49:472
26527992822,4cyclictest41-21ksoftirqd/320:16:483
26526992823,3cyclictest33-21ksoftirqd/223:48:302
26526992823,3cyclictest33-21ksoftirqd/220:21:562
26526992822,4cyclictest33-21ksoftirqd/200:24:032
26527992621,3cyclictest41-21ksoftirqd/322:52:133
26526992418,4cyclictest33-21ksoftirqd/219:37:152
26526992418,3cyclictest33-21ksoftirqd/222:25:192
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional