You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-21 - 22:16
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot4.osadl.org (updated Fri Nov 21, 2025 12:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1192222040,3sleep10-21swapper/107:09:411
42002201168,22sleep20-21swapper/207:06:542
42052200168,21sleep30-21swapper/307:06:553
4282193159,23sleep00-21swapper/007:05:070
79321800,7sleep23267099cyclictest07:14:382
2050121320,3sleep320473-21sh07:10:203
127202790,4sleep012737-21sh07:11:490
239422770,2sleep10-21swapper/107:12:531
32669997226,7cyclictest25-21ksoftirqd/107:25:001
32669996824,8cyclictest25-21ksoftirqd/110:35:261
32669996823,8cyclictest25-21ksoftirqd/109:35:171
32669996736,4cyclictest25-21ksoftirqd/108:00:001
32669996730,8cyclictest25-21ksoftirqd/107:30:111
32669996725,7cyclictest25-21ksoftirqd/107:45:151
32669996723,7cyclictest25-21ksoftirqd/112:00:261
32669996632,4cyclictest25-21ksoftirqd/112:10:001
32669996627,8cyclictest25-21ksoftirqd/112:15:191
32669996624,9cyclictest25-21ksoftirqd/111:20:271
32669996624,9cyclictest25-21ksoftirqd/111:20:271
32669996624,8cyclictest25-21ksoftirqd/108:45:291
32669996622,8cyclictest25-21ksoftirqd/109:55:271
32669996531,6cyclictest25-21ksoftirqd/107:15:141
32669996525,8cyclictest25-21ksoftirqd/110:30:291
32669996525,7cyclictest25-21ksoftirqd/107:50:241
32669996432,4cyclictest25-21ksoftirqd/108:55:141
32669996432,3cyclictest25-21ksoftirqd/111:05:001
32669996429,4cyclictest25-21ksoftirqd/109:10:011
32669996428,8cyclictest25-21ksoftirqd/108:15:211
32669996426,8cyclictest25-21ksoftirqd/108:40:221
32669996425,8cyclictest25-21ksoftirqd/110:00:121
32669996425,8cyclictest25-21ksoftirqd/108:25:171
32669996425,8cyclictest25-21ksoftirqd/108:00:271
32669996425,7cyclictest25-21ksoftirqd/110:50:141
32669996424,8cyclictest25-21ksoftirqd/110:25:091
32669996333,8cyclictest25-21ksoftirqd/110:05:161
32669996330,8cyclictest25-21ksoftirqd/111:55:001
32669996330,4cyclictest25-21ksoftirqd/111:40:011
32669996329,4cyclictest25-21ksoftirqd/110:45:001
32669996328,8cyclictest25-21ksoftirqd/112:25:211
32669996327,8cyclictest25-21ksoftirqd/109:45:201
32669996327,8cyclictest25-21ksoftirqd/109:30:171
32669996326,7cyclictest25-21ksoftirqd/112:20:291
32669996326,7cyclictest25-21ksoftirqd/110:10:151
32669996325,8cyclictest25-21ksoftirqd/111:25:241
32669996325,7cyclictest25-21ksoftirqd/111:10:211
32669996324,8cyclictest25-21ksoftirqd/111:40:241
32669996324,6cyclictest25-21ksoftirqd/111:15:151
32669996230,4cyclictest25-21ksoftirqd/110:15:141
32669996229,7cyclictest25-21ksoftirqd/110:45:261
32669996229,7cyclictest25-21ksoftirqd/110:45:261
32669996228,4cyclictest25-21ksoftirqd/111:35:011
32669996225,8cyclictest25-21ksoftirqd/112:30:151
32669996225,7cyclictest25-21ksoftirqd/112:10:171
32669996225,7cyclictest25-21ksoftirqd/108:50:231
32669996225,7cyclictest25-21ksoftirqd/108:20:171
32669996224,9cyclictest25-21ksoftirqd/110:55:131
32669996224,8cyclictest25-21ksoftirqd/109:00:251
32669996224,7cyclictest25-21ksoftirqd/107:35:241
32669996223,8cyclictest25-21ksoftirqd/109:40:201
32669996223,7cyclictest25-21ksoftirqd/109:15:241
32669996126,4cyclictest25-21ksoftirqd/110:20:161
32669996125,7cyclictest25-21ksoftirqd/109:20:271
32669996124,8cyclictest25-21ksoftirqd/112:35:191
32669996123,8cyclictest25-21ksoftirqd/108:30:151
32669996123,7cyclictest25-21ksoftirqd/111:55:241
32669996123,7cyclictest25-21ksoftirqd/108:35:231
32669996123,6cyclictest25-21ksoftirqd/107:25:211
32669996027,7cyclictest25-21ksoftirqd/109:10:161
32669996025,8cyclictest25-21ksoftirqd/108:05:171
32669996021,8cyclictest25-21ksoftirqd/108:10:211
32669996019,10cyclictest25-21ksoftirqd/107:40:271
32669996017,8cyclictest25-21ksoftirqd/111:05:181
32669995825,8cyclictest25-21ksoftirqd/109:50:131
32669995824,8cyclictest25-21ksoftirqd/109:25:261
3267099571,24cyclictest0-21swapper/211:45:232
3266799573,3cyclictest12547-21runrttasks11:43:280
32669995224,9cyclictest25-21ksoftirqd/111:45:271
165202520,3sleep30-21swapper/311:50:213
32671995145,3cyclictest15049-21cron10:45:003
427291430,0ptp4l401ktimersoftd/311:17:143
32670994337,4cyclictest24909-21cron08:55:002
32667994330,10cyclictest9-21ksoftirqd/009:25:000
427291410,0ptp4l401ktimersoftd/311:48:343
427291410,0ptp4l401ktimersoftd/307:15:423
32667994134,4cyclictest9-21ksoftirqd/012:35:010
32671994035,3cyclictest41-21ksoftirqd/312:30:123
32671994035,3cyclictest41-21ksoftirqd/311:35:013
32671994035,3cyclictest32190-21cron08:05:003
32671994033,4cyclictest41-21ksoftirqd/311:45:003
32671993933,4cyclictest41-21ksoftirqd/312:04:283
32671993933,4cyclictest41-21ksoftirqd/308:49:163
32671993933,4cyclictest41-21ksoftirqd/308:32:433
32670993933,4cyclictest33-21ksoftirqd/210:59:572
3267099393,33cyclictest10220-21latency_hist11:40:012
3267099391,22cyclictest0-21swapper/211:15:242
32667993932,4cyclictest9-21ksoftirqd/012:37:000
427791382,5phc2sys41-21ksoftirqd/309:25:133
32671993834,3cyclictest41-21ksoftirqd/310:59:373
32671993832,4cyclictest41-21ksoftirqd/310:29:013
32671993832,4cyclictest41-21ksoftirqd/309:17:123
32671993832,4cyclictest41-21ksoftirqd/308:25:493
32671993832,4cyclictest41-21ksoftirqd/307:41:123
32671993832,4cyclictest41-21ksoftirqd/307:31:333
32671993832,3cyclictest41-21ksoftirqd/308:00:003
32671993831,4cyclictest41-21ksoftirqd/310:18:103
32671993831,4cyclictest41-21ksoftirqd/310:08:433
32671993830,4cyclictest41-21ksoftirqd/308:15:143
32670993832,4cyclictest33-21ksoftirqd/212:38:222
32670993832,4cyclictest33-21ksoftirqd/209:32:572
32670993832,4cyclictest33-21ksoftirqd/209:24:092
32670993831,4cyclictest33-21ksoftirqd/208:35:272
3267099381,3cyclictest2542-1kworker/2:2H10:25:012
32667993832,4cyclictest9-21ksoftirqd/007:54:160
32667993832,4cyclictest9-21ksoftirqd/007:34:070
32667993831,4cyclictest9-21ksoftirqd/011:54:260
32667993831,4cyclictest9-21ksoftirqd/011:17:030
32667993831,4cyclictest9-21ksoftirqd/011:03:030
427291370,0ptp4l401ktimersoftd/308:40:153
32671993731,4cyclictest41-21ksoftirqd/311:22:373
32671993731,4cyclictest41-21ksoftirqd/311:22:373
32671993731,4cyclictest41-21ksoftirqd/309:31:363
32671993731,4cyclictest17648-21ls09:45:013
32671993730,4cyclictest41-21ksoftirqd/311:00:143
32671993730,4cyclictest41-21ksoftirqd/308:50:123
32670993731,4cyclictest33-21ksoftirqd/208:59:062
32670993731,4cyclictest33-21ksoftirqd/207:58:202
32670993730,4cyclictest33-21ksoftirqd/211:08:322
32670993730,4cyclictest33-21ksoftirqd/211:03:142
3267099372,33cyclictest5039-21cat09:20:002
32670993714,20cyclictest25044-21latency_hist10:00:002
3267099371,21cyclictest0-21swapper/209:10:192
32667993732,3cyclictest9-21ksoftirqd/012:21:070
32667993732,3cyclictest9-21ksoftirqd/010:54:140
32667993731,4cyclictest9-21ksoftirqd/010:00:340
32667993731,4cyclictest9-21ksoftirqd/007:29:410
32667993731,3cyclictest9-21ksoftirqd/012:17:300
32667993730,5cyclictest9-21ksoftirqd/011:40:000
32667993730,4cyclictest9-21ksoftirqd/011:47:280
32667993729,5cyclictest9-21ksoftirqd/009:43:570
32671993631,3cyclictest41-21ksoftirqd/309:25:003
32671993631,3cyclictest41-21ksoftirqd/307:47:273
32671993630,4cyclictest41-21ksoftirqd/312:09:263
32671993630,4cyclictest41-21ksoftirqd/309:37:383
32671993629,4cyclictest41-21ksoftirqd/310:52:563
32671993629,4cyclictest41-21ksoftirqd/308:59:033
3267099363,30cyclictest0-21swapper/212:24:592
32670993631,3cyclictest33-21ksoftirqd/211:33:332
32670993630,4cyclictest33-21ksoftirqd/208:02:502
32670993629,4cyclictest33-21ksoftirqd/209:02:592
3267099360,1cyclictest15289-21apt-get10:45:122
3267099360,1cyclictest15289-21apt-get10:45:112
3267099360,1cyclictest0-21swapper/208:25:002
32667993631,3cyclictest9-21ksoftirqd/009:36:430
32667993630,4cyclictest9-21ksoftirqd/012:01:340
32667993630,4cyclictest9-21ksoftirqd/011:26:180
32667993630,4cyclictest9-21ksoftirqd/010:29:060
32667993630,4cyclictest9-21ksoftirqd/009:46:460
32667993629,4cyclictest9-21ksoftirqd/011:21:170
32667993629,4cyclictest9-21ksoftirqd/011:21:170
32667993629,4cyclictest9-21ksoftirqd/009:12:560
32667993629,4cyclictest9-21ksoftirqd/008:52:580
32671993529,4cyclictest41-21ksoftirqd/310:32:463
32671993529,4cyclictest41-21ksoftirqd/309:51:543
32671993529,4cyclictest41-21ksoftirqd/309:10:423
32671993529,4cyclictest41-21ksoftirqd/308:21:273
32670993529,4cyclictest33-21ksoftirqd/210:06:372
32670993529,4cyclictest33-21ksoftirqd/209:38:252
32670993528,4cyclictest33-21ksoftirqd/212:13:032
3267099350,4cyclictest8401-21if_enp1s009:25:162
32667993530,3cyclictest9-21ksoftirqd/010:13:570
32667993530,3cyclictest9-21ksoftirqd/007:45:300
32667993529,4cyclictest9-21ksoftirqd/010:23:400
32667993529,4cyclictest9-21ksoftirqd/010:19:190
32667993529,4cyclictest9-21ksoftirqd/008:49:130
32667993529,4cyclictest9-21ksoftirqd/008:42:430
32667993529,4cyclictest9-21ksoftirqd/008:20:120
32667993529,3cyclictest9-21ksoftirqd/010:46:230
32667993529,3cyclictest9-21ksoftirqd/010:46:220
32667993529,3cyclictest9-21ksoftirqd/010:06:190
32667993528,4cyclictest9-21ksoftirqd/011:14:110
32671993429,3cyclictest41-21ksoftirqd/312:36:263
32671993429,3cyclictest41-21ksoftirqd/312:25:063
32671993429,3cyclictest41-21ksoftirqd/310:22:513
32671993429,3cyclictest41-21ksoftirqd/310:00:043
32671993428,4cyclictest41-21ksoftirqd/311:14:393
32671993428,4cyclictest41-21ksoftirqd/310:14:413
32671993428,4cyclictest41-21ksoftirqd/307:29:043
32670993429,3cyclictest33-21ksoftirqd/210:33:212
32670993429,3cyclictest33-21ksoftirqd/208:12:242
32670993428,4cyclictest33-21ksoftirqd/212:18:122
32670993428,4cyclictest33-21ksoftirqd/208:47:182
32670993428,4cyclictest33-21ksoftirqd/207:44:152
32670993427,4cyclictest33-21ksoftirqd/207:22:572
32670993412,19cyclictest18354-21if_enp1s008:40:172
32670993411,21cyclictest10789-21expr11:40:142
32670993411,20cyclictest30237-21ls09:05:162
32670993411,20cyclictest14997-21latency_hist08:35:012
32670993411,20cyclictest12616-21/usr/sbin/munin07:25:132
3267099340,4cyclictest32506-21sed10:15:002
3267099340,31cyclictest2434-21sshd11:21:322
3267099340,31cyclictest2434-21sshd11:21:322
32667993429,3cyclictest9-21ksoftirqd/010:55:290
32667993429,3cyclictest9-21ksoftirqd/009:28:560
32667993429,3cyclictest9-21ksoftirqd/009:03:300
32667993429,3cyclictest9-21ksoftirqd/008:57:030
32667993428,4cyclictest9-21ksoftirqd/012:08:350
32667993428,4cyclictest9-21ksoftirqd/011:08:580
32667993428,4cyclictest9-21ksoftirqd/008:04:310
32667993428,3cyclictest9-21ksoftirqd/010:42:220
32667993428,3cyclictest9-21ksoftirqd/008:37:570
32667993427,5cyclictest9-21ksoftirqd/011:57:390
32667993427,4cyclictest9-21ksoftirqd/012:25:350
32671993329,2cyclictest41-21ksoftirqd/310:50:003
32671993329,2cyclictest41-21ksoftirqd/310:50:003
32671993327,4cyclictest41-21ksoftirqd/312:18:253
32671993327,4cyclictest41-21ksoftirqd/309:01:193
3267099339,21cyclictest24987-21/usr/sbin/munin07:50:242
32670993327,4cyclictest33-21ksoftirqd/210:51:312
32670993327,4cyclictest33-21ksoftirqd/209:52:292
32670993311,20cyclictest5246-21sed11:29:592
32670993311,19cyclictest22870-21expr07:45:122
3267099330,4cyclictest26852-21switchtime10:00:242
3267099330,3cyclictest28554-21cat11:10:152
3267099330,3cyclictest14837-21chrt10:42:362
3267099330,31cyclictest0-21swapper/212:05:012
32667993328,3cyclictest9-21ksoftirqd/009:06:480
32667993328,3cyclictest9-21ksoftirqd/008:17:410
32667993328,3cyclictest9-21ksoftirqd/008:06:520
32667993327,4cyclictest9-21ksoftirqd/007:58:140
32667993326,4cyclictest9-21ksoftirqd/012:15:000
32667993326,4cyclictest9-21ksoftirqd/007:16:210
32671993227,3cyclictest41-21ksoftirqd/312:23:163
32671993227,3cyclictest41-21ksoftirqd/312:11:523
32671993227,3cyclictest41-21ksoftirqd/309:58:323
32670993227,3cyclictest33-21ksoftirqd/209:48:042
32670993227,3cyclictest33-21ksoftirqd/209:43:032
32670993227,3cyclictest33-21ksoftirqd/208:05:302
32670993225,4cyclictest33-21ksoftirqd/211:50:272
3267099322,27cyclictest7614-21latency_hist10:30:012
3267099320,2cyclictest0-21swapper/208:26:052
3266799329,20cyclictest20676-21expr09:50:130
32667993227,3cyclictest9-21ksoftirqd/008:26:500
32667993227,3cyclictest9-21ksoftirqd/008:11:050
32667993226,4cyclictest9-21ksoftirqd/007:40:320
32667993226,3cyclictest9-21ksoftirqd/007:20:020
32667993225,4cyclictest9-21ksoftirqd/010:32:270
32671993126,3cyclictest41-21ksoftirqd/311:57:123
32671993126,3cyclictest41-21ksoftirqd/310:36:483
32671993126,3cyclictest41-21ksoftirqd/308:06:553
32671993125,4cyclictest41-21ksoftirqd/307:20:543
32670993125,3cyclictest33-21ksoftirqd/207:35:122
3267099312,23cyclictest17870-21apt-get11:55:112
32667993126,3cyclictest9-21ksoftirqd/009:57:490
32667993126,3cyclictest9-21ksoftirqd/008:34:000
32667993125,4cyclictest9-21ksoftirqd/011:34:080
85692300,1sleep30-21swapper/311:35:173
32671993025,3cyclictest41-21ksoftirqd/311:05:263
32671993025,3cyclictest41-21ksoftirqd/308:11:213
32671993024,4cyclictest41-21ksoftirqd/307:35:583
3267099308,20cyclictest23802chrt10:17:332
3267099303,24cyclictest23982-21cat12:05:242
32670993025,3cyclictest33-21ksoftirqd/212:25:532
32670993024,4cyclictest33-21ksoftirqd/207:16:352
3267099302,22cyclictest10320-21apt-get10:35:112
3267099301,26cyclictest3600-21ps12:30:202
3266799309,18cyclictest11669-21mailstats09:30:230
3266799302,3cyclictest0-21swapper/009:15:100
427291290,0ptp4l401ktimersoftd/309:06:103
32671992924,3cyclictest41-21ksoftirqd/307:50:513
3267099293,24cyclictest15087-21/usr/sbin/munin07:30:232
3267099291,24cyclictest5515-21diskstats08:15:172
32667992923,4cyclictest9-21ksoftirqd/010:39:250
4277912823,2phc2sys41-21ksoftirqd/308:35:223
32671992823,3cyclictest41-21ksoftirqd/311:25:403
32671992722,3cyclictest41-21ksoftirqd/309:48:093
3266799279,15cyclictest17574-21dpkg07:35:130
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional