You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-13 - 06:28
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot4.osadl.org (updated Wed Nov 12, 2025 12:45:47)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
22452202167,23sleep30-21swapper/307:07:253
22442202168,22sleep20-21swapper/207:07:242
24032201166,23sleep10-21swapper/107:09:281
24022201168,22sleep00-21swapper/007:09:270
4277918664,12phc2sys0-21swapper/307:10:003
245928262,11sleep20-21swapper/207:10:012
2751997034,4cyclictest25-21ksoftirqd/110:45:151
2751996835,4cyclictest25-21ksoftirqd/108:45:201
275099681,28cyclictest616-21cat09:15:000
275099680,21cyclictest17568-21mailstats10:50:260
2751996732,4cyclictest25-21ksoftirqd/107:15:281
2751996636,9cyclictest25-21ksoftirqd/108:09:591
2751996634,4cyclictest25-21ksoftirqd/112:05:161
2751996633,4cyclictest25-21ksoftirqd/109:35:251
2751996632,6cyclictest25-21ksoftirqd/107:55:011
2751996630,8cyclictest25-21ksoftirqd/110:00:241
2751996630,8cyclictest25-21ksoftirqd/109:05:011
2751996630,7cyclictest25-21ksoftirqd/111:30:131
2751996629,5cyclictest25-21ksoftirqd/107:25:241
2751996628,8cyclictest25-21ksoftirqd/108:55:301
2751996535,4cyclictest25-21ksoftirqd/111:10:161
2751996534,9cyclictest25-21ksoftirqd/107:40:261
2751996534,4cyclictest25-21ksoftirqd/112:20:191
2751996533,8cyclictest25-21ksoftirqd/108:50:291
2751996527,11cyclictest25-21ksoftirqd/107:20:131
2751996433,4cyclictest25-21ksoftirqd/110:15:261
2751996333,3cyclictest25-21ksoftirqd/110:30:171
2751996331,8cyclictest25-21ksoftirqd/111:20:241
2751996331,8cyclictest25-21ksoftirqd/108:10:271
2751996331,4cyclictest25-21ksoftirqd/111:35:221
2751996331,4cyclictest25-21ksoftirqd/110:20:261
2751996330,9cyclictest25-21ksoftirqd/108:20:201
2751996330,8cyclictest25-21ksoftirqd/111:05:001
2751996330,8cyclictest25-21ksoftirqd/110:40:161
2751996330,4cyclictest25-21ksoftirqd/108:30:161
2751996329,8cyclictest25-21ksoftirqd/109:35:001
2751996329,7cyclictest25-21ksoftirqd/110:15:001
2751996328,7cyclictest25-21ksoftirqd/111:25:171
2751996327,7cyclictest25-21ksoftirqd/108:35:181
275099631,25cyclictest9649-21sensors_temp08:25:260
111182630,1sleep00-21swapper/010:40:110
2751996232,4cyclictest25-21ksoftirqd/109:20:281
2751996231,4cyclictest25-21ksoftirqd/109:20:001
2751996230,8cyclictest25-21ksoftirqd/110:25:271
2751996230,8cyclictest25-21ksoftirqd/109:10:281
2751996230,10cyclictest25-21ksoftirqd/109:45:011
2751996228,4cyclictest25-21ksoftirqd/109:25:161
2751996227,8cyclictest25-21ksoftirqd/111:55:211
2751996227,8cyclictest25-21ksoftirqd/111:55:211
2751996227,7cyclictest25-21ksoftirqd/107:40:001
275099629,19cyclictest19768-21df12:00:150
275099620,21cyclictest5446-21/usr/sbin/munin08:20:250
2751996133,3cyclictest25-21ksoftirqd/110:55:121
2751996131,8cyclictest25-21ksoftirqd/109:50:181
2751996129,9cyclictest25-21ksoftirqd/110:40:011
2751996129,8cyclictest25-21ksoftirqd/111:40:131
2751996129,4cyclictest25-21ksoftirqd/107:30:271
2751996128,9cyclictest25-21ksoftirqd/108:29:521
2751996128,8cyclictest25-21ksoftirqd/109:50:011
2751996128,8cyclictest25-21ksoftirqd/107:55:001
2751996128,7cyclictest25-21ksoftirqd/112:35:191
2751996127,8cyclictest25-21ksoftirqd/108:40:121
2751996126,10cyclictest25-21ksoftirqd/108:00:161
2751996033,8cyclictest25-21ksoftirqd/107:45:201
2751996031,4cyclictest25-21ksoftirqd/111:45:301
2751996028,3cyclictest25-21ksoftirqd/110:00:001
2751996027,4cyclictest25-21ksoftirqd/112:10:141
2751996025,7cyclictest25-21ksoftirqd/111:05:161
2751996025,4cyclictest25-21ksoftirqd/111:15:171
2751996022,5cyclictest25-21ksoftirqd/107:10:201
2751996021,9cyclictest25-21ksoftirqd/110:50:161
2751996018,10cyclictest25-21ksoftirqd/110:05:151
275099600,22cyclictest2212-21irqrtprio11:25:180
2751995926,8cyclictest25-21ksoftirqd/112:30:131
2751995926,7cyclictest25-21ksoftirqd/108:15:121
275099591,20cyclictest27466-21mailstats11:10:240
427291580,1ptp4l401ktimersoftd/309:10:203
427291580,1ptp4l401ktimersoftd/308:21:213
2751995726,7cyclictest25-21ksoftirqd/112:25:141
2751995726,7cyclictest25-21ksoftirqd/112:25:141
2751995724,8cyclictest25-21ksoftirqd/109:05:281
275099571,19cyclictest6253-21df_inode09:25:160
275099560,18cyclictest29544-21sendmail_mailtr10:10:270
427291550,0ptp4l401ktimersoftd/307:21:093
275399558,4cyclictest41-21ksoftirqd/312:30:273
2751995524,6cyclictest25-21ksoftirqd/112:00:141
275099551,22cyclictest31905-21meminfo10:15:230
427291540,1ptp4l401ktimersoftd/309:41:083
275099531,20cyclictest2739-21iostat12:30:190
275199527,3cyclictest25-21ksoftirqd/112:15:171
2751995219,7cyclictest25-21ksoftirqd/111:50:281
275099511,18cyclictest13352-21hddtemp_smartct07:30:150
2753994913,5cyclictest41-21ksoftirqd/312:20:273
2753994540,3cyclictest41-21ksoftirqd/307:59:593
2753994534,8cyclictest41-21ksoftirqd/309:35:283
2752994515,28cyclictest20260-21kworker/2:008:55:262
275399449,8cyclictest41-21ksoftirqd/309:45:123
2753994438,3cyclictest41-21ksoftirqd/311:40:003
2753994410,11cyclictest41-21ksoftirqd/307:45:283
427291430,0ptp4l401ktimersoftd/309:55:343
427291430,0ptp4l401ktimersoftd/308:30:193
2753994338,3cyclictest41-21ksoftirqd/311:55:013
2753994338,2cyclictest41-21ksoftirqd/310:50:003
427291420,1ptp4l0-21swapper/308:53:313
427291420,0ptp4l401ktimersoftd/312:15:253
427291420,0ptp4l401ktimersoftd/312:00:153
427291420,0ptp4l401ktimersoftd/311:04:143
275399427,4cyclictest41-21ksoftirqd/311:35:003
2753994237,3cyclictest41-21ksoftirqd/309:29:593
2753994228,11cyclictest41-21ksoftirqd/308:15:183
427291410,1ptp4l401ktimersoftd/307:27:443
2753994137,2cyclictest41-21ksoftirqd/307:54:593
2753994135,4cyclictest41-21ksoftirqd/309:01:423
2753994130,8cyclictest41-21ksoftirqd/311:40:243
275399412,3cyclictest41-21ksoftirqd/310:59:593
2753994112,4cyclictest41-21ksoftirqd/307:40:163
2753994035,3cyclictest41-21ksoftirqd/310:35:013
2753994035,3cyclictest41-21ksoftirqd/307:15:143
2752994011,27cyclictest18521-21kworker/2:208:05:272
2750994034,3cyclictest19938-21cron07:44:590
2750994027,10cyclictest9-21ksoftirqd/008:35:000
2753993935,3cyclictest41-21ksoftirqd/311:30:003
2753993934,3cyclictest41-21ksoftirqd/312:30:003
2753993934,3cyclictest41-21ksoftirqd/312:30:003
2753993934,3cyclictest41-21ksoftirqd/311:55:173
2753993934,3cyclictest41-21ksoftirqd/311:55:173
2753993934,3cyclictest41-21ksoftirqd/309:20:003
2753993934,3cyclictest41-21ksoftirqd/309:05:203
2753993934,3cyclictest41-21ksoftirqd/308:40:183
2753993934,3cyclictest41-21ksoftirqd/307:30:263
2753993933,4cyclictest41-21ksoftirqd/311:21:023
2753993933,3cyclictest41-21ksoftirqd/308:00:133
2752993933,4cyclictest33-21ksoftirqd/209:55:482
275399383,4cyclictest41-21ksoftirqd/307:40:003
2753993834,2cyclictest41-21ksoftirqd/310:15:273
2753993833,3cyclictest41-21ksoftirqd/312:35:143
2753993833,3cyclictest41-21ksoftirqd/312:10:283
2753993833,3cyclictest41-21ksoftirqd/310:40:143
2753993833,3cyclictest41-21ksoftirqd/310:10:173
2753993833,3cyclictest41-21ksoftirqd/309:30:253
2753993833,3cyclictest41-21ksoftirqd/309:24:593
2753993833,3cyclictest41-21ksoftirqd/308:55:173
2753993833,2cyclictest41-21ksoftirqd/311:10:253
2753993832,4cyclictest41-21ksoftirqd/310:24:133
2753993832,4cyclictest41-21ksoftirqd/308:14:443
2753993825,11cyclictest41-21ksoftirqd/312:05:273
275399382,4cyclictest41-21ksoftirqd/311:20:003
2752993832,4cyclictest33-21ksoftirqd/212:01:362
2752993832,4cyclictest33-21ksoftirqd/209:12:432
275099383,25cyclictest23319-21proc_pri12:05:230
2750993832,4cyclictest9-21ksoftirqd/009:49:200
2750993832,4cyclictest9-21ksoftirqd/007:24:060
2750993831,4cyclictest9-21ksoftirqd/009:41:170
275399378,4cyclictest41-21ksoftirqd/308:35:273
2753993732,3cyclictest41-21ksoftirqd/310:30:013
2753993732,3cyclictest41-21ksoftirqd/309:51:493
2753993732,3cyclictest41-21ksoftirqd/308:05:163
2753993731,3cyclictest41-21ksoftirqd/310:05:133
2752993732,3cyclictest33-21ksoftirqd/211:15:002
2752993732,3cyclictest33-21ksoftirqd/208:26:542
2752993731,4cyclictest33-21ksoftirqd/210:53:582
2750993732,3cyclictest9-21ksoftirqd/011:00:000
2750993731,4cyclictest9-21ksoftirqd/008:42:010
2750993731,4cyclictest9-21ksoftirqd/008:08:110
2750993730,4cyclictest9-21ksoftirqd/011:02:100
275099370,21cyclictest2400-21systemctl10:20:270
36998360,2rtkit-daemon368-21rtkit-daemon08:41:262
2753993631,3cyclictest41-21ksoftirqd/310:50:143
2752993631,3cyclictest33-21ksoftirqd/211:22:282
2752993631,3cyclictest33-21ksoftirqd/207:55:532
2752993630,4cyclictest33-21ksoftirqd/212:37:592
2752993630,4cyclictest33-21ksoftirqd/212:21:462
2752993630,4cyclictest33-21ksoftirqd/211:05:042
2752993630,4cyclictest33-21ksoftirqd/210:45:002
2752993630,4cyclictest33-21ksoftirqd/210:01:172
2752993630,4cyclictest33-21ksoftirqd/209:19:132
2752993630,4cyclictest33-21ksoftirqd/208:48:332
2752993630,4cyclictest33-21ksoftirqd/208:24:372
2752993630,4cyclictest33-21ksoftirqd/208:16:352
2752993630,4cyclictest33-21ksoftirqd/208:03:402
2752993630,4cyclictest33-21ksoftirqd/207:43:052
2750993631,3cyclictest9-21ksoftirqd/008:59:450
2750993630,4cyclictest9-21ksoftirqd/012:26:100
2750993630,4cyclictest9-21ksoftirqd/012:26:100
2750993630,4cyclictest9-21ksoftirqd/011:08:550
2750993630,4cyclictest9-21ksoftirqd/010:01:030
2750993630,4cyclictest9-21ksoftirqd/009:03:380
2750993630,4cyclictest9-21ksoftirqd/008:48:270
2750993630,3cyclictest9-21ksoftirqd/011:54:320
2750993630,3cyclictest9-21ksoftirqd/010:30:040
2750993629,4cyclictest9-21ksoftirqd/008:35:430
275099361,22cyclictest5247-21/usr/sbin/munin07:15:260
275099360,1cyclictest0-21swapper/008:15:190
2753993532,2cyclictest41-21ksoftirqd/311:45:283
2753993531,3cyclictest41-21ksoftirqd/308:45:123
2753993530,3cyclictest41-21ksoftirqd/310:35:143
2753993530,3cyclictest41-21ksoftirqd/310:03:443
2752993531,3cyclictest33-21ksoftirqd/209:04:562
2752993530,3cyclictest33-21ksoftirqd/212:11:562
2752993529,4cyclictest33-21ksoftirqd/209:25:362
2752993528,4cyclictest33-21ksoftirqd/207:16:042
275099351,17cyclictest0-21swapper/011:15:260
275099350,2cyclictest121rcu_preempt11:44:590
2753993429,4cyclictest41-21ksoftirqd/311:05:173
2752993429,3cyclictest33-21ksoftirqd/208:51:382
2752993428,4cyclictest33-21ksoftirqd/212:15:002
2752993428,4cyclictest33-21ksoftirqd/211:40:342
2752993428,4cyclictest33-21ksoftirqd/210:35:392
2752993428,3cyclictest33-21ksoftirqd/209:37:482
2750993429,3cyclictest9-21ksoftirqd/009:35:000
2750993428,4cyclictest9-21ksoftirqd/009:07:030
2750993427,4cyclictest9-21ksoftirqd/010:06:060
2750993427,4cyclictest9-21ksoftirqd/008:11:080
2750993427,4cyclictest9-21ksoftirqd/007:25:060
275099340,20cyclictest31043-21apt-config11:20:010
275099340,1cyclictest0-21swapper/008:00:280
2753993328,3cyclictest41-21ksoftirqd/308:28:413
2752993328,3cyclictest33-21ksoftirqd/211:38:422
2752993328,3cyclictest33-21ksoftirqd/207:28:112
2752993327,4cyclictest33-21ksoftirqd/212:25:382
2752993327,4cyclictest33-21ksoftirqd/212:25:382
2752993327,4cyclictest33-21ksoftirqd/211:29:072
2752993327,4cyclictest33-21ksoftirqd/211:01:112
2752993327,4cyclictest33-21ksoftirqd/210:58:072
2752993327,4cyclictest33-21ksoftirqd/209:47:172
2752993327,4cyclictest33-21ksoftirqd/209:43:162
2752993327,4cyclictest33-21ksoftirqd/207:53:332
2752993327,4cyclictest33-21ksoftirqd/207:36:432
2752993327,4cyclictest33-21ksoftirqd/207:21:512
2750993327,4cyclictest9-21ksoftirqd/011:48:590
2750993327,4cyclictest9-21ksoftirqd/011:34:190
2750993327,4cyclictest9-21ksoftirqd/010:48:370
2750993327,4cyclictest9-21ksoftirqd/010:38:580
2750993327,3cyclictest9-21ksoftirqd/012:15:110
2750993327,3cyclictest9-21ksoftirqd/009:39:580
2750993326,4cyclictest9-21ksoftirqd/012:38:450
2750993326,4cyclictest9-21ksoftirqd/012:22:530
2750993326,4cyclictest9-21ksoftirqd/008:52:440
2750993313,18cyclictest6747-21ls11:35:130
275099330,1cyclictest0-21swapper/007:37:230
275099330,19cyclictest0-21swapper/007:50:160
275099330,18cyclictest3782-21df10:25:150
2752993227,3cyclictest33-21ksoftirqd/212:31:272
2752993227,3cyclictest33-21ksoftirqd/212:06:302
2752993227,3cyclictest33-21ksoftirqd/211:51:502
2752993227,3cyclictest33-21ksoftirqd/210:49:292
2752993227,3cyclictest33-21ksoftirqd/209:23:512
2752993227,3cyclictest33-21ksoftirqd/208:40:002
2752993226,4cyclictest33-21ksoftirqd/211:31:162
2752993226,4cyclictest33-21ksoftirqd/209:08:302
2752993126,3cyclictest33-21ksoftirqd/211:49:532
2752993126,3cyclictest33-21ksoftirqd/210:25:442
2752993125,4cyclictest33-21ksoftirqd/209:54:072
2752993125,4cyclictest33-21ksoftirqd/208:33:202
2750993125,4cyclictest9-21ksoftirqd/011:56:010
2750993125,4cyclictest9-21ksoftirqd/011:56:010
2752993024,4cyclictest33-21ksoftirqd/210:23:042
2750993025,3cyclictest9-21ksoftirqd/009:16:460
2750993025,3cyclictest9-21ksoftirqd/007:48:320
2750993024,4cyclictest9-21ksoftirqd/009:56:220
2750993024,4cyclictest9-21ksoftirqd/009:21:450
2750993011,16cyclictest2968-21tr07:10:150
2752992923,4cyclictest33-21ksoftirqd/210:17:512
275099292,24cyclictest20592-21latency_hist09:55:000
2752992823,3cyclictest33-21ksoftirqd/211:56:152
2752992823,3cyclictest33-21ksoftirqd/211:56:152
2752992823,3cyclictest33-21ksoftirqd/211:19:032
2752992823,3cyclictest33-21ksoftirqd/207:45:352
275099288,17cyclictest25767-21sed07:55:180
2750992822,4cyclictest9-21ksoftirqd/012:10:110
2752992722,3cyclictest33-21ksoftirqd/210:33:292
2752992722,3cyclictest33-21ksoftirqd/209:30:502
2752992722,3cyclictest33-21ksoftirqd/207:31:582
2752992621,3cyclictest33-21ksoftirqd/210:07:182
2752992620,4cyclictest33-21ksoftirqd/208:11:102
2752992520,3cyclictest33-21ksoftirqd/210:12:272
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional