You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-06-12 - 23:22
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot4.osadl.org (updated Thu Jun 12, 2025 12:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
656122420,4sleep20-21swapper/207:05:142
134791206171,23phc2sys0-21swapper/307:07:483
64062201169,21sleep10-21swapper/107:05:011
85872178144,22sleep00-21swapper/007:08:430
1063621660,4sleep3898499cyclictest11:30:133
481921460,5sleep2898399cyclictest09:10:192
134991810,1ptp4l391rcuc/307:35:233
294032580,2sleep129402-21if_err_enp1s008:55:181
193322550,3sleep10-21swapper/108:35:171
898499542,12cyclictest13179-21awk08:20:273
316632540,2sleep20-21swapper/212:10:252
134991530,1ptp4l391rcuc/310:34:213
898499514,5cyclictest0-21swapper/308:35:173
898499502,19cyclictest13685-21egrep09:30:133
139252500,2sleep00-21swapper/008:25:130
898499491,12cyclictest24372-21timerandwakeup10:50:263
898499481,16cyclictest29123-21cstates07:50:133
291592470,4sleep00-21swapper/011:00:270
130891470,7getstats898499cyclictest12:32:113
898499466,5cyclictest20023-21latency_hist09:40:003
249552460,2sleep20-21swapper/207:40:172
898499457,6cyclictest41-21ksoftirqd/311:39:403
898499452,9cyclictest21537-21systemctl09:40:253
134991440,0ptp4l401ktimersoftd/308:48:383
898499433,6cyclictest0-21swapper/310:05:173
134991430,36ptp4l0-21swapper/307:10:013
134991420,0ptp4l401ktimersoftd/312:22:113
134991410,0ptp4l401ktimersoftd/310:15:163
134991410,0ptp4l401ktimersoftd/309:13:153
8984994029,7cyclictest41-21ksoftirqd/309:45:113
8984994029,7cyclictest41-21ksoftirqd/309:45:113
8982994035,3cyclictest25-21ksoftirqd/109:32:231
8982994028,9cyclictest25-21ksoftirqd/109:50:011
8982994028,9cyclictest25-21ksoftirqd/109:50:011
134991400,0ptp4l401ktimersoftd/311:11:193
898499397,4cyclictest41-21ksoftirqd/311:42:013
8983993934,3cyclictest33-21ksoftirqd/210:40:002
898299390,36cyclictest17601-21cron10:40:011
134991390,0ptp4l401ktimersoftd/310:57:213
8984993832,4cyclictest41-21ksoftirqd/312:16:273
8983993832,3cyclictest33-21ksoftirqd/207:40:002
8982993832,3cyclictest25-21ksoftirqd/109:45:001
898499377,5cyclictest41-21ksoftirqd/310:29:163
8984993731,4cyclictest41-21ksoftirqd/311:16:563
898499370,14cyclictest1264-21snmpd09:04:313
8983993732,3cyclictest33-21ksoftirqd/211:51:202
8983993730,5cyclictest33-21ksoftirqd/211:01:572
8982993731,4cyclictest25-21ksoftirqd/110:09:591
8982993731,4cyclictest25-21ksoftirqd/108:40:421
898199370,35cyclictest3462-21kworker/0:209:32:090
898499366,5cyclictest41-21ksoftirqd/311:49:153
8984993631,3cyclictest41-21ksoftirqd/310:04:203
8984993630,4cyclictest41-21ksoftirqd/308:03:013
898499360,7cyclictest23530-21apt-get07:40:003
898499360,15cyclictest1264-21snmpd09:28:223
8983993630,4cyclictest33-21ksoftirqd/210:20:332
8983993630,4cyclictest33-21ksoftirqd/209:31:342
8982993631,3cyclictest25-21ksoftirqd/111:55:001
8982993631,3cyclictest25-21ksoftirqd/110:14:591
8982993630,4cyclictest25-21ksoftirqd/108:02:551
8982993629,5cyclictest25-21ksoftirqd/109:01:401
8981993630,4cyclictest9-21ksoftirqd/012:35:350
8981993630,4cyclictest9-21ksoftirqd/011:46:080
134991360,0ptp4l401ktimersoftd/309:20:273
898499357,5cyclictest41-21ksoftirqd/308:44:093
898499356,5cyclictest41-21ksoftirqd/307:29:513
8984993530,3cyclictest41-21ksoftirqd/312:05:523
8984993529,4cyclictest41-21ksoftirqd/312:04:323
8984993529,4cyclictest41-21ksoftirqd/309:53:063
8984993529,4cyclictest41-21ksoftirqd/308:32:063
8984993528,4cyclictest41-21ksoftirqd/312:36:333
8983993529,4cyclictest33-21ksoftirqd/211:17:132
8983993529,4cyclictest33-21ksoftirqd/208:53:432
8983993529,4cyclictest33-21ksoftirqd/208:33:042
8983993529,3cyclictest33-21ksoftirqd/212:20:052
8982993530,3cyclictest25-21ksoftirqd/109:39:591
8982993530,3cyclictest25-21ksoftirqd/108:19:591
8982993529,4cyclictest25-21ksoftirqd/112:05:541
8982993529,4cyclictest25-21ksoftirqd/111:16:141
8982993529,4cyclictest25-21ksoftirqd/108:11:501
8982993529,4cyclictest25-21ksoftirqd/107:47:591
8982993529,4cyclictest25-21ksoftirqd/107:42:401
8982993528,4cyclictest25-21ksoftirqd/111:42:431
8982993528,4cyclictest25-21ksoftirqd/110:33:521
8981993530,3cyclictest9-21ksoftirqd/007:14:000
8981993529,4cyclictest9-21ksoftirqd/012:19:540
8981993529,4cyclictest9-21ksoftirqd/010:59:180
8981993529,4cyclictest9-21ksoftirqd/007:42:520
8981993529,3cyclictest9-21ksoftirqd/010:05:420
8984993429,3cyclictest41-21ksoftirqd/308:14:573
8984993429,3cyclictest41-21ksoftirqd/307:50:003
8984993428,4cyclictest41-21ksoftirqd/311:24:553
8984993428,4cyclictest41-21ksoftirqd/310:48:193
8984993428,4cyclictest41-21ksoftirqd/310:44:573
8984993428,3cyclictest41-21ksoftirqd/311:00:583
8984993428,3cyclictest41-21ksoftirqd/310:20:053
8983993429,3cyclictest33-21ksoftirqd/209:02:222
8983993429,3cyclictest33-21ksoftirqd/207:54:582
8983993428,4cyclictest33-21ksoftirqd/211:36:072
8983993428,4cyclictest33-21ksoftirqd/209:55:532
8983993427,4cyclictest33-21ksoftirqd/209:44:302
8982993429,3cyclictest25-21ksoftirqd/109:28:041
8982993428,4cyclictest25-21ksoftirqd/112:39:041
8982993428,4cyclictest25-21ksoftirqd/111:38:181
8982993428,4cyclictest25-21ksoftirqd/110:46:151
8982993428,4cyclictest25-21ksoftirqd/110:29:181
8982993428,4cyclictest25-21ksoftirqd/107:56:291
8981993429,3cyclictest9-21ksoftirqd/007:21:380
8981993428,4cyclictest9-21ksoftirqd/008:51:280
8981993428,4cyclictest9-21ksoftirqd/008:35:590
134991340,0ptp4l401ktimersoftd/307:55:223
8984993328,3cyclictest41-21ksoftirqd/311:06:193
8984993327,4cyclictest41-21ksoftirqd/310:36:393
8983993328,3cyclictest5189-21cron10:15:002
8983993328,3cyclictest33-21ksoftirqd/211:26:502
8983993328,3cyclictest33-21ksoftirqd/211:26:492
8983993328,3cyclictest33-21ksoftirqd/211:09:112
8983993328,3cyclictest33-21ksoftirqd/210:58:482
8983993327,4cyclictest33-21ksoftirqd/212:03:262
8983993327,4cyclictest33-21ksoftirqd/210:01:392
8983993327,4cyclictest33-21ksoftirqd/209:17:372
8983993327,4cyclictest33-21ksoftirqd/208:19:172
8983993327,3cyclictest33-21ksoftirqd/210:54:292
8983993326,4cyclictest33-21ksoftirqd/208:47:492
8982993328,3cyclictest25-21ksoftirqd/111:30:001
8982993328,3cyclictest25-21ksoftirqd/109:55:011
8982993327,4cyclictest25-21ksoftirqd/112:24:161
8982993327,4cyclictest25-21ksoftirqd/112:02:251
8982993327,4cyclictest25-21ksoftirqd/107:26:281
8982993327,4cyclictest25-21ksoftirqd/107:24:361
8982993326,4cyclictest25-21ksoftirqd/112:25:331
8982993326,4cyclictest25-21ksoftirqd/112:25:331
8982993326,4cyclictest25-21ksoftirqd/108:50:281
8982993326,4cyclictest25-21ksoftirqd/107:13:361
8981993328,3cyclictest9-21ksoftirqd/012:34:010
8981993328,3cyclictest9-21ksoftirqd/011:35:010
8981993328,3cyclictest9-21ksoftirqd/010:27:250
8981993328,3cyclictest9-21ksoftirqd/010:23:040
8981993328,3cyclictest9-21ksoftirqd/009:23:300
8981993327,4cyclictest9-21ksoftirqd/010:04:330
8981993327,4cyclictest9-21ksoftirqd/008:31:380
8981993327,4cyclictest9-21ksoftirqd/008:19:110
8981993327,4cyclictest9-21ksoftirqd/007:25:100
3085723326,3sleep125-21ksoftirqd/110:00:191
8984993227,3cyclictest41-21ksoftirqd/311:27:133
8984993227,3cyclictest41-21ksoftirqd/311:27:133
8984993226,4cyclictest41-21ksoftirqd/311:51:243
8984993226,4cyclictest41-21ksoftirqd/309:58:073
8984993226,4cyclictest41-21ksoftirqd/309:16:273
8984993226,4cyclictest41-21ksoftirqd/308:57:243
8983993227,3cyclictest33-21ksoftirqd/211:49:202
8983993227,3cyclictest33-21ksoftirqd/211:34:112
8983993227,3cyclictest33-21ksoftirqd/211:14:522
8983993227,3cyclictest33-21ksoftirqd/208:24:382
8983993227,3cyclictest33-21ksoftirqd/208:14:092
8983993227,3cyclictest33-21ksoftirqd/207:18:272
8983993226,4cyclictest33-21ksoftirqd/212:32:432
8983993226,4cyclictest33-21ksoftirqd/212:29:342
8983993226,4cyclictest33-21ksoftirqd/212:29:342
8983993226,4cyclictest33-21ksoftirqd/212:05:562
8983993226,4cyclictest33-21ksoftirqd/210:42:342
8983993226,4cyclictest33-21ksoftirqd/209:46:392
8983993226,4cyclictest33-21ksoftirqd/209:46:392
8982993227,3cyclictest25-21ksoftirqd/112:19:591
8982993227,3cyclictest25-21ksoftirqd/112:10:121
8982993226,4cyclictest25-21ksoftirqd/111:56:271
8982993226,4cyclictest25-21ksoftirqd/111:47:491
8982993226,4cyclictest25-21ksoftirqd/108:06:351
8982993226,3cyclictest25-21ksoftirqd/107:40:001
8982993226,3cyclictest25-21ksoftirqd/107:30:131
8981993227,3cyclictest9-21ksoftirqd/011:22:480
8981993227,3cyclictest9-21ksoftirqd/009:04:000
8981993227,3cyclictest9-21ksoftirqd/008:10:320
8981993227,3cyclictest9-21ksoftirqd/007:30:520
8981993226,4cyclictest9-21ksoftirqd/011:55:110
8981993226,4cyclictest9-21ksoftirqd/010:33:180
8981993226,4cyclictest9-21ksoftirqd/010:11:560
8981993226,4cyclictest9-21ksoftirqd/008:03:450
8981993225,4cyclictest9-21ksoftirqd/011:25:100
8981993225,4cyclictest9-21ksoftirqd/011:25:090
8981993225,4cyclictest9-21ksoftirqd/011:15:070
898499313,16cyclictest4561-21cat08:05:183
8983993126,3cyclictest33-21ksoftirqd/209:52:042
8983993126,3cyclictest33-21ksoftirqd/209:28:052
8983993126,3cyclictest33-21ksoftirqd/208:55:422
8983993126,3cyclictest33-21ksoftirqd/208:37:192
8983993126,3cyclictest33-21ksoftirqd/207:28:092
8983993125,4cyclictest33-21ksoftirqd/212:16:232
8983993125,4cyclictest33-21ksoftirqd/210:19:492
8983993125,4cyclictest33-21ksoftirqd/210:05:532
8983993125,4cyclictest33-21ksoftirqd/208:40:432
8983993125,4cyclictest33-21ksoftirqd/208:05:452
8983993125,4cyclictest33-21ksoftirqd/207:47:112
8983993125,3cyclictest33-21ksoftirqd/210:32:522
8982993126,3cyclictest25-21ksoftirqd/108:48:371
8982993126,3cyclictest25-21ksoftirqd/108:24:291
8982993125,4cyclictest25-21ksoftirqd/111:10:371
8982993125,4cyclictest25-21ksoftirqd/110:24:001
8982993124,4cyclictest25-21ksoftirqd/110:17:541
8981993126,3cyclictest9-21ksoftirqd/009:08:570
8981993126,3cyclictest9-21ksoftirqd/007:50:470
8981993125,4cyclictest9-21ksoftirqd/011:51:180
8981993125,4cyclictest9-21ksoftirqd/011:10:050
8981993125,4cyclictest9-21ksoftirqd/010:46:130
8981993125,4cyclictest9-21ksoftirqd/008:57:300
8984993024,4cyclictest41-21ksoftirqd/311:56:143
8984993024,4cyclictest41-21ksoftirqd/308:15:523
8983993025,3cyclictest33-21ksoftirqd/209:20:482
8983993025,3cyclictest33-21ksoftirqd/209:05:332
8983993018,10cyclictest33-21ksoftirqd/207:30:282
8982993024,4cyclictest25-21ksoftirqd/111:31:201
8982993024,4cyclictest25-21ksoftirqd/109:07:261
8982993024,4cyclictest25-21ksoftirqd/108:30:121
8982993024,3cyclictest25-21ksoftirqd/107:17:421
8981993025,3cyclictest9-21ksoftirqd/009:44:400
8981993025,3cyclictest9-21ksoftirqd/007:46:330
8981993025,3cyclictest9-21ksoftirqd/007:19:010
8981993024,4cyclictest9-21ksoftirqd/007:55:390
134991300,25ptp4l72192irq/125-enp1s0-07:19:523
8984992924,3cyclictest41-21ksoftirqd/312:27:033
8984992924,3cyclictest41-21ksoftirqd/312:27:023
8984992924,3cyclictest41-21ksoftirqd/307:21:573
8984992923,4cyclictest41-21ksoftirqd/309:05:263
8984992923,4cyclictest41-21ksoftirqd/308:27:513
8983992924,3cyclictest33-21ksoftirqd/211:43:012
8983992924,3cyclictest33-21ksoftirqd/208:27:192
8983992924,3cyclictest33-21ksoftirqd/207:14:552
8983992923,3cyclictest33-21ksoftirqd/209:38:302
8983992922,4cyclictest33-21ksoftirqd/210:26:332
8982992924,3cyclictest25-21ksoftirqd/111:06:341
8982992924,3cyclictest25-21ksoftirqd/110:40:111
8982992923,4cyclictest25-21ksoftirqd/109:19:141
8981992923,4cyclictest9-21ksoftirqd/008:49:520
8983992824,3cyclictest33-21ksoftirqd/211:21:192
8983992824,2cyclictest33-21ksoftirqd/207:24:122
8982992822,4cyclictest25-21ksoftirqd/110:58:141
8982992822,4cyclictest25-21ksoftirqd/107:54:081
8982992822,3cyclictest25-21ksoftirqd/111:30:011
8982992822,3cyclictest25-21ksoftirqd/111:04:471
8981992823,3cyclictest9-21ksoftirqd/011:40:190
8981992823,3cyclictest9-21ksoftirqd/009:10:010
8981992823,3cyclictest9-21ksoftirqd/008:25:000
8981992822,4cyclictest9-21ksoftirqd/011:35:370
8981992822,4cyclictest9-21ksoftirqd/010:54:290
8984992722,3cyclictest41-21ksoftirqd/312:13:353
8984992722,3cyclictest41-21ksoftirqd/308:52:213
8984992722,3cyclictest41-21ksoftirqd/307:34:253
8983992722,3cyclictest33-21ksoftirqd/212:38:442
8982992722,3cyclictest25-21ksoftirqd/110:54:091
8982992722,3cyclictest25-21ksoftirqd/109:20:351
8982992720,4cyclictest25-21ksoftirqd/109:14:411
8981992721,4cyclictest9-21ksoftirqd/009:51:210
8981992721,3cyclictest9-21ksoftirqd/008:40:050
8983992621,3cyclictest33-21ksoftirqd/207:57:092
8983992620,4cyclictest33-21ksoftirqd/211:55:592
8982992621,3cyclictest25-21ksoftirqd/108:25:191
8982992620,4cyclictest25-21ksoftirqd/112:33:581
8981992621,3cyclictest9-21ksoftirqd/010:37:110
8981992621,3cyclictest9-21ksoftirqd/007:36:500
8981992620,4cyclictest9-21ksoftirqd/011:07:250
8981992620,4cyclictest9-21ksoftirqd/010:16:540
8981992620,4cyclictest9-21ksoftirqd/009:46:250
8981992620,4cyclictest9-21ksoftirqd/009:46:250
8981992620,3cyclictest9-21ksoftirqd/009:18:520
8982992520,3cyclictest25-21ksoftirqd/111:20:011
8982992519,4cyclictest25-21ksoftirqd/109:56:451
8981992520,3cyclictest9-21ksoftirqd/008:05:020
8981992419,3cyclictest9-21ksoftirqd/012:01:560
8981992419,3cyclictest9-21ksoftirqd/009:35:280
898499236,5cyclictest41-21ksoftirqd/310:10:003
8983992318,3cyclictest33-21ksoftirqd/210:49:242
8981992318,3cyclictest9-21ksoftirqd/009:58:030
8981992217,3cyclictest9-21ksoftirqd/012:28:590
8981992217,3cyclictest9-21ksoftirqd/012:28:590
8981992217,3cyclictest9-21ksoftirqd/010:43:170
8983992116,3cyclictest33-21ksoftirqd/208:01:012
8981992116,3cyclictest9-21ksoftirqd/012:14:590
8981991915,3cyclictest9-21ksoftirqd/012:05:170
8981991914,3cyclictest9-21ksoftirqd/012:20:190
8981991914,3cyclictest9-21ksoftirqd/009:25:500
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional