You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-27 - 08:32
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Thu Nov 27, 2025 00:45:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
53322231166,53sleep00-21swapper/019:08:460
51692201167,22sleep10-21swapper/119:06:371
52532200167,22sleep30-21swapper/319:07:443
31832200166,22sleep20-21swapper/219:05:032
427091630,7getstats572599cyclictest23:30:223
572499610,3cyclictest11255-21runrttasks20:27:092
572499584,21cyclictest9156-21taskset21:31:072
145132560,6sleep2572499cyclictest23:50:252
76522540,2sleep20-21swapper/220:15:262
241322530,2sleep224136-21irqrtprio19:45:172
427291520,1ptp4l401ktimersoftd/300:33:313
205982520,1sleep30-21swapper/320:50:173
572499510,3cyclictest478-21taskset00:27:152
36998490,2rtkit-daemon0-21swapper/122:10:441
572499464,26cyclictest14968-21runrttasks22:49:102
5722994540,3cyclictest9-21ksoftirqd/020:19:590
427291440,0ptp4l401ktimersoftd/319:25:273
5723994335,5cyclictest711-21cron00:30:001
5722994338,3cyclictest9-21ksoftirqd/023:20:000
572499424,26cyclictest27853-21seq23:15:092
427291420,0ptp4l401ktimersoftd/320:19:543
5725994135,4cyclictest41-21ksoftirqd/322:43:313
5723994137,3cyclictest25-21ksoftirqd/120:19:591
5723994137,2cyclictest25-21ksoftirqd/100:00:001
5723994136,3cyclictest25-21ksoftirqd/122:40:001
5723994136,3cyclictest25-21ksoftirqd/121:05:011
5723994135,3cyclictest25-21ksoftirqd/123:00:001
5722994136,3cyclictest9-21ksoftirqd/000:00:000
427291410,0ptp4l401ktimersoftd/320:48:063
5723994036,3cyclictest25-21ksoftirqd/120:15:001
5722994035,3cyclictest9-21ksoftirqd/023:10:000
5722994035,3cyclictest29431-21cron21:10:000
427791400,2phc2sys121rcu_preempt00:35:193
5725993933,4cyclictest41-21ksoftirqd/323:59:493
5725993933,4cyclictest41-21ksoftirqd/319:14:333
5723993934,3cyclictest25-21ksoftirqd/121:10:011
5723993934,3cyclictest25-21ksoftirqd/120:10:001
5723993933,4cyclictest25-21ksoftirqd/121:10:051
5723993932,5cyclictest25-21ksoftirqd/122:28:271
5723993932,4cyclictest25-21ksoftirqd/122:16:371
5723993932,4cyclictest25-21ksoftirqd/119:51:251
5722993935,2cyclictest9-21ksoftirqd/019:40:000
5722993933,4cyclictest9-21ksoftirqd/000:39:300
5725993832,4cyclictest41-21ksoftirqd/323:27:363
5725993832,4cyclictest41-21ksoftirqd/323:27:363
5725993832,4cyclictest41-21ksoftirqd/322:31:553
5725993832,4cyclictest41-21ksoftirqd/321:18:463
5725993832,4cyclictest41-21ksoftirqd/300:07:073
5724993832,4cyclictest33-21ksoftirqd/219:38:162
5723993833,3cyclictest25-21ksoftirqd/100:35:201
5723993832,4cyclictest25-21ksoftirqd/123:36:401
5723993832,4cyclictest25-21ksoftirqd/122:51:311
5723993832,4cyclictest25-21ksoftirqd/121:16:271
5723993832,4cyclictest25-21ksoftirqd/119:44:361
5723993832,4cyclictest25-21ksoftirqd/100:32:491
5723993832,4cyclictest25-21ksoftirqd/100:23:381
5723993832,4cyclictest25-21ksoftirqd/100:23:371
5723993832,3cyclictest25-21ksoftirqd/122:45:201
5723993832,3cyclictest25-21ksoftirqd/121:45:191
5723993832,3cyclictest25-21ksoftirqd/121:45:191
5722993833,3cyclictest9-21ksoftirqd/020:00:210
5722993832,4cyclictest9-21ksoftirqd/022:48:290
5722993832,3cyclictest9-21ksoftirqd/023:25:000
5725993732,3cyclictest41-21ksoftirqd/321:55:003
5725993732,3cyclictest41-21ksoftirqd/320:10:013
5725993731,4cyclictest41-21ksoftirqd/323:50:033
5725993731,4cyclictest41-21ksoftirqd/322:20:413
5725993731,4cyclictest41-21ksoftirqd/322:07:403
5725993730,4cyclictest41-21ksoftirqd/320:10:033
5724993731,4cyclictest33-21ksoftirqd/222:03:142
5724993731,4cyclictest33-21ksoftirqd/221:51:022
5724993731,4cyclictest33-21ksoftirqd/219:58:022
5724993731,4cyclictest33-21ksoftirqd/219:13:122
572499371,22cyclictest21823-21taskset21:56:242
5723993732,3cyclictest27079-21cron22:10:001
5723993732,3cyclictest25-21ksoftirqd/123:48:241
5723993731,4cyclictest25-21ksoftirqd/120:02:581
5723993731,4cyclictest25-21ksoftirqd/119:30:521
5723993731,3cyclictest25-21ksoftirqd/123:30:191
5722993733,2cyclictest9-21ksoftirqd/021:50:000
5722993733,2cyclictest9-21ksoftirqd/021:50:000
5722993732,3cyclictest9-21ksoftirqd/023:00:130
5722993731,4cyclictest9-21ksoftirqd/023:28:450
5722993731,4cyclictest9-21ksoftirqd/023:28:450
5722993731,4cyclictest9-21ksoftirqd/021:39:530
5722993731,4cyclictest9-21ksoftirqd/021:10:570
5725993631,3cyclictest41-21ksoftirqd/323:07:463
5725993631,3cyclictest41-21ksoftirqd/321:56:343
5725993631,3cyclictest41-21ksoftirqd/320:41:593
5725993631,3cyclictest41-21ksoftirqd/319:55:123
5725993630,4cyclictest41-21ksoftirqd/323:01:323
5725993630,4cyclictest41-21ksoftirqd/321:22:513
5725993630,4cyclictest41-21ksoftirqd/321:12:443
5725993629,4cyclictest41-21ksoftirqd/320:35:063
5725993613,21cyclictest11339-21tune2fs19:20:193
5724993631,3cyclictest33-21ksoftirqd/220:05:072
5724993630,4cyclictest33-21ksoftirqd/223:56:392
5724993630,4cyclictest33-21ksoftirqd/222:52:442
5724993630,4cyclictest33-21ksoftirqd/222:08:272
5724993630,4cyclictest33-21ksoftirqd/220:53:342
5724993630,4cyclictest33-21ksoftirqd/220:21:172
5724993629,4cyclictest33-21ksoftirqd/221:36:262
572499362,21cyclictest4386-21taskset21:23:182
572499361,21cyclictest7434-21taskset22:33:392
5723993632,2cyclictest25-21ksoftirqd/119:40:001
5723993631,3cyclictest25-21ksoftirqd/121:20:121
5723993631,3cyclictest25-21ksoftirqd/100:15:191
5723993631,2cyclictest25-21ksoftirqd/121:55:011
5723993630,4cyclictest25-21ksoftirqd/122:42:361
5723993630,4cyclictest25-21ksoftirqd/121:50:291
5723993630,4cyclictest25-21ksoftirqd/121:43:151
5723993630,4cyclictest25-21ksoftirqd/120:41:131
5723993630,4cyclictest25-21ksoftirqd/120:25:241
5723993630,4cyclictest25-21ksoftirqd/119:26:311
5723993630,4cyclictest25-21ksoftirqd/100:06:411
5722993631,3cyclictest9-21ksoftirqd/020:30:010
5722993630,4cyclictest9-21ksoftirqd/023:54:370
5722993630,4cyclictest9-21ksoftirqd/020:10:310
5722993630,4cyclictest9-21ksoftirqd/000:19:400
5722993630,4cyclictest9-21ksoftirqd/000:14:050
5722993630,3cyclictest9-21ksoftirqd/020:20:170
36998360,2rtkit-daemon0-21swapper/020:05:170
5725993530,3cyclictest41-21ksoftirqd/321:40:003
5725993529,4cyclictest41-21ksoftirqd/322:51:263
5725993529,4cyclictest41-21ksoftirqd/320:00:073
5725993529,4cyclictest41-21ksoftirqd/319:40:103
5725993529,4cyclictest41-21ksoftirqd/319:31:503
5724993529,4cyclictest33-21ksoftirqd/222:58:302
5724993529,4cyclictest33-21ksoftirqd/220:37:532
5724993529,4cyclictest33-21ksoftirqd/220:30:432
5724993529,4cyclictest33-21ksoftirqd/220:30:432
5724993529,4cyclictest33-21ksoftirqd/200:19:382
572499351,31cyclictest1-21systemd19:20:002
5723993530,3cyclictest25-21ksoftirqd/123:40:171
5723993530,3cyclictest25-21ksoftirqd/123:25:201
5723993530,3cyclictest25-21ksoftirqd/123:25:201
5723993530,3cyclictest25-21ksoftirqd/122:00:141
5723993530,3cyclictest25-21ksoftirqd/100:10:331
5723993529,4cyclictest25-21ksoftirqd/120:49:311
5723993529,4cyclictest25-21ksoftirqd/120:21:191
5723993529,4cyclictest25-21ksoftirqd/119:25:011
5723993529,3cyclictest25-21ksoftirqd/120:54:591
5723993528,4cyclictest25-21ksoftirqd/119:17:001
5722993530,3cyclictest9-21ksoftirqd/023:44:190
5722993530,3cyclictest9-21ksoftirqd/022:20:000
5722993529,4cyclictest9-21ksoftirqd/022:51:420
5722993529,4cyclictest9-21ksoftirqd/022:12:390
5722993529,4cyclictest9-21ksoftirqd/021:25:100
5722993529,4cyclictest9-21ksoftirqd/020:59:530
5722993529,4cyclictest9-21ksoftirqd/020:42:400
5722993529,4cyclictest9-21ksoftirqd/019:59:040
5722993529,4cyclictest9-21ksoftirqd/019:42:350
5722993529,4cyclictest9-21ksoftirqd/019:22:250
5722993529,4cyclictest9-21ksoftirqd/000:05:040
5722993528,4cyclictest9-21ksoftirqd/000:20:560
5722993528,4cyclictest9-21ksoftirqd/000:20:560
572599343,27cyclictest1264-21snmpd22:15:113
5725993429,3cyclictest41-21ksoftirqd/322:05:003
5725993429,3cyclictest41-21ksoftirqd/321:48:273
5725993429,3cyclictest41-21ksoftirqd/321:48:273
5725993429,3cyclictest41-21ksoftirqd/321:30:003
5725993428,4cyclictest41-21ksoftirqd/321:32:473
5725993428,4cyclictest41-21ksoftirqd/320:24:543
5725993428,4cyclictest41-21ksoftirqd/319:51:443
5725993428,4cyclictest41-21ksoftirqd/300:28:373
5725993428,4cyclictest41-21ksoftirqd/300:18:113
5724993428,4cyclictest33-21ksoftirqd/223:46:402
5724993428,4cyclictest33-21ksoftirqd/223:12:582
5724993428,4cyclictest33-21ksoftirqd/222:36:202
5724993428,4cyclictest33-21ksoftirqd/222:26:212
5724993428,4cyclictest33-21ksoftirqd/221:07:092
5723993429,3cyclictest25-21ksoftirqd/123:20:171
5723993429,3cyclictest25-21ksoftirqd/100:05:001
5723993428,4cyclictest25-21ksoftirqd/121:25:301
5723993427,4cyclictest25-21ksoftirqd/123:07:161
5723993427,4cyclictest25-21ksoftirqd/120:58:581
5722993429,3cyclictest9-21ksoftirqd/021:55:170
5722993429,3cyclictest9-21ksoftirqd/020:32:330
5722993429,3cyclictest9-21ksoftirqd/020:32:330
5722993428,4cyclictest9-21ksoftirqd/021:53:490
5722993428,4cyclictest9-21ksoftirqd/021:42:460
5722993428,3cyclictest9-21ksoftirqd/022:30:120
572599338,22cyclictest8669-21fschecks_count23:40:133
572599336,4cyclictest227-21systemd-journal22:36:193
5725993328,3cyclictest41-21ksoftirqd/322:13:183
5725993328,3cyclictest41-21ksoftirqd/321:04:263
5725993328,3cyclictest41-21ksoftirqd/320:33:353
5725993328,3cyclictest41-21ksoftirqd/320:33:343
5725993327,4cyclictest41-21ksoftirqd/320:55:313
5725993327,4cyclictest41-21ksoftirqd/319:38:443
5725993327,4cyclictest41-21ksoftirqd/300:10:033
5724993328,3cyclictest33-21ksoftirqd/223:38:182
5724993328,3cyclictest33-21ksoftirqd/223:23:272
5724993327,4cyclictest33-21ksoftirqd/222:43:382
5724993327,4cyclictest33-21ksoftirqd/222:17:542
5724993327,4cyclictest33-21ksoftirqd/221:48:102
5724993327,4cyclictest33-21ksoftirqd/221:48:092
5724993327,4cyclictest33-21ksoftirqd/221:16:322
5724993327,4cyclictest33-21ksoftirqd/221:14:072
5724993327,4cyclictest33-21ksoftirqd/219:29:532
5724993327,4cyclictest33-21ksoftirqd/200:33:332
5724993327,4cyclictest33-21ksoftirqd/200:02:052
5724993313,17cyclictest1797-21grep22:20:262
572499330,2cyclictest0-21swapper/223:31:562
5723993328,3cyclictest25-21ksoftirqd/123:04:271
5723993327,4cyclictest25-21ksoftirqd/122:30:371
5722993328,3cyclictest9-21ksoftirqd/022:40:160
5722993328,3cyclictest9-21ksoftirqd/022:20:130
5722993328,3cyclictest9-21ksoftirqd/021:31:060
5722993328,3cyclictest9-21ksoftirqd/020:37:590
5722993327,3cyclictest9-21ksoftirqd/022:28:350
5725993227,3cyclictest41-21ksoftirqd/322:56:313
5725993227,3cyclictest41-21ksoftirqd/322:26:553
5725993227,3cyclictest41-21ksoftirqd/321:40:333
5725993226,4cyclictest41-21ksoftirqd/323:37:073
5725993226,4cyclictest41-21ksoftirqd/323:21:343
5724993227,3cyclictest33-21ksoftirqd/222:14:202
5724993227,3cyclictest33-21ksoftirqd/220:02:562
5724993226,4cyclictest33-21ksoftirqd/223:03:072
5724993226,4cyclictest33-21ksoftirqd/220:48:362
5724993226,4cyclictest33-21ksoftirqd/219:32:392
5724993226,4cyclictest33-21ksoftirqd/200:22:552
5724993226,4cyclictest33-21ksoftirqd/200:22:552
5724993212,17cyclictest11245-21sed19:20:162
5723993228,3cyclictest25-21ksoftirqd/123:50:161
5723993227,3cyclictest25-21ksoftirqd/120:40:011
5723993227,3cyclictest25-21ksoftirqd/119:50:011
5723993226,4cyclictest25-21ksoftirqd/123:14:581
5723993226,3cyclictest25-21ksoftirqd/122:20:181
5722993228,3cyclictest9-21ksoftirqd/023:40:010
5722993228,3cyclictest9-21ksoftirqd/000:25:200
5722993227,3cyclictest9-21ksoftirqd/023:45:480
5722993227,3cyclictest9-21ksoftirqd/023:30:190
5722993227,3cyclictest9-21ksoftirqd/023:14:140
5722993227,3cyclictest9-21ksoftirqd/021:15:170
5722993227,3cyclictest9-21ksoftirqd/020:49:590
5722993227,3cyclictest9-21ksoftirqd/019:33:250
5722993227,3cyclictest9-21ksoftirqd/019:29:320
5722993226,4cyclictest9-21ksoftirqd/022:57:160
5722993226,4cyclictest9-21ksoftirqd/019:14:300
5722993226,3cyclictest9-21ksoftirqd/019:17:580
572599319,3cyclictest30476-21dump-pmu-power00:25:003
572599319,3cyclictest30476-21dump-pmu-power00:24:593
5725993125,4cyclictest41-21ksoftirqd/323:16:003
5725993125,4cyclictest41-21ksoftirqd/319:17:193
5724993126,3cyclictest33-21ksoftirqd/220:56:392
5724993126,3cyclictest33-21ksoftirqd/220:13:502
5724993126,3cyclictest33-21ksoftirqd/200:36:352
5724993125,4cyclictest33-21ksoftirqd/223:07:412
5724993125,4cyclictest33-21ksoftirqd/200:06:262
572499312,23cyclictest20891-21apt-get19:40:112
572499310,4cyclictest15952-21meminfo20:40:162
5722993126,3cyclictest9-21ksoftirqd/022:02:560
5722993126,3cyclictest9-21ksoftirqd/021:02:220
5722993126,3cyclictest9-21ksoftirqd/019:47:110
5722993125,4cyclictest9-21ksoftirqd/019:50:090
5722993125,4cyclictest9-21ksoftirqd/000:34:390
5722993125,4cyclictest9-21ksoftirqd/000:01:070
5725993025,3cyclictest41-21ksoftirqd/323:12:493
5725993025,3cyclictest41-21ksoftirqd/321:06:373
5725993024,4cyclictest41-21ksoftirqd/323:48:193
5725993024,4cyclictest41-21ksoftirqd/320:29:073
5725993024,4cyclictest41-21ksoftirqd/319:49:293
5724993025,3cyclictest33-21ksoftirqd/200:14:402
5724993024,3cyclictest33-21ksoftirqd/223:25:552
5724993024,3cyclictest33-21ksoftirqd/223:25:552
572499300,3cyclictest5435-21if_enp1s021:25:162
572499300,3cyclictest0-21swapper/219:50:242
5723993025,3cyclictest25-21ksoftirqd/123:20:001
5722993025,3cyclictest9-21ksoftirqd/020:51:160
5722993024,4cyclictest9-21ksoftirqd/022:37:220
5724992924,3cyclictest33-21ksoftirqd/223:41:022
5724992910,16cyclictest12269-21bc21:40:102
5723992924,3cyclictest25-21ksoftirqd/119:55:151
5722992924,3cyclictest9-21ksoftirqd/021:25:000
5725992823,3cyclictest41-21ksoftirqd/322:48:463
572599281,5cyclictest0-21swapper/300:00:123
572499282,21cyclictest24742-21apt-get21:00:122
5723992824,3cyclictest25-21ksoftirqd/121:30:151
5723992823,3cyclictest25-21ksoftirqd/121:36:591
5723992823,3cyclictest25-21ksoftirqd/119:10:131
5722992823,3cyclictest9-21ksoftirqd/022:06:360
5723992722,3cyclictest25-21ksoftirqd/120:35:011
5723992722,3cyclictest25-21ksoftirqd/120:35:001
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional