You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-19 - 07:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Sat Jul 19, 2025 00:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
814623140,15sleep20-21swapper/219:05:142
96862235169,22sleep30-21swapper/319:06:173
99302203171,22sleep00-21swapper/019:09:270
98142202170,21sleep10-21swapper/119:07:561
2584221500,23sleep356250irq/143-enp4s0-19:40:233
2768821470,4sleep31026899cyclictest19:45:163
10268996129,4cyclictest41-21ksoftirqd/320:25:003
10268995930,10cyclictest41-21ksoftirqd/322:45:003
10268995925,4cyclictest41-21ksoftirqd/322:20:003
10268995919,9cyclictest41-21ksoftirqd/319:33:483
10268995831,8cyclictest41-21ksoftirqd/323:05:243
10268995822,3cyclictest41-21ksoftirqd/322:01:433
10268995820,4cyclictest41-21ksoftirqd/322:11:133
10268995730,8cyclictest41-21ksoftirqd/323:15:143
10268995729,7cyclictest41-21ksoftirqd/300:10:263
10268995728,4cyclictest41-21ksoftirqd/322:55:293
10268995722,4cyclictest41-21ksoftirqd/300:07:383
10268995721,4cyclictest41-21ksoftirqd/323:56:293
10268995721,4cyclictest41-21ksoftirqd/321:19:593
10268995720,4cyclictest41-21ksoftirqd/323:10:133
10268995720,10cyclictest41-21ksoftirqd/320:10:243
10268995719,4cyclictest41-21ksoftirqd/319:14:383
10268995628,8cyclictest41-21ksoftirqd/300:35:193
10268995620,4cyclictest41-21ksoftirqd/323:26:523
10268995619,4cyclictest41-21ksoftirqd/320:55:553
10268995618,10cyclictest41-21ksoftirqd/319:18:193
1026899557,8cyclictest218-21systemd-journal22:10:003
10268995527,7cyclictest41-21ksoftirqd/323:45:143
10268995527,3cyclictest41-21ksoftirqd/319:50:263
10268995526,7cyclictest41-21ksoftirqd/300:20:153
10268995525,8cyclictest41-21ksoftirqd/320:00:153
10268995521,4cyclictest41-21ksoftirqd/320:15:113
10268995519,4cyclictest41-21ksoftirqd/321:50:403
10268995518,4cyclictest41-21ksoftirqd/323:39:443
7212540,2sleep20-21swapper/221:05:152
1026899544,8cyclictest41-21ksoftirqd/322:50:003
10268995428,7cyclictest41-21ksoftirqd/321:35:243
10268995424,8cyclictest41-21ksoftirqd/320:54:593
10268995424,7cyclictest41-21ksoftirqd/321:00:243
10268995423,7cyclictest41-21ksoftirqd/300:00:153
10268995421,9cyclictest41-21ksoftirqd/323:02:213
10268995417,8cyclictest41-21ksoftirqd/321:31:093
137291530,0ptp4l401ktimersoftd/300:15:293
1026899536,6cyclictest41-21ksoftirqd/319:29:593
1026899534,5cyclictest41-21ksoftirqd/323:45:003
10268995325,7cyclictest41-21ksoftirqd/321:10:283
10268995324,8cyclictest41-21ksoftirqd/322:20:183
10268995321,8cyclictest41-21ksoftirqd/321:05:233
10268995318,4cyclictest41-21ksoftirqd/321:20:153
10268995317,9cyclictest41-21ksoftirqd/320:30:433
10268995224,7cyclictest41-21ksoftirqd/320:40:163
10268995223,7cyclictest41-21ksoftirqd/323:30:153
10268995217,7cyclictest41-21ksoftirqd/321:43:363
1026899515,8cyclictest41-21ksoftirqd/322:30:293
1026899514,4cyclictest41-21ksoftirqd/300:30:003
1026899514,4cyclictest41-21ksoftirqd/300:30:003
10268995118,4cyclictest41-21ksoftirqd/319:55:133
10268995118,4cyclictest41-21ksoftirqd/319:55:133
1026899505,7cyclictest41-21ksoftirqd/319:40:003
10268995021,9cyclictest41-21ksoftirqd/320:05:293
10268995021,7cyclictest41-21ksoftirqd/320:25:163
1026899497,2cyclictest41-21ksoftirqd/322:50:163
10268994918,8cyclictest41-21ksoftirqd/320:35:173
10268994916,8cyclictest41-21ksoftirqd/322:25:173
1026899485,7cyclictest41-21ksoftirqd/323:25:013
1026899484,4cyclictest41-21ksoftirqd/319:20:303
1026899480,13cyclictest41-21ksoftirqd/321:50:013
10268994717,8cyclictest41-21ksoftirqd/321:55:163
1026899470,6cyclictest41-21ksoftirqd/320:45:173
1026899456,7cyclictest41-21ksoftirqd/322:35:223
1026899456,7cyclictest41-21ksoftirqd/322:35:213
1026899452,10cyclictest41-21ksoftirqd/321:25:183
1026899443,3cyclictest41-21ksoftirqd/300:30:193
1026899435,2cyclictest41-21ksoftirqd/323:50:243
1026599430,41cyclictest17122-21sh23:55:000
10265994136,3cyclictest19486-21latency_hist00:00:000
42098400,4rtkit-daemon10682-21diskstats19:10:161
42098370,2rtkit-daemon0-21swapper/100:37:241
42098360,2rtkit-daemon0-21swapper/123:11:131
10267993630,4cyclictest33-21ksoftirqd/200:01:052
10266993630,4cyclictest25-21ksoftirqd/119:31:501
10265993631,3cyclictest9-21ksoftirqd/022:51:080
10265993630,4cyclictest9-21ksoftirqd/022:03:210
10265993629,5cyclictest9-21ksoftirqd/000:17:400
10267993529,4cyclictest33-21ksoftirqd/222:54:062
10267993529,4cyclictest33-21ksoftirqd/221:12:322
10267993529,4cyclictest33-21ksoftirqd/221:03:462
10266993529,4cyclictest25-21ksoftirqd/121:14:321
10266993529,4cyclictest25-21ksoftirqd/120:45:521
10266993529,4cyclictest25-21ksoftirqd/120:43:031
10266993522,11cyclictest25-21ksoftirqd/120:21:581
10265993529,4cyclictest9-21ksoftirqd/020:46:260
10265993529,4cyclictest9-21ksoftirqd/000:12:380
10265993529,3cyclictest9-21ksoftirqd/019:15:040
10265993528,5cyclictest9-21ksoftirqd/021:30:000
10267993428,4cyclictest33-21ksoftirqd/221:51:032
10267993428,4cyclictest33-21ksoftirqd/220:08:172
10267993428,4cyclictest33-21ksoftirqd/219:18:312
10267993428,4cyclictest33-21ksoftirqd/200:15:012
10266993428,4cyclictest25-21ksoftirqd/123:06:531
10266993428,4cyclictest25-21ksoftirqd/123:00:071
10266993428,4cyclictest25-21ksoftirqd/121:00:351
10266993428,4cyclictest25-21ksoftirqd/119:45:301
10266993428,4cyclictest25-21ksoftirqd/119:26:481
10266993428,4cyclictest25-21ksoftirqd/100:32:171
10265993428,4cyclictest9-21ksoftirqd/021:16:070
10265993428,4cyclictest9-21ksoftirqd/019:55:400
10265993428,4cyclictest9-21ksoftirqd/019:55:400
10265993428,4cyclictest9-21ksoftirqd/019:11:100
10267993327,4cyclictest33-21ksoftirqd/223:26:592
10267993327,4cyclictest33-21ksoftirqd/223:22:462
10267993327,4cyclictest33-21ksoftirqd/223:09:422
10267993327,4cyclictest33-21ksoftirqd/221:49:192
10267993327,4cyclictest33-21ksoftirqd/221:40:492
10267993327,4cyclictest33-21ksoftirqd/220:48:502
10267993327,4cyclictest33-21ksoftirqd/220:03:122
10267993327,4cyclictest33-21ksoftirqd/200:23:172
10266993327,4cyclictest25-21ksoftirqd/123:34:251
10266993327,4cyclictest25-21ksoftirqd/123:28:481
10266993327,4cyclictest25-21ksoftirqd/122:11:561
10266993327,4cyclictest25-21ksoftirqd/120:15:031
10266993327,4cyclictest25-21ksoftirqd/120:13:181
10266993327,4cyclictest25-21ksoftirqd/119:50:401
10266993327,4cyclictest25-21ksoftirqd/119:36:401
10266993313,17cyclictest15211-21mailstats22:40:261
10265993328,3cyclictest9-21ksoftirqd/023:11:160
10265993328,3cyclictest9-21ksoftirqd/021:24:090
10265993328,3cyclictest9-21ksoftirqd/020:17:350
10265993328,3cyclictest9-21ksoftirqd/020:07:160
10265993327,4cyclictest9-21ksoftirqd/023:34:190
10265993327,4cyclictest9-21ksoftirqd/023:00:410
10265993327,4cyclictest9-21ksoftirqd/022:17:500
10265993327,4cyclictest9-21ksoftirqd/021:34:040
10265993327,4cyclictest9-21ksoftirqd/000:34:050
10265993327,4cyclictest9-21ksoftirqd/000:26:230
10265993327,4cyclictest9-21ksoftirqd/000:26:230
10267993227,3cyclictest33-21ksoftirqd/222:47:202
10267993227,3cyclictest33-21ksoftirqd/220:28:482
10267993227,3cyclictest33-21ksoftirqd/200:00:002
10267993226,4cyclictest33-21ksoftirqd/223:44:122
10267993226,4cyclictest33-21ksoftirqd/222:42:232
10267993226,4cyclictest33-21ksoftirqd/219:29:392
10267993226,4cyclictest33-21ksoftirqd/200:27:382
10267993226,4cyclictest33-21ksoftirqd/200:27:372
10267993226,3cyclictest33-21ksoftirqd/223:30:122
10267993225,5cyclictest33-21ksoftirqd/219:52:452
10267993225,5cyclictest33-21ksoftirqd/200:39:242
10266993227,3cyclictest25-21ksoftirqd/120:07:131
10266993226,4cyclictest25-21ksoftirqd/122:39:171
10266993226,4cyclictest25-21ksoftirqd/122:39:171
10266993226,4cyclictest25-21ksoftirqd/122:01:381
10266993226,4cyclictest25-21ksoftirqd/121:55:521
10266993226,4cyclictest25-21ksoftirqd/121:29:091
10266993226,4cyclictest25-21ksoftirqd/121:07:451
10266993226,4cyclictest25-21ksoftirqd/120:55:461
10266993226,4cyclictest25-21ksoftirqd/120:39:461
10266993226,4cyclictest25-21ksoftirqd/100:24:311
10266993214,15cyclictest17417-21open_files20:30:241
10266993213,16cyclictest23883-21threads21:50:261
10266993212,18cyclictest23279-21awk00:05:281
10265993227,3cyclictest9-21ksoftirqd/019:28:230
10265993227,3cyclictest9-21ksoftirqd/000:36:410
10265993226,4cyclictest9-21ksoftirqd/022:40:490
10265993226,4cyclictest9-21ksoftirqd/022:13:120
10265993226,4cyclictest9-21ksoftirqd/021:54:140
10265993226,4cyclictest9-21ksoftirqd/019:41:080
10265993226,4cyclictest9-21ksoftirqd/000:24:310
10267993126,3cyclictest33-21ksoftirqd/220:25:012
10267993126,3cyclictest33-21ksoftirqd/219:34:462
10267993125,4cyclictest33-21ksoftirqd/222:10:422
10267993125,4cyclictest33-21ksoftirqd/222:01:422
10267993125,4cyclictest33-21ksoftirqd/200:06:292
10266993126,3cyclictest15752-21seq20:26:521
10266993125,4cyclictest25-21ksoftirqd/123:58:201
10266993125,4cyclictest25-21ksoftirqd/123:53:071
10266993125,4cyclictest25-21ksoftirqd/123:44:121
10266993125,4cyclictest25-21ksoftirqd/123:24:061
10266993125,4cyclictest25-21ksoftirqd/121:47:291
10266993125,4cyclictest25-21ksoftirqd/100:18:491
10266993111,3cyclictest19587-21basename21:45:001
10266993110,3cyclictest20034-21expr00:00:151
10265993126,3cyclictest9-21ksoftirqd/000:06:240
10265993126,3cyclictest30218-21cron21:00:000
10265993125,4cyclictest9-21ksoftirqd/021:08:500
10265993125,4cyclictest9-21ksoftirqd/020:26:490
10265993125,4cyclictest9-21ksoftirqd/020:01:300
10265993125,4cyclictest9-21ksoftirqd/019:48:210
10267993025,3cyclictest33-21ksoftirqd/223:15:042
10267993025,3cyclictest33-21ksoftirqd/221:22:172
10267993025,3cyclictest33-21ksoftirqd/219:39:222
10267993024,4cyclictest33-21ksoftirqd/223:37:382
10267993024,4cyclictest33-21ksoftirqd/222:25:492
10267993024,4cyclictest33-21ksoftirqd/200:11:162
1026699308,3cyclictest26989-21latency_hist19:45:001
10266993024,4cyclictest25-21ksoftirqd/123:17:521
10266993024,4cyclictest25-21ksoftirqd/122:50:431
10266993024,4cyclictest25-21ksoftirqd/122:26:451
10266993024,4cyclictest25-21ksoftirqd/120:52:341
10266993011,3cyclictest13601-21sed21:30:231
10265993025,3cyclictest9-21ksoftirqd/021:48:210
10265993025,3cyclictest9-21ksoftirqd/020:14:010
10265993024,4cyclictest9-21ksoftirqd/022:06:050
10265993024,4cyclictest9-21ksoftirqd/021:58:350
10265993024,4cyclictest9-21ksoftirqd/019:20:540
10265993024,4cyclictest9-21ksoftirqd/000:02:480
10267992924,3cyclictest33-21ksoftirqd/221:27:542
10267992924,3cyclictest33-21ksoftirqd/219:55:082
10267992924,3cyclictest33-21ksoftirqd/219:55:082
10267992923,4cyclictest33-21ksoftirqd/200:31:142
10266992924,3cyclictest25-21ksoftirqd/122:15:121
10266992924,3cyclictest25-21ksoftirqd/122:06:471
10266992923,4cyclictest25-21ksoftirqd/123:37:581
10266992923,4cyclictest25-21ksoftirqd/120:00:111
10266992913,14cyclictest9126-21cpuspeed22:30:171
10265992924,3cyclictest9-21ksoftirqd/023:20:110
10265992924,3cyclictest9-21ksoftirqd/022:48:110
10265992924,3cyclictest9-21ksoftirqd/020:40:320
10265992923,4cyclictest9-21ksoftirqd/023:48:510
10265992923,4cyclictest9-21ksoftirqd/023:44:500
10267992823,3cyclictest33-21ksoftirqd/223:10:082
10267992823,3cyclictest33-21ksoftirqd/223:02:162
10267992823,3cyclictest33-21ksoftirqd/222:35:332
10267992823,3cyclictest33-21ksoftirqd/222:35:322
10267992823,3cyclictest33-21ksoftirqd/221:40:012
10267992823,3cyclictest33-21ksoftirqd/220:39:562
10267992823,3cyclictest33-21ksoftirqd/219:43:482
10267992822,4cyclictest33-21ksoftirqd/221:31:022
10267992822,4cyclictest33-21ksoftirqd/219:12:092
1026799281,26cyclictest20579-21kworker/2:223:50:402
1026699288,3cyclictest17325-21latency_hist19:25:001
10266992823,3cyclictest25-21ksoftirqd/119:19:181
10266992822,4cyclictest25-21ksoftirqd/122:48:151
10266992822,4cyclictest25-21ksoftirqd/121:39:271
10266992822,4cyclictest25-21ksoftirqd/121:19:221
10265992823,3cyclictest9-21ksoftirqd/021:44:560
10265992823,3cyclictest9-21ksoftirqd/020:53:490
10265992822,4cyclictest9-21ksoftirqd/023:25:130
42098270,2rtkit-daemon0-21swapper/020:34:420
1106922721,3sleep233-21ksoftirqd/222:33:532
10267992722,3cyclictest33-21ksoftirqd/222:16:252
10267992722,3cyclictest33-21ksoftirqd/222:07:452
10267992721,4cyclictest33-21ksoftirqd/222:22:332
10267992721,4cyclictest33-21ksoftirqd/221:59:092
10267992721,4cyclictest33-21ksoftirqd/220:57:242
10267992721,4cyclictest33-21ksoftirqd/219:20:122
10266992722,3cyclictest25-21ksoftirqd/123:45:351
10266992721,4cyclictest25-21ksoftirqd/122:56:211
10266992721,4cyclictest25-21ksoftirqd/122:22:231
1026699271,6cyclictest32167-21df_abs00:25:161
1026699271,6cyclictest32167-21df_abs00:25:161
10265992722,3cyclictest9-21ksoftirqd/023:19:270
10265992722,3cyclictest9-21ksoftirqd/021:10:200
10265992722,3cyclictest9-21ksoftirqd/020:38:360
10265992721,4cyclictest9-21ksoftirqd/022:31:530
10265992720,5cyclictest9-21ksoftirqd/023:09:120
10267992621,3cyclictest33-21ksoftirqd/220:32:112
10266992621,3cyclictest25-21ksoftirqd/121:23:191
10266992621,3cyclictest25-21ksoftirqd/100:13:121
10265992620,4cyclictest9-21ksoftirqd/023:37:120
10265992620,4cyclictest9-21ksoftirqd/022:56:290
10265992620,4cyclictest9-21ksoftirqd/021:35:370
53612250,6sleep25362-21/usr/sbin/munin21:15:122
10267992520,3cyclictest33-21ksoftirqd/220:43:592
10267992512,11cyclictest33-21ksoftirqd/222:55:162
10265992520,3cyclictest9-21ksoftirqd/020:24:530
10265992520,3cyclictest9-21ksoftirqd/019:36:470
10267992419,3cyclictest33-21ksoftirqd/220:11:052
10267992419,3cyclictest33-21ksoftirqd/219:46:492
1026699247,3cyclictest935-21cat19:55:241
1026699247,3cyclictest935-21cat19:55:241
10265992419,3cyclictest9-21ksoftirqd/022:35:560
10265992419,3cyclictest9-21ksoftirqd/022:35:560
10265992419,3cyclictest9-21ksoftirqd/021:01:350
10265992419,3cyclictest9-21ksoftirqd/019:33:020
1026799234,16cyclictest14758-21latency_hist23:50:002
10267992318,3cyclictest33-21ksoftirqd/220:15:452
10265992217,3cyclictest9-21ksoftirqd/019:51:590
10267992014,4cyclictest27202-21wc20:50:302
10265992014,3cyclictest7310-21iostat22:25:150
10265991914,3cyclictest9-21ksoftirqd/022:20:510
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional