You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-29 - 20:52
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Sat Nov 29, 2025 12:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
196242214167,36sleep10-21swapper/107:09:471
195172209174,24sleep30-21swapper/307:08:283
196252205172,22sleep20-21swapper/207:09:482
195762204171,22sleep00-21swapper/007:09:140
1965026251,4sleep30-21swapper/307:10:013
136591560,1ptp4l401ktimersoftd/311:00:263
136591550,1ptp4l401ktimersoftd/309:35:233
222522520,4sleep122254-21irqrtprio08:20:191
136591440,0ptp4l401ktimersoftd/312:12:143
136591430,1ptp4l0-21swapper/308:59:573
136591430,0ptp4l401ktimersoftd/310:04:093
19994994229,10cyclictest33-21ksoftirqd/210:15:302
136591420,0ptp4l401ktimersoftd/311:35:353
19994994034,4cyclictest31493-21cron12:05:002
1999399400,24cyclictest15265-21gunzip10:20:261
136591400,1ptp4l401ktimersoftd/310:49:543
136591400,0ptp4l401ktimersoftd/312:34:293
1999599392,6cyclictest121rcu_preempt08:40:213
19994993933,4cyclictest13741-21cron08:05:002
19994993825,10cyclictest33-21ksoftirqd/208:55:262
19992993831,4cyclictest24369-21cron11:50:010
1999399370,23cyclictest6573-21grep12:20:141
19994993626,9cyclictest33-21ksoftirqd/209:40:192
19994993625,9cyclictest33-21ksoftirqd/207:50:212
19994993523,9cyclictest33-21ksoftirqd/209:25:162
19994993429,3cyclictest33-21ksoftirqd/207:15:142
19994993428,3cyclictest33-21ksoftirqd/210:10:002
19994993428,3cyclictest33-21ksoftirqd/207:45:012
136591340,0ptp4l401ktimersoftd/309:40:183
19995993327,4cyclictest41-21ksoftirqd/309:30:383
19994993329,3cyclictest33-21ksoftirqd/210:20:152
19994993329,3cyclictest33-21ksoftirqd/209:20:002
19994993328,3cyclictest33-21ksoftirqd/209:00:202
19994993328,3cyclictest33-21ksoftirqd/207:45:012
19994993328,2cyclictest33-21ksoftirqd/209:35:212
19994993326,4cyclictest33-21ksoftirqd/211:40:152
19994993322,9cyclictest33-21ksoftirqd/210:45:302
19994993321,10cyclictest33-21ksoftirqd/208:40:272
19993993328,3cyclictest25-21ksoftirqd/107:24:181
19993993327,4cyclictest25-21ksoftirqd/112:00:031
19993993327,4cyclictest25-21ksoftirqd/109:26:141
19993993327,4cyclictest25-21ksoftirqd/108:52:241
19993993326,4cyclictest25-21ksoftirqd/110:47:171
19992993328,3cyclictest9-21ksoftirqd/009:59:580
19992993327,4cyclictest9-21ksoftirqd/007:20:120
136591330,0ptp4l401ktimersoftd/312:25:243
19995993227,3cyclictest41-21ksoftirqd/310:27:143
19995993226,4cyclictest41-21ksoftirqd/311:53:363
19995993226,4cyclictest41-21ksoftirqd/309:53:203
19995993226,4cyclictest41-21ksoftirqd/308:31:443
19995993226,4cyclictest41-21ksoftirqd/308:14:073
19995993225,4cyclictest41-21ksoftirqd/309:04:423
19994993227,3cyclictest33-21ksoftirqd/208:25:152
19994993226,4cyclictest33-21ksoftirqd/212:29:562
19994993226,4cyclictest33-21ksoftirqd/212:16:592
19994993226,4cyclictest33-21ksoftirqd/211:02:472
19994993225,5cyclictest33-21ksoftirqd/211:28:192
19994993222,9cyclictest33-21ksoftirqd/211:10:272
19994993221,9cyclictest33-21ksoftirqd/208:20:242
19994993221,9cyclictest33-21ksoftirqd/207:10:242
19994993220,9cyclictest33-21ksoftirqd/208:30:192
1999499320,2cyclictest121rcu_preempt09:50:282
19993993226,4cyclictest25-21ksoftirqd/112:39:031
19993993226,4cyclictest25-21ksoftirqd/111:01:101
19993993226,4cyclictest25-21ksoftirqd/110:17:361
19993993226,4cyclictest25-21ksoftirqd/109:43:071
19993993226,4cyclictest25-21ksoftirqd/109:36:491
19993993226,4cyclictest25-21ksoftirqd/108:37:521
19993993225,4cyclictest25-21ksoftirqd/111:29:551
19993993225,4cyclictest25-21ksoftirqd/107:18:091
19993993214,15cyclictest29500-21/usr/sbin/munin07:30:161
1999399321,28cyclictest11632-21df_inode12:30:161
19992993226,4cyclictest9-21ksoftirqd/012:04:560
19992993226,4cyclictest9-21ksoftirqd/007:51:090
136591320,1ptp4l401ktimersoftd/311:05:143
136591320,0ptp4l401ktimersoftd/308:08:203
136591320,0ptp4l401ktimersoftd/308:08:203
51698310,3rtkit-daemon121rcu_preempt07:50:183
19995993125,4cyclictest41-21ksoftirqd/312:37:293
19995993125,4cyclictest41-21ksoftirqd/311:44:133
19995993125,4cyclictest41-21ksoftirqd/308:53:593
19995993125,4cyclictest41-21ksoftirqd/308:48:213
19995993125,4cyclictest41-21ksoftirqd/307:17:473
19994993127,3cyclictest33-21ksoftirqd/211:20:172
19994993127,3cyclictest33-21ksoftirqd/209:10:192
19994993127,2cyclictest33-21ksoftirqd/210:55:012
19994993126,3cyclictest33-21ksoftirqd/212:40:002
19994993126,3cyclictest33-21ksoftirqd/212:30:212
19994993126,3cyclictest33-21ksoftirqd/211:50:202
19994993125,4cyclictest33-21ksoftirqd/211:37:302
19994993125,4cyclictest33-21ksoftirqd/210:37:482
19994993125,4cyclictest33-21ksoftirqd/208:14:222
19994993125,3cyclictest33-21ksoftirqd/210:55:132
19994993125,3cyclictest33-21ksoftirqd/209:45:202
19994993120,4cyclictest33-21ksoftirqd/209:30:152
19993993126,3cyclictest25-21ksoftirqd/112:08:051
19993993125,4cyclictest25-21ksoftirqd/111:32:561
19993993125,4cyclictest25-21ksoftirqd/110:41:151
19993993125,4cyclictest25-21ksoftirqd/110:26:561
19993993125,4cyclictest25-21ksoftirqd/109:22:571
19993993125,4cyclictest25-21ksoftirqd/108:58:021
19993993125,4cyclictest25-21ksoftirqd/108:13:291
1999399310,1cyclictest0-21swapper/109:05:291
19992993126,3cyclictest9-21ksoftirqd/008:15:000
19992993126,3cyclictest9-21ksoftirqd/007:30:110
19992993126,3cyclictest9-21ksoftirqd/007:16:590
19992993125,4cyclictest9-21ksoftirqd/010:30:550
19992993125,4cyclictest9-21ksoftirqd/009:54:020
19992993125,3cyclictest9-21ksoftirqd/011:13:250
136591310,0ptp4l401ktimersoftd/309:27:103
136591310,0ptp4l401ktimersoftd/309:10:003
19995993025,3cyclictest41-21ksoftirqd/311:22:303
19995993025,3cyclictest41-21ksoftirqd/310:08:063
19995993025,3cyclictest41-21ksoftirqd/307:31:033
19995993024,4cyclictest41-21ksoftirqd/312:00:533
19995993024,4cyclictest41-21ksoftirqd/310:15:393
19995993024,4cyclictest41-21ksoftirqd/308:35:543
19995993023,5cyclictest41-21ksoftirqd/310:22:333
19994993027,2cyclictest33-21ksoftirqd/210:00:202
19994993026,2cyclictest33-21ksoftirqd/211:15:152
19994993025,3cyclictest33-21ksoftirqd/207:36:292
19994993025,3cyclictest33-21ksoftirqd/207:36:292
19994993024,4cyclictest33-21ksoftirqd/210:41:252
19994993024,4cyclictest33-21ksoftirqd/209:57:402
19994993019,3cyclictest33-21ksoftirqd/208:50:252
19994993018,10cyclictest33-21ksoftirqd/207:25:242
1999399304,24cyclictest6269-21cat12:20:011
19993993025,3cyclictest25-21ksoftirqd/112:10:501
19993993025,3cyclictest25-21ksoftirqd/110:02:481
19993993025,3cyclictest25-21ksoftirqd/109:10:461
19993993025,3cyclictest25-21ksoftirqd/107:59:291
19993993024,4cyclictest25-21ksoftirqd/111:55:571
19993993024,4cyclictest25-21ksoftirqd/111:10:411
19993993024,4cyclictest25-21ksoftirqd/110:31:461
19993993024,4cyclictest25-21ksoftirqd/109:32:001
19993993024,4cyclictest25-21ksoftirqd/108:01:591
19993993012,15cyclictest31787-21seq09:50:121
19993993011,16cyclictest15932-21grep08:05:291
19993993011,16cyclictest15932-21grep08:05:291
19993993010,17cyclictest22195-21sed10:35:211
19993993010,17cyclictest18788-21mailstats11:35:251
1999399300,2cyclictest0-21swapper/109:00:291
19992993025,3cyclictest9-21ksoftirqd/007:27:060
19992993024,4cyclictest9-21ksoftirqd/010:56:070
19992993024,4cyclictest9-21ksoftirqd/010:28:400
19992993024,4cyclictest9-21ksoftirqd/010:19:530
19992993024,4cyclictest9-21ksoftirqd/009:28:060
19992993024,4cyclictest9-21ksoftirqd/008:07:220
19992993024,4cyclictest9-21ksoftirqd/008:07:210
19992993024,4cyclictest9-21ksoftirqd/007:10:530
136591300,0ptp4l401ktimersoftd/311:56:183
136591300,0ptp4l401ktimersoftd/311:45:273
136591300,0ptp4l401ktimersoftd/310:50:443
136591300,0ptp4l401ktimersoftd/309:48:383
136591300,0ptp4l401ktimersoftd/309:12:493
136591300,0ptp4l401ktimersoftd/308:04:303
19995992925,3cyclictest41-21ksoftirqd/312:05:243
19995992923,4cyclictest41-21ksoftirqd/311:11:153
19995992923,4cyclictest41-21ksoftirqd/310:59:483
19995992923,4cyclictest41-21ksoftirqd/308:29:043
1999599290,2cyclictest121rcu_preempt07:55:173
19994992926,2cyclictest33-21ksoftirqd/207:57:412
19994992925,2cyclictest33-21ksoftirqd/211:30:272
19994992924,3cyclictest33-21ksoftirqd/212:05:212
19994992924,3cyclictest33-21ksoftirqd/210:33:072
19994992924,3cyclictest33-21ksoftirqd/210:15:002
19994992924,3cyclictest33-21ksoftirqd/207:30:132
19994992923,4cyclictest33-21ksoftirqd/212:25:012
1999399296,20cyclictest2586-21irqrtprio07:40:201
19993992924,3cyclictest25-21ksoftirqd/111:17:231
1999399291,22cyclictest22254-21apt-get11:45:151
1999399290,2cyclictest28559-21/usr/sbin/munin07:25:251
1999399290,1cyclictest0-21swapper/110:10:161
1999399290,1cyclictest0-21swapper/108:31:531
19992992924,3cyclictest9-21ksoftirqd/011:17:220
19992992924,3cyclictest9-21ksoftirqd/009:11:160
19992992923,4cyclictest9-21ksoftirqd/011:52:160
19992992923,4cyclictest9-21ksoftirqd/011:38:040
19992992923,4cyclictest9-21ksoftirqd/010:48:010
19992992923,4cyclictest9-21ksoftirqd/010:21:050
136591290,0ptp4l401ktimersoftd/312:22:043
136591290,0ptp4l401ktimersoftd/311:32:403
136591290,0ptp4l401ktimersoftd/311:26:553
136591290,0ptp4l401ktimersoftd/311:17:093
136591290,0ptp4l401ktimersoftd/310:12:053
136591290,0ptp4l401ktimersoftd/309:56:523
136591290,0ptp4l401ktimersoftd/309:23:323
136591290,0ptp4l401ktimersoftd/308:16:583
136591290,0ptp4l401ktimersoftd/307:48:333
136591290,0ptp4l401ktimersoftd/307:36:053
136591290,0ptp4l401ktimersoftd/307:36:053
136591290,0ptp4l401ktimersoftd/307:25:053
19995992823,3cyclictest41-21ksoftirqd/309:15:103
19995992822,4cyclictest41-21ksoftirqd/310:40:573
19995992822,4cyclictest41-21ksoftirqd/310:37:013
19994992823,3cyclictest33-21ksoftirqd/208:45:142
19994992822,4cyclictest33-21ksoftirqd/209:06:012
19994992822,3cyclictest33-21ksoftirqd/208:35:152
19994992821,4cyclictest33-21ksoftirqd/212:15:002
19994992818,9cyclictest33-21ksoftirqd/210:25:192
19994992817,9cyclictest33-21ksoftirqd/207:20:272
1999399289,16cyclictest23885-21grep08:25:151
1999399285,20cyclictest31523-21irqrtprio10:55:201
19993992822,4cyclictest25-21ksoftirqd/109:56:111
19993992822,4cyclictest25-21ksoftirqd/109:17:351
19993992810,16cyclictest11961-21sed11:20:281
19993992810,16cyclictest10232-21find12:25:261
19993992810,15cyclictest7862-21ls07:50:211
19993992810,15cyclictest5351-21irqrtprio07:45:191
1999399280,2cyclictest21115-21ls07:10:211
1999399280,1cyclictest0-21swapper/110:50:221
19992992823,3cyclictest9-21ksoftirqd/008:32:170
19992992822,4cyclictest9-21ksoftirqd/011:31:180
19992992822,4cyclictest9-21ksoftirqd/010:40:590
19992992822,4cyclictest9-21ksoftirqd/009:05:590
19992992822,4cyclictest9-21ksoftirqd/008:59:500
19992992822,4cyclictest9-21ksoftirqd/008:45:490
19992992822,4cyclictest9-21ksoftirqd/008:01:360
19992992822,4cyclictest9-21ksoftirqd/007:56:550
136591280,0ptp4l401ktimersoftd/310:33:423
19995992721,4cyclictest41-21ksoftirqd/307:40:383
19994992721,4cyclictest33-21ksoftirqd/211:57:082
19994992721,3cyclictest33-21ksoftirqd/208:05:212
19994992721,3cyclictest33-21ksoftirqd/208:05:212
19994992715,10cyclictest33-21ksoftirqd/209:20:252
1999399274,20cyclictest0-21swapper/108:49:561
19993992722,3cyclictest25-21ksoftirqd/108:40:131
19993992721,4cyclictest25-21ksoftirqd/107:36:341
19993992721,4cyclictest25-21ksoftirqd/107:36:341
1999399271,22cyclictest29930-21fschecks_time09:45:171
1999399270,25cyclictest8732-21basename10:10:001
1999399270,1cyclictest0-21swapper/111:43:221
19992992722,3cyclictest9-21ksoftirqd/012:06:030
19992992722,3cyclictest9-21ksoftirqd/009:21:480
19992992722,3cyclictest9-21ksoftirqd/008:18:290
19992992722,3cyclictest9-21ksoftirqd/007:37:400
19992992722,3cyclictest9-21ksoftirqd/007:37:400
19992992721,4cyclictest9-21ksoftirqd/011:03:210
19992992721,4cyclictest9-21ksoftirqd/010:38:430
19992992721,4cyclictest9-21ksoftirqd/010:09:180
19992992721,4cyclictest9-21ksoftirqd/008:38:390
136591270,0ptp4l401ktimersoftd/308:22:163
136591270,0ptp4l401ktimersoftd/307:22:543
19994992622,3cyclictest33-21ksoftirqd/211:50:012
19994992621,3cyclictest33-21ksoftirqd/208:17:462
19993992620,4cyclictest25-21ksoftirqd/111:07:281
1999399261,22cyclictest21124-21apt08:20:001
1999399260,23cyclictest24605-21munin-node11:50:121
19992992621,3cyclictest9-21ksoftirqd/012:39:470
19992992621,3cyclictest9-21ksoftirqd/012:21:170
19992992621,3cyclictest9-21ksoftirqd/011:40:550
19992992621,3cyclictest9-21ksoftirqd/011:28:080
19992992621,3cyclictest9-21ksoftirqd/011:20:380
19992992621,3cyclictest9-21ksoftirqd/009:46:390
19992992621,3cyclictest9-21ksoftirqd/008:42:320
19992992621,3cyclictest9-21ksoftirqd/007:43:070
19992992620,4cyclictest9-21ksoftirqd/011:59:180
19992992620,4cyclictest9-21ksoftirqd/011:08:180
19992992620,4cyclictest9-21ksoftirqd/010:54:390
19992992620,3cyclictest9-21ksoftirqd/008:20:060
19995992520,3cyclictest41-21ksoftirqd/312:15:513
19994992519,3cyclictest33-21ksoftirqd/211:05:152
19992992520,3cyclictest9-21ksoftirqd/012:31:480
19992992520,3cyclictest9-21ksoftirqd/010:11:510
19992992520,3cyclictest9-21ksoftirqd/010:02:240
19992992519,4cyclictest9-21ksoftirqd/012:26:100
19992992519,4cyclictest9-21ksoftirqd/009:32:020
19992992418,4cyclictest9-21ksoftirqd/008:26:400
19992992318,3cyclictest9-21ksoftirqd/009:40:080
19992992318,3cyclictest9-21ksoftirqd/009:00:120
19992992317,4cyclictest9-21ksoftirqd/008:51:470
19992992217,3cyclictest9-21ksoftirqd/007:48:110
19992992115,4cyclictest9-21ksoftirqd/012:10:130
19992992015,3cyclictest25326-21iostat09:35:200
19992991812,4cyclictest4218-21cpuspeed12:15:150
19992991811,4cyclictest15603-21grep09:15:170
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional