You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-14 - 13:02
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Fri Nov 14, 2025 00:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1681322850,20sleep20-21swapper/219:05:192
1681322850,20sleep20-21swapper/219:05:192
177742206172,23sleep10-21swapper/119:07:121
177742206172,23sleep10-21swapper/119:07:121
176822206172,23sleep00-21swapper/019:06:030
176822206172,23sleep00-21swapper/019:06:030
176752206171,23sleep30-21swapper/319:05:583
176752206171,23sleep30-21swapper/319:05:583
2138421510,4sleep221388-21sendmail_mailqu22:35:262
136591670,1ptp4l401ktimersoftd/321:33:093
19042630,2sleep00-21swapper/000:10:240
197452590,2sleep20-21swapper/219:10:262
136591550,1ptp4l401ktimersoftd/320:41:563
136591540,1ptp4l391rcuc/320:26:403
136591530,1ptp4l401ktimersoftd/322:26:023
1366914937,7phc2sys0-21swapper/319:10:023
1828999441,40cyclictest21816-21cron20:25:002
136591430,0ptp4l401ktimersoftd/319:27:213
136591430,0ptp4l401ktimersoftd/300:20:333
136591420,0ptp4l401ktimersoftd/319:46:143
136591410,0ptp4l401ktimersoftd/322:00:263
1828999404,34cyclictest17030-21kworker/2:120:27:412
51698390,4rtkit-daemon2859-21apt-get19:45:112
1828999394,34cyclictest25452-21kworker/2:021:58:252
1828999394,34cyclictest25452-21kworker/2:021:58:252
1828999393,15cyclictest5295-21kworker/2:200:20:002
18289993923,14cyclictest33-21ksoftirqd/200:08:372
1828999384,14cyclictest5295-21kworker/2:223:51:452
1828999383,33cyclictest19602-21kworker/2:119:16:572
1828999383,15cyclictest5295-21kworker/2:200:17:122
136591380,1ptp4l401ktimersoftd/321:54:103
136591380,0ptp4l401ktimersoftd/323:25:433
136591380,0ptp4l401ktimersoftd/322:58:023
51698370,7rtkit-daemon0-21swapper/220:57:232
1828999374,31cyclictest25452-21kworker/2:021:45:052
1828999374,31cyclictest25452-21kworker/2:021:43:052
1828999374,15cyclictest8395-21kworker/2:121:28:132
1828999374,15cyclictest25452-21kworker/2:021:52:082
1828999374,14cyclictest5295-21kworker/2:223:45:442
1828999373,16cyclictest579-21kworker/2:220:52:292
1828999373,15cyclictest25452-21kworker/2:021:37:172
1828999372,34cyclictest8395-21kworker/2:121:10:402
1828999365,14cyclictest8395-21kworker/2:121:22:092
1828999364,13cyclictest5295-21kworker/2:223:55:092
1828999363,32cyclictest19602-21kworker/2:119:29:252
1828999363,16cyclictest17030-21kworker/2:120:44:052
1828999363,14cyclictest5295-21kworker/2:223:40:372
1828999361,25cyclictest5295-21kworker/2:222:17:412
1828999360,34cyclictest5295-21kworker/2:223:24:082
18290993524,8cyclictest41-21ksoftirqd/323:00:113
1828999356,28cyclictest13950-21kworker/2:320:15:452
1828999356,27cyclictest19602-21kworker/2:120:00:252
1828999354,29cyclictest19602-21kworker/2:119:20:052
1828999354,14cyclictest5295-21kworker/2:222:06:372
1828999353,31cyclictest19602-21kworker/2:119:51:252
1828999353,13cyclictest5295-21kworker/2:200:03:452
1828999352,32cyclictest25452-21kworker/2:022:01:252
1828999351,32cyclictest5295-21kworker/2:223:37:322
1828999351,32cyclictest17030-21kworker/2:120:37:132
18287993530,3cyclictest9-21ksoftirqd/022:35:210
1828999346,9cyclictest13950-21kworker/2:320:08:372
1828999345,27cyclictest5295-21kworker/2:223:32:162
1828999344,29cyclictest5295-21kworker/2:222:14:372
1828999344,22cyclictest579-21kworker/2:221:01:372
1828999343,30cyclictest17030-21kworker/2:120:34:252
1828999343,14cyclictest8395-21kworker/2:121:19:172
1828999343,14cyclictest5295-21kworker/2:222:33:122
1828999342,31cyclictest5295-21kworker/2:222:42:332
1828999342,31cyclictest19602-21kworker/2:119:59:452
1828999342,14cyclictest5295-21kworker/2:200:10:362
1828999340,32cyclictest13950-21kworker/2:320:12:252
18288993428,4cyclictest25-21ksoftirqd/121:04:381
18287993429,3cyclictest9-21ksoftirqd/019:15:210
136591340,0ptp4l401ktimersoftd/321:05:153
136591340,0ptp4l401ktimersoftd/300:25:443
18290993327,4cyclictest41-21ksoftirqd/321:03:163
1828999335,26cyclictest8395-21kworker/2:121:05:212
1828999334,18cyclictest5295-21kworker/2:200:25:012
1828999333,29cyclictest5295-21kworker/2:200:35:492
1828999333,14cyclictest5295-21kworker/2:222:54:532
18289993327,4cyclictest33-21ksoftirqd/223:03:342
18289993327,4cyclictest33-21ksoftirqd/222:28:512
18288993328,3cyclictest25-21ksoftirqd/123:35:161
18288993328,3cyclictest25-21ksoftirqd/121:50:201
18288993327,4cyclictest25-21ksoftirqd/122:53:571
18288993327,4cyclictest25-21ksoftirqd/100:22:321
18287993327,4cyclictest9-21ksoftirqd/021:51:270
1828999323,21cyclictest579-21kworker/2:220:46:572
18289993226,4cyclictest33-21ksoftirqd/223:06:352
18289993226,3cyclictest33-21ksoftirqd/219:44:302
1828999322,18cyclictest5295-21kworker/2:200:32:372
1828999320,21cyclictest19602-21kworker/2:119:30:172
18288993228,3cyclictest25-21ksoftirqd/119:40:201
18288993227,3cyclictest25-21ksoftirqd/122:59:591
18288993227,3cyclictest25-21ksoftirqd/122:00:001
18288993227,3cyclictest25-21ksoftirqd/122:00:001
18288993226,4cyclictest25-21ksoftirqd/121:41:171
18288993226,4cyclictest25-21ksoftirqd/121:21:471
18288993226,4cyclictest25-21ksoftirqd/120:00:431
18288993226,4cyclictest25-21ksoftirqd/119:35:401
18288993226,4cyclictest25-21ksoftirqd/119:18:281
18287993227,3cyclictest9-21ksoftirqd/000:00:000
18287993226,4cyclictest9-21ksoftirqd/023:12:540
18287993226,4cyclictest9-21ksoftirqd/022:02:300
18287993226,4cyclictest9-21ksoftirqd/000:16:290
18287993225,5cyclictest9-21ksoftirqd/023:18:560
18287993225,5cyclictest9-21ksoftirqd/023:18:560
18287993225,4cyclictest9-21ksoftirqd/023:50:410
18287993225,4cyclictest9-21ksoftirqd/000:20:220
136591320,0ptp4l401ktimersoftd/320:54:243
18290993126,3cyclictest41-21ksoftirqd/322:35:153
18290993126,3cyclictest41-21ksoftirqd/300:10:153
18290993125,4cyclictest41-21ksoftirqd/323:07:403
18290993125,4cyclictest41-21ksoftirqd/321:14:193
18290993125,4cyclictest41-21ksoftirqd/320:31:413
1828999314,26cyclictest5295-21kworker/2:223:17:482
1828999314,26cyclictest5295-21kworker/2:223:17:482
18289993124,4cyclictest33-21ksoftirqd/223:25:152
1828999310,30cyclictest8395-21kworker/2:121:30:132
1828999310,30cyclictest5295-21kworker/2:222:59:492
18288993127,3cyclictest25-21ksoftirqd/123:25:231
18288993127,2cyclictest25-21ksoftirqd/121:00:001
18288993126,3cyclictest25-21ksoftirqd/122:27:261
18288993126,3cyclictest25-21ksoftirqd/121:45:191
18288993126,3cyclictest25-21ksoftirqd/100:30:211
18288993125,4cyclictest25-21ksoftirqd/123:18:211
18288993125,4cyclictest25-21ksoftirqd/123:18:211
18288993125,4cyclictest25-21ksoftirqd/122:47:351
18288993125,4cyclictest25-21ksoftirqd/122:16:551
18288993125,4cyclictest25-21ksoftirqd/122:13:051
18288993125,4cyclictest25-21ksoftirqd/119:32:351
18288993125,3cyclictest25-21ksoftirqd/119:50:211
18287993126,3cyclictest9-21ksoftirqd/023:50:000
18287993126,3cyclictest9-21ksoftirqd/023:00:000
18287993126,3cyclictest9-21ksoftirqd/022:25:270
18287993126,3cyclictest9-21ksoftirqd/021:00:160
18287993126,3cyclictest9-21ksoftirqd/020:14:180
18287993126,3cyclictest9-21ksoftirqd/019:50:000
18287993126,3cyclictest9-21ksoftirqd/019:15:010
18287993125,4cyclictest9-21ksoftirqd/023:33:000
18287993125,4cyclictest9-21ksoftirqd/019:55:370
18287993125,4cyclictest9-21ksoftirqd/000:26:150
18287993125,4cyclictest9-21ksoftirqd/000:02:530
18287993125,3cyclictest9-21ksoftirqd/023:00:190
18287993125,3cyclictest9-21ksoftirqd/021:55:130
18287993125,3cyclictest9-21ksoftirqd/021:55:130
18287993125,3cyclictest9-21ksoftirqd/021:20:000
18287993125,3cyclictest9-21ksoftirqd/019:52:100
136591310,1ptp4l391rcuc/323:54:373
136591310,0ptp4l401ktimersoftd/322:19:063
230802300,2sleep30-21swapper/322:40:203
18290993026,3cyclictest41-21ksoftirqd/323:35:213
18290993024,4cyclictest41-21ksoftirqd/321:49:373
18290993024,4cyclictest41-21ksoftirqd/320:06:033
18290993024,4cyclictest41-21ksoftirqd/300:31:083
18290993024,4cyclictest41-21ksoftirqd/300:00:483
18289993024,4cyclictest33-21ksoftirqd/223:11:482
18288993027,2cyclictest25-21ksoftirqd/121:25:191
18288993025,3cyclictest25-21ksoftirqd/122:35:211
18288993025,3cyclictest25-21ksoftirqd/120:22:301
18288993025,3cyclictest25-21ksoftirqd/119:50:001
18288993025,3cyclictest25-21ksoftirqd/100:20:011
18288993025,3cyclictest25-21ksoftirqd/100:05:231
18288993024,4cyclictest25-21ksoftirqd/123:46:341
18288993024,4cyclictest25-21ksoftirqd/123:44:131
18288993024,4cyclictest25-21ksoftirqd/123:23:351
18288993024,4cyclictest25-21ksoftirqd/123:11:111
18288993024,4cyclictest25-21ksoftirqd/123:07:061
18288993024,4cyclictest25-21ksoftirqd/122:22:171
18288993024,4cyclictest25-21ksoftirqd/120:05:091
18288993024,4cyclictest25-21ksoftirqd/119:21:321
18287993025,3cyclictest9-21ksoftirqd/023:39:590
18287993025,3cyclictest9-21ksoftirqd/022:33:020
18287993025,3cyclictest9-21ksoftirqd/020:55:190
18287993025,3cyclictest9-21ksoftirqd/020:30:000
18287993025,3cyclictest9-21ksoftirqd/019:25:190
18287993024,4cyclictest9-21ksoftirqd/020:21:040
18287993024,4cyclictest9-21ksoftirqd/020:05:080
18287993024,3cyclictest9-21ksoftirqd/021:37:590
136591300,9ptp4l0-21swapper/319:39:403
136591300,0ptp4l401ktimersoftd/323:21:363
136591300,0ptp4l401ktimersoftd/322:30:293
136591300,0ptp4l401ktimersoftd/321:35:083
136591300,0ptp4l401ktimersoftd/321:24:503
136591300,0ptp4l401ktimersoftd/320:20:143
136591300,0ptp4l401ktimersoftd/319:34:433
18290992924,3cyclictest41-21ksoftirqd/323:40:593
18290992924,3cyclictest41-21ksoftirqd/323:32:573
18290992924,3cyclictest41-21ksoftirqd/321:25:183
18290992923,4cyclictest41-21ksoftirqd/322:53:113
18290992923,4cyclictest41-21ksoftirqd/320:15:103
18290992923,4cyclictest41-21ksoftirqd/320:00:493
18288992924,3cyclictest25-21ksoftirqd/121:34:291
18288992924,3cyclictest25-21ksoftirqd/120:45:361
18288992924,3cyclictest25-21ksoftirqd/120:25:561
18288992924,3cyclictest25-21ksoftirqd/120:17:361
18288992923,4cyclictest25-21ksoftirqd/122:09:041
18288992923,4cyclictest25-21ksoftirqd/121:39:321
18288992923,4cyclictest25-21ksoftirqd/120:50:381
18288992923,4cyclictest25-21ksoftirqd/100:35:391
18288992923,3cyclictest25-21ksoftirqd/100:10:221
18287992925,3cyclictest9-21ksoftirqd/019:40:200
18287992924,3cyclictest9-21ksoftirqd/022:40:210
18287992924,3cyclictest9-21ksoftirqd/022:12:140
18287992924,3cyclictest9-21ksoftirqd/020:48:280
18287992924,3cyclictest9-21ksoftirqd/020:30:210
18287992923,4cyclictest9-21ksoftirqd/022:49:080
18287992923,4cyclictest9-21ksoftirqd/022:16:580
18287992923,4cyclictest9-21ksoftirqd/022:07:440
18287992923,4cyclictest9-21ksoftirqd/021:49:340
18287992923,4cyclictest9-21ksoftirqd/021:41:040
18287992923,4cyclictest9-21ksoftirqd/021:12:270
18287992923,4cyclictest9-21ksoftirqd/020:17:030
18287992923,4cyclictest9-21ksoftirqd/020:04:360
18287992923,4cyclictest9-21ksoftirqd/000:38:580
136591290,8ptp4l401ktimersoftd/319:55:553
136591290,0ptp4l401ktimersoftd/323:46:483
136591290,0ptp4l401ktimersoftd/322:10:523
136591290,0ptp4l401ktimersoftd/321:59:303
136591290,0ptp4l401ktimersoftd/321:59:303
136591290,0ptp4l401ktimersoftd/320:39:563
136591290,0ptp4l401ktimersoftd/320:14:003
18290992823,3cyclictest41-21ksoftirqd/323:16:043
18290992823,3cyclictest41-21ksoftirqd/323:16:043
18290992823,3cyclictest41-21ksoftirqd/323:12:553
18290992823,3cyclictest41-21ksoftirqd/320:55:303
18290992822,4cyclictest41-21ksoftirqd/322:47:173
18290992822,4cyclictest41-21ksoftirqd/319:52:553
18290992822,3cyclictest41-21ksoftirqd/320:45:233
18290992822,3cyclictest41-21ksoftirqd/319:20:153
18288992825,2cyclictest25-21ksoftirqd/121:20:011
18288992823,3cyclictest25-21ksoftirqd/123:53:551
18288992823,3cyclictest25-21ksoftirqd/123:32:461
18288992823,3cyclictest25-21ksoftirqd/123:01:371
18288992823,3cyclictest25-21ksoftirqd/119:55:381
18288992822,4cyclictest25-21ksoftirqd/122:34:531
18288992822,4cyclictest25-21ksoftirqd/120:11:061
18287992824,3cyclictest9-21ksoftirqd/023:25:220
18287992824,2cyclictest9-21ksoftirqd/020:40:000
18287992823,3cyclictest9-21ksoftirqd/022:51:470
18287992823,3cyclictest9-21ksoftirqd/021:35:000
18287992823,3cyclictest9-21ksoftirqd/021:20:140
18287992823,3cyclictest9-21ksoftirqd/000:10:010
18287992822,4cyclictest9-21ksoftirqd/023:42:110
18287992822,4cyclictest9-21ksoftirqd/022:22:400
18287992822,4cyclictest9-21ksoftirqd/021:06:260
18287992822,4cyclictest9-21ksoftirqd/020:53:580
18287992822,4cyclictest9-21ksoftirqd/019:30:090
18287992822,3cyclictest9-21ksoftirqd/020:45:010
18290992721,4cyclictest41-21ksoftirqd/322:08:103
18290992721,4cyclictest41-21ksoftirqd/321:43:563
1828999275,20cyclictest5295-21kworker/2:222:20:072
1828999272,24cyclictest5295-21kworker/2:222:46:272
18288992721,4cyclictest25-21ksoftirqd/121:05:471
18288992720,5cyclictest25-21ksoftirqd/120:35:001
18287992722,3cyclictest9-21ksoftirqd/000:30:160
18287992721,4cyclictest9-21ksoftirqd/023:24:330
18290992622,2cyclictest41-21ksoftirqd/323:55:213
18290992621,3cyclictest41-21ksoftirqd/319:44:413
18290992621,3cyclictest41-21ksoftirqd/300:39:593
18290992620,4cyclictest41-21ksoftirqd/322:24:563
18289992620,4cyclictest33-21ksoftirqd/219:35:412
18288992621,3cyclictest25-21ksoftirqd/122:00:211
18288992621,3cyclictest25-21ksoftirqd/119:14:381
18288992620,4cyclictest25-21ksoftirqd/100:26:171
18288992519,4cyclictest25-21ksoftirqd/122:44:481
18287992519,4cyclictest9-21ksoftirqd/021:27:160
136591250,0ptp4l401ktimersoftd/300:08:523
18290992419,3cyclictest41-21ksoftirqd/321:15:213
18288992419,3cyclictest25-21ksoftirqd/120:41:511
18288992419,3cyclictest25-21ksoftirqd/120:35:321
18288992419,3cyclictest25-21ksoftirqd/119:25:331
18288992418,3cyclictest25-21ksoftirqd/123:57:181
136591240,1ptp4l401ktimersoftd/319:15:143
18287992318,3cyclictest9-21ksoftirqd/023:10:000
18287992317,3cyclictest9-21ksoftirqd/019:20:150
136591230,0ptp4l401ktimersoftd/300:15:113
18288992217,3cyclictest25-21ksoftirqd/121:15:001
18287992217,3cyclictest9-21ksoftirqd/019:40:000
18288992117,3cyclictest25-21ksoftirqd/100:00:191
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional