You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-30 - 23:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Sun Nov 30, 2025 12:45:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191231203,18phc2sys0-21swapper/307:09:583
273382203170,22sleep20-21swapper/207:06:182
272792203168,23sleep10-21swapper/107:05:321
275922202169,22sleep00-21swapper/007:09:300
2276221300,5sleep02792799cyclictest09:10:270
2763521180,2sleep30-21swapper/308:15:223
2763529268,12sleep30-21swapper/307:10:003
136991660,1ptp4l27718-21/usr/sbin/munin10:30:203
136991650,1ptp4l401ktimersoftd/309:07:083
136991650,1ptp4l401ktimersoftd/309:07:083
8462550,3sleep231579-21/usr/sbin/munin08:25:292
136991530,9ptp4l401ktimersoftd/307:32:353
31982520,3sleep02792799cyclictest07:25:170
27929995223,4cyclictest33-21ksoftirqd/211:25:012
203122520,1sleep00-21swapper/008:00:200
136991520,1ptp4l401ktimersoftd/312:21:013
27929995120,3cyclictest33-21ksoftirqd/210:40:222
27929995119,6cyclictest33-21ksoftirqd/211:40:162
282322500,1sleep10-21swapper/107:10:131
27929995020,7cyclictest33-21ksoftirqd/211:55:002
27929995016,6cyclictest33-21ksoftirqd/209:15:002
310492490,6sleep131051-21latency_hist11:45:001
27929994923,8cyclictest33-21ksoftirqd/211:15:152
27929994920,4cyclictest33-21ksoftirqd/210:55:152
27929994919,4cyclictest33-21ksoftirqd/208:00:002
27929994918,4cyclictest33-21ksoftirqd/207:45:002
27929994820,7cyclictest33-21ksoftirqd/212:00:262
27929994814,4cyclictest33-21ksoftirqd/212:24:592
27929994741,3cyclictest22760-21sh12:35:012
27929994720,7cyclictest33-21ksoftirqd/208:55:002
27929994720,7cyclictest33-21ksoftirqd/207:50:192
27929994718,7cyclictest33-21ksoftirqd/208:10:172
27929994718,4cyclictest33-21ksoftirqd/212:10:002
27929994716,5cyclictest33-21ksoftirqd/211:35:012
27929994716,5cyclictest33-21ksoftirqd/211:05:002
27929994714,6cyclictest33-21ksoftirqd/211:55:192
27929994714,4cyclictest33-21ksoftirqd/207:35:172
27929994621,7cyclictest33-21ksoftirqd/211:05:142
27929994618,4cyclictest33-21ksoftirqd/212:38:452
27929994616,4cyclictest33-21ksoftirqd/211:10:182
184522460,2sleep10-21swapper/111:15:281
27929994519,6cyclictest33-21ksoftirqd/209:50:152
27929994515,5cyclictest33-21ksoftirqd/211:45:202
2792999448,8cyclictest33-21ksoftirqd/207:45:192
27929994422,19cyclictest33-21ksoftirqd/208:50:012
27929994417,7cyclictest33-21ksoftirqd/212:10:212
27929994417,4cyclictest33-21ksoftirqd/212:30:012
27929994415,4cyclictest33-21ksoftirqd/211:35:202
2792999441,40cyclictest30616-21apt09:30:012
27929994413,3cyclictest33-21ksoftirqd/208:40:002
27929994412,4cyclictest33-21ksoftirqd/207:20:002
27929994411,6cyclictest33-21ksoftirqd/211:30:012
27929994328,2cyclictest33-21ksoftirqd/208:35:002
27929994328,2cyclictest33-21ksoftirqd/208:35:002
27929994315,3cyclictest33-21ksoftirqd/207:27:022
136991430,0ptp4l401ktimersoftd/307:20:183
2792999429,7cyclictest33-21ksoftirqd/207:10:142
2792999429,6cyclictest33-21ksoftirqd/209:55:292
27929994238,2cyclictest33-21ksoftirqd/210:20:002
27929994236,3cyclictest33-21ksoftirqd/209:24:592
27929994230,3cyclictest33-21ksoftirqd/210:35:002
27929994229,10cyclictest33-21ksoftirqd/209:05:002
27929994215,7cyclictest33-21ksoftirqd/212:15:152
27929994212,4cyclictest33-21ksoftirqd/210:45:152
27929994212,11cyclictest33-21ksoftirqd/210:35:262
27927994237,3cyclictest22755-21cron12:35:010
101852420,3sleep30-21swapper/307:40:163
27929994131,3cyclictest33-21ksoftirqd/209:15:152
27929994121,4cyclictest33-21ksoftirqd/208:20:162
2792999408,4cyclictest33-21ksoftirqd/210:00:152
2792999401,8cyclictest33-21ksoftirqd/208:02:172
27929994015,6cyclictest33-21ksoftirqd/208:05:252
27929994014,3cyclictest33-21ksoftirqd/207:30:152
136991400,1ptp4l401ktimersoftd/312:17:363
2792999395,6cyclictest33-21ksoftirqd/209:40:122
27929993933,3cyclictest33-21ksoftirqd/208:55:132
2792999390,3cyclictest121rcu_preempt08:19:592
136991390,1ptp4l401ktimersoftd/311:12:253
2792999386,11cyclictest33-21ksoftirqd/209:45:152
27929993833,3cyclictest33-21ksoftirqd/209:30:232
2792999381,7cyclictest33-21ksoftirqd/210:25:222
2792999377,9cyclictest33-21ksoftirqd/208:40:142
2792999377,3cyclictest33-21ksoftirqd/210:20:242
27929993733,2cyclictest33-21ksoftirqd/209:05:272
27929993733,2cyclictest33-21ksoftirqd/209:05:262
2792999372,2cyclictest121rcu_preempt09:40:002
2792999372,2cyclictest121rcu_preempt09:40:002
136991370,0ptp4l401ktimersoftd/309:00:123
2793099363,2cyclictest121rcu_preempt09:28:543
27929993630,3cyclictest33-21ksoftirqd/210:55:012
2792999361,6cyclictest33-21ksoftirqd/210:10:182
27928993630,3cyclictest25-21ksoftirqd/112:20:001
136991360,0ptp4l401ktimersoftd/312:14:063
27930993529,4cyclictest41-21ksoftirqd/310:27:043
27930993529,4cyclictest41-21ksoftirqd/309:22:583
2792999354,5cyclictest33-21ksoftirqd/210:05:162
27929993530,3cyclictest33-21ksoftirqd/207:20:182
27928993530,3cyclictest26355-21cron08:15:011
27928993530,3cyclictest25-21ksoftirqd/112:25:201
27928993530,3cyclictest25-21ksoftirqd/109:40:011
27928993530,3cyclictest25-21ksoftirqd/109:40:001
27928993529,4cyclictest25-21ksoftirqd/112:39:401
27928993529,4cyclictest25-21ksoftirqd/109:01:581
27928993529,4cyclictest25-21ksoftirqd/107:22:501
27928993528,4cyclictest25-21ksoftirqd/110:10:001
2792899350,2cyclictest121rcu_preempt10:50:441
27927993529,4cyclictest9-21ksoftirqd/010:00:540
136991350,0ptp4l401ktimersoftd/311:40:363
59298340,8rtkit-daemon0-21swapper/309:49:093
27930993429,3cyclictest41-21ksoftirqd/310:20:153
27930993428,4cyclictest41-21ksoftirqd/312:05:363
27930993428,4cyclictest41-21ksoftirqd/308:29:223
27930993428,3cyclictest41-21ksoftirqd/312:35:003
27928993429,3cyclictest25-21ksoftirqd/111:00:001
27928993428,4cyclictest25-21ksoftirqd/112:24:371
27928993428,4cyclictest25-21ksoftirqd/109:06:111
27928993428,4cyclictest25-21ksoftirqd/109:06:111
27928993428,4cyclictest25-21ksoftirqd/108:51:271
27928993427,5cyclictest25-21ksoftirqd/112:07:191
27928993427,5cyclictest25-21ksoftirqd/107:19:361
27928993427,4cyclictest25-21ksoftirqd/110:03:031
27927993428,4cyclictest9-21ksoftirqd/011:12:590
27927993428,4cyclictest9-21ksoftirqd/010:29:340
27927993427,5cyclictest9-21ksoftirqd/011:46:400
27927993426,5cyclictest1289-21cron08:30:010
59298330,2rtkit-daemon591-21rtkit-daemon08:41:273
27930993328,3cyclictest41-21ksoftirqd/312:00:073
27930993328,3cyclictest41-21ksoftirqd/309:15:093
27930993328,3cyclictest41-21ksoftirqd/308:48:253
27930993327,4cyclictest41-21ksoftirqd/312:26:193
27930993327,4cyclictest41-21ksoftirqd/311:19:033
27930993327,4cyclictest41-21ksoftirqd/307:27:403
2793099330,2cyclictest121rcu_preempt10:05:213
27928993327,4cyclictest25-21ksoftirqd/111:29:161
27928993327,4cyclictest25-21ksoftirqd/111:06:501
27928993327,4cyclictest25-21ksoftirqd/110:11:181
27928993327,4cyclictest25-21ksoftirqd/109:44:421
27928993326,4cyclictest25-21ksoftirqd/110:40:061
27927993328,3cyclictest9-21ksoftirqd/011:58:070
27927993328,3cyclictest9-21ksoftirqd/011:23:180
27927993328,3cyclictest9-21ksoftirqd/010:44:590
27927993327,4cyclictest9-21ksoftirqd/011:44:400
27927993327,4cyclictest9-21ksoftirqd/009:38:270
27927993327,4cyclictest9-21ksoftirqd/009:38:270
27927993327,4cyclictest9-21ksoftirqd/007:53:570
27927993327,4cyclictest9-21ksoftirqd/007:16:590
27930993227,3cyclictest41-21ksoftirqd/308:11:423
27930993226,4cyclictest41-21ksoftirqd/309:42:563
27930993225,4cyclictest22498-21cron10:20:013
27928993227,3cyclictest25-21ksoftirqd/111:30:121
27928993227,3cyclictest25-21ksoftirqd/110:16:341
27928993226,4cyclictest25-21ksoftirqd/111:01:201
27928993226,4cyclictest25-21ksoftirqd/109:45:301
27928993226,4cyclictest25-21ksoftirqd/109:15:351
27928993226,4cyclictest25-21ksoftirqd/108:25:131
27928993226,4cyclictest25-21ksoftirqd/108:06:421
27928993226,4cyclictest25-21ksoftirqd/108:01:041
27928993226,3cyclictest25-21ksoftirqd/112:11:231
27927993227,3cyclictest9-21ksoftirqd/008:43:150
27927993226,4cyclictest9-21ksoftirqd/012:01:290
27927993226,4cyclictest9-21ksoftirqd/008:54:300
27927993226,4cyclictest9-21ksoftirqd/008:49:100
27927993226,4cyclictest9-21ksoftirqd/007:40:580
2792799322,28cyclictest9889-21sshd09:51:130
27930993126,3cyclictest41-21ksoftirqd/311:46:573
27930993126,3cyclictest41-21ksoftirqd/310:56:363
27930993126,3cyclictest41-21ksoftirqd/309:56:253
27930993125,4cyclictest41-21ksoftirqd/311:39:493
27930993125,4cyclictest41-21ksoftirqd/310:48:063
27930993125,4cyclictest41-21ksoftirqd/309:33:173
27930993125,3cyclictest41-21ksoftirqd/310:40:303
27928993126,3cyclictest25-21ksoftirqd/110:25:151
27928993126,3cyclictest25-21ksoftirqd/107:51:121
27928993126,3cyclictest25-21ksoftirqd/107:30:381
27928993125,4cyclictest25-21ksoftirqd/108:21:341
27928993125,4cyclictest25-21ksoftirqd/107:49:211
27928993124,5cyclictest25-21ksoftirqd/109:52:481
27927993126,3cyclictest9-21ksoftirqd/009:49:550
27927993126,3cyclictest9-21ksoftirqd/007:45:340
27927993125,4cyclictest9-21ksoftirqd/012:37:510
27927993125,4cyclictest9-21ksoftirqd/012:06:500
27927993125,4cyclictest9-21ksoftirqd/010:09:480
27927993125,4cyclictest9-21ksoftirqd/008:14:310
27927993125,4cyclictest9-21ksoftirqd/007:20:110
136991310,0ptp4l401ktimersoftd/311:56:493
136991310,0ptp4l401ktimersoftd/310:01:383
27930993025,3cyclictest41-21ksoftirqd/311:07:133
27930993025,3cyclictest41-21ksoftirqd/310:50:403
27930993024,4cyclictest41-21ksoftirqd/309:54:313
27930993024,4cyclictest41-21ksoftirqd/307:36:393
27928993025,3cyclictest25-21ksoftirqd/111:23:381
27928993025,3cyclictest25-21ksoftirqd/109:34:381
27928993025,3cyclictest25-21ksoftirqd/108:40:261
27928993025,3cyclictest25-21ksoftirqd/107:58:131
27928993024,4cyclictest25-21ksoftirqd/107:40:341
27928993024,3cyclictest25-21ksoftirqd/108:35:271
27928993023,5cyclictest25-21ksoftirqd/111:13:161
27928993023,4cyclictest25-21ksoftirqd/107:29:591
27927993025,3cyclictest9-21ksoftirqd/010:54:330
27927993025,3cyclictest9-21ksoftirqd/009:04:550
27927993025,3cyclictest9-21ksoftirqd/008:18:150
27927993024,4cyclictest9-21ksoftirqd/011:31:280
27927993024,4cyclictest9-21ksoftirqd/008:24:580
27927993024,4cyclictest9-21ksoftirqd/007:59:140
136991300,0ptp4l401ktimersoftd/312:36:253
136991300,0ptp4l401ktimersoftd/311:53:593
136991300,0ptp4l401ktimersoftd/311:34:063
136991300,0ptp4l401ktimersoftd/308:36:083
27930992923,4cyclictest41-21ksoftirqd/308:56:513
27928992924,3cyclictest25-21ksoftirqd/111:38:181
27928992924,3cyclictest25-21ksoftirqd/109:00:011
27928992923,4cyclictest25-21ksoftirqd/112:34:521
27928992923,4cyclictest25-21ksoftirqd/112:00:581
27928992923,4cyclictest25-21ksoftirqd/110:20:401
27927992924,3cyclictest9-21ksoftirqd/011:27:390
27927992924,3cyclictest9-21ksoftirqd/011:17:190
27927992924,3cyclictest9-21ksoftirqd/008:57:310
27927992923,4cyclictest9-21ksoftirqd/012:19:060
27927992923,4cyclictest9-21ksoftirqd/011:02:520
27927992923,4cyclictest9-21ksoftirqd/010:36:120
27927992923,4cyclictest9-21ksoftirqd/010:14:230
136991290,0ptp4l401ktimersoftd/311:21:593
136991290,0ptp4l401ktimersoftd/308:35:003
136991290,0ptp4l401ktimersoftd/308:34:593
136991290,0ptp4l401ktimersoftd/308:07:243
27930992822,4cyclictest41-21ksoftirqd/310:14:213
27930992822,4cyclictest41-21ksoftirqd/308:22:523
27928992822,4cyclictest25-21ksoftirqd/111:56:361
27928992821,5cyclictest25-21ksoftirqd/110:37:291
27927992823,3cyclictest9-21ksoftirqd/008:38:500
27927992822,4cyclictest9-21ksoftirqd/010:58:390
27927992822,4cyclictest9-21ksoftirqd/009:44:010
27927992822,4cyclictest9-21ksoftirqd/007:33:590
136991280,0ptp4l401ktimersoftd/307:59:393
27930992722,3cyclictest41-21ksoftirqd/309:13:593
27930992721,4cyclictest41-21ksoftirqd/307:18:543
27930992720,5cyclictest41-21ksoftirqd/311:01:023
27928992722,3cyclictest25-21ksoftirqd/108:30:271
27928992722,3cyclictest25-21ksoftirqd/108:30:261
27928992721,4cyclictest25-21ksoftirqd/108:45:331
27927992722,3cyclictest9-21ksoftirqd/011:52:180
27927992722,3cyclictest9-21ksoftirqd/011:35:330
27927992722,3cyclictest9-21ksoftirqd/010:33:120
27927992722,3cyclictest9-21ksoftirqd/010:20:350
27927992721,4cyclictest9-21ksoftirqd/009:25:310
27927992721,4cyclictest9-21ksoftirqd/009:24:270
27927992721,4cyclictest9-21ksoftirqd/007:12:220
136991270,0ptp4l401ktimersoftd/307:52:513
136991270,0ptp4l401ktimersoftd/307:48:483
27930992621,3cyclictest41-21ksoftirqd/310:35:383
27930992621,3cyclictest41-21ksoftirqd/308:53:293
27930992620,4cyclictest41-21ksoftirqd/311:27:383
27928992621,3cyclictest25-21ksoftirqd/109:55:221
27928992621,3cyclictest25-21ksoftirqd/109:21:431
27928992621,3cyclictest25-21ksoftirqd/109:10:251
27928992620,4cyclictest25-21ksoftirqd/110:33:561
27928992619,4cyclictest25-21ksoftirqd/108:18:061
27927992621,3cyclictest9-21ksoftirqd/009:20:000
27927992620,4cyclictest9-21ksoftirqd/011:06:370
27927992620,4cyclictest9-21ksoftirqd/009:30:500
27927992620,4cyclictest9-21ksoftirqd/008:07:500
27927992520,3cyclictest9-21ksoftirqd/010:18:390
27927992520,3cyclictest9-21ksoftirqd/009:06:230
27927992520,3cyclictest9-21ksoftirqd/009:06:220
27927992520,3cyclictest9-21ksoftirqd/008:32:560
27927992520,3cyclictest9-21ksoftirqd/008:32:560
27927992519,4cyclictest9-21ksoftirqd/009:55:320
27928992420,3cyclictest25-21ksoftirqd/107:35:281
136991240,0ptp4l401ktimersoftd/309:35:213
136991240,0ptp4l401ktimersoftd/309:35:203
27928992318,3cyclictest25-21ksoftirqd/109:27:171
27928992317,4cyclictest25-21ksoftirqd/111:53:111
27927992317,4cyclictest9-21ksoftirqd/010:47:430
136991230,0ptp4l401ktimersoftd/308:00:153
27928992216,4cyclictest25-21ksoftirqd/111:49:061
27928992216,4cyclictest25-21ksoftirqd/110:47:161
27927991914,3cyclictest9-21ksoftirqd/007:35:210
27927991914,3cyclictest18984-21kernelversion12:25:210
27927991912,4cyclictest17826-21basename12:24:590
27927991812,3cyclictest12202-21threads12:10:270
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional