You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-07 - 05:36
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Mon Jul 07, 2025 00:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191207173,22phc2sys0-21swapper/319:06:113
137191207173,22phc2sys0-21swapper/319:06:113
286602206173,22sleep00-21swapper/019:05:500
286602206173,22sleep00-21swapper/019:05:500
287192202169,22sleep20-21swapper/219:06:362
287192202169,22sleep20-21swapper/219:06:362
286612202169,22sleep10-21swapper/119:05:511
286612202169,22sleep10-21swapper/119:05:511
195021430,5sleep02928099cyclictest19:20:140
1652021390,5sleep12928199cyclictest23:10:271
2416221240,4sleep2223-21systemd-journal21:14:502
2898928362,11sleep10-21swapper/119:10:011
29282997224,4cyclictest33-21ksoftirqd/223:20:302
29282996626,5cyclictest33-21ksoftirqd/223:50:202
29282995920,10cyclictest33-21ksoftirqd/223:05:272
29280995926,6cyclictest9-21ksoftirqd/000:40:000
29280995926,6cyclictest9-21ksoftirqd/000:40:000
29280995922,6cyclictest9-21ksoftirqd/023:00:010
29280995922,6cyclictest9-21ksoftirqd/023:00:010
29280995726,7cyclictest9-21ksoftirqd/019:25:190
29280995722,6cyclictest9-21ksoftirqd/019:10:170
29280995623,4cyclictest9-21ksoftirqd/022:00:000
29280995622,4cyclictest9-21ksoftirqd/020:00:000
29280995621,6cyclictest9-21ksoftirqd/021:05:250
136991560,1ptp4l401ktimersoftd/320:13:113
29280995525,4cyclictest9-21ksoftirqd/023:05:290
29280995521,8cyclictest9-21ksoftirqd/000:30:260
136991550,1ptp4l401ktimersoftd/321:44:513
29280995425,4cyclictest9-21ksoftirqd/021:00:220
29280995424,7cyclictest9-21ksoftirqd/022:30:280
29280995421,6cyclictest9-21ksoftirqd/021:50:280
29282995326,5cyclictest33-21ksoftirqd/219:59:302
29282995324,7cyclictest33-21ksoftirqd/220:15:012
29282995324,5cyclictest33-21ksoftirqd/221:39:592
29282995322,9cyclictest33-21ksoftirqd/221:10:012
29280995326,7cyclictest9-21ksoftirqd/020:45:200
29280995322,4cyclictest9-21ksoftirqd/021:25:300
29280995322,4cyclictest9-21ksoftirqd/000:20:290
29280995320,4cyclictest9-21ksoftirqd/019:15:150
29280995316,6cyclictest9-21ksoftirqd/019:30:150
136991530,1ptp4l401ktimersoftd/300:02:173
136991530,1ptp4l401ktimersoftd/300:02:173
314162520,2sleep131420-21latency_hist23:45:001
29282995224,6cyclictest33-21ksoftirqd/220:30:002
29282995221,4cyclictest33-21ksoftirqd/222:00:012
29282995220,4cyclictest33-21ksoftirqd/223:50:012
29282995218,10cyclictest33-21ksoftirqd/221:30:002
29282995215,6cyclictest33-21ksoftirqd/221:04:492
29280995224,3cyclictest9-21ksoftirqd/022:40:210
29280995221,6cyclictest9-21ksoftirqd/020:20:240
29280995221,3cyclictest9-21ksoftirqd/023:50:010
29280995220,6cyclictest9-21ksoftirqd/023:50:180
29280995218,7cyclictest9-21ksoftirqd/022:15:150
29280995218,5cyclictest9-21ksoftirqd/000:10:010
29280995217,7cyclictest9-21ksoftirqd/023:30:190
136991520,1ptp4l401ktimersoftd/319:29:173
29282995125,7cyclictest33-21ksoftirqd/222:35:002
29282995124,7cyclictest33-21ksoftirqd/223:30:252
29282995121,3cyclictest33-21ksoftirqd/200:35:282
29282995121,3cyclictest33-21ksoftirqd/200:35:282
29282995120,6cyclictest33-21ksoftirqd/221:20:282
29282995120,4cyclictest33-21ksoftirqd/221:15:272
29282995119,4cyclictest33-21ksoftirqd/221:55:002
29282995117,6cyclictest33-21ksoftirqd/200:00:292
29282995117,6cyclictest33-21ksoftirqd/200:00:292
29280995124,7cyclictest9-21ksoftirqd/021:45:260
29280995123,7cyclictest9-21ksoftirqd/023:05:010
29280995123,4cyclictest9-21ksoftirqd/022:10:140
29280995123,3cyclictest9-21ksoftirqd/022:00:230
29280995121,4cyclictest9-21ksoftirqd/020:00:150
29280995120,4cyclictest9-21ksoftirqd/000:10:210
29280995119,6cyclictest9-21ksoftirqd/021:20:200
29280995119,6cyclictest9-21ksoftirqd/020:10:150
29280995119,6cyclictest9-21ksoftirqd/019:40:210
29280995119,4cyclictest9-21ksoftirqd/019:50:150
136991510,1ptp4l391rcuc/323:42:483
136991510,1ptp4l391rcuc/323:16:093
29282995022,3cyclictest33-21ksoftirqd/223:10:152
29282995017,6cyclictest33-21ksoftirqd/200:15:232
29282995013,6cyclictest33-21ksoftirqd/222:55:212
29282995013,6cyclictest33-21ksoftirqd/222:55:212
29280995021,3cyclictest9-21ksoftirqd/022:05:150
29280995021,3cyclictest9-21ksoftirqd/022:05:150
29280995020,4cyclictest9-21ksoftirqd/023:15:220
29280995020,4cyclictest9-21ksoftirqd/021:40:210
29280995020,4cyclictest9-21ksoftirqd/000:00:220
29280995020,4cyclictest9-21ksoftirqd/000:00:210
29280995019,6cyclictest9-21ksoftirqd/020:25:200
29280995014,5cyclictest9-21ksoftirqd/020:20:010
29282994921,3cyclictest33-21ksoftirqd/220:00:212
29282994920,7cyclictest33-21ksoftirqd/219:10:242
29282994919,4cyclictest33-21ksoftirqd/219:50:252
29282994918,4cyclictest33-21ksoftirqd/219:15:232
29282994916,5cyclictest33-21ksoftirqd/223:20:002
29282994913,6cyclictest33-21ksoftirqd/200:05:212
2928099497,9cyclictest9-21ksoftirqd/020:35:180
29280994921,6cyclictest9-21ksoftirqd/023:40:160
29280994916,6cyclictest9-21ksoftirqd/000:25:170
29280994916,5cyclictest9-21ksoftirqd/023:55:280
29280994916,4cyclictest9-21ksoftirqd/020:55:270
29282994833,13cyclictest8803-21sh19:35:012
29282994823,7cyclictest33-21ksoftirqd/221:45:142
29282994819,4cyclictest33-21ksoftirqd/221:44:152
29282994818,5cyclictest33-21ksoftirqd/222:00:202
29282994817,9cyclictest33-21ksoftirqd/222:50:162
29280994818,4cyclictest9-21ksoftirqd/022:20:200
29280994818,4cyclictest9-21ksoftirqd/020:05:340
29280994817,8cyclictest9-21ksoftirqd/023:20:190
29280994817,6cyclictest9-21ksoftirqd/019:45:150
29280994812,11cyclictest9-21ksoftirqd/019:40:010
29280994811,6cyclictest9-21ksoftirqd/021:15:170
29280994811,5cyclictest9-21ksoftirqd/021:35:150
2928299478,6cyclictest33-21ksoftirqd/222:35:142
29282994717,6cyclictest33-21ksoftirqd/220:30:202
29282994717,5cyclictest33-21ksoftirqd/221:30:152
29282994715,4cyclictest33-21ksoftirqd/219:40:242
29282994713,6cyclictest33-21ksoftirqd/222:40:192
2928099472,2cyclictest9-21ksoftirqd/022:55:000
29280994718,4cyclictest9-21ksoftirqd/023:35:130
29280994715,4cyclictest9-21ksoftirqd/020:50:140
29280994713,6cyclictest9-21ksoftirqd/020:30:150
29280994712,7cyclictest9-21ksoftirqd/023:10:140
2928399461,42cyclictest19236-21dump-pmu-power21:05:003
29282994621,7cyclictest33-21ksoftirqd/222:15:012
29282994618,5cyclictest33-21ksoftirqd/222:45:142
29282994618,3cyclictest33-21ksoftirqd/223:00:242
29282994612,5cyclictest33-21ksoftirqd/200:25:002
29282994612,4cyclictest33-21ksoftirqd/200:25:142
2928099462,3cyclictest9-21ksoftirqd/022:30:000
29280994619,4cyclictest9-21ksoftirqd/021:30:170
29280994617,3cyclictest9-21ksoftirqd/020:40:180
29280994613,3cyclictest9-21ksoftirqd/023:25:240
29280994611,4cyclictest9-21ksoftirqd/021:15:010
136991460,0ptp4l401ktimersoftd/320:50:183
29282994521,7cyclictest33-21ksoftirqd/222:15:202
29282994519,3cyclictest33-21ksoftirqd/220:52:452
29282994517,4cyclictest33-21ksoftirqd/223:42:312
29282994517,4cyclictest33-21ksoftirqd/223:25:172
29282994516,4cyclictest33-21ksoftirqd/220:24:372
29282994511,6cyclictest33-21ksoftirqd/219:45:222
2928299448,7cyclictest33-21ksoftirqd/219:35:282
29282994415,4cyclictest33-21ksoftirqd/220:15:142
29282994410,4cyclictest33-21ksoftirqd/222:20:272
2928299440,2cyclictest6132-21sendmail-msp00:00:002
2928099442,2cyclictest9-21ksoftirqd/000:15:260
1371914433,5phc2sys0-21swapper/319:10:003
2928299431,3cyclictest121rcu_preempt23:40:002
2928099436,4cyclictest9-21ksoftirqd/022:45:200
2928299423,11cyclictest33-21ksoftirqd/200:30:192
29282994226,4cyclictest33-21ksoftirqd/220:05:212
29282994219,9cyclictest33-21ksoftirqd/222:05:222
29282994219,9cyclictest33-21ksoftirqd/222:05:222
2928299421,3cyclictest33-21ksoftirqd/200:10:212
2928099424,3cyclictest9-21ksoftirqd/022:35:140
2928299418,5cyclictest33-21ksoftirqd/220:45:162
2928299415,4cyclictest33-21ksoftirqd/220:40:302
2928299413,3cyclictest121rcu_preempt19:25:172
136991410,1ptp4l401ktimersoftd/321:47:373
136991410,0ptp4l401ktimersoftd/320:40:173
29283994017,4cyclictest41-21ksoftirqd/321:30:003
29283994017,16cyclictest41-21ksoftirqd/320:00:203
2928299408,5cyclictest33-21ksoftirqd/220:55:262
2928299400,6cyclictest33-21ksoftirqd/222:25:282
29282993934,3cyclictest33-21ksoftirqd/220:40:002
29283993833,3cyclictest41-21ksoftirqd/300:35:013
29282993832,3cyclictest33-21ksoftirqd/219:25:002
29283993733,3cyclictest41-21ksoftirqd/323:35:173
29283993732,3cyclictest41-21ksoftirqd/322:04:593
29283993632,2cyclictest41-21ksoftirqd/323:25:003
29283993631,3cyclictest41-21ksoftirqd/321:25:013
29283993614,3cyclictest41-21ksoftirqd/319:55:003
2928399360,2cyclictest121rcu_preempt22:40:013
29281993630,4cyclictest25-21ksoftirqd/121:05:211
136991360,0ptp4l401ktimersoftd/321:10:153
29283993530,3cyclictest41-21ksoftirqd/322:20:013
29283993530,3cyclictest41-21ksoftirqd/321:54:593
29283993529,4cyclictest41-21ksoftirqd/321:16:583
29283993529,4cyclictest41-21ksoftirqd/320:21:553
29283993529,3cyclictest41-21ksoftirqd/322:45:183
29283993529,3cyclictest41-21ksoftirqd/300:05:123
29283993528,5cyclictest41-21ksoftirqd/322:11:303
2928399350,2cyclictest0-21swapper/320:30:203
29281993532,2cyclictest25-21ksoftirqd/100:35:011
29281993530,3cyclictest25-21ksoftirqd/120:00:001
29281993529,4cyclictest25-21ksoftirqd/122:23:091
29281993529,4cyclictest25-21ksoftirqd/121:01:251
29281993529,4cyclictest25-21ksoftirqd/120:55:391
29281993529,3cyclictest25-21ksoftirqd/122:40:191
136991350,0ptp4l401ktimersoftd/319:39:103
29283993429,3cyclictest41-21ksoftirqd/321:00:003
29283993429,3cyclictest41-21ksoftirqd/320:25:123
29283993429,3cyclictest41-21ksoftirqd/300:23:063
29283993428,4cyclictest41-21ksoftirqd/323:31:183
29283993428,4cyclictest41-21ksoftirqd/300:19:083
29283993428,3cyclictest41-21ksoftirqd/322:55:143
29283993428,3cyclictest41-21ksoftirqd/322:55:143
29283993421,4cyclictest41-21ksoftirqd/321:59:593
29281993429,3cyclictest25-21ksoftirqd/100:10:001
29281993428,4cyclictest25-21ksoftirqd/122:06:111
29281993428,4cyclictest25-21ksoftirqd/122:06:111
29281993427,5cyclictest25-21ksoftirqd/121:17:281
29283993329,3cyclictest41-21ksoftirqd/320:15:183
29283993329,2cyclictest41-21ksoftirqd/322:54:593
29283993327,4cyclictest41-21ksoftirqd/321:08:403
29283993327,4cyclictest41-21ksoftirqd/319:15:553
29283993326,4cyclictest41-21ksoftirqd/319:48:593
29281993328,3cyclictest25-21ksoftirqd/121:40:001
29281993328,3cyclictest25-21ksoftirqd/120:13:291
29281993327,4cyclictest25-21ksoftirqd/123:54:511
29281993327,4cyclictest25-21ksoftirqd/123:09:301
29281993327,4cyclictest25-21ksoftirqd/100:28:001
29281993327,4cyclictest25-21ksoftirqd/100:00:401
29281993327,4cyclictest25-21ksoftirqd/100:00:401
29281993326,5cyclictest25-21ksoftirqd/100:36:481
29281993326,5cyclictest25-21ksoftirqd/100:36:481
2928399324,3cyclictest41-21ksoftirqd/319:55:163
29283993228,3cyclictest41-21ksoftirqd/323:15:013
29283993228,3cyclictest41-21ksoftirqd/322:25:213
29283993228,3cyclictest41-21ksoftirqd/300:10:173
29283993227,3cyclictest41-21ksoftirqd/323:25:193
29283993227,3cyclictest41-21ksoftirqd/321:39:313
29283993227,3cyclictest41-21ksoftirqd/320:35:213
29283993227,3cyclictest41-21ksoftirqd/319:23:393
29283993225,5cyclictest41-21ksoftirqd/320:46:343
2928399322,2cyclictest121rcu_preempt00:40:013
2928399322,2cyclictest121rcu_preempt00:40:013
2928399321,5cyclictest121rcu_preempt22:20:233
29281993229,2cyclictest25-21ksoftirqd/123:29:591
29281993228,3cyclictest25-21ksoftirqd/119:45:141
29281993227,3cyclictest25-21ksoftirqd/122:18:261
29281993226,4cyclictest7287-21cron22:54:591
29281993226,4cyclictest25-21ksoftirqd/123:20:371
29281993226,4cyclictest25-21ksoftirqd/122:59:061
29281993226,4cyclictest25-21ksoftirqd/122:59:061
29281993226,4cyclictest25-21ksoftirqd/122:26:101
29281993226,4cyclictest25-21ksoftirqd/121:58:531
29281993226,4cyclictest25-21ksoftirqd/121:41:201
29281993226,4cyclictest25-21ksoftirqd/120:23:411
29281993226,4cyclictest25-21ksoftirqd/120:01:231
29281993226,4cyclictest25-21ksoftirqd/119:36:121
29281993226,4cyclictest25-21ksoftirqd/100:22:111
29281993226,3cyclictest25-21ksoftirqd/119:31:051
29283993126,3cyclictest41-21ksoftirqd/323:03:043
29283993126,3cyclictest41-21ksoftirqd/300:00:003
29283993125,4cyclictest41-21ksoftirqd/323:51:493
29283993125,4cyclictest41-21ksoftirqd/323:05:033
29283993125,4cyclictest41-21ksoftirqd/320:06:463
29283993116,4cyclictest41-21ksoftirqd/300:25:173
29281993126,3cyclictest25-21ksoftirqd/119:25:001
29281993125,4cyclictest25-21ksoftirqd/123:33:321
29281993125,4cyclictest25-21ksoftirqd/123:02:391
29281993125,4cyclictest25-21ksoftirqd/120:37:541
29281993125,4cyclictest25-21ksoftirqd/100:15:451
29283993026,2cyclictest41-21ksoftirqd/322:10:003
29283993026,2cyclictest41-21ksoftirqd/322:10:003
29283993025,3cyclictest41-21ksoftirqd/323:46:273
29283993024,4cyclictest41-21ksoftirqd/321:30:433
29281993027,2cyclictest25-21ksoftirqd/120:30:001
29281993025,3cyclictest25-21ksoftirqd/122:30:421
29281993025,3cyclictest25-21ksoftirqd/121:10:211
29281993025,3cyclictest25-21ksoftirqd/100:14:071
29281993024,4cyclictest25-21ksoftirqd/123:15:141
29281993024,4cyclictest25-21ksoftirqd/119:28:211
29283992923,4cyclictest41-21ksoftirqd/319:33:173
2928399292,2cyclictest121rcu_preempt22:30:163
29281992924,3cyclictest25-21ksoftirqd/122:49:591
29281992924,3cyclictest25-21ksoftirqd/122:35:211
29281992924,3cyclictest25-21ksoftirqd/121:50:201
29281992924,3cyclictest25-21ksoftirqd/121:47:291
29281992924,3cyclictest25-21ksoftirqd/120:31:351
29281992924,3cyclictest25-21ksoftirqd/119:43:061
29281992923,4cyclictest25-21ksoftirqd/119:54:491
2928399280,2cyclictest121rcu_preempt22:40:143
29281992823,3cyclictest25-21ksoftirqd/122:02:181
29281992823,3cyclictest25-21ksoftirqd/119:19:591
29281992822,4cyclictest25-21ksoftirqd/120:17:191
29283992722,3cyclictest41-21ksoftirqd/319:42:003
29281992722,3cyclictest25-21ksoftirqd/122:10:171
29281992722,3cyclictest25-21ksoftirqd/121:25:211
29281992715,9cyclictest25-21ksoftirqd/123:45:111
29281992622,3cyclictest25-21ksoftirqd/120:45:221
29281992621,3cyclictest25-21ksoftirqd/123:56:471
29281992621,3cyclictest25-21ksoftirqd/121:30:401
29281992621,2cyclictest25-21ksoftirqd/120:05:531
29281992620,4cyclictest25-21ksoftirqd/121:22:311
29281992420,2cyclictest25-21ksoftirqd/120:50:211
29281992217,3cyclictest25-21ksoftirqd/123:35:171
29281992116,3cyclictest25-21ksoftirqd/120:45:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional