You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-05 - 08:41
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Fri Dec 05, 2025 00:45:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
109922209162,35sleep00-21swapper/019:07:590
90122203169,23sleep10-21swapper/119:05:061
90152202168,22sleep30-21swapper/319:05:083
109942202168,23sleep20-21swapper/219:08:012
1764721170,4sleep21144399cyclictest19:20:232
11441996432,3cyclictest9-21ksoftirqd/020:20:000
11442996228,9cyclictest25-21ksoftirqd/122:15:011
11442996228,10cyclictest25-21ksoftirqd/122:30:231
263992600,3sleep31144499cyclictest00:10:053
263992600,3sleep31144499cyclictest00:10:053
11442996028,8cyclictest25-21ksoftirqd/119:25:001
11442996023,8cyclictest25-21ksoftirqd/122:20:011
11442996022,8cyclictest25-21ksoftirqd/121:50:001
11442995924,8cyclictest25-21ksoftirqd/100:39:591
11442995917,8cyclictest25-21ksoftirqd/122:45:161
11442995825,9cyclictest25-21ksoftirqd/123:50:011
11442995823,7cyclictest25-21ksoftirqd/120:15:181
11442995726,10cyclictest25-21ksoftirqd/121:50:131
11442995724,4cyclictest25-21ksoftirqd/100:25:241
11442995721,10cyclictest25-21ksoftirqd/121:15:151
11442995719,8cyclictest25-21ksoftirqd/119:35:141
11442995716,9cyclictest25-21ksoftirqd/123:10:261
11442995715,9cyclictest25-21ksoftirqd/123:05:171
11441995625,4cyclictest9-21ksoftirqd/023:25:270
11444995520,4cyclictest41-21ksoftirqd/323:00:233
11442995515,8cyclictest25-21ksoftirqd/100:20:211
11441995521,4cyclictest9-21ksoftirqd/020:55:020
11442995422,6cyclictest25-21ksoftirqd/120:30:311
11442995421,8cyclictest25-21ksoftirqd/121:40:141
11441995424,4cyclictest9-21ksoftirqd/023:20:270
11441995423,3cyclictest9-21ksoftirqd/021:45:000
11441995418,7cyclictest9-21ksoftirqd/021:55:010
1144499530,9cyclictest13216-21hddtemp_smartct22:35:183
11442995321,9cyclictest25-21ksoftirqd/123:15:131
11442995315,9cyclictest25-21ksoftirqd/120:35:181
203152520,4sleep220320-21fschecks_time22:50:172
136991520,1ptp4l391rcuc/321:40:403
11444995221,7cyclictest41-21ksoftirqd/323:29:313
11444995220,8cyclictest41-21ksoftirqd/300:27:073
1144299526,3cyclictest25-21ksoftirqd/119:10:241
11442995219,10cyclictest25-21ksoftirqd/100:10:021
11442995219,10cyclictest25-21ksoftirqd/100:10:021
11442995216,7cyclictest25-21ksoftirqd/122:05:271
11442995215,9cyclictest25-21ksoftirqd/119:25:161
11441995222,4cyclictest9-21ksoftirqd/023:00:200
11441995221,4cyclictest9-21ksoftirqd/023:10:000
11441995220,3cyclictest9-21ksoftirqd/023:10:300
11441995217,4cyclictest9-21ksoftirqd/000:00:000
11444995121,3cyclictest41-21ksoftirqd/319:24:163
11442995117,9cyclictest25-21ksoftirqd/123:40:001
11442995117,9cyclictest25-21ksoftirqd/123:40:001
11441995121,4cyclictest9-21ksoftirqd/022:10:210
1144299506,7cyclictest25-21ksoftirqd/100:10:001
11442995021,10cyclictest25-21ksoftirqd/122:35:151
11442995019,9cyclictest25-21ksoftirqd/100:30:541
11442995019,4cyclictest25-21ksoftirqd/123:25:221
11442995013,10cyclictest25-21ksoftirqd/121:30:201
11441995022,4cyclictest9-21ksoftirqd/021:10:270
11441995022,3cyclictest9-21ksoftirqd/000:25:340
11441995021,4cyclictest9-21ksoftirqd/020:05:280
11441995020,4cyclictest9-21ksoftirqd/021:55:270
1144299492,8cyclictest25-21ksoftirqd/100:00:001
11442994919,10cyclictest25-21ksoftirqd/100:00:261
11442994917,8cyclictest25-21ksoftirqd/121:00:251
11442994915,8cyclictest25-21ksoftirqd/123:30:151
11442994915,10cyclictest25-21ksoftirqd/120:25:211
11442994911,6cyclictest25-21ksoftirqd/119:45:191
11441994920,4cyclictest9-21ksoftirqd/019:20:200
11441994920,3cyclictest9-21ksoftirqd/023:40:140
11441994920,3cyclictest9-21ksoftirqd/023:40:140
11441994919,4cyclictest9-21ksoftirqd/022:55:160
11441994919,4cyclictest9-21ksoftirqd/021:15:230
11441994919,4cyclictest9-21ksoftirqd/020:30:260
11441994919,3cyclictest9-21ksoftirqd/022:40:000
11441994919,3cyclictest9-21ksoftirqd/021:10:000
11441994917,4cyclictest9-21ksoftirqd/020:25:140
1144499487,4cyclictest41-21ksoftirqd/300:36:193
1144499483,7cyclictest30964-21cstates22:05:163
1144299487,2cyclictest25-21ksoftirqd/122:40:291
1144299485,2cyclictest10290-21idleruntime-cro20:15:001
11442994821,11cyclictest25-21ksoftirqd/122:25:251
11442994817,4cyclictest25-21ksoftirqd/121:27:311
11441994821,4cyclictest9-21ksoftirqd/000:10:010
11441994821,4cyclictest9-21ksoftirqd/000:10:010
11441994820,3cyclictest9-21ksoftirqd/023:15:150
11441994816,4cyclictest9-21ksoftirqd/020:40:000
11441994815,4cyclictest9-21ksoftirqd/022:30:290
11441994815,4cyclictest9-21ksoftirqd/000:15:140
1144499478,4cyclictest41-21ksoftirqd/319:12:093
1144299476,2cyclictest25-21ksoftirqd/121:05:291
11442994736,2cyclictest25-21ksoftirqd/122:00:151
11442994719,4cyclictest25-21ksoftirqd/119:40:111
1144299470,10cyclictest25-21ksoftirqd/121:55:181
11441994719,4cyclictest9-21ksoftirqd/020:20:210
11441994719,3cyclictest9-21ksoftirqd/023:50:230
11441994719,3cyclictest9-21ksoftirqd/021:45:170
11441994716,4cyclictest9-21ksoftirqd/020:10:150
1144399462,42cyclictest28567-21grep00:14:592
1144399462,42cyclictest28567-21grep00:14:592
11442994625,10cyclictest25-21ksoftirqd/120:55:181
11442994613,9cyclictest25-21ksoftirqd/120:45:001
11442994613,10cyclictest25-21ksoftirqd/120:45:231
1144299461,2cyclictest121rcu_preempt23:40:001
1144299461,12cyclictest25-21ksoftirqd/119:30:201
11442994610,9cyclictest25-21ksoftirqd/123:24:551
1144199462,7cyclictest9-21ksoftirqd/022:45:150
1144199461,7cyclictest9-21ksoftirqd/021:30:310
11441994617,4cyclictest9-21ksoftirqd/022:25:270
11441994617,4cyclictest9-21ksoftirqd/000:20:200
11441994614,5cyclictest9-21ksoftirqd/000:09:590
11444994517,6cyclictest41-21ksoftirqd/319:50:083
1144299456,2cyclictest25-21ksoftirqd/120:05:281
1144299454,8cyclictest25-21ksoftirqd/121:35:241
1144299452,2cyclictest121rcu_preempt22:20:271
1144299451,9cyclictest25-21ksoftirqd/120:55:011
11442994513,9cyclictest25-21ksoftirqd/122:55:141
11442994512,8cyclictest25-21ksoftirqd/100:17:041
11442994511,7cyclictest25-21ksoftirqd/123:53:401
1144199452,2cyclictest121rcu_preempt00:05:000
11441994518,4cyclictest9-21ksoftirqd/022:00:240
11441994516,4cyclictest9-21ksoftirqd/022:40:200
11441994515,4cyclictest9-21ksoftirqd/000:35:260
11443994437,4cyclictest19590-21cron22:50:002
1144299443,8cyclictest25-21ksoftirqd/120:20:271
1144299443,7cyclictest25-21ksoftirqd/121:20:191
1144299442,9cyclictest25-21ksoftirqd/123:05:001
1144299441,2cyclictest121rcu_preempt22:50:281
1144299440,2cyclictest121rcu_preempt21:10:161
1144199445,6cyclictest9-21ksoftirqd/021:25:230
1144199444,3cyclictest15854-21sshd23:47:420
11441994434,3cyclictest9-21ksoftirqd/022:15:230
1144199442,3cyclictest121rcu_preempt19:45:000
11441994420,6cyclictest9-21ksoftirqd/022:50:280
11441994416,4cyclictest9-21ksoftirqd/020:45:240
11441994416,3cyclictest9-21ksoftirqd/019:35:150
11441994414,4cyclictest9-21ksoftirqd/021:35:120
11441994412,4cyclictest9-21ksoftirqd/019:50:010
11444994335,5cyclictest19588-21cron22:50:003
11443994339,2cyclictest33-21ksoftirqd/200:00:002
11442994329,5cyclictest25-21ksoftirqd/119:15:231
1144299431,3cyclictest121rcu_preempt19:55:251
11441994317,3cyclictest9-21ksoftirqd/021:00:320
11441994315,4cyclictest9-21ksoftirqd/019:10:170
11441994315,3cyclictest9-21ksoftirqd/019:15:240
11441994312,3cyclictest9-21ksoftirqd/020:55:200
11441994311,4cyclictest9-21ksoftirqd/019:30:230
136991420,0ptp4l401ktimersoftd/323:21:483
136991420,0ptp4l401ktimersoftd/321:35:123
136991420,0ptp4l401ktimersoftd/300:30:553
11444994220,7cyclictest41-21ksoftirqd/320:03:283
1144299420,2cyclictest121rcu_preempt20:00:001
136991410,0ptp4l401ktimersoftd/322:00:133
11443994129,10cyclictest33-21ksoftirqd/223:10:182
1144299410,2cyclictest121rcu_preempt19:50:131
11441994136,2cyclictest11089-21wc23:40:000
11441994112,4cyclictest9-21ksoftirqd/023:30:280
11441994110,4cyclictest9-21ksoftirqd/022:05:210
1144499400,4cyclictest0-21swapper/323:12:133
11441994012,4cyclictest9-21ksoftirqd/019:50:140
1144199399,4cyclictest9-21ksoftirqd/021:20:190
1144199386,3cyclictest9-21ksoftirqd/000:30:550
11441993833,3cyclictest9-21ksoftirqd/020:45:010
11441993833,3cyclictest9-21ksoftirqd/019:30:000
1144499373,8cyclictest41-21ksoftirqd/320:37:023
1144499373,7cyclictest41-21ksoftirqd/320:50:273
11444993713,3cyclictest41-21ksoftirqd/320:56:103
11443993732,3cyclictest33-21ksoftirqd/219:15:002
11443993731,4cyclictest33-21ksoftirqd/223:35:282
11443993722,12cyclictest33-21ksoftirqd/223:50:002
11441993732,2cyclictest9-21ksoftirqd/020:00:000
1144499364,6cyclictest41-21ksoftirqd/322:10:253
1144499364,6cyclictest41-21ksoftirqd/321:05:213
11443993631,3cyclictest33-21ksoftirqd/223:25:422
11443993631,3cyclictest33-21ksoftirqd/222:35:352
11443993631,3cyclictest33-21ksoftirqd/222:18:272
11443993630,4cyclictest33-21ksoftirqd/223:09:502
11443993630,4cyclictest33-21ksoftirqd/222:31:152
11443993630,4cyclictest33-21ksoftirqd/220:00:032
1144199368,3cyclictest9-21ksoftirqd/020:00:160
11441993632,2cyclictest9-21ksoftirqd/022:25:010
1144499353,5cyclictest41-21ksoftirqd/320:45:283
11444993529,4cyclictest41-21ksoftirqd/321:33:113
11444993529,4cyclictest41-21ksoftirqd/320:09:513
11444993529,4cyclictest41-21ksoftirqd/319:26:113
11444993529,3cyclictest41-21ksoftirqd/323:56:063
1144499352,5cyclictest0-21swapper/300:00:533
11444993518,7cyclictest41-21ksoftirqd/323:31:253
1144499350,5cyclictest0-21swapper/322:50:163
11443993532,2cyclictest33-21ksoftirqd/223:00:162
11443993530,3cyclictest33-21ksoftirqd/223:30:432
11443993530,3cyclictest33-21ksoftirqd/221:05:162
11443993529,4cyclictest33-21ksoftirqd/222:09:092
11443993529,4cyclictest33-21ksoftirqd/221:00:412
11443993528,4cyclictest33-21ksoftirqd/222:01:102
1144499347,5cyclictest41-21ksoftirqd/320:21:033
1144499344,8cyclictest41-21ksoftirqd/321:22:253
1144499344,8cyclictest41-21ksoftirqd/319:41:073
1144499344,7cyclictest41-21ksoftirqd/321:00:263
11444993428,4cyclictest41-21ksoftirqd/322:55:073
11444993428,4cyclictest41-21ksoftirqd/321:53:413
1144499342,7cyclictest41-21ksoftirqd/320:40:183
1144499340,5cyclictest0-21swapper/319:33:253
11443993430,2cyclictest33-21ksoftirqd/223:40:212
11443993430,2cyclictest33-21ksoftirqd/223:40:212
11443993430,2cyclictest33-21ksoftirqd/221:20:002
11443993429,3cyclictest33-21ksoftirqd/200:20:012
11443993428,4cyclictest33-21ksoftirqd/223:23:062
11443993428,4cyclictest33-21ksoftirqd/221:36:232
11443993428,4cyclictest33-21ksoftirqd/220:22:582
11443993428,4cyclictest33-21ksoftirqd/219:17:262
1144499339,3cyclictest41-21ksoftirqd/322:15:263
11444993328,3cyclictest41-21ksoftirqd/322:40:353
11444993327,4cyclictest41-21ksoftirqd/323:48:273
1144499332,6cyclictest41-21ksoftirqd/300:05:173
11444993314,7cyclictest41-21ksoftirqd/319:48:203
11443993329,2cyclictest33-21ksoftirqd/220:35:102
11443993328,3cyclictest33-21ksoftirqd/223:50:472
11443993328,3cyclictest33-21ksoftirqd/220:05:212
11443993327,4cyclictest33-21ksoftirqd/219:56:552
11443993327,3cyclictest33-21ksoftirqd/222:10:152
11443993327,3cyclictest33-21ksoftirqd/220:10:062
11444993227,3cyclictest41-21ksoftirqd/323:36:353
11444993227,3cyclictest41-21ksoftirqd/320:10:253
11444993226,4cyclictest41-21ksoftirqd/323:17:133
11444993226,4cyclictest41-21ksoftirqd/323:05:583
11444993226,4cyclictest41-21ksoftirqd/321:12:373
11444993226,4cyclictest41-21ksoftirqd/319:36:103
11443993227,3cyclictest33-21ksoftirqd/222:25:332
11443993227,3cyclictest33-21ksoftirqd/220:45:212
11443993227,3cyclictest33-21ksoftirqd/220:25:142
11443993227,3cyclictest33-21ksoftirqd/219:35:192
11443993227,3cyclictest33-21ksoftirqd/219:30:002
11443993226,4cyclictest33-21ksoftirqd/222:55:592
11443993226,4cyclictest33-21ksoftirqd/221:52:482
11443993226,4cyclictest33-21ksoftirqd/221:46:582
11443993226,4cyclictest33-21ksoftirqd/219:45:472
11443993226,4cyclictest33-21ksoftirqd/200:22:242
11443993226,4cyclictest33-21ksoftirqd/200:06:422
11443993226,4cyclictest33-21ksoftirqd/200:03:502
11443993225,5cyclictest33-21ksoftirqd/200:34:032
11444993115,6cyclictest41-21ksoftirqd/320:33:003
11443993126,3cyclictest33-21ksoftirqd/200:25:092
11443993125,4cyclictest33-21ksoftirqd/221:30:572
11443993125,4cyclictest33-21ksoftirqd/221:10:352
11443993125,4cyclictest33-21ksoftirqd/220:55:442
11443993125,4cyclictest33-21ksoftirqd/219:51:522
136991300,0ptp4l401ktimersoftd/300:18:223
11444993026,3cyclictest41-21ksoftirqd/323:50:263
11444993025,3cyclictest41-21ksoftirqd/320:25:293
11444993011,7cyclictest41-21ksoftirqd/322:20:233
1144499300,5cyclictest401ktimersoftd/321:45:233
11443993024,4cyclictest33-21ksoftirqd/223:16:082
11443993024,4cyclictest33-21ksoftirqd/219:34:392
11443993023,4cyclictest33-21ksoftirqd/221:21:432
136991290,0ptp4l401ktimersoftd/319:58:353
11444992925,3cyclictest41-21ksoftirqd/321:55:183
11444992925,2cyclictest41-21ksoftirqd/323:40:143
11444992925,2cyclictest41-21ksoftirqd/323:40:143
11444992924,3cyclictest41-21ksoftirqd/319:15:193
11444992923,4cyclictest41-21ksoftirqd/322:26:593
11444992923,4cyclictest41-21ksoftirqd/321:26:423
11443992925,3cyclictest33-21ksoftirqd/222:40:212
11443992924,3cyclictest33-21ksoftirqd/222:20:192
11443992923,3cyclictest33-21ksoftirqd/220:42:132
11443992918,9cyclictest33-21ksoftirqd/219:40:242
1144499285,5cyclictest41-21ksoftirqd/321:15:193
1144499282,5cyclictest41-21ksoftirqd/300:20:193
11444992824,2cyclictest41-21ksoftirqd/320:15:193
11444992814,4cyclictest41-21ksoftirqd/322:32:263
11443992823,3cyclictest33-21ksoftirqd/220:50:142
11443992822,4cyclictest33-21ksoftirqd/221:42:572
11443992822,4cyclictest33-21ksoftirqd/221:27:402
11443992723,3cyclictest33-21ksoftirqd/220:15:192
11443992620,4cyclictest33-21ksoftirqd/200:35:352
11443992519,4cyclictest33-21ksoftirqd/221:55:082
11443992419,3cyclictest33-21ksoftirqd/220:31:422
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional