You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-22 - 11:42
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot2.osadl.org (updated Sat Nov 22, 2025 00:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
22032208173,24sleep20-21swapper/219:08:492
20882206173,22sleep10-21swapper/119:07:181
136691205171,23phc2sys0-21swapper/319:05:373
20872204170,23sleep00-21swapper/019:07:180
136262590,1sleep30-21swapper/322:55:143
136591570,1ptp4l401ktimersoftd/322:37:453
136591560,1ptp4l401ktimersoftd/322:20:263
136591560,1ptp4l401ktimersoftd/300:20:243
136591520,1ptp4l391rcuc/323:52:033
93352510,3sleep29331-21run-parts21:39:592
284962500,3sleep128501-21irqrtprio23:25:211
175042490,1sleep30-21swapper/321:55:213
263699489,37cyclictest22174-21kworker/2:121:05:242
136591470,1ptp4l401ktimersoftd/320:57:533
2636994336,4cyclictest20005-21cron20:55:002
136591430,0ptp4l401ktimersoftd/320:36:083
136591420,0ptp4l401ktimersoftd/322:12:403
136591410,0ptp4l401ktimersoftd/320:31:303
136591400,1ptp4l401ktimersoftd/323:46:523
136591400,1ptp4l401ktimersoftd/322:25:243
136591400,0ptp4l401ktimersoftd/322:51:503
263699392,36cyclictest18690-21kworker/2:222:41:452
263699387,29cyclictest1212-21kworker/2:119:35:152
263699372,34cyclictest1212-21kworker/2:119:15:252
263699372,34cyclictest1212-21kworker/2:119:15:252
2636993629,4cyclictest33-21ksoftirqd/222:38:532
136591360,0ptp4l401ktimersoftd/320:50:183
2636993512,20cyclictest28188-21tune2fs23:25:182
2637993428,4cyclictest41-21ksoftirqd/321:09:563
2637993428,4cyclictest41-21ksoftirqd/319:59:553
263699344,29cyclictest22174-21kworker/2:121:54:462
263699344,29cyclictest22174-21kworker/2:121:54:452
2636993427,5cyclictest33-21ksoftirqd/223:52:462
2636993427,4cyclictest33-21ksoftirqd/200:05:012
2635993429,3cyclictest25-21ksoftirqd/122:45:001
2634993428,4cyclictest9-21ksoftirqd/023:50:390
2634993428,4cyclictest9-21ksoftirqd/021:14:340
2634993428,4cyclictest9-21ksoftirqd/019:12:230
136591340,0ptp4l401ktimersoftd/300:31:513
2637993327,4cyclictest41-21ksoftirqd/320:04:493
263699333,28cyclictest22174-21kworker/2:121:40:132
2636993327,4cyclictest33-21ksoftirqd/222:23:202
2636993313,17cyclictest3937-21timedrift21:25:282
2635993328,3cyclictest25-21ksoftirqd/122:15:191
2634993327,4cyclictest9-21ksoftirqd/022:46:010
2634993327,4cyclictest9-21ksoftirqd/022:28:230
2634993327,4cyclictest9-21ksoftirqd/021:28:230
2634993327,4cyclictest9-21ksoftirqd/019:44:000
2634993326,5cyclictest9-21ksoftirqd/021:51:340
2634993326,5cyclictest9-21ksoftirqd/021:51:330
2637993227,3cyclictest41-21ksoftirqd/321:00:153
2637993226,4cyclictest41-21ksoftirqd/321:23:513
2637993226,4cyclictest41-21ksoftirqd/300:08:243
2637993226,3cyclictest41-21ksoftirqd/323:00:203
2637993226,3cyclictest41-21ksoftirqd/322:15:143
263699328,3cyclictest19851-21sed22:00:212
2636993227,3cyclictest33-21ksoftirqd/219:56:152
2636993226,4cyclictest33-21ksoftirqd/220:48:492
2636993225,4cyclictest33-21ksoftirqd/221:59:382
2636993220,3cyclictest33-21ksoftirqd/221:32:412
2636993214,16cyclictest12287-21tr19:30:142
2636993212,18cyclictest22886-21ls23:15:132
2635993227,3cyclictest25-21ksoftirqd/121:00:191
2635993227,3cyclictest25-21ksoftirqd/120:40:011
2635993227,3cyclictest25-21ksoftirqd/119:35:011
2635993226,4cyclictest25-21ksoftirqd/122:13:531
2635993226,4cyclictest25-21ksoftirqd/121:10:061
2635993226,4cyclictest25-21ksoftirqd/100:36:101
2634993227,3cyclictest9-21ksoftirqd/023:10:240
2634993227,3cyclictest9-21ksoftirqd/022:20:000
2634993227,3cyclictest9-21ksoftirqd/022:10:180
2634993227,3cyclictest9-21ksoftirqd/019:25:160
2634993226,4cyclictest9-21ksoftirqd/023:47:550
2634993226,4cyclictest9-21ksoftirqd/023:22:190
2634993226,4cyclictest9-21ksoftirqd/023:09:400
2634993226,4cyclictest9-21ksoftirqd/021:18:110
2634993226,4cyclictest9-21ksoftirqd/021:07:480
2634993226,4cyclictest9-21ksoftirqd/020:00:130
2634993226,4cyclictest9-21ksoftirqd/019:54:110
2634993225,4cyclictest9-21ksoftirqd/022:22:020
2637993126,3cyclictest41-21ksoftirqd/323:45:003
2637993125,3cyclictest41-21ksoftirqd/323:30:193
2636993126,3cyclictest33-21ksoftirqd/223:35:472
2636993125,4cyclictest33-21ksoftirqd/222:27:012
2636993125,4cyclictest33-21ksoftirqd/222:18:102
2636993125,4cyclictest33-21ksoftirqd/221:19:332
2636993125,4cyclictest33-21ksoftirqd/221:01:402
2636993125,4cyclictest33-21ksoftirqd/220:55:032
2636993125,4cyclictest33-21ksoftirqd/220:27:182
2636993124,4cyclictest33-21ksoftirqd/222:49:582
263699312,28cyclictest9438-21kworker/2:200:14:572
2636993110,19cyclictest11328-21ls23:55:222
2635993126,3cyclictest25-21ksoftirqd/123:25:001
2635993126,3cyclictest25-21ksoftirqd/122:05:181
2635993126,3cyclictest25-21ksoftirqd/122:05:001
2635993126,3cyclictest25-21ksoftirqd/121:50:011
2635993126,3cyclictest25-21ksoftirqd/121:15:211
2635993126,3cyclictest25-21ksoftirqd/120:10:011
2635993126,3cyclictest25-21ksoftirqd/119:51:051
2635993126,3cyclictest25-21ksoftirqd/100:35:001
2635993125,4cyclictest25-21ksoftirqd/120:42:261
2635993125,4cyclictest25-21ksoftirqd/119:13:351
2635993125,4cyclictest25-21ksoftirqd/100:04:001
2635993125,3cyclictest25-21ksoftirqd/100:30:001
2634993126,3cyclictest9-21ksoftirqd/023:05:000
2634993126,3cyclictest9-21ksoftirqd/020:49:240
2634993126,3cyclictest9-21ksoftirqd/020:10:120
2634993126,3cyclictest9-21ksoftirqd/020:10:110
2634993126,3cyclictest9-21ksoftirqd/019:25:010
2634993125,4cyclictest9-21ksoftirqd/021:45:350
2634993125,4cyclictest9-21ksoftirqd/021:39:050
2634993125,4cyclictest9-21ksoftirqd/020:19:390
2634993125,4cyclictest9-21ksoftirqd/019:37:530
2634993125,4cyclictest9-21ksoftirqd/019:19:250
2634993125,4cyclictest9-21ksoftirqd/019:19:250
2634993125,3cyclictest9-21ksoftirqd/023:40:370
2634993124,5cyclictest9-21ksoftirqd/023:59:340
136591310,0ptp4l401ktimersoftd/319:43:473
2637993025,3cyclictest41-21ksoftirqd/320:15:103
2637993025,3cyclictest41-21ksoftirqd/300:11:533
2637993024,4cyclictest41-21ksoftirqd/322:30:473
2637993024,4cyclictest41-21ksoftirqd/322:01:103
2637993024,4cyclictest41-21ksoftirqd/321:39:053
2637993024,4cyclictest41-21ksoftirqd/319:32:243
263699309,3cyclictest22474-21sed22:05:202
263699308,3cyclictest31597-21date23:30:252
263699308,3cyclictest20040-21grep00:15:172
2636993026,3cyclictest33-21ksoftirqd/220:09:542
2636993025,3cyclictest33-21ksoftirqd/221:45:412
2636993025,3cyclictest33-21ksoftirqd/200:37:452
2636993024,4cyclictest33-21ksoftirqd/223:46:562
2636993024,4cyclictest33-21ksoftirqd/222:57:142
2636993024,4cyclictest33-21ksoftirqd/219:54:212
263699302,27cyclictest28511-21kworker/2:220:21:412
263699302,17cyclictest18690-21kworker/2:222:50:212
263699301,28cyclictest28511-21kworker/2:220:32:002
263699301,28cyclictest1212-21kworker/2:119:29:562
2635993026,3cyclictest25-21ksoftirqd/121:55:001
2635993026,3cyclictest25-21ksoftirqd/121:55:001
2635993026,3cyclictest25-21ksoftirqd/121:35:211
2635993025,3cyclictest25-21ksoftirqd/122:30:181
2635993025,3cyclictest25-21ksoftirqd/122:25:211
2635993025,3cyclictest25-21ksoftirqd/120:35:011
2635993025,3cyclictest25-21ksoftirqd/119:45:181
2635993025,2cyclictest25-21ksoftirqd/121:55:211
2635993024,4cyclictest25-21ksoftirqd/119:26:081
2635993024,4cyclictest25-21ksoftirqd/100:11:021
2635993024,3cyclictest25-21ksoftirqd/123:50:011
2635993024,3cyclictest25-21ksoftirqd/120:55:211
2634993025,3cyclictest9-21ksoftirqd/023:35:190
2634993025,3cyclictest9-21ksoftirqd/023:30:000
2634993025,3cyclictest9-21ksoftirqd/020:20:170
2634993025,3cyclictest9-21ksoftirqd/000:35:210
2634993024,4cyclictest9-21ksoftirqd/021:32:120
136591300,1ptp4l391rcuc/319:48:273
136591300,0ptp4l401ktimersoftd/323:35:183
136591300,0ptp4l401ktimersoftd/323:25:043
136591300,0ptp4l401ktimersoftd/319:39:363
118562300,2sleep10-21swapper/121:45:011
2637992925,2cyclictest41-21ksoftirqd/323:15:183
2637992924,3cyclictest41-21ksoftirqd/323:55:403
2637992924,3cyclictest41-21ksoftirqd/323:15:003
2637992924,3cyclictest41-21ksoftirqd/321:42:273
2637992924,3cyclictest41-21ksoftirqd/320:44:343
2637992924,3cyclictest41-21ksoftirqd/300:36:573
2637992924,3cyclictest41-21ksoftirqd/300:01:153
2637992923,4cyclictest41-21ksoftirqd/321:18:303
2637992923,4cyclictest41-21ksoftirqd/319:27:183
2637992922,4cyclictest41-21ksoftirqd/300:15:593
263699298,4cyclictest1736-21unixbench_singl21:20:292
263699293,25cyclictest28511-21kworker/2:220:41:402
2636992924,3cyclictest33-21ksoftirqd/200:33:442
2636992924,3cyclictest33-21ksoftirqd/200:21:132
2636992923,4cyclictest33-21ksoftirqd/223:40:552
263699291,27cyclictest28511-21kworker/2:220:15:092
2636992911,16cyclictest10751-21/usr/sbin/munin20:35:262
2635992925,2cyclictest25-21ksoftirqd/120:10:231
2635992925,2cyclictest25-21ksoftirqd/120:10:221
2635992924,3cyclictest25-21ksoftirqd/123:50:171
2635992924,3cyclictest25-21ksoftirqd/123:35:001
2635992924,3cyclictest25-21ksoftirqd/123:10:181
2635992924,3cyclictest25-21ksoftirqd/123:09:081
2635992924,3cyclictest25-21ksoftirqd/122:45:171
2635992924,3cyclictest25-21ksoftirqd/122:35:151
2635992924,3cyclictest25-21ksoftirqd/120:26:061
2635992924,3cyclictest25-21ksoftirqd/120:00:001
2635992924,3cyclictest25-21ksoftirqd/100:22:351
2635992924,3cyclictest25-21ksoftirqd/100:05:191
2635992923,4cyclictest25-21ksoftirqd/123:00:061
2635992923,4cyclictest25-21ksoftirqd/121:33:561
2635992923,4cyclictest25-21ksoftirqd/121:09:301
2635992923,4cyclictest25-21ksoftirqd/119:39:041
2635992923,4cyclictest25-21ksoftirqd/100:16:531
2635992923,3cyclictest25-21ksoftirqd/120:05:011
2634992925,2cyclictest9-21ksoftirqd/020:09:590
2634992924,3cyclictest9-21ksoftirqd/020:35:200
2634992924,3cyclictest9-21ksoftirqd/020:30:180
2634992924,3cyclictest9-21ksoftirqd/000:10:130
2634992923,4cyclictest9-21ksoftirqd/022:34:290
2634992923,4cyclictest9-21ksoftirqd/021:22:570
2634992923,4cyclictest9-21ksoftirqd/020:57:500
2634992923,4cyclictest9-21ksoftirqd/000:24:010
263499291,3cyclictest121rcu_preempt00:00:210
136591290,0ptp4l401ktimersoftd/322:08:033
136591290,0ptp4l401ktimersoftd/320:25:033
136591290,0ptp4l401ktimersoftd/320:20:443
136591290,0ptp4l401ktimersoftd/319:50:193
136591290,0ptp4l401ktimersoftd/319:11:183
2637992824,2cyclictest41-21ksoftirqd/319:15:203
2637992824,2cyclictest41-21ksoftirqd/319:15:193
2637992823,3cyclictest41-21ksoftirqd/322:40:193
2637992822,4cyclictest41-21ksoftirqd/321:50:433
2637992822,4cyclictest41-21ksoftirqd/321:50:433
2637992822,4cyclictest41-21ksoftirqd/320:11:233
2637992822,4cyclictest41-21ksoftirqd/320:11:223
263699285,21cyclictest18690-21kworker/2:222:10:052
2636992823,3cyclictest33-21ksoftirqd/219:44:482
263699282,25cyclictest18690-21kworker/2:222:32:222
2636992822,4cyclictest33-21ksoftirqd/221:12:392
2636992822,4cyclictest33-21ksoftirqd/219:10:282
2636992822,3cyclictest33-21ksoftirqd/220:10:352
2636992822,3cyclictest33-21ksoftirqd/220:10:342
263699281,7cyclictest7790-21snmpd19:20:142
2635992824,3cyclictest25-21ksoftirqd/119:20:001
2635992824,3cyclictest25-21ksoftirqd/119:20:001
2635992824,2cyclictest25-21ksoftirqd/123:35:191
2635992823,3cyclictest25-21ksoftirqd/121:20:191
2635992822,4cyclictest25-21ksoftirqd/122:23:081
2635992821,4cyclictest25-21ksoftirqd/120:45:381
2635992817,9cyclictest25-21ksoftirqd/119:40:301
2634992823,3cyclictest9-21ksoftirqd/023:15:050
2634992823,3cyclictest9-21ksoftirqd/022:57:400
2634992823,3cyclictest9-21ksoftirqd/019:59:290
2634992823,3cyclictest9-21ksoftirqd/019:33:290
2634992823,3cyclictest9-21ksoftirqd/000:10:000
2634992822,4cyclictest9-21ksoftirqd/022:38:590
2634992822,4cyclictest9-21ksoftirqd/022:05:330
2634992822,4cyclictest9-21ksoftirqd/021:59:000
2637992722,3cyclictest41-21ksoftirqd/323:06:313
2637992722,3cyclictest41-21ksoftirqd/322:47:443
2637992721,4cyclictest41-21ksoftirqd/319:24:543
263699276,19cyclictest18690-21kworker/2:223:06:542
263699271,25cyclictest9438-21kworker/2:200:07:132
263699271,24cyclictest18690-21kworker/2:223:10:172
263699271,24cyclictest18690-21kworker/2:223:02:012
263699271,10cyclictest19767-21tune2fs19:45:162
2636992710,2cyclictest25362-21/usr/sbin/munin23:20:142
2635992723,3cyclictest25-21ksoftirqd/100:00:001
2635992722,3cyclictest25-21ksoftirqd/123:40:191
2635992722,3cyclictest25-21ksoftirqd/122:55:201
2635992722,3cyclictest25-21ksoftirqd/121:30:001
2635992722,3cyclictest25-21ksoftirqd/120:20:291
2634992723,3cyclictest9-21ksoftirqd/020:40:240
2634992722,3cyclictest9-21ksoftirqd/000:27:100
136591270,0ptp4l401ktimersoftd/321:30:233
136591270,0ptp4l401ktimersoftd/320:47:453
2637992621,3cyclictest41-21ksoftirqd/321:25:373
2637992621,3cyclictest41-21ksoftirqd/300:26:493
263699268,2cyclictest25547-21phc2sys00:25:212
2636992621,3cyclictest33-21ksoftirqd/220:01:432
2635992621,3cyclictest25-21ksoftirqd/122:50:221
2635992620,4cyclictest25-21ksoftirqd/120:53:571
2635992620,4cyclictest25-21ksoftirqd/119:20:341
2635992620,3cyclictest25-21ksoftirqd/123:15:131
2634992620,4cyclictest9-21ksoftirqd/022:51:100
2634992611,4cyclictest9-21ksoftirqd/019:45:160
2634992611,3cyclictest9-21ksoftirqd/021:00:260
2634992521,3cyclictest9-21ksoftirqd/020:50:180
2634992521,3cyclictest9-21ksoftirqd/000:30:190
2634992521,3cyclictest9-21ksoftirqd/000:15:200
263499250,5cyclictest121rcu_preempt23:30:270
2637992419,3cyclictest41-21ksoftirqd/321:10:033
2635992419,3cyclictest25-21ksoftirqd/120:15:141
2634992419,3cyclictest9-21ksoftirqd/022:45:000
2634992419,3cyclictest9-21ksoftirqd/021:40:120
2637992318,3cyclictest41-21ksoftirqd/323:20:073
2637992318,3cyclictest41-21ksoftirqd/321:45:133
2634992318,3cyclictest9-21ksoftirqd/020:25:140
136591230,0ptp4l401ktimersoftd/320:06:593
2634992117,2cyclictest9-21ksoftirqd/022:05:010
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional