You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-04 - 00:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot3.osadl.org (updated Mon Nov 03, 2025 12:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
235142204170,23sleep10-21swapper/107:08:421
137191204171,22phc2sys0-21swapper/307:07:563
232932203169,23sleep20-21swapper/207:05:502
234862201168,22sleep00-21swapper/007:08:210
2999621540,6sleep12391699cyclictest10:45:001
2310021340,6sleep02391599cyclictest09:20:260
132592580,2sleep30-21swapper/307:55:003
191672560,1sleep00-21swapper/008:05:210
230352540,1sleep00-21swapper/008:15:110
142302500,1sleep20-21swapper/212:25:192
145082490,2sleep30-21swapper/312:25:203
63122480,2sleep00-21swapper/012:10:010
136991430,0ptp4l401ktimersoftd/308:45:243
136991420,0ptp4l401ktimersoftd/309:30:293
136991420,0ptp4l401ktimersoftd/309:30:293
136991410,1ptp4l401ktimersoftd/311:45:033
136991410,0ptp4l401ktimersoftd/309:20:303
2391899401,37cyclictest20398-21cron10:25:003
136991400,1ptp4l401ktimersoftd/312:30:593
136991400,0ptp4l401ktimersoftd/309:35:143
136991400,0ptp4l401ktimersoftd/307:25:293
59298390,8rtkit-daemon0-21swapper/109:14:261
136991390,1ptp4l401ktimersoftd/311:59:153
23918993833,3cyclictest41-21ksoftirqd/307:49:593
23918993832,3cyclictest41-21ksoftirqd/311:19:593
23917993832,4cyclictest33-21ksoftirqd/210:40:002
136991380,0ptp4l401ktimersoftd/311:00:043
136991380,0ptp4l401ktimersoftd/311:00:043
23918993732,3cyclictest41-21ksoftirqd/312:15:013
23918993631,3cyclictest41-21ksoftirqd/310:49:593
23918993631,3cyclictest41-21ksoftirqd/308:20:003
23916993630,4cyclictest25-21ksoftirqd/107:11:421
23915993631,3cyclictest9-21ksoftirqd/011:05:000
23915993631,3cyclictest9-21ksoftirqd/011:05:000
136991360,0ptp4l401ktimersoftd/310:50:193
23918993530,3cyclictest41-21ksoftirqd/308:10:223
23917993530,3cyclictest33-21ksoftirqd/207:11:292
23917993529,4cyclictest33-21ksoftirqd/211:50:132
23917993529,4cyclictest33-21ksoftirqd/211:19:202
23917993529,4cyclictest33-21ksoftirqd/209:34:182
23917993529,4cyclictest33-21ksoftirqd/209:34:182
23917993529,4cyclictest33-21ksoftirqd/208:00:582
23917993529,3cyclictest1057-21latency_hist09:45:002
23917993528,5cyclictest33-21ksoftirqd/208:23:242
23916993530,3cyclictest25-21ksoftirqd/109:40:001
23916993529,4cyclictest25-21ksoftirqd/111:36:031
23916993529,4cyclictest25-21ksoftirqd/108:47:581
23916993528,4cyclictest25-21ksoftirqd/112:30:001
23916993528,4cyclictest25-21ksoftirqd/111:18:581
23915993529,4cyclictest9-21ksoftirqd/008:00:520
23915993528,5cyclictest9-21ksoftirqd/009:53:440
136991350,0ptp4l401ktimersoftd/311:31:103
23918993429,3cyclictest41-21ksoftirqd/311:40:413
23918993428,4cyclictest41-21ksoftirqd/312:09:483
23918993428,4cyclictest41-21ksoftirqd/310:16:313
23918993428,4cyclictest41-21ksoftirqd/310:05:323
23918993428,4cyclictest41-21ksoftirqd/309:54:083
23918993428,3cyclictest41-21ksoftirqd/308:00:143
23918993427,5cyclictest41-21ksoftirqd/307:50:123
23917993429,3cyclictest33-21ksoftirqd/211:31:452
23917993428,4cyclictest33-21ksoftirqd/212:12:352
23917993428,4cyclictest33-21ksoftirqd/211:20:522
23917993428,4cyclictest33-21ksoftirqd/211:13:422
23917993428,4cyclictest33-21ksoftirqd/211:04:052
23917993428,4cyclictest33-21ksoftirqd/211:04:052
23917993428,4cyclictest33-21ksoftirqd/208:40:012
23917993427,5cyclictest33-21ksoftirqd/207:29:522
23916993429,3cyclictest25-21ksoftirqd/107:50:051
23916993428,4cyclictest25-21ksoftirqd/112:37:221
23916993428,4cyclictest25-21ksoftirqd/107:40:101
23916993426,4cyclictest25-21ksoftirqd/111:00:001
23915993428,4cyclictest9-21ksoftirqd/009:43:330
23915993428,4cyclictest9-21ksoftirqd/009:40:010
23915993428,4cyclictest9-21ksoftirqd/007:55:060
132691340,1getstats0-21swapper/310:40:273
23918993329,3cyclictest41-21ksoftirqd/311:35:143
23918993329,3cyclictest41-21ksoftirqd/309:45:003
23918993328,3cyclictest41-21ksoftirqd/309:55:193
23918993328,3cyclictest41-21ksoftirqd/309:10:013
23918993328,3cyclictest41-21ksoftirqd/308:30:163
23918993328,3cyclictest41-21ksoftirqd/308:30:153
23918993327,4cyclictest41-21ksoftirqd/311:28:233
23918993327,4cyclictest41-21ksoftirqd/309:48:143
23918993327,4cyclictest41-21ksoftirqd/309:19:593
23918993321,4cyclictest41-21ksoftirqd/310:00:273
23917993328,3cyclictest33-21ksoftirqd/212:05:552
23917993328,3cyclictest33-21ksoftirqd/211:55:402
23917993328,3cyclictest33-21ksoftirqd/207:32:362
23917993327,4cyclictest33-21ksoftirqd/210:26:322
23917993327,4cyclictest33-21ksoftirqd/208:56:012
23917993327,4cyclictest33-21ksoftirqd/208:42:302
23917993327,4cyclictest33-21ksoftirqd/208:30:402
23917993327,4cyclictest33-21ksoftirqd/208:30:402
23917993326,4cyclictest33-21ksoftirqd/207:50:122
23916993328,3cyclictest25-21ksoftirqd/111:35:001
23916993328,3cyclictest25-21ksoftirqd/111:11:221
23916993328,3cyclictest25-21ksoftirqd/108:43:001
23916993328,3cyclictest25-21ksoftirqd/108:00:551
23916993327,4cyclictest25-21ksoftirqd/110:34:041
23916993327,4cyclictest25-21ksoftirqd/110:18:101
23916993327,4cyclictest25-21ksoftirqd/110:09:151
23916993327,4cyclictest25-21ksoftirqd/109:32:511
23916993327,4cyclictest25-21ksoftirqd/109:32:511
23916993327,4cyclictest25-21ksoftirqd/108:56:581
23916993327,4cyclictest25-21ksoftirqd/108:23:321
23915993328,3cyclictest9-21ksoftirqd/007:26:290
23915993327,4cyclictest9-21ksoftirqd/011:18:010
23915993327,4cyclictest9-21ksoftirqd/007:52:130
23915993326,5cyclictest9-21ksoftirqd/007:30:580
23918993227,3cyclictest41-21ksoftirqd/312:37:213
23918993227,3cyclictest41-21ksoftirqd/311:05:203
23918993227,3cyclictest41-21ksoftirqd/308:10:003
23918993227,3cyclictest41-21ksoftirqd/307:44:183
23918993227,3cyclictest41-21ksoftirqd/307:30:213
23918993226,4cyclictest41-21ksoftirqd/311:50:583
23918993226,4cyclictest41-21ksoftirqd/308:40:053
23918993226,3cyclictest41-21ksoftirqd/310:30:003
23917993227,3cyclictest33-21ksoftirqd/210:46:402
23917993227,3cyclictest33-21ksoftirqd/209:55:592
23917993226,4cyclictest33-21ksoftirqd/211:40:462
23917993226,4cyclictest33-21ksoftirqd/209:52:542
23917993226,4cyclictest33-21ksoftirqd/209:08:412
23917993226,4cyclictest33-21ksoftirqd/207:47:222
23917993225,5cyclictest33-21ksoftirqd/208:18:542
2391799322,2cyclictest121rcu_preempt10:50:242
23916993227,3cyclictest25-21ksoftirqd/110:22:141
23916993226,4cyclictest25-21ksoftirqd/111:57:191
23916993226,4cyclictest25-21ksoftirqd/111:40:571
23916993226,4cyclictest25-21ksoftirqd/111:22:031
23916993226,4cyclictest25-21ksoftirqd/110:12:081
23916993226,4cyclictest25-21ksoftirqd/109:53:261
23916993225,5cyclictest25-21ksoftirqd/112:32:201
23915993227,3cyclictest9-21ksoftirqd/010:59:440
23915993227,3cyclictest9-21ksoftirqd/009:45:400
23915993227,3cyclictest9-21ksoftirqd/007:38:200
23915993226,4cyclictest9-21ksoftirqd/012:26:090
23915993226,4cyclictest9-21ksoftirqd/012:00:460
23915993226,4cyclictest9-21ksoftirqd/010:43:440
23915993226,4cyclictest9-21ksoftirqd/008:56:190
23915993226,4cyclictest9-21ksoftirqd/008:12:030
23915993225,5cyclictest9-21ksoftirqd/010:46:210
136991320,0ptp4l401ktimersoftd/307:22:043
23918993127,3cyclictest41-21ksoftirqd/312:23:493
23918993127,3cyclictest41-21ksoftirqd/309:30:003
23918993127,2cyclictest41-21ksoftirqd/308:30:013
23918993126,3cyclictest41-21ksoftirqd/311:15:003
23918993126,3cyclictest41-21ksoftirqd/308:50:193
23918993125,4cyclictest41-21ksoftirqd/310:37:043
23918993124,5cyclictest41-21ksoftirqd/310:58:473
23917993127,3cyclictest33-21ksoftirqd/209:05:002
23917993127,3cyclictest33-21ksoftirqd/209:05:002
23917993126,3cyclictest33-21ksoftirqd/209:49:102
23917993126,3cyclictest33-21ksoftirqd/209:36:382
23917993126,3cyclictest33-21ksoftirqd/207:16:592
23917993125,4cyclictest33-21ksoftirqd/211:46:002
23917993125,4cyclictest33-21ksoftirqd/210:59:022
23917993125,4cyclictest33-21ksoftirqd/207:37:302
23917993124,5cyclictest33-21ksoftirqd/207:43:132
23916993127,3cyclictest25-21ksoftirqd/112:00:191
23916993126,3cyclictest25-21ksoftirqd/107:32:511
23916993125,4cyclictest25-21ksoftirqd/112:16:401
23916993125,4cyclictest25-21ksoftirqd/109:40:491
23916993125,4cyclictest25-21ksoftirqd/108:25:401
23916993125,4cyclictest25-21ksoftirqd/108:16:011
23916993125,4cyclictest25-21ksoftirqd/107:23:581
23915993126,3cyclictest9-21ksoftirqd/011:50:510
23915993126,3cyclictest9-21ksoftirqd/011:35:000
23915993126,3cyclictest9-21ksoftirqd/011:22:230
23915993126,3cyclictest9-21ksoftirqd/009:11:450
23915993126,3cyclictest9-21ksoftirqd/008:31:320
23915993126,3cyclictest9-21ksoftirqd/008:31:320
23915993125,4cyclictest9-21ksoftirqd/012:21:280
23915993125,4cyclictest9-21ksoftirqd/011:05:130
23918993025,3cyclictest41-21ksoftirqd/310:30:483
23918993024,4cyclictest41-21ksoftirqd/312:16:183
23918993024,3cyclictest41-21ksoftirqd/310:10:203
23918993020,9cyclictest41-21ksoftirqd/311:20:173
2391899300,2cyclictest121rcu_preempt07:35:183
2391799307,21cyclictest2104-21kworker/2:110:30:452
23917993025,3cyclictest33-21ksoftirqd/208:54:262
23917993024,4cyclictest33-21ksoftirqd/212:35:022
23917993024,4cyclictest33-21ksoftirqd/211:35:402
23917993024,4cyclictest33-21ksoftirqd/211:26:072
23917993024,4cyclictest33-21ksoftirqd/211:07:362
23917993024,4cyclictest33-21ksoftirqd/210:24:562
23917993024,4cyclictest33-21ksoftirqd/209:21:092
23917993024,4cyclictest33-21ksoftirqd/207:23:582
23916993025,3cyclictest25-21ksoftirqd/112:06:101
23916993025,3cyclictest25-21ksoftirqd/108:35:491
23916993024,4cyclictest25-21ksoftirqd/111:49:241
23916993024,4cyclictest25-21ksoftirqd/110:49:021
23916993024,4cyclictest25-21ksoftirqd/109:09:331
23916993024,4cyclictest25-21ksoftirqd/108:06:461
23915993026,3cyclictest9-21ksoftirqd/011:58:090
23915993025,3cyclictest9-21ksoftirqd/010:21:450
23915993025,3cyclictest9-21ksoftirqd/008:54:120
23915993025,3cyclictest9-21ksoftirqd/008:24:300
23915993025,3cyclictest9-21ksoftirqd/007:19:390
23915993024,4cyclictest9-21ksoftirqd/011:46:420
23915993024,4cyclictest9-21ksoftirqd/011:41:280
23915993024,4cyclictest9-21ksoftirqd/010:34:320
23915993024,4cyclictest9-21ksoftirqd/007:48:160
23915993024,4cyclictest9-21ksoftirqd/007:43:180
23918992924,3cyclictest41-21ksoftirqd/309:15:013
23918992924,3cyclictest41-21ksoftirqd/308:59:203
23918992923,4cyclictest41-21ksoftirqd/309:00:493
23918992923,4cyclictest41-21ksoftirqd/309:00:493
2391799294,22cyclictest939-21kworker/2:012:30:132
23917992924,3cyclictest33-21ksoftirqd/209:12:222
23917992924,3cyclictest33-21ksoftirqd/207:59:232
23917992923,4cyclictest33-21ksoftirqd/212:02:002
23917992923,4cyclictest33-21ksoftirqd/210:09:552
23917992923,4cyclictest33-21ksoftirqd/208:13:042
23916992923,4cyclictest25-21ksoftirqd/111:27:371
23916992923,4cyclictest25-21ksoftirqd/109:03:561
23916992923,4cyclictest25-21ksoftirqd/109:03:551
23916992923,4cyclictest25-21ksoftirqd/108:50:431
23916992923,4cyclictest25-21ksoftirqd/108:10:201
23916992922,5cyclictest25-21ksoftirqd/109:16:471
23915992924,3cyclictest9-21ksoftirqd/012:17:110
23915992924,3cyclictest9-21ksoftirqd/012:12:250
23915992924,3cyclictest9-21ksoftirqd/009:31:550
23915992924,3cyclictest9-21ksoftirqd/009:31:550
23915992924,3cyclictest9-21ksoftirqd/008:25:110
23915992923,4cyclictest9-21ksoftirqd/012:36:330
23915992923,4cyclictest9-21ksoftirqd/010:50:530
2391599291,3cyclictest121rcu_preempt10:14:030
136991290,0ptp4l401ktimersoftd/312:00:223
23917992823,3cyclictest33-21ksoftirqd/212:15:302
23917992822,4cyclictest33-21ksoftirqd/209:26:232
23917992822,4cyclictest33-21ksoftirqd/209:17:582
23916992823,3cyclictest25-21ksoftirqd/111:07:261
23916992823,3cyclictest25-21ksoftirqd/110:50:101
23916992822,4cyclictest25-21ksoftirqd/112:12:261
23916992822,4cyclictest25-21ksoftirqd/110:29:481
23916992822,4cyclictest25-21ksoftirqd/110:01:041
23916992822,4cyclictest25-21ksoftirqd/109:25:571
23916992822,4cyclictest25-21ksoftirqd/108:34:311
23916992822,4cyclictest25-21ksoftirqd/108:34:311
23916992822,4cyclictest25-21ksoftirqd/107:55:341
23915992823,3cyclictest9-21ksoftirqd/010:16:570
23915992822,4cyclictest9-21ksoftirqd/012:31:590
23915992822,4cyclictest9-21ksoftirqd/008:37:150
136991280,0ptp4l401ktimersoftd/308:38:153
136991280,0ptp4l401ktimersoftd/307:17:323
23917992723,3cyclictest33-21ksoftirqd/210:44:562
23917992722,3cyclictest33-21ksoftirqd/210:18:042
23917992722,3cyclictest33-21ksoftirqd/208:06:412
23917992721,4cyclictest33-21ksoftirqd/208:27:322
23916992722,3cyclictest25-21ksoftirqd/111:00:261
23916992722,3cyclictest25-21ksoftirqd/111:00:261
23916992722,3cyclictest25-21ksoftirqd/109:20:121
23915992722,3cyclictest9-21ksoftirqd/009:25:340
23915992721,4cyclictest9-21ksoftirqd/011:12:280
23915992721,3cyclictest9-21ksoftirqd/010:28:490
23915992720,5cyclictest9-21ksoftirqd/011:26:050
23918992620,4cyclictest41-21ksoftirqd/308:22:013
23917992622,3cyclictest33-21ksoftirqd/210:00:222
23917992621,3cyclictest33-21ksoftirqd/208:48:162
23917992620,4cyclictest33-21ksoftirqd/210:15:002
23916992621,3cyclictest25-21ksoftirqd/112:21:521
23916992621,3cyclictest25-21ksoftirqd/107:20:011
23916992620,4cyclictest25-21ksoftirqd/111:54:371
23916992620,4cyclictest25-21ksoftirqd/107:26:271
23915992621,3cyclictest9-21ksoftirqd/010:37:050
23915992621,3cyclictest9-21ksoftirqd/007:21:490
23915992620,4cyclictest9-21ksoftirqd/011:36:070
23915992620,4cyclictest9-21ksoftirqd/009:17:220
136991260,0ptp4l401ktimersoftd/307:11:383
23916992520,3cyclictest25-21ksoftirqd/110:35:181
23916992520,3cyclictest25-21ksoftirqd/107:45:211
23916992519,4cyclictest25-21ksoftirqd/109:56:151
23915992520,3cyclictest9-21ksoftirqd/009:09:390
23915992520,3cyclictest9-21ksoftirqd/007:14:420
23915992519,4cyclictest9-21ksoftirqd/009:02:410
23915992519,4cyclictest9-21ksoftirqd/009:02:410
23915992419,3cyclictest9-21ksoftirqd/010:06:230
23915992417,4cyclictest9-21ksoftirqd/008:45:010
2391799230,3cyclictest22995-1kworker/2:2H12:22:592
23915992317,4cyclictest9-21ksoftirqd/008:49:020
23916992217,3cyclictest25-21ksoftirqd/107:35:371
23916992017,2cyclictest25-21ksoftirqd/109:45:181
23915991812,3cyclictest9096-21entropy10:00:170
23915991711,3cyclictest8472-21sendmail10:00:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional