You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-18 - 13:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Thu Sep 18, 2025 00:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
313652221193,18sleep10-21swapper/119:08:581
312112220192,18sleep20-21swapper/219:06:582
137391208175,22phc2sys0-21swapper/319:06:533
313292204169,23sleep00-21swapper/019:08:290
1415621540,1sleep00-21swapper/019:40:140
31736996224,6cyclictest9-21ksoftirqd/021:15:250
31736996128,7cyclictest9-21ksoftirqd/021:05:000
31736996122,6cyclictest9-21ksoftirqd/023:30:210
31736996121,7cyclictest9-21ksoftirqd/022:15:220
31736996026,5cyclictest9-21ksoftirqd/019:10:140
31736996025,6cyclictest9-21ksoftirqd/019:30:190
31736996023,6cyclictest9-21ksoftirqd/020:15:150
31736996021,6cyclictest9-21ksoftirqd/021:45:250
31736995929,4cyclictest9-21ksoftirqd/019:51:250
31736995927,6cyclictest9-21ksoftirqd/000:05:190
31736995926,3cyclictest9-21ksoftirqd/021:55:000
31736995925,5cyclictest9-21ksoftirqd/020:00:200
31736995924,7cyclictest9-21ksoftirqd/020:05:130
31736995924,6cyclictest9-21ksoftirqd/022:05:180
31736995924,5cyclictest9-21ksoftirqd/019:35:150
31736995923,6cyclictest9-21ksoftirqd/023:45:290
31736995923,6cyclictest9-21ksoftirqd/000:25:170
90722580,2sleep10-21swapper/120:35:191
31736995828,3cyclictest9-21ksoftirqd/000:00:000
31736995827,7cyclictest9-21ksoftirqd/021:40:150
31736995825,6cyclictest9-21ksoftirqd/023:10:170
31736995825,5cyclictest9-21ksoftirqd/023:35:240
31736995824,6cyclictest9-21ksoftirqd/022:55:220
31736995824,6cyclictest9-21ksoftirqd/020:35:220
31736995824,5cyclictest9-21ksoftirqd/022:10:180
31736995824,5cyclictest9-21ksoftirqd/022:10:180
31736995823,6cyclictest9-21ksoftirqd/019:25:240
31736995821,6cyclictest9-21ksoftirqd/023:40:260
31736995821,6cyclictest9-21ksoftirqd/023:40:260
31736995820,6cyclictest9-21ksoftirqd/022:25:240
31736995727,4cyclictest9-21ksoftirqd/020:20:000
31736995723,6cyclictest9-21ksoftirqd/019:15:200
31736995723,5cyclictest9-21ksoftirqd/023:05:210
31736995723,5cyclictest9-21ksoftirqd/020:40:260
31736995723,4cyclictest9-21ksoftirqd/023:00:270
31736995723,4cyclictest9-21ksoftirqd/021:25:180
31736995722,6cyclictest9-21ksoftirqd/022:45:240
31736995722,6cyclictest9-21ksoftirqd/020:55:140
31736995722,6cyclictest9-21ksoftirqd/020:45:280
31736995722,6cyclictest9-21ksoftirqd/019:20:140
31736995722,5cyclictest9-21ksoftirqd/021:35:290
31736995722,5cyclictest9-21ksoftirqd/021:30:250
31736995721,6cyclictest9-21ksoftirqd/022:00:140
31736995721,5cyclictest9-21ksoftirqd/022:30:280
31736995622,6cyclictest9-21ksoftirqd/020:25:270
31736995622,6cyclictest9-21ksoftirqd/000:15:260
31736995621,6cyclictest9-21ksoftirqd/023:20:240
31736995621,6cyclictest9-21ksoftirqd/023:15:180
31736995621,6cyclictest9-21ksoftirqd/000:20:180
31736995621,5cyclictest9-21ksoftirqd/020:10:140
31736995621,5cyclictest9-21ksoftirqd/019:55:230
31736995523,4cyclictest9-21ksoftirqd/019:45:270
31736995523,4cyclictest9-21ksoftirqd/019:45:270
31736995521,5cyclictest9-21ksoftirqd/021:20:190
31736995519,8cyclictest9-21ksoftirqd/021:10:140
31736995519,5cyclictest9-21ksoftirqd/022:35:260
31736995421,6cyclictest9-21ksoftirqd/021:55:110
31736995421,5cyclictest9-21ksoftirqd/022:40:240
31736995420,5cyclictest9-21ksoftirqd/022:50:260
3173699528,3cyclictest9-21ksoftirqd/020:50:260
3173699527,2cyclictest9-21ksoftirqd/000:30:260
31736995219,3cyclictest9-21ksoftirqd/000:35:250
31736995216,6cyclictest9-21ksoftirqd/022:20:200
31736995118,6cyclictest9-21ksoftirqd/000:10:280
31736995019,6cyclictest9-21ksoftirqd/023:50:190
3173699496,2cyclictest9-21ksoftirqd/020:30:230
31738994527,16cyclictest33-21ksoftirqd/220:57:052
108312450,2sleep20-21swapper/220:40:132
3173699445,7cyclictest9-21ksoftirqd/021:10:000
31736994419,10cyclictest9-21ksoftirqd/023:25:160
31738994337,4cyclictest14006-21basename23:10:002
31738994313,28cyclictest32569-21kworker/2:220:25:292
31737994338,3cyclictest6851-21cron22:55:011
3173699433,2cyclictest9-21ksoftirqd/000:00:150
137291430,0ptp4l401ktimersoftd/321:13:253
137291430,0ptp4l401ktimersoftd/320:00:203
137291430,0ptp4l401ktimersoftd/319:19:573
137291420,0ptp4l401ktimersoftd/321:26:253
31739994136,3cyclictest41-21ksoftirqd/322:10:003
31738994122,17cyclictest33-21ksoftirqd/222:55:012
31738994012,27cyclictest32569-21kworker/2:220:45:302
3173899382,34cyclictest15252-21kworker/2:123:50:292
31738993811,26cyclictest8191-21kworker/2:223:00:292
31738993810,27cyclictest15252-21kworker/2:100:05:382
31737993833,3cyclictest25-21ksoftirqd/123:44:591
31737993833,3cyclictest25-21ksoftirqd/123:44:591
31737993833,3cyclictest25-21ksoftirqd/122:40:001
31739993732,3cyclictest41-21ksoftirqd/321:10:003
31739993730,5cyclictest41-21ksoftirqd/321:03:143
31737993733,2cyclictest25-21ksoftirqd/123:10:001
31739993630,4cyclictest41-21ksoftirqd/321:52:283
31739993630,4cyclictest41-21ksoftirqd/300:08:483
31738993629,4cyclictest33-21ksoftirqd/222:36:112
31737993630,4cyclictest25-21ksoftirqd/120:12:001
31737993630,4cyclictest25-21ksoftirqd/119:43:081
31739993514,19cyclictest11883-21grep00:10:233
31738993529,4cyclictest33-21ksoftirqd/221:21:592
31738993529,4cyclictest33-21ksoftirqd/219:57:172
31738993529,4cyclictest33-21ksoftirqd/200:16:192
31738993528,4cyclictest2385-21cron21:35:002
31738993527,5cyclictest33-21ksoftirqd/222:27:212
31737993531,2cyclictest25-21ksoftirqd/100:00:001
31737993529,4cyclictest25-21ksoftirqd/121:51:011
31737993529,4cyclictest25-21ksoftirqd/120:24:571
31737993529,4cyclictest25-21ksoftirqd/119:31:321
31739993428,4cyclictest41-21ksoftirqd/321:41:363
31739993428,4cyclictest41-21ksoftirqd/320:42:193
31739993428,4cyclictest41-21ksoftirqd/320:38:543
31739993428,4cyclictest41-21ksoftirqd/319:22:563
31739993428,4cyclictest41-21ksoftirqd/300:36:523
31739993412,20cyclictest5655-21cat20:30:013
31738993428,4cyclictest33-21ksoftirqd/221:27:472
31738993428,4cyclictest33-21ksoftirqd/220:20:072
31738993428,4cyclictest33-21ksoftirqd/219:20:342
31738993428,4cyclictest33-21ksoftirqd/200:36:112
31738993428,4cyclictest33-21ksoftirqd/200:34:022
31737993430,3cyclictest25-21ksoftirqd/121:15:261
31737993429,3cyclictest25-21ksoftirqd/123:00:331
31737993429,3cyclictest25-21ksoftirqd/120:51:161
31737993429,3cyclictest25-21ksoftirqd/119:15:011
31737993428,4cyclictest25-21ksoftirqd/122:07:421
31737993428,4cyclictest25-21ksoftirqd/120:03:051
31737993428,4cyclictest25-21ksoftirqd/100:38:421
31737993427,5cyclictest25-21ksoftirqd/123:49:361
31737993427,4cyclictest25-21ksoftirqd/119:38:221
31739993329,3cyclictest41-21ksoftirqd/323:53:103
31739993328,3cyclictest41-21ksoftirqd/321:57:423
31739993327,4cyclictest41-21ksoftirqd/323:32:133
31739993327,4cyclictest41-21ksoftirqd/322:30:473
31739993327,4cyclictest41-21ksoftirqd/322:03:273
31739993327,4cyclictest41-21ksoftirqd/321:34:063
31739993327,4cyclictest41-21ksoftirqd/320:58:043
31739993312,19cyclictest28472-21cat21:20:163
31739993311,19cyclictest10838-21munin-node23:35:133
31738993327,4cyclictest33-21ksoftirqd/223:11:222
31738993327,4cyclictest33-21ksoftirqd/221:59:412
31737993329,3cyclictest25-21ksoftirqd/123:50:241
31737993327,4cyclictest25-21ksoftirqd/123:18:031
31737993327,4cyclictest25-21ksoftirqd/119:49:061
31737993327,4cyclictest25-21ksoftirqd/119:49:051
31737993327,4cyclictest25-21ksoftirqd/100:13:551
42098320,7rtkit-daemon25-21ksoftirqd/119:23:191
31739993228,2cyclictest137291ptp4l23:25:523
31739993226,4cyclictest41-21ksoftirqd/321:45:383
31739993226,4cyclictest41-21ksoftirqd/320:24:353
31739993226,4cyclictest41-21ksoftirqd/320:16:233
31739993226,4cyclictest41-21ksoftirqd/319:36:283
31739993226,4cyclictest41-21ksoftirqd/300:01:543
31739993213,17cyclictest4006-21unixbench_multi22:45:263
31739993212,17cyclictest20405-21acpi00:30:133
31738993227,3cyclictest33-21ksoftirqd/219:15:042
31738993226,4cyclictest33-21ksoftirqd/223:23:332
31738993226,4cyclictest33-21ksoftirqd/222:01:432
31738993226,4cyclictest33-21ksoftirqd/221:51:582
31738993226,4cyclictest33-21ksoftirqd/221:19:452
31738993226,4cyclictest33-21ksoftirqd/220:34:282
31738993226,4cyclictest33-21ksoftirqd/219:51:592
31738993225,5cyclictest33-21ksoftirqd/222:45:502
31737993229,2cyclictest25-21ksoftirqd/121:40:001
31737993228,2cyclictest25-21ksoftirqd/100:35:001
31737993226,4cyclictest25-21ksoftirqd/122:20:461
137291320,8ptp4l401ktimersoftd/323:02:183
3173999319,3cyclictest218-21systemd-journal20:50:083
3173999318,4cyclictest30373-21fschecks_count22:35:173
3173999318,3cyclictest7091-21/usr/sbin/munin22:55:263
31739993127,3cyclictest41-21ksoftirqd/319:31:463
31739993126,3cyclictest41-21ksoftirqd/323:56:283
31739993126,3cyclictest41-21ksoftirqd/323:40:023
31739993126,3cyclictest41-21ksoftirqd/323:40:023
31739993126,3cyclictest41-21ksoftirqd/323:23:393
31739993126,3cyclictest41-21ksoftirqd/323:06:093
31739993126,3cyclictest41-21ksoftirqd/320:06:323
31739993126,3cyclictest41-21ksoftirqd/319:26:263
31739993126,3cyclictest41-21ksoftirqd/300:27:143
31739993125,4cyclictest41-21ksoftirqd/323:48:543
31739993125,4cyclictest41-21ksoftirqd/322:27:143
31739993125,4cyclictest41-21ksoftirqd/322:17:313
31739993113,15cyclictest17484-21ps23:15:183
31739993111,3cyclictest2668-21/usr/sbin/munin21:35:253
31739993110,3cyclictest29116-21sed20:10:193
31738993127,3cyclictest33-21ksoftirqd/220:03:412
31738993126,3cyclictest33-21ksoftirqd/223:38:102
31738993126,3cyclictest33-21ksoftirqd/222:41:292
31738993126,3cyclictest33-21ksoftirqd/222:10:122
31738993126,3cyclictest33-21ksoftirqd/222:10:122
31738993125,4cyclictest33-21ksoftirqd/222:57:022
31738993125,4cyclictest33-21ksoftirqd/222:15:452
31738993125,4cyclictest33-21ksoftirqd/220:52:252
31738993125,4cyclictest33-21ksoftirqd/219:49:182
31738993125,4cyclictest33-21ksoftirqd/219:49:182
31738993125,4cyclictest33-21ksoftirqd/200:25:402
31737993126,3cyclictest25-21ksoftirqd/123:24:491
31737993126,3cyclictest25-21ksoftirqd/123:10:561
31737993126,3cyclictest25-21ksoftirqd/121:33:191
31737993126,3cyclictest25-21ksoftirqd/120:26:521
31737993126,3cyclictest25-21ksoftirqd/100:25:331
31737993125,4cyclictest25-21ksoftirqd/122:11:591
31737993125,4cyclictest25-21ksoftirqd/122:11:591
31737993125,4cyclictest25-21ksoftirqd/122:00:401
31737993125,4cyclictest25-21ksoftirqd/121:10:451
31737993125,4cyclictest25-21ksoftirqd/120:47:101
31737993125,4cyclictest25-21ksoftirqd/100:00:391
31737993124,4cyclictest25-21ksoftirqd/120:15:091
3173999308,3cyclictest22054-21sed19:55:193
31739993025,3cyclictest41-21ksoftirqd/300:16:593
31739993024,4cyclictest41-21ksoftirqd/320:46:283
31739993024,4cyclictest41-21ksoftirqd/300:24:593
31739993012,16cyclictest1285-21runrttasks22:41:463
31738993025,3cyclictest33-21ksoftirqd/200:04:052
31738993024,4cyclictest33-21ksoftirqd/223:34:332
31738993024,4cyclictest33-21ksoftirqd/223:26:542
31738993024,4cyclictest33-21ksoftirqd/220:37:492
31737993025,3cyclictest25-21ksoftirqd/123:39:571
31737993025,3cyclictest25-21ksoftirqd/121:41:091
31737993024,4cyclictest25-21ksoftirqd/121:05:041
31737993024,4cyclictest25-21ksoftirqd/120:07:351
3173999292,7cyclictest18712-21apt-get19:50:143
31739992923,4cyclictest41-21ksoftirqd/320:33:203
31737992924,3cyclictest25-21ksoftirqd/122:47:051
31737992924,3cyclictest25-21ksoftirqd/121:02:031
31737992924,3cyclictest25-21ksoftirqd/120:56:001
31737992924,3cyclictest25-21ksoftirqd/100:07:051
31737992923,4cyclictest25-21ksoftirqd/122:34:261
31737992923,4cyclictest25-21ksoftirqd/121:59:401
31737992923,4cyclictest25-21ksoftirqd/119:29:521
31737992919,4cyclictest25-21ksoftirqd/122:43:001
3173999288,3cyclictest26176-21irqrtprio21:15:203
31739992823,3cyclictest41-21ksoftirqd/322:22:493
31739992823,3cyclictest41-21ksoftirqd/319:47:003
31739992823,3cyclictest41-21ksoftirqd/319:46:593
31738992824,3cyclictest33-21ksoftirqd/219:31:272
31738992822,4cyclictest33-21ksoftirqd/223:49:012
31738992822,4cyclictest33-21ksoftirqd/221:02:082
31738992822,4cyclictest33-21ksoftirqd/220:10:212
31738992822,4cyclictest33-21ksoftirqd/219:25:392
31737992824,3cyclictest25-21ksoftirqd/121:45:231
31737992823,3cyclictest25-21ksoftirqd/122:28:291
31737992823,3cyclictest25-21ksoftirqd/122:20:011
31737992823,3cyclictest25-21ksoftirqd/120:30:181
31737992822,4cyclictest25-21ksoftirqd/122:55:521
31737992822,4cyclictest25-21ksoftirqd/120:44:301
31737992822,4cyclictest25-21ksoftirqd/100:17:001
31737992822,3cyclictest25-21ksoftirqd/123:25:061
3173999277,3cyclictest6913-21cut22:55:013
31739992722,3cyclictest41-21ksoftirqd/319:40:363
31738992722,3cyclictest33-21ksoftirqd/223:44:302
31738992722,3cyclictest33-21ksoftirqd/223:44:302
31738992722,3cyclictest33-21ksoftirqd/222:20:552
31738992722,3cyclictest33-21ksoftirqd/220:17:422
31738992722,3cyclictest33-21ksoftirqd/200:12:082
31738992721,4cyclictest33-21ksoftirqd/223:56:592
31738992721,4cyclictest33-21ksoftirqd/221:36:342
31738992721,4cyclictest33-21ksoftirqd/221:09:142
31738992721,4cyclictest33-21ksoftirqd/219:38:242
137291270,7ptp4l401ktimersoftd/323:13:543
31738992621,3cyclictest33-21ksoftirqd/220:06:372
31738992621,3cyclictest33-21ksoftirqd/219:44:442
31738992620,4cyclictest33-21ksoftirqd/222:31:422
31738992620,4cyclictest33-21ksoftirqd/221:41:472
31738992620,4cyclictest33-21ksoftirqd/219:14:482
31738992619,5cyclictest33-21ksoftirqd/222:08:352
31737992622,3cyclictest25-21ksoftirqd/100:20:151
31737992620,4cyclictest25-21ksoftirqd/121:26:421
31739992519,4cyclictest41-21ksoftirqd/322:12:053
31739992519,4cyclictest41-21ksoftirqd/322:12:053
31737992519,4cyclictest25-21ksoftirqd/123:32:031
137291250,0ptp4l401ktimersoftd/319:10:273
31737992417,4cyclictest25-21ksoftirqd/119:15:121
31738992318,3cyclictest33-21ksoftirqd/223:16:392
31737992318,3cyclictest25-21ksoftirqd/119:50:221
31738992216,4cyclictest33-21ksoftirqd/221:45:492
31738992212,6cyclictest56450irq/145-enp4s0-21:10:092
31737992217,3cyclictest25-21ksoftirqd/119:56:551
31738992117,3cyclictest33-21ksoftirqd/200:20:132
31737992117,2cyclictest25-21ksoftirqd/121:25:001
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional