You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-18 - 05:44
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Thu Sep 18, 2025 00:45:59)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191234170,52phc2sys0-21swapper/319:07:023
271632205171,22sleep10-21swapper/119:09:581
267882203169,22sleep20-21swapper/219:05:292
271032201167,22sleep00-21swapper/019:09:130
2716728863,16sleep00-21swapper/019:10:010
284132600,1sleep00-21swapper/020:20:010
284132600,1sleep00-21swapper/020:20:010
187982530,7sleep2321ktimersoftd/222:20:222
136991500,37ptp4l0-21swapper/319:10:013
132891480,2getstats0-21swapper/319:40:553
136991460,0ptp4l401ktimersoftd/300:25:123
27459994539,3cyclictest15233-21sshd22:12:211
136991420,0ptp4l401ktimersoftd/322:48:333
136991420,0ptp4l401ktimersoftd/322:48:323
136991420,0ptp4l401ktimersoftd/320:58:573
136991410,0ptp4l401ktimersoftd/322:30:153
136991410,0ptp4l401ktimersoftd/319:19:513
136991390,1ptp4l401ktimersoftd/300:21:243
27461993731,4cyclictest6816-21cron19:34:593
27461993731,4cyclictest41-21ksoftirqd/320:16:303
27461993731,4cyclictest41-21ksoftirqd/320:16:303
27460993731,4cyclictest33-21ksoftirqd/221:07:062
27460993631,3cyclictest33-21ksoftirqd/200:40:002
27460993630,4cyclictest33-21ksoftirqd/221:39:582
27460993630,4cyclictest33-21ksoftirqd/219:54:262
27460993630,4cyclictest33-21ksoftirqd/219:23:412
27460993630,3cyclictest33-21ksoftirqd/221:55:012
27460993629,4cyclictest33-21ksoftirqd/219:42:042
27459993631,3cyclictest13330-21cron00:25:001
27458993631,3cyclictest32384-21turbostat.cron22:50:000
27458993631,3cyclictest32384-21turbostat.cron22:50:000
27458993630,4cyclictest9-21ksoftirqd/021:10:550
27461993529,4cyclictest41-21ksoftirqd/323:36:013
27461993529,4cyclictest41-21ksoftirqd/322:18:423
27461993529,4cyclictest41-21ksoftirqd/322:18:423
27461993512,19cyclictest7593-21cpuspeed_turbos23:05:153
27460993530,3cyclictest33-21ksoftirqd/221:20:012
27460993530,3cyclictest33-21ksoftirqd/221:20:012
27460993529,4cyclictest33-21ksoftirqd/222:39:272
27460993529,4cyclictest33-21ksoftirqd/219:14:182
27460993529,4cyclictest33-21ksoftirqd/200:32:402
27460993529,4cyclictest33-21ksoftirqd/200:21:132
27460993528,4cyclictest33-21ksoftirqd/223:01:582
27459993531,3cyclictest25-21ksoftirqd/121:55:001
27459993530,3cyclictest25-21ksoftirqd/122:00:001
27459993529,4cyclictest25-21ksoftirqd/123:38:161
27459993529,4cyclictest25-21ksoftirqd/123:15:411
27459993529,4cyclictest25-21ksoftirqd/123:15:411
27459993529,4cyclictest25-21ksoftirqd/123:05:341
27461993429,3cyclictest41-21ksoftirqd/322:50:313
27461993428,4cyclictest41-21ksoftirqd/323:29:363
27461993428,4cyclictest41-21ksoftirqd/321:13:233
27461993427,5cyclictest41-21ksoftirqd/320:39:253
27461993427,4cyclictest41-21ksoftirqd/321:35:163
27460993429,3cyclictest33-21ksoftirqd/221:02:262
27460993429,3cyclictest33-21ksoftirqd/219:36:422
27460993429,3cyclictest33-21ksoftirqd/200:04:202
27460993428,4cyclictest33-21ksoftirqd/222:45:132
27460993428,4cyclictest33-21ksoftirqd/222:45:132
27460993428,4cyclictest33-21ksoftirqd/221:48:012
27460993428,4cyclictest33-21ksoftirqd/221:48:002
27460993428,4cyclictest33-21ksoftirqd/221:29:422
27459993429,3cyclictest25-21ksoftirqd/120:50:001
27459993429,3cyclictest25-21ksoftirqd/100:30:011
27459993428,4cyclictest25-21ksoftirqd/121:06:441
27459993428,4cyclictest25-21ksoftirqd/119:56:591
27458993429,3cyclictest9-21ksoftirqd/023:50:000
27458993429,3cyclictest9-21ksoftirqd/023:50:000
27458993429,3cyclictest9-21ksoftirqd/020:50:010
27458993428,4cyclictest9-21ksoftirqd/022:00:050
27458993428,4cyclictest9-21ksoftirqd/021:03:490
27458993428,4cyclictest9-21ksoftirqd/020:51:020
27458993428,4cyclictest9-21ksoftirqd/019:47:070
27461993329,2cyclictest136991ptp4l19:39:063
27461993327,4cyclictest41-21ksoftirqd/322:27:333
27461993327,4cyclictest41-21ksoftirqd/320:32:443
27461993327,4cyclictest41-21ksoftirqd/319:25:523
27461993326,5cyclictest41-21ksoftirqd/322:38:253
27461993310,20cyclictest6874-21cut00:10:193
27460993328,3cyclictest33-21ksoftirqd/219:16:162
27460993327,4cyclictest33-21ksoftirqd/223:47:192
27460993327,4cyclictest33-21ksoftirqd/223:47:192
27460993327,4cyclictest33-21ksoftirqd/223:18:062
27460993327,4cyclictest33-21ksoftirqd/223:18:062
27460993327,4cyclictest33-21ksoftirqd/221:31:592
27460993327,4cyclictest33-21ksoftirqd/219:32:212
27460993327,3cyclictest33-21ksoftirqd/200:15:222
27460993323,9cyclictest33-21ksoftirqd/222:40:252
27460993320,10cyclictest33-21ksoftirqd/222:55:152
27459993329,3cyclictest25-21ksoftirqd/122:05:201
27459993328,3cyclictest25-21ksoftirqd/122:49:331
27459993328,3cyclictest25-21ksoftirqd/122:49:321
27459993328,3cyclictest25-21ksoftirqd/121:00:131
27459993328,3cyclictest25-21ksoftirqd/119:34:591
27459993327,4cyclictest25-21ksoftirqd/120:58:561
27459993327,4cyclictest25-21ksoftirqd/119:46:511
27458993328,3cyclictest9-21ksoftirqd/023:13:070
27458993327,4cyclictest9-21ksoftirqd/021:32:050
27458993327,4cyclictest9-21ksoftirqd/020:43:120
27458993327,4cyclictest9-21ksoftirqd/019:33:230
136991330,1ptp4l391rcuc/320:00:173
27461993227,3cyclictest41-21ksoftirqd/319:49:573
27461993226,4cyclictest41-21ksoftirqd/323:48:283
27461993226,4cyclictest41-21ksoftirqd/323:48:283
27461993226,4cyclictest41-21ksoftirqd/322:12:333
27461993226,4cyclictest41-21ksoftirqd/321:45:413
27461993226,4cyclictest41-21ksoftirqd/321:45:413
27461993226,4cyclictest41-21ksoftirqd/319:53:363
27460993227,3cyclictest33-21ksoftirqd/221:45:002
27460993227,3cyclictest33-21ksoftirqd/220:55:422
27460993226,4cyclictest33-21ksoftirqd/223:43:222
27460993226,4cyclictest33-21ksoftirqd/223:32:472
27460993226,4cyclictest33-21ksoftirqd/223:09:122
27460993226,4cyclictest33-21ksoftirqd/221:12:172
27460993226,3cyclictest33-21ksoftirqd/222:01:542
27460993226,3cyclictest33-21ksoftirqd/220:34:592
27459993227,3cyclictest32022-21cron19:20:011
27459993226,4cyclictest25-21ksoftirqd/122:58:521
27459993226,4cyclictest25-21ksoftirqd/122:01:071
27459993226,4cyclictest25-21ksoftirqd/120:13:111
27459993226,4cyclictest25-21ksoftirqd/119:52:221
27459993226,3cyclictest25-21ksoftirqd/123:55:001
27459993225,5cyclictest25-21ksoftirqd/121:44:191
27458993227,3cyclictest9-21ksoftirqd/022:30:010
27458993227,3cyclictest9-21ksoftirqd/020:37:170
27458993227,3cyclictest9-21ksoftirqd/019:53:000
27458993227,3cyclictest9-21ksoftirqd/000:16:580
27458993226,4cyclictest9-21ksoftirqd/023:28:440
27458993226,4cyclictest9-21ksoftirqd/023:08:220
27458993226,4cyclictest9-21ksoftirqd/022:51:290
27458993226,4cyclictest9-21ksoftirqd/019:28:290
27458993225,5cyclictest9-21ksoftirqd/000:08:070
136991320,14ptp4l2746199cyclictest23:20:323
2746199316,4cyclictest1285-21snmpd23:30:403
27461993126,3cyclictest41-21ksoftirqd/323:17:003
27461993126,3cyclictest41-21ksoftirqd/323:17:003
27461993126,3cyclictest41-21ksoftirqd/321:17:523
27461993126,3cyclictest41-21ksoftirqd/321:17:523
27461993126,3cyclictest41-21ksoftirqd/320:20:573
27461993125,4cyclictest41-21ksoftirqd/322:06:323
27461993125,4cyclictest41-21ksoftirqd/320:53:053
27461993125,4cyclictest41-21ksoftirqd/319:58:343
27461993125,3cyclictest41-21ksoftirqd/321:06:423
27461993124,5cyclictest11913-21cron23:15:003
27461993111,17cyclictest8572-21sh20:45:133
27460993126,3cyclictest33-21ksoftirqd/223:20:492
27460993126,3cyclictest33-21ksoftirqd/220:49:342
27460993126,3cyclictest33-21ksoftirqd/200:08:142
27460993125,4cyclictest33-21ksoftirqd/220:52:122
27460993125,4cyclictest33-21ksoftirqd/220:40:572
27460993125,4cyclictest33-21ksoftirqd/220:37:272
27460993125,4cyclictest33-21ksoftirqd/220:25:482
27460993125,3cyclictest33-21ksoftirqd/222:25:122
27460993125,3cyclictest33-21ksoftirqd/200:11:162
27459993126,3cyclictest25-21ksoftirqd/123:31:291
27459993126,3cyclictest25-21ksoftirqd/122:28:311
27459993126,3cyclictest25-21ksoftirqd/120:35:181
27459993126,3cyclictest23745-21kworker/1:022:30:011
27459993125,4cyclictest25-21ksoftirqd/123:24:201
27459993125,4cyclictest25-21ksoftirqd/123:11:521
27459993125,4cyclictest25-21ksoftirqd/122:52:151
27459993125,4cyclictest25-21ksoftirqd/122:20:411
27459993125,4cyclictest25-21ksoftirqd/121:28:571
27459993125,4cyclictest25-21ksoftirqd/120:40:031
27459993125,4cyclictest25-21ksoftirqd/120:06:581
27459993125,4cyclictest25-21ksoftirqd/120:03:531
27459993125,3cyclictest25-21ksoftirqd/119:20:351
27458993126,3cyclictest9-21ksoftirqd/021:58:260
27458993126,3cyclictest9-21ksoftirqd/019:42:420
27458993126,3cyclictest9-21ksoftirqd/000:29:090
27458993125,4cyclictest9-21ksoftirqd/023:53:550
27458993125,4cyclictest9-21ksoftirqd/023:43:040
27458993125,4cyclictest9-21ksoftirqd/022:08:120
27458993125,3cyclictest9-21ksoftirqd/022:30:100
136991310,14ptp4l2746199cyclictest23:50:563
2746199309,19cyclictest17090-21grep21:00:263
2746199306,3cyclictest320-21unixbench_multi20:25:283
27461993025,3cyclictest41-21ksoftirqd/320:41:443
27461993025,3cyclictest41-21ksoftirqd/300:06:273
27461993024,4cyclictest41-21ksoftirqd/322:59:223
27461993024,4cyclictest41-21ksoftirqd/321:52:343
27461993024,4cyclictest41-21ksoftirqd/321:20:533
27461993010,18cyclictest24101-21/usr/sbin/munin23:40:283
27461993010,17cyclictest28606-21fschecks_count21:30:193
27460993024,4cyclictest33-21ksoftirqd/222:53:512
27460993024,4cyclictest33-21ksoftirqd/221:24:542
27460993024,4cyclictest33-21ksoftirqd/220:10:562
27460993024,4cyclictest33-21ksoftirqd/220:07:262
27460993019,9cyclictest33-21ksoftirqd/220:15:282
27460993019,9cyclictest33-21ksoftirqd/220:15:282
27460993019,9cyclictest33-21ksoftirqd/219:25:222
27459993025,3cyclictest25-21ksoftirqd/100:15:491
27459993025,2cyclictest25-21ksoftirqd/100:35:181
27459993024,4cyclictest25-21ksoftirqd/122:15:431
27459993024,4cyclictest25-21ksoftirqd/122:15:431
27459993024,4cyclictest25-21ksoftirqd/121:40:001
27459993024,4cyclictest25-21ksoftirqd/121:19:181
27459993024,4cyclictest25-21ksoftirqd/121:19:181
27459993024,4cyclictest25-21ksoftirqd/120:17:041
27459993024,4cyclictest25-21ksoftirqd/120:17:041
27459993024,4cyclictest25-21ksoftirqd/119:39:291
27459993024,4cyclictest25-21ksoftirqd/119:28:271
27459993024,4cyclictest25-21ksoftirqd/100:05:071
27459993018,10cyclictest25-21ksoftirqd/120:25:261
27458993025,3cyclictest9-21ksoftirqd/023:38:140
27458993025,3cyclictest9-21ksoftirqd/022:44:550
27458993025,3cyclictest9-21ksoftirqd/021:22:070
27458993025,3cyclictest9-21ksoftirqd/021:18:260
27458993025,3cyclictest9-21ksoftirqd/021:18:250
27458993025,3cyclictest9-21ksoftirqd/020:10:120
27458993025,3cyclictest9-21ksoftirqd/000:39:540
27458993025,3cyclictest111rcuc/020:30:180
27458993024,4cyclictest9-21ksoftirqd/021:09:020
2746199299,18cyclictest383-21basename19:20:173
2746199298,2cyclictest0-21swapper/300:15:583
2746199295,3cyclictest0-21swapper/322:20:143
27461992924,3cyclictest41-21ksoftirqd/320:14:293
27461992924,3cyclictest41-21ksoftirqd/300:00:443
27461992923,4cyclictest41-21ksoftirqd/322:40:483
27461992923,4cyclictest41-21ksoftirqd/300:31:413
27459992924,3cyclictest25-21ksoftirqd/120:31:371
27459992923,4cyclictest25-21ksoftirqd/123:46:501
27459992923,4cyclictest25-21ksoftirqd/123:46:501
27459992923,4cyclictest25-21ksoftirqd/123:02:091
27459992923,4cyclictest25-21ksoftirqd/121:24:321
27459992923,4cyclictest25-21ksoftirqd/120:53:351
27458992924,3cyclictest9-21ksoftirqd/022:38:570
27458992924,3cyclictest9-21ksoftirqd/022:22:050
27458992924,3cyclictest9-21ksoftirqd/020:25:500
27458992924,3cyclictest9-21ksoftirqd/019:17:040
27458992924,3cyclictest9-21ksoftirqd/000:30:210
27458992923,4cyclictest9-21ksoftirqd/021:46:290
27458992923,4cyclictest9-21ksoftirqd/021:46:290
27458992923,4cyclictest9-21ksoftirqd/019:38:210
27458992922,5cyclictest9-21ksoftirqd/022:19:270
27458992922,5cyclictest9-21ksoftirqd/022:19:270
27458992922,5cyclictest9-21ksoftirqd/020:21:560
2746199287,3cyclictest5034-21/usr/sbin/munin23:00:253
2746199285,5cyclictest0-21swapper/320:05:163
2746199285,4cyclictest1851-21ptp4l21:40:243
27460992823,3cyclictest33-21ksoftirqd/221:55:162
27460992822,4cyclictest33-21ksoftirqd/223:39:472
27460992816,9cyclictest33-21ksoftirqd/219:55:122
27459992822,4cyclictest25-21ksoftirqd/123:40:131
27459992822,4cyclictest25-21ksoftirqd/121:49:591
27459992822,4cyclictest25-21ksoftirqd/121:49:591
27459992822,4cyclictest25-21ksoftirqd/100:32:501
27459992822,4cyclictest25-21ksoftirqd/100:02:061
27459992822,3cyclictest25-21ksoftirqd/121:31:391
27459992821,5cyclictest25-21ksoftirqd/119:13:461
27458992823,3cyclictest9-21ksoftirqd/023:22:560
27458992823,3cyclictest9-21ksoftirqd/020:57:390
27458992823,3cyclictest9-21ksoftirqd/019:22:510
27458992822,4cyclictest9-21ksoftirqd/022:10:460
27458992822,4cyclictest9-21ksoftirqd/021:54:370
27458992822,4cyclictest9-21ksoftirqd/000:12:120
2746199279,16cyclictest8333-21latency_hist22:00:003
2746199278,17cyclictest27135-21ptp4l-jitter21:25:243
2746199277,3cyclictest18381-21cpuspeed00:35:133
27460992722,3cyclictest33-21ksoftirqd/220:21:002
27460992721,4cyclictest33-21ksoftirqd/223:50:332
27460992721,4cyclictest33-21ksoftirqd/220:03:442
27460992720,5cyclictest33-21ksoftirqd/223:57:142
27459992722,3cyclictest25-21ksoftirqd/120:21:131
27459992720,5cyclictest25-21ksoftirqd/122:43:191
27458992722,3cyclictest9-21ksoftirqd/023:34:590
27458992722,3cyclictest9-21ksoftirqd/023:02:480
27458992722,3cyclictest9-21ksoftirqd/020:00:290
27458992722,3cyclictest9-21ksoftirqd/000:00:000
27458992721,4cyclictest9-21ksoftirqd/000:03:300
27460992621,3cyclictest33-21ksoftirqd/223:10:092
27460992621,3cyclictest33-21ksoftirqd/222:30:192
27460992621,3cyclictest33-21ksoftirqd/219:49:572
27460992620,4cyclictest33-21ksoftirqd/223:25:572
27460992619,5cyclictest33-21ksoftirqd/222:05:372
27458992621,3cyclictest9-21ksoftirqd/021:36:340
27458992621,3cyclictest9-21ksoftirqd/021:25:040
27458992621,3cyclictest9-21ksoftirqd/020:07:360
27458992620,4cyclictest9-21ksoftirqd/019:58:340
27458992620,3cyclictest9-21ksoftirqd/000:21:090
2746199254,3cyclictest9326-21irqrtprio22:00:183
2746199251,4cyclictest32681-21sed23:55:263
27460992520,3cyclictest33-21ksoftirqd/200:25:132
27459992520,3cyclictest25-21ksoftirqd/123:57:321
27459992520,3cyclictest25-21ksoftirqd/119:40:061
27458992519,4cyclictest9-21ksoftirqd/022:58:270
27460992418,3cyclictest33-21ksoftirqd/222:15:002
27459992419,3cyclictest25-21ksoftirqd/123:30:021
27459992419,3cyclictest25-21ksoftirqd/122:37:261
27458992420,2cyclictest9-21ksoftirqd/023:15:180
27458992420,2cyclictest9-21ksoftirqd/023:15:180
27460992318,3cyclictest33-21ksoftirqd/222:15:262
27460992318,3cyclictest33-21ksoftirqd/222:15:262
27459992318,3cyclictest25-21ksoftirqd/121:12:051
27458992318,3cyclictest9-21ksoftirqd/021:44:290
27459992216,4cyclictest25-21ksoftirqd/100:13:271
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional