You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-10-30 - 06:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot4.osadl.org (updated Thu Oct 30, 2025 00:45:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
76882204171,21sleep10-21swapper/119:07:181
134791204175,19phc2sys0-21swapper/319:09:593
76872203169,22sleep00-21swapper/019:07:160
76642203169,23sleep20-21swapper/219:06:572
2696721570,2sleep3839299cyclictest21:55:243
96142600,4sleep10-21swapper/123:30:141
838899591,17cyclictest25077-21timerwakeupswit21:50:272
838899581,11cyclictest1597-21grep00:15:272
838899566,6cyclictest15974-21grep20:30:152
838899561,11cyclictest25541-21grep22:55:292
838899555,15cyclictest2942-21fschecks_time00:20:202
838899554,6cyclictest21153-21sed22:50:002
8392995420,7cyclictest41-21ksoftirqd/319:30:003
838899545,7cyclictest24579-21cpuspeed_turbos00:00:132
838799542,12cyclictest3647-21df_abs21:10:141
838799541,13cyclictest2371-21/usr/sbin/munin00:20:281
838899534,6cyclictest8506-21sed23:25:272
790125336,9sleep00-21swapper/019:10:010
8392995233,3cyclictest41-21ksoftirqd/321:05:253
8392995215,7cyclictest41-21ksoftirqd/321:50:003
8392995215,7cyclictest41-21ksoftirqd/321:50:003
838899513,6cyclictest15073-21unixbench_multi21:30:272
838799513,10cyclictest30352-21cat23:05:281
838799510,17cyclictest0-21swapper/121:09:351
838799510,12cyclictest0-21swapper/120:59:301
838899509,5cyclictest33-21ksoftirqd/221:59:382
838799508,5cyclictest24010-21cstates22:55:141
838799506,7cyclictest253752sleep120:49:231
838799501,12cyclictest10791-21cat19:15:011
838799501,11cyclictest27168-21mailstats20:50:281
838799501,11cyclictest14877-21switchtime20:25:251
305232500,2sleep00-21swapper/021:00:010
248582500,2sleep30-21swapper/319:40:243
8388994942,4cyclictest1204-21cron23:14:592
838899492,6cyclictest321ktimersoftd/221:50:002
838899492,6cyclictest321ktimersoftd/221:50:002
838899492,6cyclictest321ktimersoftd/200:10:142
838899492,6cyclictest13709-21cstates20:25:142
838899491,5cyclictest321ktimersoftd/220:35:162
838899487,4cyclictest33-21ksoftirqd/223:37:392
838899484,8cyclictest19289-21sed19:30:192
838899484,7cyclictest20762-21sed21:45:002
8388994820,6cyclictest33-21ksoftirqd/222:00:142
838899481,7cyclictest21187-21cstates19:35:132
838799483,9cyclictest7061-21dump-pmu-power00:30:001
838799482,11cyclictest24324-21cut21:50:201
838799480,11cyclictest15425-21systemctl22:35:241
8392994712,8cyclictest41-21ksoftirqd/323:15:003
838899475,7cyclictest17739-21sed23:45:172
838799471,12cyclictest17063-21ls23:45:131
8392994611,4cyclictest41-21ksoftirqd/300:05:003
8388994619,6cyclictest33-21ksoftirqd/221:20:182
838799466,5cyclictest18789-21fschecks_count20:35:181
838799460,11cyclictest0-21swapper/122:40:131
838699469,10cyclictest9-21ksoftirqd/023:19:590
8392994513,10cyclictest41-21ksoftirqd/322:05:213
8392994512,7cyclictest41-21ksoftirqd/321:40:113
838799454,9cyclictest13546-21cstates21:30:141
838799450,12cyclictest23567-21latency_hist22:55:001
838799450,12cyclictest19150-21basename19:30:191
838699459,6cyclictest9-21ksoftirqd/023:39:590
134991450,0ptp4l401ktimersoftd/322:51:183
8392994438,3cyclictest41-21ksoftirqd/323:20:003
8392994415,4cyclictest41-21ksoftirqd/320:15:233
8392994413,3cyclictest41-21ksoftirqd/323:00:163
8392994410,9cyclictest41-21ksoftirqd/319:20:013
838899444,6cyclictest10774-21grep21:25:142
838899440,8cyclictest33-21ksoftirqd/220:00:012
838799444,7cyclictest21859-21meminfo20:40:201
838799443,7cyclictest21681-21if_err_enp4s019:35:171
8386994427,8cyclictest9-21ksoftirqd/021:25:250
134991440,1ptp4l401ktimersoftd/300:17:333
8392994337,3cyclictest41-21ksoftirqd/321:55:003
8392994324,7cyclictest41-21ksoftirqd/320:50:253
8392994312,4cyclictest41-21ksoftirqd/322:15:003
838899432,7cyclictest321ktimersoftd/200:34:592
838899432,5cyclictest321ktimersoftd/222:10:002
8388994317,6cyclictest33-21ksoftirqd/223:05:242
838699437,4cyclictest9-21ksoftirqd/023:55:000
8392994238,2cyclictest41-21ksoftirqd/323:25:013
8392994237,3cyclictest41-21ksoftirqd/320:00:013
8392994210,10cyclictest41-21ksoftirqd/323:35:163
838899423,6cyclictest21881-21fschecks_time22:50:202
838899422,6cyclictest321ktimersoftd/200:10:002
8388994220,6cyclictest33-21ksoftirqd/221:15:152
838799423,8cyclictest26374-21df_inode19:45:151
838799423,7cyclictest22058-21meminfo21:45:221
838799423,7cyclictest22058-21meminfo21:45:221
838699428,5cyclictest9-21ksoftirqd/020:55:000
838699426,6cyclictest9-21ksoftirqd/022:15:000
838699426,4cyclictest9-21ksoftirqd/023:34:590
8386994227,5cyclictest9-21ksoftirqd/021:35:250
134991420,0ptp4l401ktimersoftd/321:04:353
8392994136,3cyclictest41-21ksoftirqd/300:15:003
8392994135,3cyclictest41-21ksoftirqd/323:35:003
838799411,10cyclictest12233-21ps19:15:241
8386994111,4cyclictest9-21ksoftirqd/023:00:260
36998410,8rtkit-daemon0-21swapper/021:19:070
839299407,8cyclictest41-21ksoftirqd/322:25:203
8392994034,3cyclictest41-21ksoftirqd/323:55:013
8392994034,3cyclictest41-21ksoftirqd/322:00:163
8392994010,7cyclictest41-21ksoftirqd/323:25:273
838899400,6cyclictest0-21swapper/223:20:152
838899400,6cyclictest0-21swapper/220:45:272
838699409,4cyclictest9-21ksoftirqd/022:50:310
838699407,4cyclictest9-21ksoftirqd/023:09:590
838699404,8cyclictest9-21ksoftirqd/023:14:590
838699404,8cyclictest9-21ksoftirqd/021:10:140
8386994035,3cyclictest9-21ksoftirqd/000:00:010
8386994034,4cyclictest9-21ksoftirqd/019:50:000
8386994034,3cyclictest9-21ksoftirqd/022:20:000
8386994034,3cyclictest9-21ksoftirqd/022:19:590
8386994034,3cyclictest9-21ksoftirqd/022:00:010
8386994034,3cyclictest9-21ksoftirqd/019:30:000
36998400,4rtkit-daemon24174-21iostat19:40:181
839299398,4cyclictest41-21ksoftirqd/319:25:003
839299397,9cyclictest41-21ksoftirqd/320:40:123
839299397,4cyclictest41-21ksoftirqd/322:40:003
839299395,9cyclictest41-21ksoftirqd/319:35:263
839299395,7cyclictest41-21ksoftirqd/320:20:283
8392993934,3cyclictest41-21ksoftirqd/323:00:013
839299393,3cyclictest41-21ksoftirqd/300:30:263
838899394,6cyclictest33-21ksoftirqd/222:30:202
838799393,8cyclictest19884-21irqstats22:45:201
8387993933,3cyclictest6512-21idleruntime-cro23:25:011
838699399,4cyclictest9-21ksoftirqd/020:45:270
838699394,6cyclictest9-21ksoftirqd/023:00:010
838699393,6cyclictest9-21ksoftirqd/022:25:250
8386993935,2cyclictest9-21ksoftirqd/000:14:590
8386993934,3cyclictest9-21ksoftirqd/021:55:000
8386993920,7cyclictest9-21ksoftirqd/000:30:170
36998390,7rtkit-daemon0-21swapper/019:33:400
36998390,5rtkit-daemon4956-21/usr/sbin/munin00:25:150
839299388,4cyclictest41-21ksoftirqd/320:55:123
839299387,8cyclictest41-21ksoftirqd/300:35:163
839299387,7cyclictest41-21ksoftirqd/320:30:253
839299386,8cyclictest41-21ksoftirqd/321:10:163
839299386,4cyclictest41-21ksoftirqd/322:20:143
839299385,4cyclictest41-21ksoftirqd/319:30:213
8392993833,3cyclictest41-21ksoftirqd/323:40:203
8392993833,3cyclictest41-21ksoftirqd/322:35:013
8392993833,3cyclictest41-21ksoftirqd/300:25:173
8392993832,4cyclictest41-21ksoftirqd/321:20:003
8392993832,3cyclictest41-21ksoftirqd/321:20:273
8392993832,3cyclictest41-21ksoftirqd/320:10:143
8392993832,3cyclictest41-21ksoftirqd/319:50:283
839299382,3cyclictest41-21ksoftirqd/321:30:023
838899382,4cyclictest33-21ksoftirqd/220:15:222
8388993818,3cyclictest33-21ksoftirqd/221:39:412
838899380,6cyclictest33-21ksoftirqd/223:50:162
838799384,6cyclictest11630-21iostat_ios20:20:211
838799382,8cyclictest2321-21perl23:15:161
838699387,5cyclictest9-21ksoftirqd/020:40:120
838699387,3cyclictest9-21ksoftirqd/000:05:190
838699386,3cyclictest9-21ksoftirqd/020:20:180
838699385,8cyclictest9-21ksoftirqd/022:39:590
838699384,6cyclictest9-21ksoftirqd/019:20:010
838699384,6cyclictest121rcu_preempt19:50:280
838699384,4cyclictest9-21ksoftirqd/019:55:280
8386993833,3cyclictest9-21ksoftirqd/019:25:010
8386993832,3cyclictest9-21ksoftirqd/023:49:590
8386993832,3cyclictest9-21ksoftirqd/022:45:150
8386993832,2cyclictest9-21ksoftirqd/000:15:190
839299378,4cyclictest41-21ksoftirqd/320:45:193
839299377,4cyclictest41-21ksoftirqd/320:35:213
8392993732,3cyclictest41-21ksoftirqd/323:50:003
8392993732,3cyclictest41-21ksoftirqd/320:25:153
8392993732,3cyclictest41-21ksoftirqd/319:15:003
8392993731,3cyclictest41-21ksoftirqd/319:45:193
8392993731,3cyclictest41-21ksoftirqd/300:05:013
839299371,3cyclictest121rcu_preempt23:55:163
8392993713,7cyclictest41-21ksoftirqd/323:05:143
838899374,7cyclictest33-21ksoftirqd/200:35:232
8388993721,9cyclictest33-21ksoftirqd/222:18:212
8388993721,9cyclictest33-21ksoftirqd/222:18:202
8388993712,7cyclictest33-21ksoftirqd/221:15:002
8387993731,4cyclictest25-21ksoftirqd/100:17:371
838799373,13cyclictest19962-21if_enp4s023:50:201
8387993730,4cyclictest25-21ksoftirqd/121:15:061
8387993730,4cyclictest25-21ksoftirqd/119:28:221
838699379,4cyclictest9-21ksoftirqd/020:30:260
838699375,4cyclictest9-21ksoftirqd/021:05:250
838699375,3cyclictest9-21ksoftirqd/023:20:130
838699374,3cyclictest9-21ksoftirqd/021:20:210
838699373,5cyclictest9-21ksoftirqd/021:40:180
8386993732,3cyclictest9-21ksoftirqd/000:39:590
8386993732,3cyclictest9-21ksoftirqd/000:00:190
8386993731,3cyclictest9-21ksoftirqd/023:39:590
8386993731,3cyclictest9-21ksoftirqd/020:25:190
8386993731,3cyclictest9-21ksoftirqd/020:15:190
8386993731,3cyclictest9-21ksoftirqd/000:20:170
8392993631,3cyclictest41-21ksoftirqd/322:45:223
8392993631,3cyclictest41-21ksoftirqd/322:15:173
8392993631,3cyclictest41-21ksoftirqd/322:15:173
8392993631,3cyclictest41-21ksoftirqd/321:35:113
8392993631,3cyclictest41-21ksoftirqd/321:25:163
8392993631,3cyclictest41-21ksoftirqd/300:20:163
838899364,6cyclictest1999-21ls23:15:142
8388993629,4cyclictest33-21ksoftirqd/222:28:172
838899362,6cyclictest27251-21irqrtprio23:00:182
838799363,14cyclictest4590-21meminfo20:05:221
8387993630,4cyclictest25-21ksoftirqd/122:12:111
8387993629,4cyclictest25-21ksoftirqd/119:56:111
838699367,8cyclictest9-21ksoftirqd/020:00:260
838699366,6cyclictest9-21ksoftirqd/022:20:150
838699365,3cyclictest9-21ksoftirqd/020:05:170
838699363,7cyclictest9-21ksoftirqd/021:30:130
838699363,6cyclictest9-21ksoftirqd/022:30:140
8386993631,3cyclictest9-21ksoftirqd/019:35:180
8386993630,3cyclictest9-21ksoftirqd/023:30:000
8386993630,3cyclictest9-21ksoftirqd/020:40:000
838699362,3cyclictest9-21ksoftirqd/022:40:140
8392993531,3cyclictest41-21ksoftirqd/320:05:353
8392993530,3cyclictest41-21ksoftirqd/322:40:113
8392993530,3cyclictest41-21ksoftirqd/320:00:163
838899353,5cyclictest33-21ksoftirqd/219:21:082
838899352,4cyclictest33-21ksoftirqd/222:35:352
8387993529,4cyclictest25-21ksoftirqd/119:23:131
838799352,12cyclictest10445-21df_inode00:35:171
838699356,3cyclictest9-21ksoftirqd/020:10:160
838699355,2cyclictest121rcu_preempt21:00:150
8386993530,3cyclictest9-21ksoftirqd/022:05:130
8386993530,3cyclictest9-21ksoftirqd/019:41:190
8386993529,3cyclictest9-21ksoftirqd/021:45:150
8386993529,3cyclictest9-21ksoftirqd/021:45:150
838899343,4cyclictest33-21ksoftirqd/222:12:422
838899343,4cyclictest33-21ksoftirqd/219:44:262
8388993429,3cyclictest33-21ksoftirqd/220:20:272
8388993428,4cyclictest33-21ksoftirqd/221:00:552
8388993428,4cyclictest33-21ksoftirqd/219:26:072
8388993422,4cyclictest33-21ksoftirqd/219:15:262
838799349,5cyclictest25-21ksoftirqd/121:01:351
838799344,6cyclictest30173-21unixbench_singl19:50:281
838799342,6cyclictest10070-21ls20:15:271
8387993410,3cyclictest25-21ksoftirqd/120:11:461
8386993429,3cyclictest9-21ksoftirqd/022:00:220
8388993314,6cyclictest33-21ksoftirqd/223:30:202
838899330,4cyclictest33-21ksoftirqd/221:09:352
8387993327,4cyclictest25-21ksoftirqd/121:28:181
8387993327,4cyclictest25-21ksoftirqd/100:04:361
8387993326,4cyclictest25-21ksoftirqd/123:59:301
8388993229,2cyclictest33-21ksoftirqd/220:40:272
8388993227,3cyclictest33-21ksoftirqd/219:10:442
8388993226,4cyclictest33-21ksoftirqd/222:24:242
8388993226,4cyclictest33-21ksoftirqd/219:49:182
8388993226,4cyclictest33-21ksoftirqd/200:26:162
8388993221,4cyclictest33-21ksoftirqd/220:08:372
8387993226,4cyclictest25-21ksoftirqd/123:14:101
8387993226,4cyclictest25-21ksoftirqd/121:42:141
8387993226,4cyclictest25-21ksoftirqd/120:32:381
8388993126,3cyclictest33-21ksoftirqd/200:00:012
8388993113,6cyclictest33-21ksoftirqd/222:40:162
8387993125,4cyclictest25-21ksoftirqd/122:02:201
8387993125,4cyclictest25-21ksoftirqd/120:03:571
8387993124,4cyclictest25-21ksoftirqd/121:37:051
8388993016,7cyclictest33-21ksoftirqd/220:10:182
8387993024,4cyclictest25-21ksoftirqd/121:57:391
8387993024,4cyclictest25-21ksoftirqd/100:06:571
838899292,5cyclictest33-21ksoftirqd/220:51:462
8388992925,2cyclictest33-21ksoftirqd/220:55:182
8388992923,4cyclictest33-21ksoftirqd/219:50:382
838799299,5cyclictest25-21ksoftirqd/123:44:461
8387992923,4cyclictest25-21ksoftirqd/123:37:091
8387992923,4cyclictest25-21ksoftirqd/123:04:591
8387992923,4cyclictest25-21ksoftirqd/122:19:091
8387992923,4cyclictest25-21ksoftirqd/122:19:091
8387992823,3cyclictest25-21ksoftirqd/122:28:321
8387992822,4cyclictest25-21ksoftirqd/123:26:451
8387992722,3cyclictest25-21ksoftirqd/122:20:521
838899260,5cyclictest33-21ksoftirqd/223:40:212
838799265,5cyclictest25-21ksoftirqd/122:08:491
8387992620,4cyclictest25-21ksoftirqd/121:23:531
8387992620,4cyclictest25-21ksoftirqd/100:33:171
8388992520,2cyclictest33-21ksoftirqd/220:00:132
838799242,9cyclictest30570-21irqrtprio00:10:201
8387992318,3cyclictest25-21ksoftirqd/122:32:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional