You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-10 - 04:59
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 10, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
203162318245,61sleep30-21swapper/33
203232309272,25sleep00-21swapper/00
202792309240,37sleep20-21swapper/22
2050499272268,2cyclictest0-21swapper/22
202002245209,24sleep10-21swapper/11
2847321600,3sleep22050499cyclictest2
2050899154152,1cyclictest0-21swapper/33
2049899112107,3cyclictest0-21swapper/11
20493999592,2cyclictest3868-21strings0
199362580,1sleep00-21swapper/00
218252570,3sleep00-21swapper/00
99412480,1sleep00-21swapper/00
146622450,1sleep20-21swapper/22
67572420,3sleep30-21swapper/33
80532390,1sleep20-21swapper/22
263282390,1sleep20-21swapper/22
244322370,1sleep20-21swapper/22
254462332,2sleep2111rcu_preempt2
20508993010,4cyclictest35-21ksoftirqd/33
173452300,2sleep017352-21gltestperf0
20508992913,4cyclictest35-21ksoftirqd/33
20508992911,4cyclictest35-21ksoftirqd/33
20498992922,4cyclictest29133-21grep1
183732290,6sleep091ksoftirqd/00
183732290,6sleep091ksoftirqd/00
2050899288,4cyclictest35-21ksoftirqd/33
2050899288,3cyclictest35-21ksoftirqd/33
20508992710,4cyclictest35-21ksoftirqd/33
2050899269,8cyclictest35-21ksoftirqd/33
2050899259,4cyclictest35-21ksoftirqd/33
2050899255,4cyclictest35-21ksoftirqd/33
2050899252,8cyclictest0-21swapper/33
2050899249,7cyclictest35-21ksoftirqd/33
2050899248,3cyclictest35-21ksoftirqd/33
20508992417,5cyclictest10333-21gdbus3
20504992411,10cyclictest29738-21awk2
20498992412,6cyclictest10463-21apt-get1
2049899240,11cyclictest263222gltestperf1
20493992411,10cyclictest4223-21switchtime0
59002230,2sleep10-21swapper/11
2050899236,4cyclictest35-21ksoftirqd/33
2050899235,4cyclictest35-21ksoftirqd/33
2050899235,2cyclictest111rcu_preempt3
2050899232,18cyclictest27606-21cat3
20508992316,4cyclictest16311-21dpkg3
20508992316,4cyclictest16311-21dpkg3
20508992310,4cyclictest35-21ksoftirqd/33
2050499234,4cyclictest17059-21awk2
2050499231,20cyclictest10333-21gdbus2
2050899226,4cyclictest35-21ksoftirqd/33
2050899225,8cyclictest111rcu_preempt3
2050899223,6cyclictest35-21ksoftirqd/33
20508992218,3cyclictest35-21ksoftirqd/33
2050899221,6cyclictest0-21swapper/33
2050499224,16cyclictest10255-21cat2
2050499223,17cyclictest8962-21cat2
2050499221,4cyclictest6905-21munin-run2
2050499221,18cyclictest231292chrt2
20504992210,9cyclictest28597-21timerwakeupswit2
20498992215,4cyclictest8060-21grep1
20498992211,7cyclictest5139-21apt-get1
20493992216,3cyclictest23776-21sh0
2050899213,5cyclictest0-21swapper/33
20508992118,2cyclictest341rcuc/33
2050899211,6cyclictest35-21ksoftirqd/33
20508992116,3cyclictest35-21ksoftirqd/33
20508992116,3cyclictest35-21ksoftirqd/33
20508992112,2cyclictest35-21ksoftirqd/33
2050899210,8cyclictest35-21ksoftirqd/33
2050899210,8cyclictest35-21ksoftirqd/33
2050899210,4cyclictest35-21ksoftirqd/33
2050499212,17cyclictest19361-21latency_hist2
2050499212,17cyclictest19361-21latency_hist2
2050499212,17cyclictest14995-21awk2
20504992115,4cyclictest21392-21cut2
20504992115,4cyclictest1079-21diskstats2
20504992115,3cyclictest29498-21gltestperf2
2050499211,4cyclictest11188-21latency_hist2
20504992114,4cyclictest14264-21sh2
2050499211,3cyclictest14761-1kworker/2:2H2
2050499211,3cyclictest14761-1kworker/2:2H2
2050499211,17cyclictest17269-21df_inode2
2050499211,17cyclictest1653-1kworker/2:1H2
2050499210,3cyclictest27815-21munin-run2
20498992116,3cyclictest27669-21irqstats1
20498992115,3cyclictest21-21ksoftirqd/11
20498992113,5cyclictest665-21runrttasks1
20493992116,3cyclictest13527-21kernelversion0
20493992115,4cyclictest5809-21seq0
20493992114,4cyclictest15096-21ls0
20493992114,4cyclictest12489-21apt-get0
220342200,3sleep121-21ksoftirqd/11
2050899209,3cyclictest111rcu_preempt3
2050899209,2cyclictest111rcu_preempt3
2050899206,4cyclictest35-21ksoftirqd/33
2050899206,4cyclictest35-21ksoftirqd/33
2050899204,4cyclictest35-21ksoftirqd/33
2050899203,6cyclictest35-21ksoftirqd/33
2050899202,6cyclictest35-21ksoftirqd/33
2050899201,6cyclictest0-21swapper/33
20508992016,2cyclictest341rcuc/33
2050899201,5cyclictest35-21ksoftirqd/33
2050899201,5cyclictest0-21swapper/33
2050899201,5cyclictest0-21swapper/33
2050899201,5cyclictest0-21swapper/33
20508992015,2cyclictest3857-21threads3
2050899201,4cyclictest35-21ksoftirqd/33
2050899201,4cyclictest0-21swapper/33
2050899201,4cyclictest0-21swapper/33
20508992014,4cyclictest476-21idleruntime3
2050499202,16cyclictest2786-21latency_hist2
20504992016,2cyclictest25422-21aten2_r9power_p2
20504992015,3cyclictest8808-21apt-get2
20504992015,3cyclictest3764-21kernelversion2
20504992015,3cyclictest31815-21cstates2
20504992015,3cyclictest27103-21aten2_r9power_p2
20504992014,4cyclictest31522-21fw_packets2
20504992014,4cyclictest31522-21fw_packets2
20504992014,4cyclictest20211-21expr2
2050499201,3cyclictest781-21sendmail2
2050499201,3cyclictest1653-1kworker/2:1H2
2050499201,17cyclictest8137-21cron2
2050499201,17cyclictest27233-21cat2
2050499201,17cyclictest22697-21latency_hist2
2050499201,16cyclictest0-21swapper/22
2050499200,18cyclictest10988-21latency_hist2
2049899209,8cyclictest6502-21cron1
2049899202,15cyclictest18717-21sort1
20498992016,2cyclictest1044-21/usr/sbin/munin1
20498992015,3cyclictest24780-21seq1
20498992014,4cyclictest21863-21seq1
20498992012,5cyclictest22601-21grep1
20493992016,2cyclictest22080-21df0
20493992015,3cyclictest16078-21df_inode0
20493992015,3cyclictest11339-21sh0
20493992015,3cyclictest11278-21/usr/sbin/munin0
20493992014,4cyclictest9885-21ls0
20493992014,4cyclictest641-21seq0
20493992014,4cyclictest32465-21hostname0
20493992014,4cyclictest2996-21cut0
20493992014,4cyclictest29788-21seq0
20493992014,4cyclictest2872-21sendmail0
20493992014,4cyclictest22866-21ls0
20493992013,4cyclictest9176-21expr0
2049399201,17cyclictest1983-21sed0
2050899199,3cyclictest111rcu_preempt3
2050899199,2cyclictest35-21ksoftirqd/33
2050899192,3cyclictest111rcu_preempt3
2050899191,6cyclictest35-21ksoftirqd/33
2050899191,6cyclictest35-21ksoftirqd/33
2050899191,5cyclictest0-21swapper/33
2050899191,5cyclictest0-21swapper/33
2050899191,4cyclictest0-21swapper/33
20508991914,3cyclictest29649-21cat3
20508991913,4cyclictest31926-21fw_packets3
20508991913,4cyclictest27082-21cut3
20508991911,3cyclictest111rcu_preempt3
2050899190,4cyclictest0-21swapper/33
2050899190,17cyclictest0-21swapper/33
20504991915,2cyclictest5623-21open_files2
20504991915,2cyclictest21839-21aten2_r9power_p2
20504991915,2cyclictest19531-21cpuspeed_turbos2
20504991914,3cyclictest505-21dbus-daemon2
20504991914,3cyclictest4362-21aten2_r9power_c2
20504991914,3cyclictest16825-21cat2
20504991914,3cyclictest13680-21needreboot2
2050499191,3cyclictest21547-21ntp_states2
2050499191,16cyclictest19010-21munin-run2
2050499190,2cyclictest16463-21apt-config2
2050499190,2cyclictest16463-21apt-config2
2050499190,17cyclictest12650-21sed2
2049899198,8cyclictest0-21swapper/11
2049899198,6cyclictest9156-21apt-get1
2049899194,9cyclictest15655-21apt-get1
2049899193,13cyclictest32752-21grep1
2049899191,7cyclictest14157-21head1
20498991915,2cyclictest24010-21sed1
20498991915,2cyclictest1001-21/usr/sbin/munin1
20498991914,3cyclictest30888-21seq1
20498991914,3cyclictest26025-21/usr/sbin/munin1
20498991914,3cyclictest23716-21sed1
20498991914,3cyclictest19606-21/usr/sbin/munin1
20498991914,3cyclictest19101-21sed1
20498991913,4cyclictest20952-21cut1
20498991913,4cyclictest13629-21tr1
20498991913,4cyclictest11235-21cut1
20498991913,3cyclictest3801-21apt-get1
20498991912,4cyclictest25564-21sh1
20498991912,4cyclictest25564-21sh1
20498991912,4cyclictest15065-21cat1
20498991912,4cyclictest15065-21cat1
20498991911,5cyclictest11022-21basename1
2049399199,6cyclictest17677-21apt-get0
20493991916,2cyclictest0-21swapper/00
20493991914,3cyclictest8874-21cut0
20493991914,3cyclictest6890-21cut0
20493991914,3cyclictest27472-21forks0
20493991914,3cyclictest23774-21seq0
20493991914,3cyclictest23774-21seq0
20493991914,3cyclictest23500-21basename0
20493991914,3cyclictest21706-21sendmail_mailst0
20493991914,3cyclictest21333-21apt-get0
20493991914,3cyclictest15544-21ls0
20493991914,3cyclictest12878-21seq0
20493991913,4cyclictest6903-21latency_hist0
20493991913,4cyclictest5440-21expr0
20493991913,4cyclictest5347-21if_err_enp3s00
20493991913,4cyclictest505-21dbus-daemon0
20493991913,4cyclictest26864-21seq0
20493991913,4cyclictest21073-21sh0
20493991913,4cyclictest13190-21seq0
20493991913,3cyclictest8383-21/usr/sbin/munin0
20493991912,4cyclictest27806-21latency_hist0
20493991912,4cyclictest11074-21cpuspeed0
2049399191,16cyclictest28113-21ls0
2049399191,16cyclictest27150-21latency_hist0
2050899181,4cyclictest0-21swapper/33
2050899181,4cyclictest0-21swapper/33
20504991813,3cyclictest2414-21expr2
20504991813,3cyclictest23583-21cat2
20504991813,3cyclictest19336-21fw_packets2
20504991813,3cyclictest18142-21head2
20504991813,3cyclictest11334-21expr2
20504991812,4cyclictest30719-21cat2
20504991812,4cyclictest1456-21expr2
20504991812,3cyclictest29817-21sh2
20504991811,4cyclictest11189-21apt-get2
2050499180,16cyclictest0-21swapper/22
2049899187,8cyclictest0-21swapper/11
2049899183,9cyclictest28364-21apt-get1
2049899183,8cyclictest30393-21apt-get1
2049899182,13cyclictest11421-21tail1
20498991814,2cyclictest8790-21/usr/sbin/munin1
20498991814,2cyclictest21-21ksoftirqd/11
20498991814,2cyclictest17659-21/usr/sbin/munin1
20498991814,2cyclictest17583-21/usr/sbin/munin1
20498991814,2cyclictest17583-21/usr/sbin/munin1
20498991813,3cyclictest29901-21cut1
20498991813,3cyclictest27419-21/usr/sbin/munin1
20498991813,3cyclictest26452-21wc1
20498991813,3cyclictest15267-21cut1
20498991813,3cyclictest1407-21sed1
20498991812,4cyclictest31483-21apt1
20498991812,3cyclictest11183-21cstates1
20498991811,4cyclictest26333-21pmu-power1
20498991811,4cyclictest25274-21grep1
20498991810,4cyclictest15712-21gltestperf1
20493991814,2cyclictest17456-21cpuspeed0
20493991813,3cyclictest7165-21apt0
20493991813,3cyclictest58150irq/130-enp2s00
20493991813,3cyclictest31147-21sh0
20493991813,3cyclictest31147-21sh0
20493991813,3cyclictest31042-21seq0
20493991813,3cyclictest29039-21/usr/sbin/munin0
20493991812,4cyclictest31094-21grep0
20493991812,4cyclictest23908-21ls0
20493991812,4cyclictest21735-21date0
20493991812,4cyclictest14922-21expr0
20493991812,4cyclictest14922-21expr0
20493991812,3cyclictest31467-21/usr/sbin/munin0
20493991812,3cyclictest27657-21ls0
20493991812,3cyclictest25828-21ntp_kernel_pll_0
20504991712,3cyclictest7745-21proc_pri2
20504991712,3cyclictest6517-21seq2
20504991712,3cyclictest30614-21wc2
20504991712,3cyclictest2929-21ls2
2049899179,4cyclictest3173-21aten2_r9power_e1
2049899172,9cyclictest7167-21apt-get1
20498991715,1cyclictest0-21swapper/11
20498991713,2cyclictest2776-21aten2.4-expect1
20498991713,2cyclictest1996-21/usr/sbin/munin1
20498991712,3cyclictest31065-21/usr/sbin/munin1
20498991712,3cyclictest31065-21/usr/sbin/munin1
20498991712,3cyclictest18879-21/usr/sbin/munin1
20498991712,3cyclictest13633-21sed1
20498991711,4cyclictest7236-21cat1
20498991711,4cyclictest19372-21aten2_r9power_p1
20493991713,2cyclictest18879-21/usr/sbin/munin0
20493991712,3cyclictest3756-21sendmail_mailst0
20493991712,3cyclictest30503-21switchtime0
20498991611,3cyclictest665-21runrttasks1
20498991611,3cyclictest12820-21cstates1
20493991610,3cyclictest3344-21grep0
20493991511,2cyclictest6363-21acpi0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional