You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-14 - 21:34
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Thu May 14, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
95352271178,72sleep00-21swapper/00
115402265192,25sleep20-21swapper/22
115412262181,46sleep30-21swapper/33
1173499250243,4cyclictest60750irq/130-enp2s00
1173699239232,4cyclictest325-21systemd-journal1
113982226188,24sleep10-21swapper/11
1174199204197,5cyclictest16421-21cron2
1174699157151,4cyclictest16414-21munin-run3
127662600,1sleep10-21swapper/11
121392530,10sleep335-21ksoftirqd/33
277112440,1sleep20-21swapper/22
193662430,1sleep10-21swapper/11
126912420,1sleep20-21swapper/22
272902400,1sleep30-21swapper/33
220292400,3sleep322031-21munin-plugin-st3
199752400,2sleep30-21swapper/33
255022350,4sleep3341rcuc/33
11741992912,14cyclictest11472-21latency_hist2
44832270,2sleep10-21swapper/11
1173499267,3cyclictest111rcu_preempt0
11734992623,1cyclictest91ksoftirqd/00
11741992518,4cyclictest20588-21sh2
288082240,2sleep20-21swapper/22
11741992417,4cyclictest5202-21munin-run2
11741992417,4cyclictest21263-21sleep2
11741992416,5cyclictest10208-21perf2
1174199241,20cyclictest17714-21munin-run2
1173499242,10cyclictest9-21ksoftirqd/00
11734992419,4cyclictest9-21ksoftirqd/00
283492230,2sleep00-21swapper/00
1174199235,16cyclictest0-21swapper/22
1174199233,17cyclictest5744-21latency_hist2
1174199232,4cyclictest14972-21cups-browsed2
11741992314,5cyclictest512-21dbus-daemon2
1174199230,5cyclictest17619-21http2
11734992318,3cyclictest29462-21/usr/sbin/munin0
1173499231,2cyclictest111rcu_preempt0
22762220,9sleep228-21ksoftirqd/22
11746992217,3cyclictest2226-21sendmail3
1174699220,20cyclictest0-21swapper/33
1174699220,20cyclictest0-21swapper/33
1174199223,17cyclictest6956-21cat2
1174199223,17cyclictest15603-21cat2
1174199223,17cyclictest14398-21awk2
11741992214,5cyclictest325-21systemd-journal2
1174199220,5cyclictest24767-21basename2
1174199220,19cyclictest18755-21diskstats2
11734992218,2cyclictest91ksoftirqd/00
1173499221,18cyclictest12895-21tr0
11746992115,4cyclictest4391-21diskstats3
11746992115,4cyclictest25968-21ls3
11746992114,5cyclictest325-21systemd-journal3
11746992114,4cyclictest3834-21diskstats3
1174699211,18cyclictest15218-21sed3
1174199213,16cyclictest9338-21latency_hist2
11741992116,3cyclictest14362-21sed2
11741992116,3cyclictest14362-21sed2
1174199211,3cyclictest7833-1kworker/2:1H2
1174199211,16cyclictest25585-21gltestperf2
1174199210,4cyclictest31256-21apt-config2
1174199210,19cyclictest0-21swapper/22
11736992116,3cyclictest16300-21sed1
11736992115,4cyclictest22517-21seq1
1173499218,3cyclictest199792timerandwakeup0
1173499216,8cyclictest111rcu_preempt0
1173499213,10cyclictest31631-21apt-get0
11734992119,1cyclictest91ksoftirqd/00
11734992117,2cyclictest9-21ksoftirqd/00
11734992116,3cyclictest20071-21if_err_enp3s00
11734992114,4cyclictest23310-21dump-pmu-power0
1173499210,2cyclictest111rcu_preempt0
28892200,2sleep20-21swapper/22
11746992017,2cyclictest0-21swapper/33
11746992017,2cyclictest0-21swapper/33
11746992015,3cyclictest30362-21grep3
11746992015,3cyclictest22940-21aten2_r9power_c3
11746992014,4cyclictest28302-21cat3
11746992014,4cyclictest18319-21apt3
11746992014,4cyclictest1676-21sed3
1174199203,14cyclictest0-21swapper/22
11741992015,3cyclictest2210-21ntp_states2
11741992015,3cyclictest19039-21cpuspeed_turbos2
11741992015,3cyclictest11415-21sed2
11741992014,4cyclictest22547-21seq2
1174199201,3cyclictest31025-21munin-run2
1174199201,3cyclictest18522-21cron2
1174199201,17cyclictest26321-21munin-run2
1174199201,16cyclictest325-21systemd-journal2
1174199201,16cyclictest325-21systemd-journal2
1174199201,16cyclictest20852-1kworker/2:2H2
1174199201,16cyclictest20852-1kworker/2:2H2
1174199200,4cyclictest325-21systemd-journal2
1173699209,9cyclictest516-21avahi-daemon1
11736992016,2cyclictest21-21ksoftirqd/11
11736992015,3cyclictest3028-21seq1
11736992015,3cyclictest29866-21sh1
11736992015,3cyclictest29558-21cut1
11736992015,3cyclictest2955-21/usr/sbin/munin1
11736992015,3cyclictest2148-21tr1
11736992015,3cyclictest1985-21seq1
11736992015,3cyclictest17463-21seq1
11736992014,4cyclictest9186-21seq1
11736992014,4cyclictest3392-21apt-get1
11736992014,4cyclictest24727-21seq1
11736992014,4cyclictest15388-21seq1
11736992013,4cyclictest8742-21cat1
11736992013,4cyclictest30577-21grep1
11736992010,6cyclictest16705-21apt-get1
1173499203,14cyclictest4228-21grep0
11734992016,3cyclictest9-21ksoftirqd/00
11734992016,3cyclictest9-21ksoftirqd/00
11734992015,3cyclictest5064-21/usr/sbin/munin0
11734992015,3cyclictest1662-21wc0
11734992014,4cyclictest3772-21sed0
11734992014,4cyclictest2787-21cut0
11734992014,4cyclictest22418-21/usr/sbin/munin0
63632190,1sleep30-21swapper/33
11746991917,1cyclictest0-21swapper/33
11746991916,2cyclictest0-21swapper/33
11746991914,3cyclictest8517-21sendmail_mailst3
11746991914,3cyclictest26171-21cat3
11746991914,3cyclictest25397-21cat3
11746991914,3cyclictest24134-21cat3
11746991914,3cyclictest22145-21unixbench-2d3
11746991914,3cyclictest19424-21/usr/sbin/munin3
11746991914,3cyclictest18503-21cat3
11746991914,3cyclictest16132-21expr3
11746991914,3cyclictest1571-21kernelversion3
11746991914,3cyclictest14126-21sh3
11746991913,4cyclictest3269-21awk3
11746991913,4cyclictest14577-21cut3
11741991914,3cyclictest7262-21latency_hist2
11741991914,3cyclictest31629-21cut2
11741991914,3cyclictest31629-21cut2
11741991914,3cyclictest1652-21cut2
11741991914,3cyclictest14052-21cpuspeed_turbos2
11741991913,4cyclictest11708-21cut2
11741991912,4cyclictest32621-21grep2
1174199191,17cyclictest20852-1kworker/2:2H2
11741991911,5cyclictest10851-21cron2
1174199190,6cyclictest1956-21ps2
1174199190,3cyclictest20852-1kworker/2:2H2
1174199190,17cyclictest20852-1kworker/2:2H2
1174199190,16cyclictest7816-21sendmail2
1174199190,16cyclictest1022-21munin-run2
1173699194,7cyclictest21-21ksoftirqd/11
1173699193,9cyclictest0-21swapper/11
11736991915,2cyclictest9590-21sh1
11736991915,2cyclictest23543-21/usr/sbin/munin1
11736991914,3cyclictest8070-21ls1
11736991914,3cyclictest4295-21seq1
11736991914,3cyclictest29393-21seq1
11736991914,3cyclictest28412-21latency_hist1
11736991914,3cyclictest25123-21if_err_enp2s01
11736991914,3cyclictest21172-21seq1
11736991914,3cyclictest20832-21/usr/sbin/munin1
11736991914,3cyclictest20052-21seq1
11736991914,3cyclictest19651-21seq1
11736991914,3cyclictest17583-21ls1
11736991914,3cyclictest14882-21rt-features1
11736991914,3cyclictest14241-21processes1
11736991914,3cyclictest14241-21processes1
11736991914,3cyclictest13526-21seq1
11736991914,3cyclictest10704-21mailstats1
11736991914,3cyclictest10448-21acpi1
11736991914,3cyclictest10448-21acpi1
11736991913,4cyclictest24647-21seq1
11736991913,4cyclictest21319-21mailstats1
11736991913,4cyclictest2000-21mailstats1
11736991912,5cyclictest21714-21awk1
1173699190,16cyclictest6895-21turbostat1
1173499191,7cyclictest8461-21apt0
11734991917,1cyclictest0-21swapper/00
11734991916,2cyclictest0-21swapper/00
11734991916,2cyclictest0-21swapper/00
11734991915,3cyclictest683-21snmpd0
11734991915,2cyclictest20358-21/usr/sbin/munin0
11734991914,3cyclictest31428-21interrupts0
11734991914,3cyclictest31428-21interrupts0
11734991914,3cyclictest18050-21awk0
11734991914,3cyclictest17491-21sed0
11734991914,3cyclictest17314-21/usr/sbin/munin0
11734991914,3cyclictest14043-21cpuspeed0
11734991914,3cyclictest13862-21grep0
11734991914,3cyclictest11490-21basename0
11734991913,4cyclictest668-21runrttasks0
11734991913,4cyclictest24825-21sed0
11734991913,4cyclictest15696-21grep0
11734991913,4cyclictest15007-21cut0
11734991913,4cyclictest15007-21cut0
11734991913,4cyclictest10412-21ntp_states0
11734991912,4cyclictest28565-21grep0
1174699189,5cyclictest2974-21apt-get3
1174699183,9cyclictest17332-21apt-get3
11746991816,1cyclictest0-21swapper/33
11746991816,1cyclictest0-21swapper/33
11746991816,1cyclictest0-21swapper/33
11746991816,1cyclictest0-21swapper/33
11746991816,1cyclictest0-21swapper/33
11746991814,3cyclictest10509-21ntp_states3
11746991814,2cyclictest8620-21grep3
11746991814,2cyclictest5989-21/usr/sbin/munin3
11746991813,3cyclictest32102-21forks3
11746991813,3cyclictest23413-21proc_pri3
11746991813,3cyclictest182012chrt3
11746991813,3cyclictest13188-21apt3
11746991813,3cyclictest13188-21apt3
11746991812,4cyclictest31017-21cron3
11746991812,4cyclictest13064-21seq3
1174699181,16cyclictest0-21swapper/33
11741991814,2cyclictest18525-21latency_hist2
11741991813,3cyclictest7406-21ls2
11741991813,3cyclictest23911-21expr2
11741991813,3cyclictest22134-21sed2
11741991813,3cyclictest20951-21cat2
11741991813,3cyclictest18398-21processes2
11741991813,3cyclictest15676-21rt-features2
11741991813,3cyclictest13170-21cat2
1174199181,1cyclictest0-21swapper/22
1174199181,16cyclictest0-21swapper/22
1173699189,2cyclictest30713-21latency_hist1
11736991814,2cyclictest25618-21/usr/sbin/munin1
11736991814,2cyclictest21533-21aten2.4-expect1
11736991814,2cyclictest11094-21acpi1
11736991813,3cyclictest668-21runrttasks1
11736991813,3cyclictest668-21runrttasks1
11736991813,3cyclictest6397-21dump-pmu-power1
11736991813,3cyclictest5851-21expr1
11736991813,3cyclictest32339-21sh1
11736991813,3cyclictest30764-21/usr/sbin/munin1
11736991813,3cyclictest30764-21/usr/sbin/munin1
11736991813,3cyclictest27579-21expr1
11736991812,4cyclictest1152-21sed1
1173699181,14cyclictest17266-21ls1
1173499181,8cyclictest9-21ksoftirqd/00
11734991815,2cyclictest0-21swapper/00
11734991815,2cyclictest0-21swapper/00
11734991814,2cyclictest7501-21/usr/sbin/munin0
11734991814,2cyclictest25903-21ntp_offset0
11734991814,2cyclictest20832-21/usr/sbin/munin0
11734991813,3cyclictest668-21runrttasks0
11734991813,3cyclictest26407-21sed0
11734991813,3cyclictest14764-21aten2.4-expect0
11734991812,3cyclictest629-21sh0
11734991810,5cyclictest524-21in:imuxsock0
1173499180,16cyclictest6371-21cron0
11746991713,2cyclictest11899-21/usr/sbin/munin3
11746991712,3cyclictest5637-21if_enp2s03
11746991712,3cyclictest5445-21ntp_kernel_pll_3
11746991712,3cyclictest31155-21cat3
11746991712,3cyclictest31155-21cat3
11746991712,3cyclictest29995-21latency3
11746991712,3cyclictest22777-21cat3
11746991712,3cyclictest21737-21nfs4_client3
11746991712,3cyclictest19203-21expr3
11746991712,3cyclictest17288-21cat3
11746991712,3cyclictest16761-21ntp_kernel_pll_3
11746991712,3cyclictest10184-21xargs3
11746991711,4cyclictest31563-21grep3
1174699170,16cyclictest0-21swapper/33
1174699170,16cyclictest0-21swapper/33
11741991714,2cyclictest0-21swapper/22
11741991712,3cyclictest27809-21wc2
1173699179,5cyclictest25112-21apt-get1
11736991714,2cyclictest17355-21irqstats1
11736991713,3cyclictest21-21ksoftirqd/11
11736991713,2cyclictest6626-21/usr/sbin/munin1
11736991712,3cyclictest28714-21seq1
11736991711,4cyclictest31539-21grep1
1173499179,5cyclictest21645-21unixbench_singl0
11734991714,2cyclictest29813-21/usr/sbin/munin0
11734991712,3cyclictest7144-21switchtime0
11734991712,3cyclictest668-21runrttasks0
11734991712,3cyclictest668-21runrttasks0
11734991712,3cyclictest5477-21aten2_r9power_c0
11734991712,3cyclictest28262-21cut0
1173499171,14cyclictest325-21systemd-journal0
11734991711,3cyclictest19293-21awk0
11734991710,4cyclictest18805-21basename0
1173699169,4cyclictest18795-21apt-get1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional