You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-26 - 18:46
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Fri Dec 26, 2025 12:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
80292275238,24sleep00-21swapper/00
79342268192,41sleep20-21swapper/22
77922232169,51sleep30-21swapper/33
77202229192,25sleep10-21swapper/11
2378421830,4sleep0820199cyclictest0
94432930,5sleep0517-21dbus-daemon0
207242660,1sleep20-21swapper/22
128272550,2sleep30-21swapper/33
128272550,2sleep30-21swapper/33
44592500,3sleep00-21swapper/00
40462500,2sleep00-21swapper/00
129942430,1sleep012997-21awk0
129942430,1sleep012997-21awk0
821199310,29cyclictest10049-21kworker/3:13
56172290,3sleep30-21swapper/33
821199288,18cyclictest0-21swapper/33
821199278,3cyclictest0-21swapper/33
286512270,2sleep10-21swapper/11
821199256,17cyclictest520-21rs:main3
821199256,17cyclictest520-21rs:main3
821199256,17cyclictest35-21ksoftirqd/33
21052250,2sleep30-21swapper/33
821199245,3cyclictest340-21systemd-journal3
821199245,17cyclictest24494-21sendmail-mta3
821199245,17cyclictest10019-21sendmail-mta3
821199241,2cyclictest111rcu_preempt3
821199235,16cyclictest14638-1kworker/3:1H3
821199234,2cyclictest0-21swapper/33
821199234,17cyclictest8223-21cat3
821199234,17cyclictest5245-21sendmail-mta3
821199234,17cyclictest520-21rs:main3
821199234,17cyclictest29844-21sendmail-mta3
821199234,17cyclictest25770-21sendmail-mta3
821199234,17cyclictest14684-21sendmail-mta3
821199233,17cyclictest5906-21sendmail-mta3
821199231,19cyclictest515-21avahi-daemon3
821199230,3cyclictest111rcu_preempt3
8201992318,3cyclictest9-21ksoftirqd/00
821199228,11cyclictest0-21swapper/33
821199223,17cyclictest9410-21sendmail-mta3
821199223,17cyclictest27371-21sendmail-mta3
821199223,17cyclictest1507-21sendmail-mta3
821199223,17cyclictest12816-21sendmail-mta3
821199221,4cyclictest520-21rs:main3
821199221,3cyclictest30030-21memory3
821199221,3cyclictest30030-21memory3
821199221,18cyclictest340-21systemd-journal3
821199220,5cyclictest0-21swapper/33
821199220,4cyclictest14734-1kworker/3:0H3
8201992215,5cyclictest22586-21sh0
821199213,3cyclictest520-21rs:main3
821199212,2cyclictest35-21ksoftirqd/33
8211992118,2cyclictest0-21swapper/33
8211992116,3cyclictest9574-21sh3
8211992116,3cyclictest13354-21cpu3
8211992116,3cyclictest13354-21cpu3
821199211,3cyclictest2223-21apt-get3
821199211,3cyclictest14638-1kworker/3:1H3
821199211,18cyclictest0-21swapper/33
821199210,4cyclictest22612-21plymouth3
821199210,18cyclictest12529-21apt-config3
8207992115,4cyclictest1693-21memory2
8207992115,3cyclictest28441-21kernelversion2
8207992114,4cyclictest22491-21df2
8201992116,3cyclictest22461-21missed_timers0
8201992115,4cyclictest18760-21apt-get0
8211992015,3cyclictest9818-21apt-get3
8211992014,4cyclictest15078-21seq3
8211992013,4cyclictest18010-21expr3
821199201,17cyclictest16571-21munin-run3
821199201,17cyclictest0-21swapper/33
821199200,3cyclictest32082-21wc3
821199200,2cyclictest30782-21ntp_states3
821199200,2cyclictest16744-21aten2_r9power_e3
8207992017,2cyclictest0-21swapper/22
8207992015,3cyclictest15122-21missed_timers2
8207992015,3cyclictest11606-21timerandwakeup2
8207992014,4cyclictest31558-21seq2
8207992014,4cyclictest2528-21memory2
8207992014,4cyclictest20545-21sh2
8207992014,4cyclictest19663-21awk2
8207992013,4cyclictest340-21systemd-journal2
820399205,3cyclictest21-21ksoftirqd/11
8203992014,4cyclictest9502-21cat1
8203992014,3cyclictest950-21apt-get1
820399200,3cyclictest340-21systemd-journal1
820399200,3cyclictest340-21systemd-journal1
8201992015,3cyclictest15685-21idleruntime-cro0
8201992014,4cyclictest662-21runrttasks0
8201992014,4cyclictest662-21runrttasks0
8201992014,4cyclictest634-21snmpd0
8201992014,4cyclictest517-21dbus-daemon0
8201992014,4cyclictest18843-21ntpq0
8201992014,3cyclictest4116-21sed0
820199200,9cyclictest260552switchtime0
821199192,16cyclictest0-21swapper/33
821199192,15cyclictest0-21swapper/33
8211991916,2cyclictest0-21swapper/33
8211991915,3cyclictest3375-21perf3
8211991914,3cyclictest6295-21timerwakeupswit3
8211991913,4cyclictest6295-21irqstats3
821199191,17cyclictest0-21swapper/33
821199191,17cyclictest0-21swapper/33
821199190,3cyclictest29563-21perf3
820799197,9cyclictest11852-21apt-get2
820799197,9cyclictest11852-21apt-get2
820799197,10cyclictest517-21dbus-daemon2
820799196,10cyclictest11121-21unixbench_multi2
8207991917,1cyclictest0-21swapper/22
8207991917,1cyclictest0-21swapper/22
8207991917,1cyclictest0-21swapper/22
8207991916,2cyclictest0-21swapper/22
8207991914,3cyclictest4838-21cut2
8207991914,3cyclictest4720-21cat2
8207991914,3cyclictest29048-21sed2
8207991914,3cyclictest25115-21ls2
8207991914,3cyclictest13064-21expr2
8207991913,4cyclictest8461-21grep2
8207991913,4cyclictest6273-21cut2
8207991913,4cyclictest517-21dbus-daemon2
8207991912,5cyclictest6861-21cat2
8207991912,4cyclictest1660-21dump-pmu-power2
8207991911,5cyclictest340-21systemd-journal2
8203991915,2cyclictest10387-21munin-node1
8203991914,3cyclictest9966-21/usr/sbin/munin1
8203991914,3cyclictest8430-21gltestperf1
8203991914,3cyclictest634-21snmpd1
8203991914,3cyclictest3954-21awk1
8203991914,3cyclictest21692-21/usr/sbin/munin1
8203991914,3cyclictest21155-21seq1
8203991914,3cyclictest20908-21sh1
8203991914,3cyclictest12203-21find1
8203991914,3cyclictest12203-21find1
8203991913,4cyclictest7959-21cat1
8203991913,4cyclictest19537-21seq1
8203991913,4cyclictest1401-21cat1
8203991913,4cyclictest10561-21sed1
8203991913,4cyclictest10314-21gltestperf1
820199192,6cyclictest0-21swapper/00
820199192,10cyclictest25747-21taskset0
8201991915,2cyclictest9797-21irqstats0
8201991915,2cyclictest7095-21/usr/sbin/munin0
8201991915,2cyclictest32147-21/usr/sbin/munin0
8201991914,3cyclictest634-21snmpd0
8201991914,3cyclictest634-21snmpd0
8201991914,3cyclictest634-21snmpd0
8201991914,3cyclictest3602-21cat0
8201991914,3cyclictest30234-21/usr/sbin/munin0
8201991914,3cyclictest25625-21sed0
8201991914,3cyclictest11772-21dump-pmu-power0
8201991914,3cyclictest10641-21sh0
8201991913,4cyclictest28209-21seq0
8201991913,4cyclictest15262-21uname0
820199191,16cyclictest0-21swapper/00
820199190,3cyclictest18430-21unixbench-2d0
820199190,17cyclictest7033-21unixbench_singl0
821199188,6cyclictest24904-21apt-get3
8211991815,2cyclictest19467-21/usr/sbin/munin3
8211991813,3cyclictest8825-21ntp_states3
8211991813,3cyclictest24153-21gltestperf3
8211991813,3cyclictest22404-21seq3
8211991813,3cyclictest14729-21ntp_kernel_pll_3
820799186,2cyclictest17106-21expr2
820799185,11cyclictest517-21dbus-daemon2
820799184,4cyclictest517-21dbus-daemon2
8207991816,1cyclictest0-21swapper/22
8207991816,1cyclictest0-21swapper/22
8207991816,1cyclictest0-21swapper/22
8207991814,2cyclictest479-21processes2
8207991813,3cyclictest7350-21cat2
8207991813,3cyclictest24465-21missed_timers2
8207991813,3cyclictest18248-21cat2
8207991813,3cyclictest17981-21ntp_kernel_pll_2
8207991813,3cyclictest15499-21latency2
8207991813,3cyclictest12138-21awk2
8207991812,4cyclictest517-21dbus-daemon2
8207991812,4cyclictest32589-21diskstats2
8207991812,3cyclictest27008-21cut2
8207991811,4cyclictest517-21dbus-daemon2
8207991811,4cyclictest17960-21/usr/sbin/munin2
8207991811,4cyclictest12736-21df_inode2
8207991811,4cyclictest12736-21df_inode2
820399183,3cyclictest21-21ksoftirqd/11
8203991814,2cyclictest5089-21aten2_r9power_e1
8203991814,2cyclictest15080-21/usr/sbin/munin1
8203991813,3cyclictest9077-21ls1
8203991813,3cyclictest30460-21ls1
8203991813,3cyclictest26708-21sh1
8203991813,3cyclictest25770-21sendmail-mta1
8203991813,3cyclictest23607-21cut1
8203991813,3cyclictest22847-21/usr/sbin/munin1
8203991813,3cyclictest19649-21/usr/sbin/munin1
8203991813,3cyclictest18582-21seq1
8203991813,3cyclictest17571-21sendmail-mta1
8203991813,3cyclictest17347-21interrupts1
8203991813,3cyclictest15662-21pluginstate1
8203991813,3cyclictest15266-21/usr/sbin/munin1
8203991813,3cyclictest11317-21awk1
8203991812,4cyclictest8299-21sed1
8203991812,4cyclictest662-21runrttasks1
8203991812,4cyclictest662-21runrttasks1
8203991812,4cyclictest517-21dbus-daemon1
8203991812,4cyclictest4228-21cat1
8203991812,4cyclictest23676-21/usr/sbin/munin1
8203991812,4cyclictest22688-21if_err_enp3s01
8203991812,3cyclictest22088-21grep1
820399181,1cyclictest0-21swapper/11
8203991811,5cyclictest32420-21grep1
820399180,16cyclictest14097-21ntp_states1
820399180,16cyclictest14097-21ntp_states1
820399180,16cyclictest0-21swapper/11
820399180,16cyclictest0-21swapper/11
8201991816,1cyclictest0-21swapper/00
8201991814,2cyclictest932-21/usr/sbin/munin0
8201991814,2cyclictest5879-21/usr/sbin/munin0
8201991814,2cyclictest31937-21/usr/sbin/munin0
8201991814,2cyclictest15080-21/usr/sbin/munin0
8201991814,2cyclictest14774-21/usr/sbin/munin0
8201991814,2cyclictest10410-21/usr/sbin/munin0
8201991813,3cyclictest634-21snmpd0
8201991813,3cyclictest32507-21cat0
8201991813,3cyclictest30465-21cat0
8201991813,3cyclictest27352-21cat0
8201991813,3cyclictest24073-21expr0
8201991813,3cyclictest21632-21/usr/sbin/munin0
8201991813,3cyclictest20449-21ls0
8201991813,3cyclictest20244-21ls0
8201991813,3cyclictest19402-21pluginstate0
8201991813,3cyclictest13282-21ls0
8201991812,4cyclictest517-21dbus-daemon0
8201991812,4cyclictest32495-21grep0
8201991812,4cyclictest2097-21expr0
8201991812,4cyclictest16945-21cat0
8207991714,2cyclictest0-21swapper/22
8207991713,2cyclictest13707-21gltestperf2
8207991713,2cyclictest13707-21gltestperf2
8207991712,3cyclictest9071-21sort2
8207991712,3cyclictest6128-21swap2
8207991712,3cyclictest3873-21cut2
8207991712,3cyclictest21688-21seq2
8207991712,3cyclictest21633-21acpi2
8207991711,4cyclictest30446-21timerandwakeup2
8207991711,4cyclictest30446-21timerandwakeup2
8207991711,4cyclictest21684-21ntpq2
8207991711,3cyclictest5661-21basename2
820799170,16cyclictest0-21swapper/22
820799170,16cyclictest0-21swapper/22
820799170,16cyclictest0-21swapper/22
820399179,5cyclictest340-21systemd-journal1
8203991713,2cyclictest25244-21cat1
8203991712,3cyclictest7502-21idleruntime-cro1
8203991712,3cyclictest29693-21sed1
8203991712,3cyclictest26937-21/usr/sbin/munin1
8203991712,3cyclictest18743-21acpi1
8203991712,3cyclictest16001-21sendmail-mta1
8203991712,3cyclictest15943-21xargs1
8203991712,3cyclictest13687-21interrupts1
8203991712,3cyclictest12747-21/usr/sbin/munin1
8203991711,4cyclictest5062-21cat1
8203991711,4cyclictest506-21sendmail-mta1
8203991711,4cyclictest13019-21cat1
820399170,1cyclictest0-21swapper/11
820399170,1cyclictest0-21swapper/11
820399170,16cyclictest0-21swapper/11
820399170,15cyclictest517-21dbus-daemon1
8201991715,1cyclictest0-21swapper/00
8201991713,2cyclictest7919-21/usr/sbin/munin0
8201991712,3cyclictest662-21runrttasks0
8201991712,3cyclictest27779-21apt-get0
8201991712,3cyclictest25178-21gzip0
8201991712,3cyclictest2405-21cat0
8201991712,3cyclictest13997-21wc0
8201991712,3cyclictest13997-21wc0
8201991711,4cyclictest9-21ksoftirqd/00
820199170,2cyclictest4220-21cat0
820799169,5cyclictest31717-21sendmail-msp2
8207991611,3cyclictest3124-21sh2
8207991611,3cyclictest10183-21cat2
8207991610,4cyclictest14293-21df2
8203991611,3cyclictest31336-21wc1
8203991611,3cyclictest1784-21aten2_r9power_c1
8201991614,1cyclictest0-21swapper/00
8201991612,2cyclictest9896-21aten2_r9power_p0
8201991610,3cyclictest22610-21idleruntime0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional