You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-27 - 13:09
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 27, 2025 00:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
71582313239,63sleep00-21swapper/00
73302248185,50sleep20-21swapper/22
72272248175,25sleep30-21swapper/33
70892228192,24sleep10-21swapper/11
1284921700,4sleep1746099cyclictest1
2351721560,2sleep10-21swapper/11
249602510,2sleep00-21swapper/00
52342490,2sleep20-21swapper/22
32452430,1sleep20-21swapper/22
746599291,5cyclictest28-21ksoftirqd/22
747099277,17cyclictest0-21swapper/33
746599271,6cyclictest28-21ksoftirqd/22
746599270,5cyclictest28-21ksoftirqd/22
40242270,1sleep30-21swapper/33
747099265,18cyclictest31867-21sendmail-mta3
7470992611,12cyclictest16512-21wc3
7470992611,12cyclictest16512-21wc3
746599262,7cyclictest28-21ksoftirqd/22
7465992621,3cyclictest271rcuc/22
746599260,7cyclictest28-21ksoftirqd/22
747099255,17cyclictest0-21swapper/33
746599253,7cyclictest28-21ksoftirqd/22
7465992521,2cyclictest271rcuc/22
746599251,6cyclictest28-21ksoftirqd/22
746599250,7cyclictest28-21ksoftirqd/22
746599250,11cyclictest28-21ksoftirqd/22
747099245,3cyclictest35-21ksoftirqd/33
747099244,17cyclictest0-21swapper/33
747099243,18cyclictest6416-21sendmail-mta3
747099243,18cyclictest4173-21sendmail-mta3
747099243,18cyclictest14593-21sendmail-mta3
747099242,20cyclictest340-21systemd-journal3
747099241,6cyclictest8621-21munin-run3
747099241,16cyclictest111rcu_preempt3
746599247,9cyclictest28-21ksoftirqd/22
746599245,9cyclictest31351-21taskset2
7465992421,2cyclictest271rcuc/22
746599241,6cyclictest28-21ksoftirqd/22
746599240,7cyclictest28-21ksoftirqd/22
746599240,6cyclictest28-21ksoftirqd/22
746599240,6cyclictest28-21ksoftirqd/22
746599240,15cyclictest28-21ksoftirqd/22
7460992418,4cyclictest21-21ksoftirqd/11
747099234,17cyclictest7328-21sendmail-mta3
747099233,17cyclictest32506-21sendmail-mta3
747099232,18cyclictest30653-21sendmail-mta3
747099232,18cyclictest30653-21sendmail-mta3
747099232,18cyclictest0-21swapper/33
747099231,5cyclictest13587-21munin-run3
746599238,8cyclictest28-21ksoftirqd/22
746599235,9cyclictest28-21ksoftirqd/22
746599235,9cyclictest18317-21taskset2
746599233,7cyclictest28-21ksoftirqd/22
746599233,7cyclictest28-21ksoftirqd/22
746599233,6cyclictest28-21ksoftirqd/22
746599233,6cyclictest28-21ksoftirqd/22
746599233,5cyclictest28-21ksoftirqd/22
746599233,11cyclictest28-21ksoftirqd/22
746599232,7cyclictest28-21ksoftirqd/22
746599232,6cyclictest28-21ksoftirqd/22
7465992319,3cyclictest271rcuc/22
7465992318,3cyclictest271rcuc/22
746599231,5cyclictest0-21swapper/22
7465992312,3cyclictest111rcu_preempt2
7465992310,2cyclictest111rcu_preempt2
746599230,14cyclictest28-21ksoftirqd/22
7460992317,3cyclictest27465-21sed1
7457992315,5cyclictest517-21dbus-daemon0
296812230,2sleep20-21swapper/22
296812230,2sleep20-21swapper/22
747099228,2cyclictest0-21swapper/33
747099223,17cyclictest993-21cat3
747099223,17cyclictest9295-21sendmail-mta3
747099223,17cyclictest7643-21sendmail-mta3
747099223,17cyclictest18372-21sendmail-mta3
747099223,17cyclictest13989-21sendmail-mta3
747099222,18cyclictest10478-21latency_hist3
747099221,18cyclictest517-21dbus-daemon3
747099221,18cyclictest30572-21munin-run3
747099221,18cyclictest27576-21apt-get3
747099221,18cyclictest2270-21munin-run3
746599228,4cyclictest20715-21taskset2
746599225,9cyclictest28-21ksoftirqd/22
746599225,5cyclictest28-21ksoftirqd/22
746599223,6cyclictest28-21ksoftirqd/22
7465992218,3cyclictest271rcuc/22
7465992212,2cyclictest111rcu_preempt2
7465992210,3cyclictest111rcu_preempt2
746099227,5cyclictest517-21dbus-daemon1
745799222,19cyclictest0-21swapper/00
7457992215,4cyclictest340-21systemd-journal0
745799221,19cyclictest16493-21ls0
745799221,19cyclictest16493-21ls0
747099213,16cyclictest20234-21procmail3
747099211,4cyclictest1619-21munin-run3
747099211,3cyclictest14541-21pluginstate3
747099211,18cyclictest520-21rs:main3
747099210,3cyclictest3091-21ls3
746599219,3cyclictest111rcu_preempt2
746599214,9cyclictest28-21ksoftirqd/22
7465992118,2cyclictest271rcuc/22
7465992117,2cyclictest271rcuc/22
7465992117,2cyclictest271rcuc/22
7465992112,2cyclictest111rcu_preempt2
7465992111,3cyclictest111rcu_preempt2
746599210,8cyclictest28-21ksoftirqd/22
7460992115,4cyclictest2951-21seq1
7460992115,4cyclictest11757-21seq1
7457992114,4cyclictest662-21runrttasks0
7457992114,4cyclictest32673-21ls0
7457992114,4cyclictest30592-40mandb0
7470992016,2cyclictest22814-21procmail3
7470992015,3cyclictest12361-21sendmail-mta3
747099201,3cyclictest5830-1kworker/3:1H3
747099201,3cyclictest5830-1kworker/3:1H3
747099201,3cyclictest20858-21/usr/sbin/munin3
7470992013,4cyclictest5750-21sendmail3
7470992013,4cyclictest17717-21sleep3
747099201,2cyclictest0-21swapper/33
7470992012,5cyclictest31059-21apt-get3
747099201,17cyclictest29960-21latency_hist3
747099201,17cyclictest0-21swapper/33
747099201,17cyclictest0-21swapper/33
747099201,17cyclictest0-21swapper/33
747099201,11cyclictest0-21swapper/33
746599203,5cyclictest0-21swapper/22
746599201,6cyclictest28-21ksoftirqd/22
746599201,6cyclictest28-21ksoftirqd/22
746599201,6cyclictest0-21swapper/22
746599201,6cyclictest0-21swapper/22
7465992014,4cyclictest4262-21cat2
746599200,7cyclictest28-21ksoftirqd/22
746599200,7cyclictest28-21ksoftirqd/22
746599200,6cyclictest28-21ksoftirqd/22
746099207,4cyclictest40252expr1
7460992015,3cyclictest32257-21/usr/sbin/munin1
7460992015,3cyclictest25257-21threads1
7460992015,3cyclictest23487-21seq1
7460992015,3cyclictest1-21systemd1
7460992014,4cyclictest7211-21seq1
7460992014,4cyclictest10630-21awk1
7460992013,4cyclictest340-21systemd-journal1
7460992012,5cyclictest517-21dbus-daemon1
745799204,3cyclictest111rcu_preempt0
745799203,7cyclictest340-21systemd-journal0
7457992014,4cyclictest7659-21seq0
7457992014,4cyclictest340-21systemd-journal0
7457992014,4cyclictest31745-21sed0
7457992014,4cyclictest2090-21seq0
7457992013,5cyclictest517-21dbus-daemon0
7457992013,4cyclictest30430-21sort0
7457992013,4cyclictest11915-21cut0
7470991914,3cyclictest22393-21munin-plugin-st3
7470991914,3cyclictest20588-21if_err_enp2s03
747099191,2cyclictest0-21swapper/33
747099191,16cyclictest20551-21cron3
747099190,3cyclictest5830-1kworker/3:1H3
747099190,17cyclictest16924-21cat3
746599190,7cyclictest28-21ksoftirqd/22
746599190,6cyclictest28-21ksoftirqd/22
746599190,6cyclictest28-21ksoftirqd/22
7460991914,3cyclictest436-21/usr/sbin/munin1
7460991914,3cyclictest32083-21sed1
7460991914,3cyclictest29318-21cat1
7460991914,3cyclictest28785-21/usr/sbin/munin1
7460991914,3cyclictest2724-21awk1
7460991914,3cyclictest22002-21wc1
7460991914,3cyclictest16501-21/usr/sbin/munin1
7460991914,3cyclictest13642-21grep1
7460991914,3cyclictest10575-21seq1
7460991913,4cyclictest8194-21awk1
7460991913,4cyclictest4568-21/usr/sbin/munin1
7460991913,4cyclictest27534-21packagekitd1
7460991913,4cyclictest21121-21seq1
7460991913,4cyclictest20603-21if_err_enp3s01
7460991913,4cyclictest15984-21seq1
7460991913,4cyclictest11125-21cat1
746099190,17cyclictest26869-21sendmail-mta1
7457991916,2cyclictest0-21swapper/00
7457991914,3cyclictest25953-21sed0
7457991914,3cyclictest21308-21head0
7457991914,3cyclictest21125-21/usr/sbin/munin0
7457991914,3cyclictest17020-21/usr/sbin/munin0
7457991914,3cyclictest13299-21ntp_states0
7457991913,4cyclictest6392-21basename0
7457991913,4cyclictest634-21snmpd0
7457991913,4cyclictest4902-21hostname0
7457991913,4cyclictest32459-21sort0
7457991913,4cyclictest12910-21ls0
7457991913,4cyclictest1092-21diskstats0
7457991912,5cyclictest517-21dbus-daemon0
7457991912,4cyclictest9523-21cron0
745799190,17cyclictest11849-21sed0
186792190,2sleep10-21swapper/11
77752180,1sleep00-21swapper/00
7470991813,3cyclictest22856-21sed3
7470991813,3cyclictest18288-21cron3
7470991812,4cyclictest4526-21sendmail3
7470991812,3cyclictest8757-21cat3
747099181,1cyclictest0-21swapper/33
747099181,15cyclictest28742-21latency_hist3
747099180,15cyclictest0-21swapper/33
7465991813,3cyclictest1212-21basename2
746099189,5cyclictest18569-21apt-get1
7460991816,1cyclictest0-21swapper/11
7460991816,1cyclictest0-21swapper/11
7460991816,1cyclictest0-21swapper/11
7460991816,1cyclictest0-21swapper/11
7460991815,2cyclictest0-21swapper/11
7460991814,2cyclictest9685-21munin-node1
7460991814,2cyclictest8035-21/usr/sbin/munin1
7460991814,2cyclictest25974-21ls1
7460991814,2cyclictest14679-21/usr/sbin/munin1
7460991814,2cyclictest14679-21/usr/sbin/munin1
7460991814,2cyclictest10730-21acpi1
7460991813,3cyclictest9959-21interrupts1
7460991813,3cyclictest634-21snmpd1
7460991813,3cyclictest634-21snmpd1
7460991813,3cyclictest3811-21cut1
7460991813,3cyclictest32047-21cat1
7460991813,3cyclictest28104-21date1
7460991813,3cyclictest19813-21cat1
7460991813,3cyclictest19568-21cat1
7460991812,4cyclictest8770-21sed1
7460991812,4cyclictest517-21dbus-daemon1
7460991812,4cyclictest517-21dbus-daemon1
7460991812,4cyclictest517-21dbus-daemon1
7460991812,4cyclictest30066-21cat1
7460991812,4cyclictest13984-21expr1
7460991811,5cyclictest517-21dbus-daemon1
7460991811,5cyclictest482-21date1
7460991810,5cyclictest17661-21cut1
7460991810,5cyclictest15002-21apt-get1
746099180,17cyclictest0-21swapper/11
745799182,11cyclictest634-21snmpd0
745799182,10cyclictest638-21ntpd0
7457991816,1cyclictest0-21swapper/00
7457991816,1cyclictest0-21swapper/00
7457991816,1cyclictest0-21swapper/00
7457991815,2cyclictest0-21swapper/00
7457991814,2cyclictest6823-21apt-get0
7457991814,2cyclictest22872-21/usr/sbin/munin0
7457991814,2cyclictest1870-21/usr/sbin/munin0
7457991814,2cyclictest12346-21/usr/sbin/munin0
7457991814,2cyclictest10290-21/usr/sbin/munin0
7457991813,3cyclictest8445-21expr0
7457991813,3cyclictest662-21runrttasks0
7457991813,3cyclictest5746-21aten2_r9power_e0
7457991813,3cyclictest5251-21sed0
7457991813,3cyclictest17564-21grep0
7457991812,4cyclictest19010-21fw_packets0
7457991812,4cyclictest16498-21seq0
7457991812,4cyclictest14593-21sendmail-mta0
7457991812,4cyclictest14084-21grep0
7457991812,3cyclictest14544-21aten2.4-expect0
7457991810,3cyclictest19223-21gltestperf0
7470991712,3cyclictest4626-21aten2_r9power_e3
7470991711,4cyclictest12135-21wc3
7460991715,1cyclictest0-21swapper/11
7460991712,3cyclictest5659-21ntp_states1
7460991711,4cyclictest28524-21seq1
745799175,9cyclictest9-21ksoftirqd/00
745799175,10cyclictest9-21ksoftirqd/00
745799172,12cyclictest8979-21head0
7457991713,2cyclictest10991-21aten2_r9power_p0
7457991712,3cyclictest9-21ksoftirqd/00
7457991712,3cyclictest29257-21cat0
7457991712,3cyclictest29257-21cat0
7457991712,3cyclictest28549-21expr0
7457991712,3cyclictest19974-21seq0
7457991712,3cyclictest19182-21aten2_r9power_v0
7457991711,4cyclictest26141-21sed0
745799170,16cyclictest0-21swapper/00
747099163,8cyclictest7750-21apt-get3
7470991612,2cyclictest23419-21grep3
7470991611,3cyclictest25562-21nfs4_client3
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional