You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-23 - 12:16
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 23, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
23652289212,42sleep30-21swapper/33
13082281205,41sleep00-21swapper/00
261599271267,2cyclictest0-21swapper/22
21402263189,25sleep20-21swapper/22
22162254219,23sleep10-21swapper/11
261199166160,3cyclictest32691-21apt-key1
261799165158,5cyclictest32765-21latency_hist3
831821530,1sleep20-21swapper/22
2890421440,2sleep12601-21cyclictest1
2844021420,1sleep10-21swapper/11
790421240,2sleep3261799cyclictest3
742321210,3sleep0260699cyclictest0
260699114110,2cyclictest0-21swapper/00
278892520,1sleep00-21swapper/00
149382470,1sleep30-21swapper/33
315582410,2sleep30-21swapper/33
261799320,30cyclictest14025-21kworker/3:13
277732300,7sleep091ksoftirqd/00
261799281,2cyclictest111rcu_preempt3
261799280,26cyclictest5977-21kworker/3:13
2617992713,7cyclictest111rcu_preempt3
261799267,3cyclictest0-21swapper/33
261799267,17cyclictest0-21swapper/33
261799266,17cyclictest6606-21idleruntime-cro3
261799260,24cyclictest0-21swapper/33
2606992621,3cyclictest21816-21ls0
261799255,3cyclictest0-21swapper/33
261799255,3cyclictest0-21swapper/33
261799255,17cyclictest0-21swapper/33
2617992512,11cyclictest35-21ksoftirqd/33
261799251,17cyclictest35-21ksoftirqd/33
261799245,3cyclictest0-21swapper/33
261799244,17cyclictest10549-21sendmail-mta3
261799244,17cyclictest0-21swapper/33
261799241,5cyclictest340-21systemd-journal3
261799241,17cyclictest515-21avahi-daemon3
2611992418,4cyclictest6268-21sort1
2606992418,4cyclictest7669-21head0
19682240,2sleep10-21swapper/11
261799239,7cyclictest111rcu_preempt3
261799234,17cyclictest0-21swapper/33
261799233,18cyclictest31542-21sendmail-mta3
261799232,19cyclictest520-21rs:main3
261799230,20cyclictest6116-21/usr/sbin/munin3
261599230,11cyclictest138632ntpq2
261799223,17cyclictest26886-21sendmail-mta3
261799223,17cyclictest23838-21latency_hist3
261799223,17cyclictest21449-21latency_hist3
261799223,17cyclictest1488-21sendmail-mta3
261799223,17cyclictest13484-21sendmail-mta3
261799222,18cyclictest0-21swapper/33
2617992217,3cyclictest517-21dbus-daemon3
261799221,18cyclictest5420-21munin-run3
261599220,21cyclictest18841-21kworker/2:22
2611992214,5cyclictest340-21systemd-journal1
2606992215,4cyclictest17510-21diskstats0
261799212,17cyclictest5889-21sendmail-mta3
261799212,17cyclictest5889-21sendmail-mta3
261799212,17cyclictest23356-21sendmail-mta3
261799212,17cyclictest16793-21latency_hist3
261799211,3cyclictest8620-1kworker/3:0H3
261799211,3cyclictest5455-1kworker/3:0H3
261799211,3cyclictest28520-21perf3
261799210,3cyclictest8620-1kworker/3:0H3
261799210,19cyclictest31271-21awk3
2615992112,7cyclictest662-21runrttasks2
261199212,17cyclictest27479-21sendmail-mta1
2611992118,2cyclictest0-21swapper/11
2611992115,4cyclictest10356-21sed1
2606992115,4cyclictest634-21snmpd0
261799202,16cyclictest17343-21cat3
2617992015,3cyclictest1172-21dpkg3
2617992014,4cyclictest31941-21find3
2617992014,4cyclictest12466-21awk3
2617992013,4cyclictest24585-21grep3
261799201,2cyclictest0-21swapper/33
261799201,2cyclictest0-21swapper/33
261799201,17cyclictest340-21systemd-journal3
261799201,17cyclictest0-21swapper/33
261799201,17cyclictest0-21swapper/33
261799200,19cyclictest0-21swapper/33
261599202,16cyclictest23167-21sort2
2615992017,2cyclictest0-21swapper/22
2615992015,3cyclictest28030-21unixbench_multi2
2615992015,3cyclictest26787-21if_err_enp3s02
2615992014,4cyclictest8822-21uptime2
2615992014,4cyclictest8514-21sed2
2615992014,4cyclictest27831-21ls2
2615992014,4cyclictest27585-21seq2
2615992014,4cyclictest20821-21seq2
2615992014,4cyclictest10421-21seq2
2615992014,3cyclictest23675-21sendmail_mailst2
2615992013,5cyclictest18981-21diskstats2
2615992013,4cyclictest28105-21ls2
261199205,3cyclictest21-21ksoftirqd/11
2611992017,2cyclictest0-21swapper/11
2611992017,2cyclictest0-21swapper/11
2611992015,3cyclictest634-21snmpd1
2611992015,3cyclictest21690-21seq1
2611992014,4cyclictest28309-21diskstats1
2611992013,5cyclictest8947-21cut1
2611992011,6cyclictest517-21dbus-daemon1
2606992015,3cyclictest4138-21unixbench_singl0
2606992015,3cyclictest4138-21unixbench_singl0
2606992015,3cyclictest2938-21sendmail-mta0
2606992015,3cyclictest20528-21vmstat0
2606992014,4cyclictest5743-21aten2.4-expect0
2606992014,4cyclictest25643-21cat0
2606992014,4cyclictest19703-21timerandwakeup0
2606992014,4cyclictest10680-21seq0
2617991915,2cyclictest5194-21cat3
2617991914,3cyclictest4605-21cat3
2617991914,3cyclictest4605-21cat3
2617991914,3cyclictest27075-21open_inodes3
2617991914,3cyclictest20416-21sed3
2617991913,4cyclictest24036-21nfs4_client3
261799190,17cyclictest0-21swapper/33
2615991917,1cyclictest0-21swapper/22
2615991917,1cyclictest0-21swapper/22
2615991916,1cyclictest0-21swapper/22
2615991915,2cyclictest5497-21aten2_r9power_v2
2615991915,2cyclictest1570-21/usr/sbin/munin2
2615991914,3cyclictest6843-21cat2
2615991914,3cyclictest6535-21threads2
2615991914,3cyclictest5611-21date2
2615991914,3cyclictest3334-21/usr/sbin/munin2
2615991914,3cyclictest32019-21aten2_r9power_p2
2615991914,3cyclictest24209-21fw_packets2
2615991914,3cyclictest21499-21pluginstate2
2615991914,3cyclictest21499-21pluginstate2
2615991914,3cyclictest21161-21aten2_r9power_c2
2615991914,3cyclictest20989-21proc_pri2
2615991914,3cyclictest19808-21cpu2
2615991914,3cyclictest17443-21ls2
2615991914,3cyclictest15658-21irqstats2
2615991914,3cyclictest13288-21munin-run2
2615991914,3cyclictest10525-21cpu2
2615991914,3cyclictest10310-21sed2
2615991913,4cyclictest29356-21expr2
2615991913,4cyclictest25951-21ls2
2615991912,4cyclictest3335-21cat2
261599190,3cyclictest3717-21apt-get2
261599190,3cyclictest3717-21apt-get2
261599190,17cyclictest17271-21grep2
2611991916,2cyclictest0-21swapper/11
2611991916,2cyclictest0-21swapper/11
2611991916,2cyclictest0-21swapper/11
261199191,5cyclictest0-21swapper/11
2611991915,2cyclictest634-21snmpd1
2611991914,3cyclictest634-21snmpd1
2611991914,3cyclictest3505-21sed1
2611991914,3cyclictest25601-21ls1
2611991914,3cyclictest20722-21sed1
2611991914,3cyclictest20461-21sed1
2611991914,3cyclictest17689-21sed1
2611991914,3cyclictest11850-21open_files1
2611991913,4cyclictest9518-21readlink1
2611991913,4cyclictest31398-21sed1
2611991913,4cyclictest2991-21grep1
2611991913,4cyclictest15452-21seq1
2611991912,5cyclictest9970-21grep1
2611991912,4cyclictest32407-21aten2_r9power_v1
2611991912,4cyclictest2695-21cat1
261199190,17cyclictest23741-21sed1
260699197,10cyclictest17373-21sleep0
260699192,5cyclictest23200-21apt-get0
260699192,15cyclictest791-21stty0
2606991916,2cyclictest0-21swapper/00
2606991915,2cyclictest5375-21/usr/sbin/munin0
2606991915,2cyclictest10464-21irqstats0
2606991914,3cyclictest9489-21latency_hist0
2606991914,3cyclictest8209-21sh0
2606991914,3cyclictest634-21snmpd0
2606991914,3cyclictest340-21systemd-journal0
2606991914,3cyclictest28794-21open_inodes0
2606991914,3cyclictest26175-21open_inodes0
2606991914,3cyclictest24125-21seq0
2606991914,3cyclictest17141-21sed0
2606991914,3cyclictest14429-21sh0
2606991914,3cyclictest14019-21rt-features0
2606991914,3cyclictest0-21swapper/00
2606991913,4cyclictest9694-21cat0
2606991913,4cyclictest5728-21seq0
2606991913,4cyclictest5728-21seq0
2606991913,4cyclictest4348-21seq0
2606991913,4cyclictest31782-21cut0
260699191,2cyclictest30387-21sendmail-mta0
295772180,1sleep00-21swapper/00
2617991813,3cyclictest28460-21if_enp3s03
2617991813,3cyclictest10134-21latency_hist3
2617991812,4cyclictest19754-21irqstats3
261799181,16cyclictest0-21swapper/33
2615991816,1cyclictest0-21swapper/22
2615991813,3cyclictest6093-21cat2
2615991813,3cyclictest24826-21latency2
2615991813,3cyclictest21936-21ls2
2615991813,3cyclictest14110-21cat2
2615991813,3cyclictest12819-21cat2
2615991813,3cyclictest10326-21nfs4_client2
2615991812,4cyclictest32709-21diskstats2
2615991812,4cyclictest14422-21grep2
2615991812,4cyclictest12402-21seq2
261599180,16cyclictest0-21swapper/22
261199188,6cyclictest13554-21apt-get1
2611991816,1cyclictest0-21swapper/11
2611991816,1cyclictest0-21swapper/11
2611991816,1cyclictest0-21swapper/11
2611991814,3cyclictest24671-21/usr/sbin/munin1
2611991814,2cyclictest14999-21/usr/sbin/munin1
2611991813,3cyclictest8291-21ntpq1
2611991813,3cyclictest7069-21seq1
2611991813,3cyclictest6283-21/usr/sbin/munin1
2611991813,3cyclictest30622-21sed1
2611991813,3cyclictest26152-21/usr/sbin/munin1
2611991813,3cyclictest24100-21cat1
2611991813,3cyclictest12967-21/usr/sbin/munin1
2611991812,4cyclictest9414-21sendmail-mta1
2611991812,4cyclictest29822-21sendmail-mta1
2611991812,4cyclictest22069-21pluginstate1
261199181,15cyclictest8048-21sort1
2611991811,5cyclictest4745-21grep1
2611991811,5cyclictest4745-21grep1
261199180,2cyclictest0-21swapper/11
261199180,16cyclictest0-21swapper/11
2606991816,1cyclictest0-21swapper/00
2606991815,2cyclictest6838-21/usr/sbin/munin0
2606991815,2cyclictest0-21swapper/00
2606991814,2cyclictest3334-21/usr/sbin/munin0
2606991814,2cyclictest31340-21/usr/sbin/munin0
2606991814,2cyclictest24689-21apt-get0
2606991814,2cyclictest10373-21/usr/sbin/munin0
2606991813,3cyclictest662-21runrttasks0
2606991813,3cyclictest571-21gdbus0
2606991813,3cyclictest4714-21munin-node0
2606991813,3cyclictest28831-21seq0
2606991813,3cyclictest27636-21seq0
2606991813,3cyclictest22223-21seq0
2606991813,3cyclictest22223-21seq0
2606991813,3cyclictest17882-21cat0
2606991813,3cyclictest16837-21cat0
2606991812,4cyclictest8632-21grep0
2606991812,4cyclictest32415-21grep0
2606991812,4cyclictest25979-21date0
2606991812,4cyclictest22959-21awk0
2606991812,4cyclictest22262-21basename0
2606991812,4cyclictest1913-21cut0
2606991812,4cyclictest15386-21expr0
260699180,16cyclictest0-21swapper/00
2617991715,1cyclictest0-21swapper/33
2617991712,3cyclictest5905-21cpuspeed3
2615991713,2cyclictest23181-21/usr/sbin/munin2
2615991713,2cyclictest15987-21expr2
2615991712,3cyclictest30947-21sendmail-mta2
2615991712,3cyclictest30820-21open_inodes2
2615991712,3cyclictest24671-21/usr/sbin/munin2
2615991712,3cyclictest1984-21cat2
2615991712,3cyclictest19767-21dump-pmu-power2
2615991712,3cyclictest17720-21cut2
2615991712,3cyclictest15360-21open_inodes2
2615991711,4cyclictest30726-21sed2
2615991711,4cyclictest2711-21cat2
261599170,16cyclictest0-21swapper/22
261199177,8cyclictest28517-21idleruntime-cro1
2611991715,1cyclictest0-21swapper/11
2611991715,1cyclictest0-21swapper/11
2611991715,1cyclictest0-21swapper/11
2611991712,3cyclictest634-21snmpd1
2611991712,3cyclictest4952-21aten2.4-expect1
2611991712,3cyclictest10413-21if_enp3s01
2611991711,4cyclictest19269-21sendmail-mta1
261199171,13cyclictest32409-21grep1
2611991711,3cyclictest19052-21gltestperf1
2606991713,2cyclictest662-21runrttasks0
2606991713,2cyclictest4811-21/usr/sbin/munin0
2606991712,3cyclictest4760-21wc0
261799160,15cyclictest0-21swapper/33
2615991611,3cyclictest6944-21cat2
261199162,9cyclictest17985-21apt-get1
2606991611,3cyclictest20034-21expr0
2606991611,3cyclictest11897-21aten2_r9power_e0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional