You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-24 - 09:25
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 24, 2025 00:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
55362322254,17sleep20-21swapper/22
582099267261,3cyclictest7793-21perf0
54192255183,25sleep30-21swapper/33
55302253191,23sleep10-21swapper/11
583399250244,3cyclictest7799-21idleruntime-cro3
53362250183,36sleep00-21swapper/00
582499224217,5cyclictest7780-21sendmail1
582899190186,3cyclictest0-21swapper/22
1586621510,2sleep00-21swapper/00
222202590,4sleep2582899cyclictest2
281202510,4sleep3583399cyclictest3
231712470,4sleep0582099cyclictest0
154232470,2sleep00-21swapper/00
141092460,1sleep30-21swapper/33
582499452,20cyclictest20901-21ntp_states1
582499400,28cyclictest1941-21aten2.4-expect1
582499400,24cyclictest15643-21aten2_r9power_c1
582499391,20cyclictest18195-21seq1
583399385,16cyclictest0-21swapper/33
582499380,20cyclictest23640-21chrt1
582499351,19cyclictest25713-21cups-browsed1
582499350,20cyclictest345-21seq1
582499350,18cyclictest4697-21sendmail-mta1
582499341,30cyclictest340-21systemd-journal1
582499340,24cyclictest16376-21sendmail-mta1
582499340,19cyclictest10041-21chrt1
582499340,18cyclictest0-21swapper/11
582499331,18cyclictest340-21systemd-journal1
582499330,18cyclictest517-21dbus-daemon1
582499312,26cyclictest1814-21cat1
5824993016,12cyclictest30217-21/usr/sbin/munin1
5824993013,14cyclictest13828-21expr1
582499301,16cyclictest0-21swapper/11
582499300,16cyclictest22911-21/usr/sbin/munin1
583399299,17cyclictest0-21swapper/33
582499299,17cyclictest19512-21cut1
582499291,25cyclictest566-21polkitd1
583399287,18cyclictest0-21swapper/33
582899282,2cyclictest111rcu_preempt2
5828992816,2cyclictest111rcu_preempt2
582499289,17cyclictest517-21dbus-daemon1
5824992815,11cyclictest6857-21acpi1
582499281,24cyclictest566-21polkitd1
5824992810,15cyclictest13807-21grep1
582499280,25cyclictest340-21systemd-journal1
582499280,16cyclictest634-21snmpd1
583399276,18cyclictest0-21swapper/33
583399276,18cyclictest0-21swapper/33
582499279,15cyclictest25930-21wc1
582499278,16cyclictest517-21dbus-daemon1
582499278,16cyclictest517-21dbus-daemon1
5824992714,11cyclictest10054-21/usr/sbin/munin1
582499271,23cyclictest340-21systemd-journal1
5824992711,14cyclictest1649-21sed1
5824992711,13cyclictest13095-21date1
5824992710,15cyclictest10691-21ls1
582499270,25cyclictest634-21snmpd1
582499270,15cyclictest634-21snmpd1
583399265,18cyclictest0-21swapper/33
582499269,14cyclictest4560-21cat1
582499268,15cyclictest571-21gdbus1
5824992613,11cyclictest30234-21ntpq1
5824992611,13cyclictest8565-21expr1
5824992610,14cyclictest31412-21grep1
5824992610,14cyclictest26823-21wc1
5824992610,14cyclictest26823-21wc1
5824992610,13cyclictest19454-21if_err_enp3s01
583399255,17cyclictest0-21swapper/33
583399255,17cyclictest0-21swapper/33
583399254,4cyclictest27928-21sendmail3
583399254,4cyclictest27928-21sendmail3
583399254,18cyclictest0-21swapper/33
582899250,4cyclictest28-21ksoftirqd/22
582499259,14cyclictest571-21gdbus1
582499259,13cyclictest517-21dbus-daemon1
582499259,13cyclictest28951-21sendmail-mta1
582499259,13cyclictest14578-21processes1
582499258,14cyclictest6386-21date1
582499258,14cyclictest517-21dbus-daemon1
582499257,15cyclictest517-21dbus-daemon1
582499253,19cyclictest517-21dbus-daemon1
583399245,16cyclictest0-21swapper/33
583399244,17cyclictest31969-21sendmail-mta3
583399244,17cyclictest27252-21sendmail-mta3
583399244,17cyclictest14934-21sendmail-mta3
583399244,17cyclictest10844-21sendmail-mta3
583399243,18cyclictest6470-21sendmail-mta3
583399243,18cyclictest4697-21sendmail-mta3
583399243,18cyclictest0-21swapper/33
583399241,20cyclictest15360-21munin-run3
5828992412,3cyclictest28-21ksoftirqd/22
5828992412,3cyclictest111rcu_preempt2
5828992411,3cyclictest28-21ksoftirqd/22
582499249,12cyclictest9217-21acpi1
582499249,12cyclictest20071-21kernelversion1
582499247,14cyclictest24085-21taskset1
582499241,20cyclictest7209-21munin-run1
582499241,20cyclictest14477-21cron1
582499241,18cyclictest20885-21apt-get1
5824992411,11cyclictest4366-21sshd1
5824992410,12cyclictest10244-21latency_hist1
582099240,22cyclictest15150-21kworker/0:20
583399234,17cyclictest3630-21sendmail-mta3
583399234,17cyclictest26317-21sendmail-mta3
583399234,17cyclictest19008-21sendmail-mta3
583399233,17cyclictest29830-21sendmail-mta3
583399233,17cyclictest21919-21sendmail-mta3
583399233,17cyclictest21651-21sendmail-mta3
583399233,17cyclictest17248-21sendmail-mta3
583399233,17cyclictest1468-21sendmail-mta3
583399232,18cyclictest340-21systemd-journal3
5833992316,4cyclictest5578-21sendmail-mta3
583399231,4cyclictest10382-1kworker/3:2H3
5828992318,3cyclictest271rcuc/22
5828992315,3cyclictest28-21ksoftirqd/22
5828992314,2cyclictest111rcu_preempt2
582499238,13cyclictest24433-21awk1
582499238,13cyclictest24433-21awk1
582499237,14cyclictest27822-21apt-key1
582499234,17cyclictest16166-21grep1
582499231,19cyclictest1726-21munin-run1
582499231,19cyclictest15628-21chrt1
582499230,20cyclictest28014-21sed1
5820992316,5cyclictest29990-21turbostat.cron0
39512230,2sleep20-21swapper/22
583399226,14cyclictest10256-21basename3
583399224,16cyclictest13178-21sendmail-mta3
583399223,17cyclictest28951-21sendmail-mta3
583399223,17cyclictest23951-21cat3
583399223,17cyclictest12307-21sendmail-mta3
583399223,16cyclictest7184-21cron3
583399222,18cyclictest24133-21awk3
583399222,18cyclictest16376-21sendmail-mta3
5833992216,3cyclictest10406-21sh3
583399221,3cyclictest340-21systemd-journal3
583399221,3cyclictest32004-21munin-run3
583399221,3cyclictest27044-21munin-run3
582899229,3cyclictest111rcu_preempt2
582899220,20cyclictest0-21swapper/22
582099229,10cyclictest14934-21sendmail-mta0
582099228,4cyclictest9258-21basename0
5820992216,4cyclictest340-21systemd-journal0
5820992213,5cyclictest28522-21sendmail0
583399213,16cyclictest11840-21latency_hist3
583399212,17cyclictest17226-21cat3
5833992115,4cyclictest8676-21basename3
583399211,17cyclictest340-21systemd-journal3
583399210,5cyclictest0-21swapper/33
583399210,4cyclictest30071-21latency_hist3
582899217,6cyclictest28-21ksoftirqd/22
582899217,2cyclictest111rcu_preempt2
582899215,3cyclictest111rcu_preempt2
582899215,3cyclictest111rcu_preempt2
582899215,3cyclictest111rcu_preempt2
582899215,3cyclictest111rcu_preempt2
582899213,6cyclictest28-21ksoftirqd/22
582899212,8cyclictest30402-21sendmail-mta2
5828992112,2cyclictest28-21ksoftirqd/22
5828992112,2cyclictest111rcu_preempt2
5828992110,3cyclictest28-21ksoftirqd/22
5828992110,3cyclictest111rcu_preempt2
582899210,4cyclictest28-21ksoftirqd/22
5820992115,4cyclictest5727-21ntpq0
5820992114,5cyclictest340-21systemd-journal0
5820992114,4cyclictest22225-21wc0
5820992114,4cyclictest20055-21aten2.4-expect0
582099211,17cyclictest19916-1kworker/0:0H0
582099210,7cyclictest515-21avahi-daemon0
5833992015,3cyclictest3660-21cron3
5833992015,3cyclictest10383-21ntp_states3
583399200,3cyclictest10382-1kworker/3:2H3
582899209,3cyclictest111rcu_preempt2
582899209,3cyclictest111rcu_preempt2
582899204,3cyclictest111rcu_preempt2
5828992016,3cyclictest271rcuc/22
5828992016,2cyclictest28-21ksoftirqd/22
5828992016,2cyclictest28-21ksoftirqd/22
5828992016,2cyclictest271rcuc/22
5828992015,3cyclictest271rcuc/22
5828992015,3cyclictest21672-21unixbench_singl2
5828992015,3cyclictest14457-21cut2
5828992014,4cyclictest21438-21sed2
5828992014,4cyclictest13412-21latency2
5828992014,4cyclictest12875-21expr2
5828992010,2cyclictest111rcu_preempt2
582099201,6cyclictest517-21dbus-daemon0
5820992015,3cyclictest12195-21irqstats0
5820992013,5cyclictest20897-21cut0
583399193,14cyclictest424-21ls3
5833991915,2cyclictest19597-21dpkg3
5833991914,3cyclictest13555-21sendmail_mailst3
5833991913,4cyclictest21283-21expr3
583399190,18cyclictest1750-21awk3
583399190,17cyclictest18559-21munin-run3
582899197,3cyclictest28-21ksoftirqd/22
582899193,4cyclictest28-21ksoftirqd/22
5828991914,3cyclictest4778-21grep2
5828991914,3cyclictest3661-21sh2
5828991914,3cyclictest20449-21diskstats2
5828991914,3cyclictest14386-21swap2
5828991914,3cyclictest13600-21aten2_r9power_c2
5828991913,4cyclictest9275-21sed2
5828991913,4cyclictest24456-21mktemp2
5828991913,4cyclictest10847-21wc2
5828991912,5cyclictest5831-21df2
582899191,15cyclictest4113-21sed2
5828991910,3cyclictest28-21ksoftirqd/22
582899190,9cyclictest29901-40gzip2
582099197,3cyclictest111rcu_preempt0
5820991915,2cyclictest10476-21/usr/sbin/munin0
5820991914,3cyclictest930-21cat0
5820991914,3cyclictest7293-21ntpq0
5820991914,3cyclictest7293-21ntpq0
5820991914,3cyclictest634-21snmpd0
5820991914,3cyclictest19104-21ntp_states0
5820991914,3cyclictest1879-21sed0
5820991914,3cyclictest16139-21cut0
5820991914,3cyclictest11747-21sed0
5820991913,4cyclictest634-21snmpd0
5820991913,4cyclictest26556-21pmu-power0
5820991913,4cyclictest2126-21sed0
5820991913,4cyclictest18480-21grep0
5820991913,4cyclictest14475-21cron0
5820991913,3cyclictest9-21ksoftirqd/00
5820991913,3cyclictest1215-21sed0
5820991911,6cyclictest22090-21cut0
5820991911,5cyclictest13491-21wc0
583399183,13cyclictest14692-21sort3
5833991814,2cyclictest25376-21awk3
5833991814,2cyclictest25376-21awk3
5833991813,3cyclictest29860-21tail3
5833991813,3cyclictest13197-21gltestperf3
583399180,16cyclictest0-21swapper/33
583399180,16cyclictest0-21swapper/33
582899187,3cyclictest111rcu_preempt2
582899187,3cyclictest111rcu_preempt2
582899185,2cyclictest111rcu_preempt2
582899185,2cyclictest111rcu_preempt2
582899184,2cyclictest111rcu_preempt2
5828991816,1cyclictest0-21swapper/22
5828991816,1cyclictest0-21swapper/22
5828991813,3cyclictest30997-21sort2
5828991813,3cyclictest29993-21interrupts2
582899180,16cyclictest0-21swapper/22
582899180,16cyclictest0-21swapper/22
582099182,10cyclictest12125-21apt-get0
5820991816,1cyclictest0-21swapper/00
5820991816,1cyclictest0-21swapper/00
5820991814,2cyclictest8611-21/usr/sbin/munin0
5820991814,2cyclictest6856-21/usr/sbin/munin0
5820991814,2cyclictest26132-21/usr/sbin/munin0
5820991814,2cyclictest26132-21/usr/sbin/munin0
5820991813,3cyclictest8089-21aten2_r9power_e0
5820991813,3cyclictest662-21runrttasks0
5820991813,3cyclictest634-21snmpd0
5820991813,3cyclictest4171-21ls0
5820991813,3cyclictest3921-21wc0
5820991813,3cyclictest24299-21sed0
5820991813,3cyclictest24299-21sed0
5820991813,3cyclictest1019-21sed0
5820991812,4cyclictest517-21dbus-daemon0
5820991812,4cyclictest3086-21cut0
5820991812,4cyclictest10656-21wc0
5820991812,3cyclictest31139-21sh0
5820991812,3cyclictest19477-21aten2.4-expect0
5820991810,5cyclictest3630-21sendmail-mta0
5820991810,5cyclictest27965-21apt-get0
582099180,16cyclictest0-21swapper/00
583399170,16cyclictest0-21swapper/33
582899172,3cyclictest0-21swapper/22
5828991712,3cyclictest8050-21interrupts2
5828991712,3cyclictest1403-21sh2
582099176,2cyclictest111rcu_preempt0
582099173,9cyclictest9223-21apt-get0
5820991712,3cyclictest662-21runrttasks0
5820991712,3cyclictest23019-21aten2.4-expect0
5820991711,4cyclictest517-21dbus-daemon0
582099170,15cyclictest0-21swapper/00
5820991611,3cyclictest9-21ksoftirqd/00
5820991611,3cyclictest25645-21expr0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional