You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-21 - 20:00
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sun Dec 21, 2025 12:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
248562334271,50sleep00-21swapper/00
251042272191,68sleep30-21swapper/33
250232258201,47sleep20-21swapper/22
248572250200,38sleep10-21swapper/11
2530999237231,4cyclictest26962-21munin-run0
1950821520,1sleep00-21swapper/00
2532099141135,3cyclictest26953-21idleruntime-cro3
2709321310,3sleep22531799cyclictest2
2531799112106,3cyclictest26955-21apt-get2
25314999893,3cyclictest26958-21perf1
282152570,1sleep10-21swapper/11
273992540,4sleep227322-21munin-node2
277422470,1sleep20-21swapper/22
2532099412,24cyclictest0-21swapper/33
2532099371,5cyclictest19271-1kworker/3:1H3
2532099371,4cyclictest517-21dbus-daemon3
2532099371,4cyclictest340-21systemd-journal3
2532099371,33cyclictest340-21systemd-journal3
2532099362,31cyclictest13147-21sendmail-mta3
2532099362,30cyclictest6062-21sendmail-mta3
2532099361,5cyclictest515-21avahi-daemon3
2532099361,5cyclictest515-21avahi-daemon3
25320993615,18cyclictest28647-21sendmail-mta3
2532099361,4cyclictest518-21in:imuxsock3
2532099361,4cyclictest518-21in:imuxsock3
25320993614,19cyclictest1988-21sendmail-mta3
2532099361,3cyclictest340-21systemd-journal3
2532099361,32cyclictest340-21systemd-journal3
72022350,10sleep121-21ksoftirqd/11
2532099353,29cyclictest9617-21sendmail-mta3
2532099353,29cyclictest10159-21sendmail-mta3
2532099352,30cyclictest7633-21sendmail-mta3
25320993516,16cyclictest31163-21sendmail-mta3
25320993516,16cyclictest18620-21sendmail-mta3
2532099351,4cyclictest520-21rs:main3
2532099351,4cyclictest520-21rs:main3
2532099351,31cyclictest4696-21sendmail-mta3
25320993416,15cyclictest30320-21sendmail-mta3
2532099341,30cyclictest19271-1kworker/3:1H3
2532099340,31cyclictest9087-21sendmail-mta3
2532099331,29cyclictest21836-21sendmail-mta3
2532099331,29cyclictest16097-21sendmail-mta3
25320993312,18cyclictest17237-21sendmail-mta3
2532099330,5cyclictest4113-21cpuspeed_turbos3
236332330,2sleep20-21swapper/22
2532099327,22cyclictest517-21dbus-daemon3
2532099321,4cyclictest19271-1kworker/3:1H3
25320993211,19cyclictest29477-21sendmail-mta3
25320993211,18cyclictest3446-21sendmail-mta3
2532099312,26cyclictest340-21systemd-journal3
2532099310,4cyclictest517-21dbus-daemon3
2532099307,20cyclictest517-21dbus-daemon3
2532099302,22cyclictest12411-21apt-get3
2532099301,26cyclictest0-21swapper/33
2532099292,5cyclictest30727-21apt-get3
2532099291,7cyclictest6895-21systemctl3
25320992912,14cyclictest30178-21aten2_r9power_c3
25320992911,16cyclictest31650-21latency_hist3
2532099290,26cyclictest28433-21munin-run3
25317992913,6cyclictest28-21ksoftirqd/22
25314992911,9cyclictest21-21ksoftirqd/11
25314992911,4cyclictest21-21ksoftirqd/11
2532099289,16cyclictest2372-21unixbench_singl3
2532099283,5cyclictest27599-21cron3
2532099282,5cyclictest10029-21apt-get3
2532099281,5cyclictest12332-21munin-run3
25320992812,14cyclictest19418-21latency_hist3
2531799282,9cyclictest14545-21procmail2
2531499280,26cyclictest32246-21kworker/1:21
88032270,2sleep20-21swapper/22
2532099279,15cyclictest32532-21cstates3
2532099278,16cyclictest25315-21cstates3
2532099277,17cyclictest29885-21cron3
2532099273,21cyclictest31898-21cstates3
2532099272,3cyclictest0-21swapper/33
2532099271,4cyclictest1552-21apt-get3
2532099271,4cyclictest0-21swapper/33
25320992712,12cyclictest662-21runrttasks3
25317992712,6cyclictest28-21ksoftirqd/22
2531499279,4cyclictest21-21ksoftirqd/11
2531499276,13cyclictest518-21in:imuxsock1
2531499275,4cyclictest21-21ksoftirqd/11
2531499274,3cyclictest21-21ksoftirqd/11
25314992718,3cyclictest21-21ksoftirqd/11
25314992718,3cyclictest21-21ksoftirqd/11
25314992718,3cyclictest21-21ksoftirqd/11
25314992714,4cyclictest21-21ksoftirqd/11
25314992713,3cyclictest21-21ksoftirqd/11
2531499270,4cyclictest21-21ksoftirqd/11
2532099263,4cyclictest11382-21latency_hist3
2532099262,5cyclictest16822-21cpuspeed_turbos3
2532099262,4cyclictest27505-21apt-get3
2532099262,4cyclictest19027-21apt-get3
2532099261,5cyclictest9818-21munin-run3
2531799261,10cyclictest20331-21awk2
2531799261,10cyclictest20331-21awk2
2531799260,14cyclictest28-21ksoftirqd/22
2531499264,7cyclictest21-21ksoftirqd/11
2531499264,13cyclictest21-21ksoftirqd/11
2531499263,5cyclictest21-21ksoftirqd/11
25314992621,3cyclictest201rcuc/11
25314992617,3cyclictest21-21ksoftirqd/11
2532099251,5cyclictest8272-21perf3
2532099251,5cyclictest14181-21aten2_r9power_p3
2532099251,4cyclictest0-21swapper/33
2531799253,8cyclictest20859-21irqstats2
2531799252,9cyclictest9691-21cat2
2531799252,9cyclictest2991-21taskset2
2531799252,8cyclictest11557-21taskset2
2531799252,7cyclictest30254-21taskset2
2531799252,20cyclictest32038-21tail2
2531799251,9cyclictest571-21gdbus2
2531799250,13cyclictest28-21ksoftirqd/22
2531499256,4cyclictest21-21ksoftirqd/11
25314992518,2cyclictest21-21ksoftirqd/11
25314992517,3cyclictest21-21ksoftirqd/11
25314992517,3cyclictest21-21ksoftirqd/11
25314992517,2cyclictest21-21ksoftirqd/11
214792250,2sleep228-21ksoftirqd/22
25320992417,5cyclictest0-21swapper/33
2532099241,5cyclictest22675-21diskstats3
2532099241,5cyclictest15323-21cron3
2531799242,6cyclictest752-21taskset2
2531799242,6cyclictest2601-21taskset2
2531799242,6cyclictest16360-21taskset2
25317992419,4cyclictest271rcuc/22
2531799241,6cyclictest9610-21taskset2
2531799241,6cyclictest28-21ksoftirqd/22
25317992411,10cyclictest25370-21mailstats2
2531799240,8cyclictest28-21ksoftirqd/22
2531499247,9cyclictest21-21ksoftirqd/11
2531499243,7cyclictest21-21ksoftirqd/11
25314992414,3cyclictest21-21ksoftirqd/11
25314992414,3cyclictest21-21ksoftirqd/11
2531799236,7cyclictest28-21ksoftirqd/22
2531799233,6cyclictest25463-21taskset2
2531799232,7cyclictest16569-21taskset2
2531799231,8cyclictest26440-21taskset2
2531799231,8cyclictest12191-21dpkg2
2531799231,6cyclictest320-21taskset2
2531799231,6cyclictest17567-21taskset2
2531799231,6cyclictest17567-21taskset2
2531799231,6cyclictest1266-21taskset2
25317992311,10cyclictest22350-21munin-plugin-st2
2531499232,7cyclictest21-21ksoftirqd/11
2531499232,7cyclictest21-21ksoftirqd/11
2531499232,2cyclictest21-21ksoftirqd/11
25314992314,3cyclictest21-21ksoftirqd/11
25314992311,4cyclictest21-21ksoftirqd/11
2531499230,6cyclictest21-21ksoftirqd/11
2531799222,6cyclictest31130-21taskset2
2531799221,7cyclictest9509-21taskset2
2531799221,6cyclictest978-21taskset2
2531799221,6cyclictest978-21taskset2
2531799221,6cyclictest28161-21taskset2
2531799221,6cyclictest24637-21taskset2
2531799221,6cyclictest2368-21taskset2
2531799221,6cyclictest20721-21taskset2
2531799221,5cyclictest0-21swapper/22
25317992215,5cyclictest7780-21cut2
2531799220,8cyclictest28-21ksoftirqd/22
2531799220,5cyclictest30618-21taskset2
2531499223,5cyclictest518-21in:imuxsock1
2531499223,5cyclictest0-21swapper/11
2531499222,7cyclictest21-21ksoftirqd/11
2531499222,7cyclictest21-21ksoftirqd/11
2531499221,7cyclictest21-21ksoftirqd/11
25314992213,3cyclictest21-21ksoftirqd/11
2530999222,17cyclictest662-21runrttasks0
25309992217,3cyclictest12009-21grep0
2531799216,7cyclictest28-21ksoftirqd/22
2531799212,6cyclictest28-21ksoftirqd/22
2531799212,6cyclictest12319-21taskset2
2531799211,7cyclictest28-21ksoftirqd/22
2531799211,7cyclictest19781-21taskset2
2531799211,6cyclictest29817-21taskset2
2531799211,6cyclictest21190-21taskset2
2531799211,5cyclictest15628-21taskset2
25317992114,4cyclictest7216-21missed_timers2
2531799210,7cyclictest31281-21users2
2531799210,6cyclictest28-21ksoftirqd/22
2531499218,3cyclictest21-21ksoftirqd/11
2531499214,5cyclictest21-21ksoftirqd/11
2531499212,7cyclictest21-21ksoftirqd/11
25314992116,3cyclictest21-21ksoftirqd/11
25314992116,3cyclictest21-21ksoftirqd/11
25314992116,3cyclictest21-21ksoftirqd/11
25314992116,3cyclictest21-21ksoftirqd/11
25314992114,4cyclictest31196-21awk1
25314992114,2cyclictest111rcu_preempt1
25314992110,3cyclictest21-21ksoftirqd/11
25314992110,3cyclictest111rcu_preempt1
2531499210,8cyclictest21-21ksoftirqd/11
2531499210,11cyclictest21-21ksoftirqd/11
25317992014,4cyclictest17753-21aten2_r9power_v2
25317992013,5cyclictest15204-21load2
2531799200,7cyclictest28-21ksoftirqd/22
2531799200,6cyclictest17934-21taskset2
2531499209,3cyclictest21-21ksoftirqd/11
2531499209,3cyclictest111rcu_preempt1
2531499201,5cyclictest0-21swapper/11
2531499201,5cyclictest0-21swapper/11
25314992015,3cyclictest662-21runrttasks1
25314992015,3cyclictest21-21ksoftirqd/11
25314992015,3cyclictest21-21ksoftirqd/11
25314992014,4cyclictest634-21snmpd1
25309992017,2cyclictest0-21swapper/00
25309992015,3cyclictest26115-21perf0
2530999200,18cyclictest15549-21kworker/0:10
2531799198,3cyclictest111rcu_preempt2
2531799195,7cyclictest28-21ksoftirqd/22
2531799190,6cyclictest28-21ksoftirqd/22
25314991914,3cyclictest9093-21sendmail_mailst1
25314991910,3cyclictest111rcu_preempt1
2531499190,6cyclictest26648-21/usr/sbin/munin1
2531499190,4cyclictest21-21ksoftirqd/11
2530999191,6cyclictest15895-21awk0
25309991916,2cyclictest0-21swapper/00
25309991915,2cyclictest5996-21/usr/sbin/munin0
25309991915,2cyclictest368-21aten2_r9power_e0
25309991915,2cyclictest1819-21apt0
25309991915,2cyclictest13537-21/usr/sbin/munin0
25309991914,3cyclictest8493-21cat0
25309991914,3cyclictest6279-21timerandwakeup0
25309991914,3cyclictest2860-21sed0
25309991914,3cyclictest20867-21timerandwakeup0
25309991914,3cyclictest18985-21forks0
25309991914,3cyclictest18985-21forks0
25309991914,3cyclictest18769-21munin-plugin-st0
25309991914,3cyclictest10072-21find0
25309991913,4cyclictest7890-21diskstats0
25309991913,4cyclictest5934-21apt-get0
25309991913,4cyclictest32272-21ls0
25309991913,4cyclictest28976-21cut0
25309991913,4cyclictest25528-21basename0
25309991913,4cyclictest10000-21sed0
2531499189,2cyclictest111rcu_preempt1
2531499181,5cyclictest0-21swapper/11
25309991816,1cyclictest0-21swapper/00
25309991816,1cyclictest0-21swapper/00
25309991814,2cyclictest27486-21/usr/sbin/munin0
25309991814,2cyclictest18292-21aten2_r9power_v0
25309991813,3cyclictest8886-21awk0
25309991813,3cyclictest3516-21gltestperf0
25309991813,3cyclictest31856-21expr0
25309991813,3cyclictest28089-21/usr/sbin/munin0
25309991813,3cyclictest24159-21cut0
25309991813,3cyclictest22278-21cat0
25309991813,3cyclictest20966-21expr0
25309991813,3cyclictest20943-21cat0
25309991813,3cyclictest17671-21cat0
25309991813,3cyclictest10532-21expr0
25309991812,4cyclictest517-21dbus-daemon0
25309991812,4cyclictest517-21dbus-daemon0
25309991812,4cyclictest4097-21cat0
25309991812,4cyclictest2796-21expr0
25309991810,6cyclictest4533-21cat0
25309991810,4cyclictest26665-21apt-get0
2530999180,3cyclictest11902-21grep0
2530999180,16cyclictest0-21swapper/00
2530999175,10cyclictest30817-21cron0
25309991713,2cyclictest30944-21cpuspeed_turbos0
25309991713,2cyclictest25415-21sendmail-mta0
25309991713,2cyclictest12968-21aten2_r9power_p0
25309991712,3cyclictest8289-21ls0
25309991712,3cyclictest662-21runrttasks0
25309991712,3cyclictest26787-21proc_pri0
25309991712,3cyclictest16787-21irqstats0
25309991712,3cyclictest16787-21irqstats0
25309991712,3cyclictest1621-21aten2_r9power_p0
25309991712,3cyclictest1138-21sendmail-mta0
25309991712,3cyclictest1138-21sendmail-mta0
25309991711,4cyclictest23703-21cat0
25309991711,4cyclictest15706-21hostname0
25309991710,4cyclictest30422-21idleruntime0
25309991614,1cyclictest0-21swapper/00
25309991614,1cyclictest0-21swapper/00
25309991612,2cyclictest28678-21/usr/sbin/munin0
25309991611,3cyclictest32738-21basename0
25309991611,3cyclictest21383-21ls0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional