You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-20 - 07:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 20, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
219352314238,64sleep20-21swapper/22
206702301228,62sleep30-21swapper/33
218732287250,25sleep00-21swapper/00
2230399280275,3cyclictest0-21swapper/33
2229899280274,3cyclictest11152-21lockfile-remove2
2229099266258,6cyclictest11127-21perf0
220822258223,23sleep10-21swapper/11
2229399236228,4cyclictest11101-21munin-run1
271842590,2sleep20-21swapper/22
188762490,2sleep10-21swapper/11
288602460,1sleep10-21swapper/11
261012400,1sleep20-21swapper/22
135302280,3sleep213522-40gzip2
2230399275,19cyclictest515-21avahi-daemon3
22290992712,5cyclictest9-21ksoftirqd/00
2230399265,19cyclictest515-21avahi-daemon3
2229099260,4cyclictest0-21swapper/00
22298992520,3cyclictest25617-21cron2
263202240,10sleep121-21ksoftirqd/11
2230399244,17cyclictest13003-21sendmail-mta3
2230399244,17cyclictest10619-21sendmail-mta3
2230399243,18cyclictest8913-21sendmail-mta3
2230399243,18cyclictest25242-21sendmail-mta3
2230399241,5cyclictest31540-21grep3
22298992411,11cyclictest517-21dbus-daemon2
2229899240,7cyclictest9593-21apt2
235202230,1sleep20-21swapper/22
2230399234,17cyclictest5069-21sendmail-mta3
2230399234,17cyclictest30209-21sendmail-mta3
2230399233,18cyclictest7066-21sendmail-mta3
2230399233,18cyclictest25820-21sendmail-mta3
2230399233,18cyclictest23427-21sendmail-mta3
2230399233,17cyclictest27490-21sendmail-mta3
2230399233,17cyclictest21736-21sendmail-mta3
2230399233,17cyclictest17065-21sendmail-mta3
2230399233,17cyclictest11140-21sendmail-mta3
2230399232,18cyclictest340-21systemd-journal3
2230399232,18cyclictest21157-21sendmail-mta3
2230399231,4cyclictest13277-1kworker/3:1H3
2230399231,4cyclictest11703-1kworker/3:1H3
2229899230,22cyclictest10705-21kworker/2:22
2229399230,11cyclictest44872gunzip1
22290992315,5cyclictest662-21runrttasks0
2230399223,17cyclictest961-21sendmail-mta3
2230399223,17cyclictest961-21sendmail-mta3
2230399223,17cyclictest6248-21sendmail-mta3
2230399223,17cyclictest31323-21sendmail-mta3
2230399223,17cyclictest2982-21sendmail-mta3
2230399223,17cyclictest17645-21sendmail-mta3
2230399223,17cyclictest15257-21sendmail-mta3
2230399223,17cyclictest15257-21sendmail-mta3
2230399223,17cyclictest13524-21sendmail-mta3
2230399222,18cyclictest31551-1kworker/3:2H3
2230399222,17cyclictest0-21swapper/33
22303992217,3cyclictest13328-21sh3
2230399221,5cyclictest7549-21munin-run3
2230399221,5cyclictest12826-21sendmail3
2230399221,3cyclictest32257-21sed3
2230399221,3cyclictest29671-21munin-run3
2230399221,15cyclictest0-21swapper/33
22298992215,5cyclictest9846-21apt2
2229899220,10cyclictest188732timerandwakeup2
2229099223,13cyclictest634-21snmpd0
22290992215,4cyclictest3211-21grep0
2229099221,19cyclictest571-21gdbus0
2230399212,2cyclictest2639-21munin-run3
2230399212,17cyclictest25052-21latency_hist3
2230399212,17cyclictest18768-21sendmail-mta3
22303992114,4cyclictest3625-21latency3
22303992114,4cyclictest3625-21latency3
2229899219,10cyclictest23814-21cpuspeed2
22298992115,4cyclictest9180-21ls2
22298992115,4cyclictest32446-21date2
22298992115,4cyclictest21420-21wc2
22298992115,4cyclictest19251-21pluginstate2
22298992115,4cyclictest12347-21fw_packets2
2229099212,12cyclictest17141-21chrt0
22290992115,3cyclictest9951-21grep0
22290992115,3cyclictest20322-21xargs0
22290992113,5cyclictest32386-21sendmail0
22290992112,4cyclictest7783-21gltestperf0
2230399202,17cyclictest517-21dbus-daemon3
22303992015,3cyclictest13394-21/usr/sbin/munin3
2230399201,4cyclictest17435-21munin-run3
22303992014,4cyclictest30127-21pluginstate3
22303992014,4cyclictest16925-21cut3
22303992014,4cyclictest16925-21cut3
2230399201,3cyclictest340-21systemd-journal3
2230399201,17cyclictest9263-21munin-run3
2230399201,17cyclictest5163-21munin-run3
2230399201,17cyclictest0-21swapper/33
2230399200,3cyclictest4190-21apt-config3
2230399200,17cyclictest26906-21latency_hist3
22298992016,2cyclictest0-21swapper/22
22298992015,3cyclictest9401-21df2
22298992015,3cyclictest16117-21aten2.4-expect2
22298992015,3cyclictest12938-21ls2
22298992014,4cyclictest8196-21sed2
22298992014,4cyclictest5448-21apt-get2
22298992014,4cyclictest11475-21aten2.4-expect2
22298992014,3cyclictest18225-21switchtime2
22298992013,4cyclictest4863-21seq2
22298992013,4cyclictest22595-21grep2
22293992016,3cyclictest21-21ksoftirqd/11
22293992016,2cyclictest4959-21cstates1
22293992016,2cyclictest22126-21/usr/sbin/munin1
22293992015,3cyclictest26300-21sh1
22293992015,3cyclictest24152-21sh1
22293992015,3cyclictest13348-21sendmail1
22293992014,4cyclictest20484-21cat1
2229399200,17cyclictest251222sleep11
2229099208,10cyclictest9-21ksoftirqd/00
2229099204,10cyclictest7818-21apt-get0
2229099202,11cyclictest25884-21chrt0
22290992015,3cyclictest13671-21cron0
22290992014,3cyclictest662-21runrttasks0
2229099201,3cyclictest21736-21sendmail-mta0
3066621913,3sleep230839-21cat2
22303991916,2cyclictest0-21swapper/33
22303991916,2cyclictest0-21swapper/33
22303991915,2cyclictest7083-21cpu3
22303991914,3cyclictest30943-21cstates3
22303991914,3cyclictest26069-21df3
22303991914,3cyclictest2548-21sed3
22303991914,3cyclictest22659-21switchtime3
22303991914,3cyclictest18908-21ntp_kernel_pll_3
2230399191,16cyclictest0-21swapper/33
2230399190,17cyclictest20947-21latency_hist3
2229899197,10cyclictest27447-21perf2
22298991915,2cyclictest4278-21unixbench_singl2
22298991915,2cyclictest4278-21unixbench_singl2
22298991914,3cyclictest9615-21cut2
22298991914,3cyclictest4610-21/usr/sbin/munin2
22298991914,3cyclictest3687-21wc2
22298991914,3cyclictest32135-21expr2
22298991914,3cyclictest3119-21ntpq2
22298991914,3cyclictest29526-21cut2
22298991914,3cyclictest27880-21/usr/sbin/munin2
22298991914,3cyclictest27362-21nfs4_client2
22298991914,3cyclictest16874-21sh2
22298991914,3cyclictest16874-21sh2
22298991914,3cyclictest15986-21idleruntime2
22298991914,3cyclictest1432-21hostname2
22298991913,4cyclictest517-21dbus-daemon2
22298991913,4cyclictest27031-21date2
22298991913,4cyclictest15157-21ls2
22298991912,5cyclictest517-21dbus-daemon2
22298991912,4cyclictest32673-21aten2.4-expect2
22293991917,1cyclictest0-21swapper/11
22293991916,2cyclictest0-21swapper/11
22293991915,2cyclictest7800-21/usr/sbin/munin1
22293991915,2cyclictest21548-21/usr/sbin/munin1
22293991914,3cyclictest634-21snmpd1
22293991914,3cyclictest29093-21expr1
22293991914,3cyclictest26514-21ntpq1
22293991914,3cyclictest25791-21seq1
22293991914,3cyclictest23514-21seq1
22293991914,3cyclictest23422-21pmu-power1
22293991914,3cyclictest19714-21/usr/sbin/munin1
22293991914,3cyclictest19682-21cut1
22293991914,3cyclictest16503-21awk1
22293991913,4cyclictest18839-21ls1
22293991910,5cyclictest13937-21apt-get1
2229099191,6cyclictest5219-21munin-run0
22290991914,3cyclictest9431-21sed0
22290991914,3cyclictest779-21seq0
22290991914,3cyclictest779-21seq0
22290991914,3cyclictest4700-21latency_hist0
22290991914,3cyclictest4700-21latency_hist0
22290991914,3cyclictest30448-21wc0
22290991914,3cyclictest2415-21gzip0
22290991913,4cyclictest517-21dbus-daemon0
22290991913,4cyclictest28692-21cut0
22290991913,3cyclictest20399-21ntpq0
22290991912,4cyclictest5725-21cpuspeed_turbos0
22290991912,4cyclictest517-21dbus-daemon0
63692180,1sleep00-21swapper/00
253412180,2sleep10-21swapper/11
2230399182,3cyclictest15817-21cut3
22303991812,4cyclictest20189-21grep3
22303991812,4cyclictest19268-21cat3
2229899182,14cyclictest1107-21cron2
2229899182,14cyclictest1107-21cron2
22298991816,1cyclictest0-21swapper/22
22298991816,1cyclictest0-21swapper/22
22298991816,1cyclictest0-21swapper/22
22298991816,1cyclictest0-21swapper/22
22298991813,3cyclictest8455-21sshd2
22298991813,3cyclictest27822-21cpu2
22298991813,3cyclictest23365-21cut2
22298991813,3cyclictest22500-21expr2
22298991813,3cyclictest16305-21kernelversion2
22298991813,3cyclictest1459-21cut2
22298991813,3cyclictest14395-21ps2
22298991812,4cyclictest28952-21cron2
2229899181,1cyclictest0-21swapper/22
2229899180,16cyclictest0-21swapper/22
2229899180,15cyclictest15565-21ls2
2229899180,15cyclictest15565-21ls2
2229399186,3cyclictest185512cut1
2229399182,14cyclictest11644-21run-parts1
22293991816,1cyclictest0-21swapper/11
22293991816,1cyclictest0-21swapper/11
22293991816,1cyclictest0-21swapper/11
22293991814,2cyclictest16007-21/usr/sbin/munin1
22293991813,3cyclictest9834-21ls1
22293991813,3cyclictest8185-21cat1
22293991813,3cyclictest7247-21seq1
22293991813,3cyclictest3551-21interrupts1
22293991813,3cyclictest3551-21interrupts1
22293991813,3cyclictest3520-21cpu1
22293991813,3cyclictest32677-21sh1
22293991813,3cyclictest32552-21cat1
22293991813,3cyclictest32552-21cat1
22293991813,3cyclictest28100-21seq1
22293991813,3cyclictest2792-21cat1
22293991813,3cyclictest24439-21munin-node1
22293991813,3cyclictest15429-21/usr/sbin/munin1
22293991813,3cyclictest12511-21cat1
22293991812,4cyclictest6298-21ntpq1
22293991812,4cyclictest517-21dbus-daemon1
22293991812,4cyclictest517-21dbus-daemon1
22293991812,4cyclictest517-21dbus-daemon1
22293991812,4cyclictest28507-21needreboot1
22293991812,3cyclictest21717-21gltestperf1
2229399180,16cyclictest0-21swapper/11
2229399180,16cyclictest0-21swapper/11
2229099185,3cyclictest24280-21kernelversion0
2229099182,9cyclictest634-21snmpd0
22290991814,2cyclictest25109-21/usr/sbin/munin0
22290991814,2cyclictest19714-21/usr/sbin/munin0
22290991814,2cyclictest16793-21unixbench_singl0
22290991813,3cyclictest7647-21sed0
22290991813,3cyclictest634-21snmpd0
22290991813,3cyclictest23931-21sh0
22290991813,3cyclictest22126-21/usr/sbin/munin0
22290991813,3cyclictest1458-21aten2_r9power_v0
22290991813,3cyclictest1249-21expr0
22290991813,3cyclictest10743-21sed0
2229099181,2cyclictest0-21swapper/00
22290991812,4cyclictest517-21dbus-daemon0
22290991812,4cyclictest15257-21sendmail-mta0
22290991812,4cyclictest15257-21sendmail-mta0
22290991812,3cyclictest11660-21sendmail0
22290991811,4cyclictest517-21dbus-daemon0
22303991713,2cyclictest28059-21ntp_states3
22303991712,3cyclictest23953-21hostname3
22298991712,3cyclictest7012-21sed2
22298991711,4cyclictest13443-21expr2
22293991713,2cyclictest5281-21cstates1
22293991713,2cyclictest30594-21/usr/sbin/munin1
22293991713,2cyclictest2413-21gzip1
22293991713,2cyclictest13062-21/usr/sbin/munin1
22293991712,3cyclictest31037-21awk1
22293991712,3cyclictest2472-21cpuspeed1
22293991712,3cyclictest17083-21date1
22293991712,3cyclictest17083-21date1
22293991712,3cyclictest14372-21awk1
22293991712,3cyclictest10154-21ls1
22293991712,2cyclictest27168-21/usr/sbin/munin1
22293991711,4cyclictest11019-21acpi1
2229099179,5cyclictest25815-21gltestperf0
2229099172,10cyclictest4588-21packagekitd0
22290991713,2cyclictest24178-21/usr/sbin/munin0
22290991712,3cyclictest27320-21sed0
22290991712,3cyclictest22973-21uptime0
22290991712,3cyclictest16179-21cut0
22290991712,3cyclictest13325-21sh0
22290991712,3cyclictest13062-21/usr/sbin/munin0
22290991710,5cyclictest340-21systemd-journal0
2229099170,1cyclictest0-21swapper/00
2229099170,1cyclictest0-21swapper/00
2229099170,16cyclictest0-21swapper/00
2229099170,16cyclictest0-21swapper/00
22298991611,3cyclictest662-21runrttasks2
22298991610,3cyclictest19104-21mailstats2
22293991613,2cyclictest1324-21/usr/sbin/munin1
2229099162,9cyclictest27648-21apt-get0
2229099161,5cyclictest0-21swapper/00
22290991614,1cyclictest0-21swapper/00
22290991614,1cyclictest0-21swapper/00
22290991612,2cyclictest662-21runrttasks0
22290991611,3cyclictest14574-21irqstats0
2229099160,1cyclictest0-21swapper/00
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional