You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-13 - 21:46
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 13, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
326812306269,25sleep10-21swapper/11
326822298269,17sleep20-21swapper/22
64999287283,2cyclictest0-21swapper/33
327402256221,24sleep00-21swapper/00
64099242237,3cyclictest0-21swapper/22
326032241179,50sleep30-21swapper/33
62699142137,3cyclictest0-21swapper/11
62199117111,4cyclictest9126-21strings0
63852700,5sleep121-21ksoftirqd/11
96242440,2sleep2271rcuc/22
96242440,2sleep2271rcuc/22
117722430,1sleep10-21swapper/11
640994012,9cyclictest31392-21munin-plugin-st2
640993910,9cyclictest32237-21latency_hist2
640993610,9cyclictest3216-21latency2
640993511,10cyclictest29484-21sed2
640993411,9cyclictest4351-21expr2
64099339,10cyclictest7559-21if_enp2s02
640993314,16cyclictest340-21systemd-journal2
64099328,14cyclictest0-21swapper/22
640993112,16cyclictest14817-21cat2
64099308,9cyclictest0-21swapper/22
64099308,9cyclictest0-21swapper/22
64099308,9cyclictest0-21swapper/22
64099308,8cyclictest0-21swapper/22
64099287,8cyclictest0-21swapper/22
64099287,8cyclictest0-21swapper/22
64099277,8cyclictest0-21swapper/22
64099277,8cyclictest0-21swapper/22
64099276,8cyclictest0-21swapper/22
640992713,11cyclictest1404-21needreboot2
640992712,12cyclictest15529-21/usr/sbin/munin2
640992710,8cyclictest17841-21cstates2
64999266,18cyclictest518-21in:imuxsock3
64099264,9cyclictest25212-21cat2
640992612,11cyclictest2630-21diskstats2
640992612,11cyclictest22382-21ntp_states2
640992612,11cyclictest22382-21ntp_states2
64099256,6cyclictest638-21ntpd2
64099253,11cyclictest0-21swapper/22
640992513,9cyclictest29535-21interrupts2
640992511,11cyclictest558-21if_enp2s02
640992510,12cyclictest24634-21swap2
64999244,17cyclictest9016-21sendmail-mta3
64999244,17cyclictest7382-21sendmail-mta3
640992415,6cyclictest22252-21cron2
640992411,4cyclictest20117-21uname2
640992411,11cyclictest2802-21memory2
62699242,3cyclictest21-21ksoftirqd/11
64999234,17cyclictest20072-21sendmail-mta3
64999233,17cyclictest879-21sendmail-mta3
64999233,17cyclictest8607-21sendmail-mta3
64999233,17cyclictest31862-21sendmail-mta3
64999233,17cyclictest21092-21sendmail-mta3
649992314,5cyclictest517-21dbus-daemon3
64999231,19cyclictest1804-21munin-run3
64099239,11cyclictest4970-21memory2
64099235,6cyclictest0-21swapper/22
640992314,7cyclictest15599-21cron2
640992312,8cyclictest26452-21ntp_states2
640992312,8cyclictest1705-21df2
640992311,9cyclictest22599-21irqstats2
640992311,9cyclictest18475-21df_inode2
640992311,10cyclictest6715-21sendmail2
626992316,4cyclictest13628-21cron1
626992315,5cyclictest7184-21mailstats1
64999224,16cyclictest27788-21sendmail-mta3
64999223,17cyclictest29214-21sendmail-mta3
64999223,17cyclictest16023-21sendmail-mta3
64999223,16cyclictest25627-21sendmail-mta3
64999222,3cyclictest0-21swapper/33
64999222,3cyclictest0-21swapper/33
649992216,4cyclictest8055-21perf3
64999221,4cyclictest23270-21munin-run3
64999221,4cyclictest23270-21munin-run3
64999221,18cyclictest5705-21sendmail-mta3
64999221,18cyclictest383-1kworker/3:2H3
64999221,18cyclictest28654-21munin-run3
64999221,18cyclictest27367-21awk3
64999221,18cyclictest11439-21sendmail-mta3
64099224,7cyclictest0-21swapper/22
640992214,6cyclictest1627-21cron2
640992213,6cyclictest12816-21munin-run2
640992213,5cyclictest11853-21apt-get2
640992212,7cyclictest12635-21cpuspeed_turbos2
640992211,9cyclictest344-21threads2
640992211,9cyclictest19350-21ntp_states2
640992211,9cyclictest10544-21cpuspeed2
640992211,8cyclictest20495-21diskstats2
640992211,8cyclictest20361-21diskstats2
640992211,8cyclictest12176-21df2
640992210,8cyclictest0-21swapper/22
621992212,4cyclictest8324-21idleruntime0
621992212,4cyclictest8324-21idleruntime0
62199220,20cyclictest24833-21kworker/0:10
296012220,2sleep30-21swapper/33
64999212,16cyclictest518-21in:imuxsock3
64999211,4cyclictest340-21systemd-journal3
64999211,3cyclictest383-1kworker/3:2H3
64999211,3cyclictest29993-21apt3
64999211,3cyclictest23711-1kworker/3:0H3
64999211,18cyclictest13553-21dump-pmu-power3
64999210,4cyclictest31469-21sendmail-mta3
64999210,3cyclictest23769-21sendmail3
64999210,18cyclictest5505-21sendmail3
64099217,6cyclictest0-21swapper/22
640992114,5cyclictest24922-21aten2_r9power_e2
640992113,6cyclictest8044-21munin-run2
640992113,6cyclictest1931-21ntpq2
640992113,6cyclictest16522-21sed2
640992113,5cyclictest27603-21apt-get2
640992111,8cyclictest9609-21apt-config2
640992111,8cyclictest5442-21aten2.4-expect2
640992111,8cyclictest5442-21aten2.4-expect2
640992110,9cyclictest16437-21aten2_r9power_c2
640992110,8cyclictest3346-21aten2_r9power_c2
640992110,8cyclictest13199-21apt-key2
62699214,12cyclictest21506-21apt-get1
62699214,12cyclictest21506-21apt-get1
621992116,3cyclictest16191-21cut0
249502210,1sleep30-21swapper/33
249502210,1sleep30-21swapper/33
64999203,2cyclictest0-21swapper/33
64999202,2cyclictest0-21swapper/33
64999202,16cyclictest2701-21sendmail-mta3
649992015,3cyclictest7147-21sendmail3
649992015,3cyclictest7147-21sendmail3
649992015,3cyclictest13470-21sh3
649992014,4cyclictest9717-21find3
649992014,4cyclictest11465-21df_inode3
64999201,2cyclictest0-21swapper/33
64999201,17cyclictest383-1kworker/3:2H3
64999201,17cyclictest22246-21latency_hist3
64999200,17cyclictest383-1kworker/3:2H3
640992013,5cyclictest9016-21apt2
640992011,7cyclictest22144-21aten2_r9power_c2
62699202,15cyclictest23792-21grep1
62699202,11cyclictest5350-21apt-get1
62699202,11cyclictest5350-21apt-get1
626992015,3cyclictest7775-21/usr/sbin/munin1
626992015,3cyclictest7775-21/usr/sbin/munin1
626992015,3cyclictest7476-21seq1
626992015,3cyclictest32731-21cron1
626992015,3cyclictest2653-21seq1
626992015,3cyclictest24131-21/usr/sbin/munin1
626992015,3cyclictest24131-21/usr/sbin/munin1
626992015,3cyclictest14391-21/usr/sbin/munin1
626992014,4cyclictest14271-21sed1
626992012,5cyclictest1048-21munin-plugin-st1
626992010,7cyclictest676-21kernelversion1
621992015,3cyclictest3449-21expr0
621992015,3cyclictest32326-21unixbench_singl0
621992015,3cyclictest31835-21seq0
621992015,3cyclictest26167-21cpu0
621992015,3cyclictest14671-21seq0
621992014,4cyclictest7841-21forks0
621992014,4cyclictest3854-21perf0
621992014,4cyclictest26558-21cat0
621992013,4cyclictest29321-21df0
261052200,1sleep10-21swapper/11
64999194,12cyclictest0-21swapper/33
649991914,3cyclictest7782-21acpi3
649991914,3cyclictest7782-21acpi3
649991914,3cyclictest21319-21sed3
649991913,4cyclictest9738-21sed3
649991913,4cyclictest2174-21ntpq3
649991913,4cyclictest18021-21date3
64999190,17cyclictest3885-21latency_hist3
64999190,17cyclictest0-21swapper/33
64999190,16cyclictest19674-21latency_hist3
626991916,2cyclictest0-21swapper/11
626991915,2cyclictest634-21snmpd1
626991915,2cyclictest2187-21/usr/sbin/munin1
626991914,3cyclictest634-21snmpd1
626991914,3cyclictest2900-21/usr/sbin/munin1
626991914,3cyclictest24842-21/usr/sbin/munin1
626991914,3cyclictest21859-21sh1
626991914,3cyclictest19463-21/usr/sbin/munin1
626991914,3cyclictest12942-21dpkg1
626991914,3cyclictest10315-21/usr/sbin/munin1
626991912,4cyclictest32179-21idleruntime-cro1
626991912,4cyclictest26967-21seq1
62699191,16cyclictest19211-21cron1
626991911,6cyclictest11842-21hostname1
62699190,15cyclictest0-21swapper/11
62199198,3cyclictest0-21swapper/00
62199198,3cyclictest0-21swapper/00
621991914,3cyclictest634-21snmpd0
621991914,3cyclictest32254-21/usr/sbin/munin0
621991914,3cyclictest25298-21awk0
621991914,3cyclictest23254-21df_inode0
621991914,3cyclictest19744-21cut0
621991914,3cyclictest1688-21sendmail-mta0
621991914,3cyclictest11835-21/usr/sbin/munin0
621991913,4cyclictest7330-21seq0
621991913,4cyclictest6630-21seq0
621991913,4cyclictest6119-21cut0
621991913,4cyclictest27012-21seq0
621991913,4cyclictest23670-21seq0
621991913,4cyclictest14686-21ntpq0
621991913,4cyclictest12801-21seq0
621991913,4cyclictest12714-21ls0
649991814,2cyclictest17500-21aten2_r9power_e3
649991814,2cyclictest16413-21/usr/sbin/munin3
64999181,3cyclictest340-21systemd-journal3
649991813,3cyclictest7764-21seq3
649991813,3cyclictest31430-21mailstats3
649991813,3cyclictest13031-21wc3
649991812,4cyclictest16709-21sed3
649991812,4cyclictest15660-21lockfile-remove3
64999180,16cyclictest292-21jbd2/mmcblk0p2-3
64999180,16cyclictest0-21swapper/33
62699183,12cyclictest16347-21grep1
626991816,1cyclictest0-21swapper/11
626991816,1cyclictest0-21swapper/11
626991816,1cyclictest0-21swapper/11
626991815,2cyclictest3695-21/usr/sbin/munin1
626991814,2cyclictest525-21/usr/sbin/munin1
626991814,2cyclictest4074-21/usr/sbin/munin1
626991814,2cyclictest29604-21/usr/sbin/munin1
626991814,2cyclictest2045-21/usr/sbin/munin1
626991814,2cyclictest16008-21/usr/sbin/munin1
626991814,2cyclictest13987-21/usr/sbin/munin1
626991813,3cyclictest4455-21sed1
626991813,3cyclictest29815-21seq1
626991813,3cyclictest28967-21grep1
626991813,3cyclictest23997-21/usr/sbin/munin1
626991813,3cyclictest23252-21sh1
626991813,3cyclictest19243-21awk1
626991813,3cyclictest16280-21ntpq1
626991812,4cyclictest22564-21fw_packets1
626991812,4cyclictest19841-21basename1
626991812,4cyclictest14120-21grep1
626991812,3cyclictest6010-21dump-pmu-power1
621991816,1cyclictest0-21swapper/00
621991816,1cyclictest0-21swapper/00
621991815,2cyclictest0-21swapper/00
621991814,2cyclictest1055-21/usr/sbin/munin0
621991813,3cyclictest7185-21sshd0
621991813,3cyclictest7142-21turbostat.cron0
621991813,3cyclictest7142-21turbostat.cron0
621991813,3cyclictest5943-21sed0
621991813,3cyclictest4912-21seq0
621991813,3cyclictest3698-21find0
621991813,3cyclictest30229-21/usr/sbin/munin0
621991813,3cyclictest29319-21seq0
621991813,3cyclictest28749-21expr0
621991813,3cyclictest24360-21expr0
621991813,3cyclictest19788-21seq0
621991813,3cyclictest13955-21grep0
621991813,3cyclictest10781-21cron0
621991813,3cyclictest10361-21aten2.4-expect0
621991812,4cyclictest32506-21nfs4_client0
621991812,4cyclictest21881-21cut0
621991812,4cyclictest20947-21grep0
621991812,4cyclictest18358-21cat0
621991812,4cyclictest17692-21seq0
62199180,16cyclictest18927-21grep0
64999170,1cyclictest0-21swapper/33
62699173,8cyclictest13844-21apt-get1
626991715,1cyclictest0-21swapper/11
626991715,1cyclictest0-21swapper/11
626991715,1cyclictest0-21swapper/11
626991713,2cyclictest16413-21/usr/sbin/munin1
626991713,2cyclictest1274-21/usr/sbin/munin1
626991712,3cyclictest634-21snmpd1
626991712,3cyclictest20028-21cut1
62699171,14cyclictest0-21swapper/11
621991715,1cyclictest0-21swapper/00
621991713,2cyclictest21867-21cron0
621991712,3cyclictest26974-21hostname0
621991712,3cyclictest24596-21which0
621991712,3cyclictest21915-21sh0
621991712,3cyclictest21915-21sh0
621991712,3cyclictest14796-21cat0
621991712,3cyclictest12087-21cat0
621991712,3cyclictest10056-21cat0
621991711,4cyclictest708-21expr0
621991711,4cyclictest31475-21cut0
621991711,4cyclictest3094-21munin-node0
621991611,3cyclictest6702-21sh0
621991611,3cyclictest22498-21expr0
621991611,3cyclictest18011-21aten2_r9power_v0
62699153,7cyclictest28198-21apt-get1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional