You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-18 - 22:43
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack9slot2.osadl.org (updated Thu Dec 18, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
236412285219,24sleep20-21swapper/22
236842275178,83sleep30-21swapper/33
238922260188,25sleep00-21swapper/00
236522260225,23sleep10-21swapper/11
2413399190185,3cyclictest0-21swapper/00
2413799150144,4cyclictest12053-21strings1
2414699108105,2cyclictest0-21swapper/33
128902550,1sleep10-21swapper/11
49482530,1sleep10-21swapper/11
210682510,4sleep22414399cyclictest2
325522460,1sleep20-21swapper/22
51782410,1sleep20-21swapper/22
2413399296,3cyclictest9-21ksoftirqd/00
24133992920,3cyclictest9-21ksoftirqd/00
194912280,12sleep09-21ksoftirqd/00
2414699271,6cyclictest24220-21munin-run3
2414699265,18cyclictest0-21swapper/33
24146992515,6cyclictest517-21dbus-daemon3
2414699244,18cyclictest28626-21sendmail-mta3
2414699244,18cyclictest27629-21sendmail-mta3
2414699244,18cyclictest15903-21sendmail-mta3
2414699244,17cyclictest0-21swapper/33
2414699243,18cyclictest2866-21sendmail-mta3
2414699243,18cyclictest26223-21sendmail-mta3
2414699242,20cyclictest517-21dbus-daemon3
2414699242,20cyclictest517-21dbus-daemon3
2414699242,19cyclictest515-21avahi-daemon3
2414699241,5cyclictest517-21dbus-daemon3
2414699241,5cyclictest17075-21cron3
24146992415,5cyclictest340-21systemd-journal3
2414699241,4cyclictest6129-21apt-get3
2414699241,20cyclictest29861-21sendmail-msp3
2413399248,5cyclictest9-21ksoftirqd/00
2413399248,5cyclictest9-21ksoftirqd/00
2413399242,2cyclictest111rcu_preempt0
24133992411,3cyclictest9-21ksoftirqd/00
111782240,2sleep12413799cyclictest1
2414699234,17cyclictest23560-21sendmail-mta3
2414699233,18cyclictest7110-21cat3
2414699233,17cyclictest0-21swapper/33
2414699231,4cyclictest13067-1kworker/3:2H3
2414699231,20cyclictest517-21dbus-daemon3
2414699230,5cyclictest11400-21apt-key3
24143992317,4cyclictest31986-21cat2
2413799231,19cyclictest5098-21sendmail-msp1
24133992319,3cyclictest9-21ksoftirqd/00
24133992319,3cyclictest9-21ksoftirqd/00
24133992315,3cyclictest9-21ksoftirqd/00
24133992314,3cyclictest9-21ksoftirqd/00
24133992314,3cyclictest9-21ksoftirqd/00
24133992314,3cyclictest9-21ksoftirqd/00
24133992310,10cyclictest0-21swapper/00
2414699225,15cyclictest662-21runrttasks3
2414699224,16cyclictest292-21jbd2/mmcblk0p2-3
2414699223,17cyclictest7955-21sendmail-mta3
2414699223,17cyclictest31215-21sendmail-mta3
2414699223,17cyclictest20167-21sendmail-mta3
2414699223,17cyclictest12017-21sendmail-mta3
2414699222,17cyclictest340-21systemd-journal3
2414699222,17cyclictest0-21swapper/33
24146992217,3cyclictest0-21swapper/33
2414699221,6cyclictest29044-21perf3
24146992214,5cyclictest21661-21sh3
2414699221,3cyclictest30333-21perf3
2414699221,19cyclictest6997-1kworker/3:1H3
24143992216,4cyclictest32543-21diskstats2
24143992210,10cyclictest4330-21if_enp2s02
24133992218,2cyclictest9-21ksoftirqd/00
24133992217,3cyclictest9-21ksoftirqd/00
24133992217,3cyclictest9-21ksoftirqd/00
24133992214,2cyclictest9-21ksoftirqd/00
24133992214,2cyclictest9-21ksoftirqd/00
24133992211,9cyclictest30915-21sendmail-mta0
2414699217,12cyclictest30842-21awk3
2414699217,12cyclictest25300-21latency_hist3
2414699213,16cyclictest22146-21latency_hist3
2414699212,12cyclictest15819-21chrt3
24146992116,3cyclictest4034-21grep3
24146992115,4cyclictest23210-21munin-plugin-st3
24146992114,4cyclictest8942-21sh3
24146992112,6cyclictest517-21dbus-daemon3
24143992116,3cyclictest9133-21sh2
24143992116,3cyclictest24706-21aten2_r9power_v2
24143992115,4cyclictest12146-21df_inode2
24137992115,4cyclictest7842-21seq1
24137992115,4cyclictest517-21dbus-daemon1
24137992115,3cyclictest27237-21apt-get1
2413399219,4cyclictest9-21ksoftirqd/00
2413399218,4cyclictest9-21ksoftirqd/00
2413399212,2cyclictest111rcu_preempt0
24133992116,3cyclictest9-21ksoftirqd/00
24133992111,3cyclictest9-21ksoftirqd/00
2414699202,15cyclictest25411-21cut3
2414699202,14cyclictest15068-21munin-plugin-st3
24146992015,3cyclictest31110-21sed3
24146992014,4cyclictest4722-21fw_packets3
2414699201,2cyclictest0-21swapper/33
2414699201,2cyclictest0-21swapper/33
24146992012,5cyclictest14190-21cron3
2414699201,16cyclictest340-21systemd-journal3
2414699200,3cyclictest9129-21munin-run3
2414699200,3cyclictest6997-1kworker/3:1H3
2414699200,3cyclictest23972-1kworker/3:0H3
24143992015,3cyclictest4372-21uptime2
24143992015,3cyclictest4372-21uptime2
24143992015,3cyclictest30480-21ntp_states2
24143992015,3cyclictest17079-21missed_timers2
24143992015,3cyclictest17079-21missed_timers2
24143992014,4cyclictest4296-21hostname2
24143992014,4cyclictest28417-21seq2
24143992014,4cyclictest15051-21cron2
24137992016,3cyclictest21-21ksoftirqd/11
24137992015,3cyclictest9838-21seq1
24137992015,3cyclictest26086-21seq1
24137992015,3cyclictest21-21ksoftirqd/11
24137992014,4cyclictest9097-21seq1
24137992014,4cyclictest2678-21seq1
24137992014,4cyclictest23037-21seq1
24137992010,6cyclictest8363-21apt-get1
2413799200,18cyclictest7754-21sendmail-mta1
2413399204,4cyclictest9-21ksoftirqd/00
2413399202,15cyclictest16602-21cpuspeed_turbos0
2413399202,15cyclictest16602-21cpuspeed_turbos0
24133992015,4cyclictest9-21ksoftirqd/00
24133992015,3cyclictest9-21ksoftirqd/00
24133992015,3cyclictest9138-21sed0
24133992015,3cyclictest14399-21sed0
24133992015,3cyclictest11424-21processes0
24133992014,4cyclictest634-21snmpd0
24133992014,4cyclictest3926-21kernelversion0
2413399200,8cyclictest9-21ksoftirqd/00
169982200,1sleep20-21swapper/22
2414699197,11cyclictest35-21ksoftirqd/33
24146991916,2cyclictest0-21swapper/33
24146991915,2cyclictest14031-21awk3
2414699191,3cyclictest22346-21latency_hist3
24146991910,6cyclictest340-21systemd-journal3
24146991910,6cyclictest340-21systemd-journal3
2414699190,4cyclictest1976-21turbostat.cron3
2414699190,17cyclictest0-21swapper/33
2414699190,16cyclictest21145-21cron3
2414699190,16cyclictest21145-21cron3
2414399199,6cyclictest14485-21apt-get2
2414399199,6cyclictest14485-21apt-get2
24143991915,2cyclictest7209-21aten2_r9power_e2
24143991915,2cyclictest10232-21nfs4_client2
24143991914,3cyclictest8802-21kernelversion2
24143991914,3cyclictest7546-21timerwakeupswit2
24143991914,3cyclictest5999-21latency2
24143991914,3cyclictest4190-21cat2
24143991914,3cyclictest29404-21ntp_offset2
24143991914,3cyclictest28273-21sendmail_mailst2
24143991914,3cyclictest25610-21aten2_r9power_v2
24143991914,3cyclictest24479-21apt-get2
24143991914,3cyclictest23269-21interrupts2
24143991914,3cyclictest19614-21ls2
24143991914,3cyclictest19614-21ls2
24143991914,3cyclictest1950-21cpuspeed_turbos2
24143991914,3cyclictest1950-21cpuspeed_turbos2
24143991914,3cyclictest18961-21sh2
24143991914,3cyclictest14269-21acpi2
24143991914,3cyclictest12215-21acpi2
24143991913,4cyclictest32479-21ls2
24143991913,4cyclictest31960-21date2
24143991913,4cyclictest26851-21seq2
24143991913,4cyclictest24716-21memory2
24143991913,4cyclictest21832-21expr2
24143991913,4cyclictest1891-21awk2
24143991912,4cyclictest20504-21cat2
2414399190,17cyclictest26737-21cron2
24137991917,1cyclictest0-21swapper/11
24137991916,2cyclictest0-21swapper/11
24137991915,2cyclictest5119-21/usr/sbin/munin1
24137991914,3cyclictest9107-21cut1
24137991914,3cyclictest634-21snmpd1
24137991914,3cyclictest4204-21entropy1
24137991914,3cyclictest31060-21seq1
24137991914,3cyclictest29519-21sort1
24137991914,3cyclictest29328-21sh1
24137991914,3cyclictest29018-21/usr/sbin/munin1
24137991914,3cyclictest24271-21sed1
24137991914,3cyclictest19055-21seq1
24137991914,3cyclictest18530-21/usr/sbin/munin1
24137991914,3cyclictest18330-21/usr/sbin/munin1
24137991914,3cyclictest16932-21seq1
24137991914,3cyclictest15313-21seq1
24137991913,4cyclictest927-21sed1
24137991913,4cyclictest16103-21sendmail-mta1
24137991913,4cyclictest16103-21sendmail-mta1
24137991912,4cyclictest12478-21sort1
24137991911,6cyclictest10752-21grep1
2413799190,17cyclictest0-21swapper/11
2413399194,9cyclictest11729-21apt-get0
24133991915,3cyclictest9-21ksoftirqd/00
24133991915,2cyclictest20556-21/usr/sbin/munin0
24133991914,3cyclictest9-21ksoftirqd/00
24133991914,3cyclictest9-21ksoftirqd/00
24133991914,3cyclictest6914-21ls0
24133991914,3cyclictest634-21snmpd0
24133991914,3cyclictest5560-21sendmail0
24133991914,3cyclictest25393-21df0
24133991914,3cyclictest22222-21cat0
24133991913,4cyclictest9032-21seq0
24133991913,4cyclictest22795-21unixbench_singl0
24133991913,4cyclictest19745-21sed0
24133991912,4cyclictest517-21dbus-daemon0
24133991912,4cyclictest30260-21cut0
24133991912,4cyclictest23988-21basename0
24133991911,5cyclictest340-21systemd-journal0
24146991813,3cyclictest3370-21expr3
24146991813,3cyclictest3370-21expr3
24146991812,3cyclictest336-21sed3
24143991813,3cyclictest9915-21cat2
24143991813,3cyclictest8755-21expr2
24143991813,3cyclictest6975-21ntp_kernel_pll_2
24143991813,3cyclictest517-21dbus-daemon2
24143991813,3cyclictest3673-21expr2
24143991813,3cyclictest29276-21/usr/sbin/munin2
24143991813,3cyclictest27939-21expr2
24143991813,3cyclictest24047-21if_enp2s02
24143991813,3cyclictest21129-21basename2
24143991813,3cyclictest19156-21ls2
24143991813,3cyclictest18485-21grep2
24143991813,3cyclictest1770-21seq2
24143991813,3cyclictest10925-21cat2
24143991812,4cyclictest29883-21cat2
2414399181,15cyclictest0-21swapper/22
2413799188,8cyclictest15844-21aten2_r9power_c1
2413799181,5cyclictest0-21swapper/11
24137991814,2cyclictest634-21snmpd1
24137991814,2cyclictest634-21snmpd1
24137991814,2cyclictest27047-21gzip1
24137991814,2cyclictest26583-21aten2_r9power_p1
24137991814,2cyclictest24461-21/usr/sbin/munin1
24137991814,2cyclictest20556-21/usr/sbin/munin1
24137991813,3cyclictest31557-21cat1
24137991813,3cyclictest30102-21seq1
24137991813,3cyclictest30073-21/usr/sbin/munin1
24137991813,3cyclictest2745-21sed1
24137991813,3cyclictest25639-21seq1
24137991813,3cyclictest24742-21sed1
24137991813,3cyclictest23452-21/usr/sbin/munin1
24137991813,3cyclictest21920-21/usr/sbin/munin1
24137991813,3cyclictest21502-21seq1
24137991813,3cyclictest11710-21/usr/sbin/munin1
24137991812,4cyclictest18002-21seq1
24137991812,4cyclictest13707-21diskstats1
2413799181,16cyclictest0-21swapper/11
2413799181,16cyclictest0-21swapper/11
24137991811,4cyclictest10193-21acpi1
2413799180,16cyclictest0-21swapper/11
2413799180,16cyclictest0-21swapper/11
2413399183,8cyclictest934-21apt-get0
24133991816,1cyclictest0-21swapper/00
24133991813,3cyclictest9-21ksoftirqd/00
24133991813,3cyclictest28043-21gzip0
24133991813,3cyclictest2662-21df0
24133991812,4cyclictest9-21ksoftirqd/00
24133991812,4cyclictest9-21ksoftirqd/00
24133991812,4cyclictest32422-21sed0
24133991812,4cyclictest1985-21cat0
24133991812,4cyclictest13645-21expr0
24133991811,5cyclictest9306-21pmu-power0
24133991810,5cyclictest11986-21idleruntime-cro0
24146991714,2cyclictest25504-21seq3
24146991710,5cyclictest974-21sh3
24143991715,1cyclictest0-21swapper/22
24143991713,2cyclictest13996-21cpuspeed2
24143991712,3cyclictest662-21runrttasks2
24143991712,3cyclictest26853-21ntpq2
24143991712,3cyclictest22244-21tr2
24143991712,3cyclictest17838-21basename2
24143991712,3cyclictest14400-21cut2
24143991712,3cyclictest1-21systemd2
24143991711,4cyclictest29770-21load2
24137991712,3cyclictest4058-21seq1
24137991712,3cyclictest4058-21seq1
24137991712,3cyclictest32281-21seq1
24137991712,3cyclictest25786-21expr1
24137991712,3cyclictest2113-21ntp_states1
24137991712,3cyclictest10377-21/usr/sbin/munin1
2413399177,3cyclictest9-21ksoftirqd/00
24133991712,3cyclictest9-21ksoftirqd/00
24133991711,4cyclictest25631-21wc0
2413399170,16cyclictest0-21swapper/00
24143991611,3cyclictest662-21runrttasks2
24137991611,3cyclictest32450-21cstates1
24133991611,3cyclictest662-21runrttasks0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional