You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-24 - 19:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 24, 2025 12:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
15382341231,77sleep30-21swapper/33
17702322184,118sleep20-21swapper/22
14912280244,24sleep10-21swapper/11
195799252247,3cyclictest14879-21munin-run2
14632246210,24sleep00-21swapper/00
195399227219,5cyclictest14891-21apt-get1
194899202184,2cyclictest111rcu_preempt0
395421500,4sleep33886-21apt-key3
196199130124,4cyclictest12867-1kworker/3:2H3
268802550,2sleep30-21swapper/33
111632490,2sleep30-21swapper/33
111632490,2sleep30-21swapper/33
48592460,1sleep00-21swapper/00
37972460,2sleep00-21swapper/00
196199287,19cyclictest0-21swapper/33
196199287,18cyclictest0-21swapper/33
178282280,1sleep30-21swapper/33
196199277,3cyclictest0-21swapper/33
248552260,5sleep024807-21munin-run0
202792260,1sleep10-21swapper/11
196199266,17cyclictest0-21swapper/33
196199265,18cyclictest0-21swapper/33
196199265,18cyclictest0-21swapper/33
196199262,14cyclictest3891-21sed3
1961992621,3cyclictest6441-21munin-run3
196199262,10cyclictest21002-21cut3
196199253,19cyclictest13567-21sendmail-mta3
196199245,3cyclictest0-21swapper/33
196199245,3cyclictest0-21swapper/33
196199244,17cyclictest2480-21sendmail-mta3
196199244,17cyclictest1302-21sendmail-mta3
196199242,7cyclictest35-21ksoftirqd/33
196199242,7cyclictest35-21ksoftirqd/33
196199242,7cyclictest35-21ksoftirqd/33
196199242,19cyclictest21905-21munin-run3
196199241,20cyclictest31853-21cat3
196199238,12cyclictest0-21swapper/33
196199234,17cyclictest10663-21sendmail-mta3
196199233,17cyclictest8481-21sendmail-mta3
196199233,17cyclictest23804-21sendmail-mta3
196199233,17cyclictest23804-21sendmail-mta3
196199233,17cyclictest0-21swapper/33
196199232,6cyclictest35-21ksoftirqd/33
196199232,6cyclictest35-21ksoftirqd/33
196199232,6cyclictest35-21ksoftirqd/33
196199232,6cyclictest35-21ksoftirqd/33
196199232,18cyclictest0-21swapper/33
196199231,7cyclictest35-21ksoftirqd/33
196199231,7cyclictest35-21ksoftirqd/33
196199231,6cyclictest35-21ksoftirqd/33
196199230,14cyclictest18383-21aten2_r9power_c3
196199224,16cyclictest9877-21cat3
196199222,7cyclictest35-21ksoftirqd/33
196199222,7cyclictest35-21ksoftirqd/33
196199222,7cyclictest35-21ksoftirqd/33
196199222,7cyclictest35-21ksoftirqd/33
196199222,6cyclictest35-21ksoftirqd/33
196199222,6cyclictest35-21ksoftirqd/33
196199221,8cyclictest11680-21awk3
196199221,7cyclictest35-21ksoftirqd/33
196199221,6cyclictest35-21ksoftirqd/33
196199221,6cyclictest35-21ksoftirqd/33
196199221,5cyclictest0-21swapper/33
196199221,4cyclictest31781-1kworker/3:1H3
196199221,3cyclictest340-21systemd-journal3
196199220,8cyclictest35-21ksoftirqd/33
196199220,8cyclictest35-21ksoftirqd/33
196199220,8cyclictest35-21ksoftirqd/33
196199220,8cyclictest35-21ksoftirqd/33
196199220,6cyclictest0-21swapper/33
1957992219,2cyclictest0-21swapper/22
1953992216,3cyclictest15192-21sendmail1
1953992214,5cyclictest18699-21sh1
1953992214,4cyclictest4080-21latency_hist1
196199212,7cyclictest35-21ksoftirqd/33
196199212,6cyclictest35-21ksoftirqd/33
196199212,5cyclictest0-21swapper/33
196199211,7cyclictest35-21ksoftirqd/33
196199211,6cyclictest35-21ksoftirqd/33
196199211,6cyclictest10441-21taskset3
196199210,8cyclictest35-21ksoftirqd/33
196199210,8cyclictest35-21ksoftirqd/33
195799214,15cyclictest10551-21turbostat2
1957992118,2cyclictest0-21swapper/22
1957992115,4cyclictest8677-21sed2
1957992115,4cyclictest12788-21ntpq2
1953992114,4cyclictest17702-21grep1
1948992115,4cyclictest7119-21df_inode0
1948992115,4cyclictest31832-21idleruntime-cro0
80512200,2sleep0194899cyclictest0
196199203,6cyclictest35-21ksoftirqd/33
196199202,6cyclictest35-21ksoftirqd/33
1957992015,3cyclictest5293-21pluginstate2
1957992015,3cyclictest25073-21ntpq2
1957992015,3cyclictest16239-21sed2
1957992015,3cyclictest10222-21processes2
1957992014,4cyclictest2141-21df2
1957992014,4cyclictest14234-21gdbus2
195399201,8cyclictest22044-21sendmail-mta1
1953992016,2cyclictest2598-21/usr/sbin/munin1
1953992016,2cyclictest0-21swapper/11
1953992015,3cyclictest634-21snmpd1
1953992015,3cyclictest29149-21/usr/sbin/munin1
1953992015,3cyclictest10740-21grep1
1953992015,3cyclictest10740-21grep1
1953992014,4cyclictest8794-21basename1
1953992014,4cyclictest6778-21cut1
1953992014,4cyclictest27464-21apt-get1
1953992014,4cyclictest27353-21sed1
1953992013,5cyclictest26744-21grep1
1953992013,4cyclictest340-21systemd-journal1
1953992013,4cyclictest2652-21basename1
1953992012,5cyclictest340-21systemd-journal1
195399201,17cyclictest634-21snmpd1
195399201,17cyclictest634-21snmpd1
194899205,12cyclictest16729-21unixbench-2d0
1948992018,1cyclictest0-21swapper/00
1948992016,2cyclictest28046-21sh0
1948992015,3cyclictest817-21/usr/sbin/munin0
1948992015,3cyclictest634-21snmpd0
1948992015,3cyclictest32761-21ls0
1948992015,3cyclictest14263-21/usr/sbin/munin0
288102190,4sleep228817-21gltestperf2
196199190,6cyclictest35-21ksoftirqd/33
195799198,9cyclictest27040-21latency_hist2
195799197,9cyclictest23804-21sendmail-mta2
195799197,9cyclictest23804-21sendmail-mta2
195799192,15cyclictest0-21swapper/22
1957991916,2cyclictest0-21swapper/22
1957991915,2cyclictest5548-21ntp_states2
1957991914,3cyclictest807-21ntpq2
1957991914,3cyclictest8003-21processes2
1957991914,3cyclictest7836-21date2
1957991914,3cyclictest7258-21if_enp2s02
1957991914,3cyclictest30328-21/usr/sbin/munin2
1957991914,3cyclictest30264-21ls2
1957991914,3cyclictest26543-21/usr/sbin/munin2
1957991913,4cyclictest22550-21cut2
1957991913,4cyclictest13537-21expr2
1957991913,4cyclictest1302-21sendmail-mta2
1957991912,5cyclictest5826-21uname2
1957991912,5cyclictest17912-21df_inode2
1957991912,4cyclictest28195-21mailstats2
1957991910,6cyclictest30938-21apt-get2
195399192,14cyclictest6330-21cut1
1953991917,1cyclictest0-21swapper/11
1953991915,2cyclictest32351-21/usr/sbin/munin1
1953991914,3cyclictest9546-21seq1
1953991914,3cyclictest9456-21sed1
1953991914,3cyclictest634-21snmpd1
1953991914,3cyclictest4362-21/usr/sbin/munin1
1953991914,3cyclictest24024-21expr1
1953991914,3cyclictest17477-21/usr/sbin/munin1
1953991914,3cyclictest1696-21/usr/sbin/munin1
1953991914,3cyclictest15845-21processes1
1953991914,3cyclictest11616-21grep1
1953991913,4cyclictest26202-21sed1
1953991913,4cyclictest20155-21cat1
1953991913,4cyclictest14055-21sed1
1953991913,3cyclictest21694-21aten2.4-expect1
1953991913,3cyclictest16112-21sendmail-mta1
1953991912,4cyclictest3195-21mailstats1
194899194,13cyclictest517-21dbus-daemon0
1948991916,2cyclictest0-21swapper/00
1948991916,2cyclictest0-21swapper/00
1948991915,3cyclictest56750irq/130-enp2s00
1948991915,2cyclictest9182-21acpi0
1948991914,3cyclictest8211-21expr0
1948991914,3cyclictest571-21gdbus0
1948991914,3cyclictest29706-21uptime0
1948991914,3cyclictest19274-21ls0
1948991914,3cyclictest16326-21/usr/sbin/munin0
1948991914,3cyclictest13703-21gltestperf0
1948991913,4cyclictest5569-21idleruntime-cro0
1948991913,4cyclictest31315-21expr0
1948991913,4cyclictest26294-21seq0
1948991913,4cyclictest26294-21seq0
1948991913,4cyclictest24296-21wc0
1948991913,4cyclictest18131-21awk0
1948991913,4cyclictest10351-21seq0
1948991913,4cyclictest10263-21expr0
1948991913,4cyclictest10263-21expr0
1957991814,2cyclictest20110-21/usr/sbin/munin2
1957991813,3cyclictest8746-21ntpq2
1957991813,3cyclictest662-21runrttasks2
1957991813,3cyclictest30736-21cat2
1957991813,3cyclictest2997-21aten2_r9power_v2
1957991813,3cyclictest29130-21date2
1957991813,3cyclictest26294-21aten2_r9power_c2
1957991813,3cyclictest21542-21seq2
1957991813,3cyclictest19767-21cat2
1957991813,3cyclictest18761-21which2
1957991813,3cyclictest11977-21missed_timers2
1957991813,3cyclictest11384-21expr2
1957991813,3cyclictest11171-21expr2
1957991812,4cyclictest9071-21grep2
1957991812,4cyclictest6707-21wc2
1957991812,4cyclictest4599-21sed2
1957991812,4cyclictest3170-21basename2
1957991812,4cyclictest17200-21cron2
1957991812,4cyclictest16828-21grep2
195799181,16cyclictest0-21swapper/22
195799181,16cyclictest0-21swapper/22
195799181,15cyclictest16173-21grep2
195799181,13cyclictest6858-21apt-get2
195799180,16cyclictest0-21swapper/22
195399181,7cyclictest515-21avahi-daemon1
1953991816,1cyclictest0-21swapper/11
1953991816,1cyclictest0-21swapper/11
1953991814,2cyclictest30920-21/usr/sbin/munin1
1953991814,2cyclictest24216-21apt-get1
1953991813,3cyclictest9055-21cut1
1953991813,3cyclictest8760-21awk1
1953991813,3cyclictest6848-21sed1
1953991813,3cyclictest6840-21/usr/sbin/munin1
1953991813,3cyclictest6565-21cat1
1953991813,3cyclictest27467-21perf1
1953991813,3cyclictest27467-21perf1
1953991813,3cyclictest15486-21hostname1
1953991813,3cyclictest11625-21expr1
1953991812,4cyclictest26152-21sendmail-mta1
1953991812,4cyclictest26152-21sendmail-mta1
1953991811,5cyclictest472-21head1
195399180,16cyclictest0-21swapper/11
195399180,16cyclictest0-21swapper/11
1948991816,1cyclictest0-21swapper/00
1948991814,2cyclictest30328-21/usr/sbin/munin0
1948991814,2cyclictest2486-21grep0
1948991814,2cyclictest20448-21cstates0
1948991814,2cyclictest12949-21aten2.4-expect0
1948991813,3cyclictest8518-21idleruntime-cro0
1948991813,3cyclictest7749-21cut0
1948991813,3cyclictest5708-21sed0
1948991813,3cyclictest3583-21cat0
1948991813,3cyclictest27668-21basename0
1948991813,3cyclictest25662-21/usr/sbin/munin0
1948991813,3cyclictest25662-21/usr/sbin/munin0
1948991813,3cyclictest2518-21expr0
1948991813,3cyclictest15818-21expr0
1948991813,3cyclictest12674-21seq0
1948991812,4cyclictest9594-21basename0
1948991812,4cyclictest5128-21ls0
1948991812,4cyclictest340-21systemd-journal0
1948991812,4cyclictest31697-21sed0
1948991812,4cyclictest20688-21timerandwakeup0
1948991811,4cyclictest27625-21mailstats0
194899180,2cyclictest23165-21ps0
194899180,2cyclictest23165-21ps0
195799174,8cyclictest2023-21apt-get2
195799173,9cyclictest9919-21apt-get2
195799173,9cyclictest9919-21apt-get2
1957991715,1cyclictest0-21swapper/22
1957991713,2cyclictest662-21runrttasks2
1957991712,3cyclictest9730-21cat2
1957991712,3cyclictest27260-21seq2
1957991712,3cyclictest27260-21seq2
1957991712,3cyclictest24449-21vmstat2
1957991711,4cyclictest18545-21sendmail-mta2
195799170,16cyclictest0-21swapper/22
195399176,3cyclictest100832ntpq1
195399173,12cyclictest23171-21grep1
1953991713,2cyclictest6703-21/usr/sbin/munin1
1953991712,3cyclictest15572-21cut1
195399171,14cyclictest30858-21cut1
1953991711,3cyclictest31835-21irqstats1
1953991710,4cyclictest4109-21grep1
1953991710,3cyclictest23529-21gltestperf1
195399170,15cyclictest0-21swapper/11
1948991713,2cyclictest662-21runrttasks0
1948991713,2cyclictest32088-21/usr/sbin/munin0
1948991713,2cyclictest2272-21idleruntime0
1948991712,3cyclictest7396-21basename0
1948991712,3cyclictest5765-21cat0
1948991712,3cyclictest24341-21latency0
1948991712,3cyclictest24291-21aten2_r9power_p0
1948991712,3cyclictest22299-21grep0
1948991712,3cyclictest15746-21sh0
1948991712,3cyclictest11396-21cat0
1948991711,4cyclictest29216-21cat0
194899170,16cyclictest0-21swapper/00
1957991611,3cyclictest3124-21proc_pri2
1957991611,3cyclictest12895-21aten2_r9power_p2
1953991610,4cyclictest22579-21seq1
1948991610,4cyclictest571-21gdbus0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional