You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-04 - 14:51
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Mon May 04, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1975399289280,4cyclictest24460-21awk1
1974899287280,4cyclictest24411-21munin-run0
195642286207,45sleep20-21swapper/22
194622256184,25sleep10-21swapper/11
192942251177,61sleep30-21swapper/33
194562247211,24sleep00-21swapper/00
1975699213206,4cyclictest24459-21sendmail-msp2
2058021360,2sleep11975399cyclictest1
877321250,1sleep00-21swapper/00
197619910299,2cyclictest0-21swapper/33
268742660,5sleep11975399cyclictest1
204862610,1sleep00-21swapper/00
202862450,6sleep121-21ksoftirqd/11
19748992822,4cyclictest1398-21dump-pmu-power0
1975699262,4cyclictest20612-21apt-get2
19756992615,9cyclictest2655-21sendmail_mailst2
131192260,3sleep20-21swapper/22
1975699234,17cyclictest21857-21cat2
1975699232,18cyclictest419-21procmail2
19756992318,3cyclictest24147-21ls2
19753992318,3cyclictest30174-21grep1
1975699227,3cyclictest28617-21latency_hist2
1975699221,4cyclictest1022-21munin-run2
1975699221,3cyclictest29330-21munin-run2
19756992211,9cyclictest11062-21latency_hist2
19753992212,6cyclictest11688-21sendmail1
37002210,17sleep13822-21aten2_r9power_v1
19761992114,4cyclictest31594-21cut3
1976199211,19cyclictest0-21swapper/33
1976199210,19cyclictest0-21swapper/33
19756992118,2cyclictest0-21swapper/22
19756992115,4cyclictest7752-21cat2
1975699211,3cyclictest26210-21munin-run2
1975699211,3cyclictest18959-21munin-run2
1975699211,17cyclictest27877-21hostname2
1975699210,4cyclictest28548-1kworker/2:1H2
1975699210,18cyclictest18219-21munin-node2
19753992116,3cyclictest6197-21expr1
19753992116,3cyclictest24627-21sed1
19753992115,4cyclictest29771-21ntpq1
19753992115,4cyclictest29415-21sed1
19753992115,4cyclictest22989-21awk1
19753992115,3cyclictest5322-21if_enp2s01
19753992114,5cyclictest17437-21grep1
19753992113,5cyclictest13316-21grep1
1974899217,11cyclictest14224-21cpu0
1974899213,16cyclictest6555-21grep0
1974899211,6cyclictest21788-21cups-browsed0
19748992115,4cyclictest3401-21sh0
19748992115,4cyclictest30089-21sed0
19748992115,4cyclictest25883-21threads0
10492210,4sleep01037-21apt-get0
19761992016,3cyclictest0-21swapper/33
19761992015,3cyclictest29903-21sed3
19761992015,3cyclictest27513-21aten2_r9power_c3
19761992015,3cyclictest13957-21sed3
19761992014,4cyclictest760-21sort3
19761992014,4cyclictest3138-21seq3
19761992014,4cyclictest14152-21wc3
19761992014,4cyclictest11942-21find3
19761992013,5cyclictest15012-21cut3
1976199200,18cyclictest5480-21kworker/3:13
19756992017,2cyclictest0-21swapper/22
19756992017,2cyclictest0-21swapper/22
19756992015,3cyclictest5980-21ntp_kernel_pll_2
19756992015,3cyclictest5749-21processes2
19756992015,3cyclictest3958-21ntpq2
19756992015,3cyclictest14909-21cat2
19756992015,3cyclictest12767-21missed_timers2
19756992014,4cyclictest31205-21wc2
19756992014,4cyclictest31205-21wc2
19756992014,4cyclictest2484-21seq2
19756992014,4cyclictest1659-21seq2
19756992014,4cyclictest15862-21munin-run2
19756992014,4cyclictest11176-21grep2
19756992014,3cyclictest21233-21wc2
1975699201,3cyclictest23089-21munin-run2
19756992013,4cyclictest25978-21cat2
19756992013,4cyclictest22718-21which2
1975699201,17cyclictest12854-21cat2
1975699200,18cyclictest28548-1kworker/2:1H2
1975399203,15cyclictest27052-21cpuspeed_turbos1
19753992015,3cyclictest4057-21awk1
19753992014,4cyclictest2990-21awk1
19753992014,4cyclictest26370-21cut1
19748992015,3cyclictest23795-21entropy0
19748992014,4cyclictest5468-21expr0
19748992014,4cyclictest26230-21seq0
19748992014,4cyclictest22410-21dump-pmu-power0
19748992014,4cyclictest21730-21seq0
143062200,2sleep30-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991916,2cyclictest0-21swapper/33
19761991914,3cyclictest668-21runrttasks3
19761991914,3cyclictest26118-21uptime3
19761991914,3cyclictest23861-21sed3
19761991914,3cyclictest21577-21proc_pri3
19761991914,3cyclictest20512-21cpuspeed3
19761991914,3cyclictest16881-21load3
19761991914,3cyclictest11506-21cpuspeed3
19761991913,4cyclictest17665-21cut3
19761991912,5cyclictest16994-21cron3
19761991912,4cyclictest4881-21grep3
19761991912,4cyclictest17024-21ntp_states3
1975699199,6cyclictest30978-21apt-get2
1975699192,15cyclictest0-21swapper/22
19756991917,1cyclictest0-21swapper/22
19756991915,2cyclictest18868-21kernelversion2
19756991914,3cyclictest7781-21awk2
19756991914,3cyclictest6079-21seq2
19756991914,3cyclictest325-21systemd-journal2
19756991914,3cyclictest30698-21swap2
19756991914,3cyclictest2863-21cpuspeed2
19756991914,3cyclictest27694-21sed2
19756991914,3cyclictest25168-21head2
19756991914,3cyclictest17051-21open_inodes2
19756991914,3cyclictest14901-21seq2
19756991913,4cyclictest9069-21sed2
19756991913,4cyclictest4920-21cat2
19756991912,4cyclictest15710-21grep2
1975699190,3cyclictest4521-1kworker/2:1H2
1975699190,3cyclictest4521-1kworker/2:1H2
1975699190,3cyclictest4521-1kworker/2:1H2
1975699190,3cyclictest29678-1kworker/2:2H2
1975699190,17cyclictest30749-21sort2
1975699190,17cyclictest28840-21cat2
1975399192,14cyclictest31761-21grep1
19753991915,2cyclictest16322-21ntp_states1
19753991914,3cyclictest9945-21/usr/sbin/munin1
19753991914,3cyclictest667-21ntpd1
19753991914,3cyclictest21404-21idleruntime-cro1
19753991914,3cyclictest18181-21/usr/sbin/munin1
19753991913,4cyclictest21061-21grep1
19753991913,4cyclictest20502-21sed1
19753991913,4cyclictest18145-21sed1
19753991913,4cyclictest11984-21aten2_r9power_c1
19753991913,3cyclictest21994-21sed1
19753991910,4cyclictest4455-21head1
1974899193,14cyclictest17654-21cut0
1974899191,6cyclictest9271-21apt-get0
19748991916,2cyclictest3417-21kworker/0:10
19748991915,2cyclictest3677-21/usr/sbin/munin0
19748991914,3cyclictest8098-21open_inodes0
19748991914,3cyclictest3594-21sh0
19748991914,3cyclictest325-21systemd-journal0
19748991914,3cyclictest31881-21open_inodes0
19748991914,3cyclictest29693-21latency_hist0
19748991914,3cyclictest2830-21date0
19748991914,3cyclictest27173-21sh0
19748991914,3cyclictest24361-21irqstats0
19748991914,3cyclictest21550-21cut0
19748991914,3cyclictest20132-21sed0
19748991914,3cyclictest16554-21sh0
19748991914,3cyclictest11939-21/usr/sbin/munin0
19748991913,4cyclictest8115-21sed0
19748991913,4cyclictest29240-21seq0
19748991913,4cyclictest28828-21/usr/sbin/munin0
19748991913,4cyclictest28139-21seq0
19748991913,4cyclictest25272-21seq0
19748991913,4cyclictest20780-21seq0
19748991913,4cyclictest14256-21awk0
19748991913,3cyclictest8940-21aten2.4-expect0
19748991913,3cyclictest8940-21aten2.4-expect0
255732180,2sleep30-21swapper/33
1976199185,11cyclictest8719-21cut3
19761991815,2cyclictest0-21swapper/33
19761991815,2cyclictest0-21swapper/33
19761991815,2cyclictest0-21swapper/33
19761991814,2cyclictest26422-21processes3
19761991814,2cyclictest24596-21ntp_offset3
19761991813,3cyclictest7519-21expr3
19761991813,3cyclictest7028-21cat3
19761991813,3cyclictest3811-21load3
19761991813,3cyclictest3787-21sh3
19761991813,3cyclictest26371-21cat3
19761991813,3cyclictest23693-21awk3
19761991812,4cyclictest9314-21cut3
19761991812,4cyclictest26548-21cut3
19761991812,4cyclictest18690-21fw_packets3
19761991812,4cyclictest1709-21cat3
19761991812,4cyclictest14667-21cat3
1976199181,1cyclictest0-21swapper/33
1976199180,16cyclictest0-21swapper/33
1976199180,16cyclictest0-21swapper/33
1976199180,16cyclictest0-21swapper/33
1975699182,14cyclictest0-21swapper/22
19756991816,1cyclictest0-21swapper/22
19756991814,2cyclictest0-21swapper/22
19756991813,3cyclictest866-21cat2
19756991813,3cyclictest19362-21perf2
19756991813,3cyclictest16426-21expr2
19756991813,3cyclictest16389-21unixbench_multi2
1975699181,16cyclictest0-21swapper/22
1975399182,14cyclictest31504-21sed1
19753991814,2cyclictest7846-21/usr/sbin/munin1
19753991814,2cyclictest6797-21/usr/sbin/munin1
19753991814,2cyclictest3734-21/usr/sbin/munin1
19753991813,3cyclictest9253-21/usr/sbin/munin1
19753991813,3cyclictest8523-21sed1
19753991813,3cyclictest8496-21sed1
19753991813,3cyclictest668-21runrttasks1
19753991813,3cyclictest25221-21sed1
19753991813,3cyclictest23702-21/usr/sbin/munin1
19753991813,3cyclictest18485-21awk1
19753991813,3cyclictest15307-21wc1
19753991812,4cyclictest325-21systemd-journal1
19753991812,4cyclictest32061-21cut1
19753991812,4cyclictest12306-21grep1
19753991812,4cyclictest10264-21grep1
19753991812,4cyclictest10264-21grep1
1975399180,16cyclictest0-21swapper/11
1974899186,10cyclictest9-21ksoftirqd/00
19748991814,3cyclictest25394-21/usr/sbin/munin0
19748991814,3cyclictest1738-21aten2_r9power_e0
19748991814,2cyclictest4462-21sed0
19748991814,2cyclictest29939-21/usr/sbin/munin0
19748991814,2cyclictest29939-21/usr/sbin/munin0
19748991813,3cyclictest9615-21dump-pmu-power0
19748991813,3cyclictest952-21expr0
19748991813,3cyclictest7507-21seq0
19748991813,3cyclictest6801-21which0
19748991813,3cyclictest30912-21/usr/sbin/munin0
19748991813,3cyclictest27871-21readlink0
19748991813,3cyclictest25806-21basename0
19748991813,3cyclictest21536-21cat0
19748991813,3cyclictest19332-21seq0
19748991813,3cyclictest15798-21expr0
19748991813,3cyclictest14248-21cat0
19748991813,3cyclictest12058-21cat0
19748991813,3cyclictest11850-21sh0
19748991813,3cyclictest10379-21expr0
19748991813,3cyclictest10239-21expr0
19748991812,4cyclictest4489-21awk0
19748991812,4cyclictest24118-21seq0
19748991812,4cyclictest15157-21cut0
19761991715,1cyclictest0-21swapper/33
19761991715,1cyclictest0-21swapper/33
19761991714,2cyclictest0-21swapper/33
19761991712,3cyclictest20984-21unixbench_singl3
1976199171,1cyclictest0-21swapper/33
1976199171,15cyclictest0-21swapper/33
19761991711,4cyclictest15594-21sed3
19761991711,3cyclictest31472-21ls3
19761991710,4cyclictest4884-21cut3
19761991710,4cyclictest307-21idleruntime-cro3
19756991712,3cyclictest28-21ksoftirqd/22
1975399174,7cyclictest18241-21apt-get1
1975399174,11cyclictest668-21runrttasks1
1975399173,9cyclictest31669-21apt-get1
19753991715,1cyclictest0-21swapper/11
19753991714,2cyclictest0-21swapper/11
19753991713,2cyclictest668-21runrttasks1
19753991712,3cyclictest668-21runrttasks1
19753991712,3cyclictest30476-21sed1
19753991712,3cyclictest30476-21sed1
19753991712,3cyclictest25793-21/usr/sbin/munin1
19753991712,3cyclictest1662-21/usr/sbin/munin1
19753991712,3cyclictest1009-21cut1
19753991711,4cyclictest6464-21wc1
19753991711,4cyclictest23552-21ntp_states1
19753991710,4cyclictest28126-21grep1
19753991710,4cyclictest25403-21acpi1
19748991712,3cyclictest29959-21expr0
163132170,2sleep00-21swapper/00
1976199162,9cyclictest29957-21apt-get3
1976199162,9cyclictest29957-21apt-get3
19761991611,3cyclictest11319-21expr3
19753991614,1cyclictest0-21swapper/11
19753991612,2cyclictest14058-21acpi1
19753991611,3cyclictest26785-21/usr/sbin/munin1
1974899161,10cyclictest18247-21chrt0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional