You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-21 - 15:24
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Thu May 21, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
114252289201,49sleep30-21swapper/33
124312278168,90sleep00-21swapper/00
122422276216,48sleep20-21swapper/22
124172273204,23sleep10-21swapper/11
1261899207199,7cyclictest0-21swapper/11
1262399155144,9cyclictest0-21swapper/22
1262699125113,10cyclictest16330-21strings3
126149910697,7cyclictest0-21swapper/00
238922490,2sleep123896-21gltestperf1
1261899440,33cyclictest4225-21aten2.4-expect1
1261899440,33cyclictest2155-21aten2.4-expect1
210642430,4sleep31262699cyclictest3
69822420,2sleep00-21swapper/00
1261899421,23cyclictest21368-21apt-get1
1261899420,25cyclictest31693-21sed1
58692410,1sleep20-21swapper/22
238832400,1sleep223882-21processes2
1261899390,24cyclictest23867-21apt-get1
1261899390,24cyclictest20697-21chrt1
1261899390,23cyclictest29359-21chrt1
1261899390,23cyclictest14416-21seq1
1261899390,22cyclictest11061-21df1
1261899380,24cyclictest26091-21idleruntime1
1261899380,23cyclictest3921-21chrt1
1261899380,22cyclictest23604-21munin-run1
1261899371,23cyclictest17774-21cat1
12618993615,19cyclictest2801-21sed1
1261899361,18cyclictest0-21swapper/11
1261899360,21cyclictest6456-21/usr/sbin/munin1
1261899351,19cyclictest0-21swapper/11
12618993413,18cyclictest8749-21sh1
12618993413,18cyclictest668-21runrttasks1
1261899341,20cyclictest0-21swapper/11
1261899340,31cyclictest13450-21pluginstate1
1261899332,28cyclictest18198-21cut1
1261899331,29cyclictest11569-21/usr/sbin/munin1
1261899331,19cyclictest683-21snmpd1
12618993311,19cyclictest11539-21threads1
1261899330,21cyclictest26083-21/usr/sbin/munin1
1261899321,29cyclictest22980-21cut1
12618993211,18cyclictest17877-21cat1
1262399310,30cyclictest0-21swapper/22
1261899312,27cyclictest14693-21pmu-power1
1261899311,27cyclictest1759-21perf1
12618993110,19cyclictest24625-21sed1
1261899309,19cyclictest6417-21cat1
1261899309,19cyclictest12503-21aten2.4-expect1
1261899309,19cyclictest12503-21aten2.4-expect1
1261899305,22cyclictest512-21dbus-daemon1
1261899301,23cyclictest9223-21apt-get1
1261899299,18cyclictest25921-21cron1
1261899299,17cyclictest3308-21cstates1
1261899299,17cyclictest28877-21latency_hist1
1261899298,19cyclictest15606-21sed1
1261899298,18cyclictest9668-21sed1
1261899298,18cyclictest22861-21/usr/sbin/munin1
12618992913,14cyclictest668-21runrttasks1
1261899291,24cyclictest683-21snmpd1
1261899291,23cyclictest32468-21apt-get1
1261899291,23cyclictest15772-21apt-get1
12618992911,16cyclictest6327-21aten2_r9power_e1
12618992910,17cyclictest7122-21/usr/sbin/munin1
12618992910,17cyclictest14675-21aten2_r9power_v1
1261899290,1cyclictest0-21swapper/11
1261899290,1cyclictest0-21swapper/11
1261899288,17cyclictest4652-21idleruntime1
1261899287,19cyclictest4479-21grep1
12618992811,15cyclictest683-21snmpd1
1261899280,25cyclictest19653-21ntpq1
1261899280,25cyclictest11230-21sed1
1261899280,1cyclictest0-21swapper/11
1261899280,1cyclictest0-21swapper/11
1261899278,16cyclictest144692chrt1
1261899277,18cyclictest19081-21expr1
1261899270,1cyclictest0-21swapper/11
1261899270,1cyclictest0-21swapper/11
1261899270,1cyclictest0-21swapper/11
1261899266,17cyclictest16769-21cut1
1261899260,23cyclictest32536-21df1
1262699250,14cyclictest23826-21cron3
12623992515,6cyclictest512-21dbus-daemon2
298062240,3sleep20-21swapper/22
1262399249,13cyclictest28-21ksoftirqd/22
1262399235,16cyclictest0-21swapper/22
1262399234,17cyclictest29645-21cat2
1262399234,17cyclictest12417-21cat2
1262399234,17cyclictest10337-21cat2
12623992319,2cyclictest28-21ksoftirqd/22
12614992318,3cyclictest9-21ksoftirqd/00
12626992215,4cyclictest13786-21timerwakeupswit3
1262399223,17cyclictest9094-21cat2
1262399223,17cyclictest22648-21latency_hist2
1262399223,17cyclictest18690-21cat2
1262399222,18cyclictest14773-21cat2
1262399222,12cyclictest4099-21chrt2
12623992219,2cyclictest0-21swapper/22
1262399221,4cyclictest29999-21munin-run2
12623992214,4cyclictest10405-21sendmail-msp2
1262399221,19cyclictest14337-21munin-run2
1262399221,18cyclictest21804-21sleep2
12614992217,3cyclictest608-21cron0
1261499221,16cyclictest10642-21apt-get0
12626992116,3cyclictest35-21ksoftirqd/33
12626992114,4cyclictest30555-21cat3
1262399217,11cyclictest3938-21latency_hist2
12623992116,3cyclictest12242-21wc2
12623992115,3cyclictest14309-21munin-run2
12623992115,3cyclictest14309-21munin-run2
1262399211,18cyclictest17781-21ntp_states2
1262399211,18cyclictest14710-21cpu2
1262399211,17cyclictest1777-21sendmail-msp2
1262399210,18cyclictest16414-21cron2
1261499211,6cyclictest17771-21ntpq0
12614992115,4cyclictest17074-21diskstats0
12614992115,4cyclictest16382-21idleruntime-cro0
12614992114,5cyclictest29726-21apt-get0
1261499211,17cyclictest30257-21sort0
217072201,5sleep30-21swapper/33
12626992015,3cyclictest5108-21open_files3
12626992015,3cyclictest3429-21fw_packets3
12626992015,3cyclictest19649-21ntp_kernel_pll_3
12626992015,3cyclictest18411-21seq3
12626992015,3cyclictest1121-21vmstat3
12626992014,4cyclictest7940-21cat3
12626992014,4cyclictest3998-21latency_hist3
12626992014,4cyclictest26275-21load3
12626992014,4cyclictest13792-21unixbench-2d3
12626992014,4cyclictest13792-21unixbench-2d3
12626992013,4cyclictest4233-21cpu3
1262399202,17cyclictest8112-21awk2
1262399202,16cyclictest18463-21latency_hist2
12623992017,2cyclictest0-21swapper/22
1262399201,17cyclictest23310-21cat2
1262399201,17cyclictest1493-21latency_hist2
1262399201,17cyclictest0-21swapper/22
1262399200,17cyclictest10200-21grep2
1261499202,13cyclictest22040-21apt-get0
12614992016,2cyclictest12694-21/usr/sbin/munin0
12614992015,3cyclictest4077-21/usr/sbin/munin0
12614992015,3cyclictest13560-21sendmail_mailst0
12614992015,3cyclictest13560-21sendmail_mailst0
12614992014,4cyclictest4082-21cut0
12614992014,4cyclictest24838-21grep0
12614992014,4cyclictest15741-21date0
12614992014,4cyclictest1204-21expr0
1261499201,16cyclictest21974-21grep0
12626991916,2cyclictest0-21swapper/33
12626991916,2cyclictest0-21swapper/33
12626991916,2cyclictest0-21swapper/33
12626991916,2cyclictest0-21swapper/33
12626991916,2cyclictest0-21swapper/33
12626991916,2cyclictest0-21swapper/33
12626991914,3cyclictest9781-21uptime3
12626991914,3cyclictest6837-21cat3
12626991914,3cyclictest29831-21kernelversion3
12626991914,3cyclictest27923-21ntp_offset3
12626991914,3cyclictest24079-21cat3
12626991914,3cyclictest22438-21seq3
12626991914,3cyclictest20684-21pmu-power3
12626991914,3cyclictest19858-21cat3
12626991914,3cyclictest17583-21cron3
12626991914,3cyclictest12815-21aten2_r9power_v3
12626991914,3cyclictest11052-21if_err_enp3s03
12626991913,4cyclictest26888-21ls3
12626991913,4cyclictest1932-21date3
12626991913,4cyclictest15329-21expr3
12626991913,4cyclictest14997-21cat3
12626991911,5cyclictest1674-21missed_timers3
1262699190,18cyclictest19171-21kworker/3:03
12623991915,2cyclictest21541-21latency_hist2
12623991914,3cyclictest9204-21/usr/sbin/munin2
12623991914,3cyclictest2953-21/usr/sbin/munin2
12623991914,3cyclictest24553-21switchtime2
12623991913,4cyclictest32292-21sed2
12623991913,4cyclictest32093-21sh2
12623991913,4cyclictest27449-21timerwakeupswit2
12623991913,4cyclictest25511-21grep2
12623991913,4cyclictest24944-21seq2
12623991912,4cyclictest15529-21idleruntime-cro2
1262399191,17cyclictest3858-21awk2
1262399190,3cyclictest9012-1kworker/2:2H2
1262399190,3cyclictest5959-1kworker/2:1H2
1262399190,3cyclictest2728-21perf2
1262399190,17cyclictest271962sleep22
1262399190,17cyclictest20529-21latency_hist2
1261499199,6cyclictest29183-21apt-get0
1261499197,10cyclictest9-21ksoftirqd/00
12614991915,2cyclictest4151-21/usr/sbin/munin0
12614991915,2cyclictest25504-21/usr/sbin/munin0
12614991915,2cyclictest18767-21/usr/sbin/munin0
12614991914,3cyclictest8949-21sh0
12614991914,3cyclictest1999-21/usr/sbin/munin0
12614991914,3cyclictest14635-21ls0
12614991914,3cyclictest14607-21/usr/sbin/munin0
12614991913,4cyclictest8207-21ls0
12614991913,4cyclictest21247-21seq0
12614991913,4cyclictest19836-21grep0
125622190,2sleep20-21swapper/22
318362180,1sleep00-21swapper/00
12626991813,3cyclictest8920-21cat3
12626991813,3cyclictest6875-21if_enp2s03
12626991813,3cyclictest35-21ksoftirqd/33
12626991813,3cyclictest31651-21timerwakeupswit3
12626991813,3cyclictest21062-21cpuspeed_turbos3
12626991813,3cyclictest19579-21nfs4_client3
12626991813,3cyclictest17237-21basename3
12626991813,3cyclictest15364-21load3
12626991812,4cyclictest31688-21df_inode3
12626991812,4cyclictest30200-21date3
12626991812,4cyclictest27636-21cut3
12626991812,3cyclictest30891-21cat3
12626991811,5cyclictest2974-21awk3
12626991811,4cyclictest325-21systemd-journal3
1262399182,9cyclictest31714-21taskset2
12623991816,1cyclictest0-21swapper/22
12623991816,1cyclictest0-21swapper/22
12623991813,3cyclictest7891-21uptime2
12623991813,3cyclictest24796-21open_files2
1262399181,16cyclictest0-21swapper/22
1261499187,3cyclictest0-21swapper/00
12614991814,2cyclictest20798-21/usr/sbin/munin0
12614991814,2cyclictest10360-21/usr/sbin/munin0
12614991813,3cyclictest668-21runrttasks0
12614991813,3cyclictest668-21runrttasks0
12614991813,3cyclictest668-21runrttasks0
12614991813,3cyclictest3482-21grep0
12614991813,3cyclictest325-21systemd-journal0
12614991813,3cyclictest28580-21cat0
12614991813,3cyclictest27853-21cat0
12614991813,3cyclictest24700-21sh0
12614991813,3cyclictest24218-21cat0
12614991813,3cyclictest19037-21cat0
12614991813,3cyclictest13379-21ntpq0
12614991813,3cyclictest13092-21seq0
12614991813,3cyclictest10728-21expr0
12614991812,4cyclictest7910-21seq0
12614991812,4cyclictest6156-21cut0
12614991812,4cyclictest29997-21latency_hist0
12614991812,4cyclictest28133-21cut0
12614991812,4cyclictest17180-21tr0
12614991812,3cyclictest13742-21aten2.4-expect0
1261499180,1cyclictest0-21swapper/00
1262699175,3cyclictest238822processes3
12626991715,1cyclictest0-21swapper/33
12626991715,1cyclictest0-21swapper/33
12626991715,1cyclictest0-21swapper/33
12626991715,1cyclictest0-21swapper/33
12626991713,2cyclictest4836-21kernelversion3
12626991712,3cyclictest25470-21gltestperf3
12626991712,3cyclictest17009-21cpu3
12626991712,3cyclictest11263-21uname3
1262699170,1cyclictest0-21swapper/33
1262699170,16cyclictest0-21swapper/33
1262399178,7cyclictest20582-21cron2
12623991712,3cyclictest668-21runrttasks2
12623991712,3cyclictest27086-21ps2
12623991711,4cyclictest19021-21cut2
12623991710,4cyclictest4728-21gltestperf2
1261499179,5cyclictest9223-21apt-get0
12614991713,2cyclictest14796-21/usr/sbin/munin0
12614991712,3cyclictest8676-21cut0
12614991712,3cyclictest668-21runrttasks0
12614991712,3cyclictest6325-21apt-config0
12614991712,3cyclictest21991-21cat0
12614991712,3cyclictest19546-21basename0
12614991711,4cyclictest18554-21ntpq0
1262699169,5cyclictest512-21dbus-daemon3
12623991613,2cyclictest0-21swapper/22
12623991611,3cyclictest668-21runrttasks2
1261499168,5cyclictest8355-21apt-get0
12614991611,3cyclictest668-21runrttasks0
12614991611,3cyclictest25108-21which0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional