You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-16 - 14:32
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 16, 2025 12:43:24)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
35172323233,58sleep10-21swapper/11
384699284281,2cyclictest0-21swapper/33
383499265258,4cyclictest2068-21strings0
36762257185,25sleep20-21swapper/22
35762254180,18sleep30-21swapper/33
36742248180,55sleep00-21swapper/00
3098721470,2sleep30-21swapper/33
383899144140,2cyclictest0-21swapper/11
384299117114,2cyclictest0-21swapper/22
250422550,1sleep00-21swapper/00
282872530,3sleep30-21swapper/33
39432500,1sleep13944-21idleruntime-cro1
277272490,3sleep0383499cyclictest0
383899430,27cyclictest14841-1kworker/1:0H1
383899430,18cyclictest21626-21/usr/sbin/munin1
228222430,2sleep00-21swapper/00
383899420,25cyclictest517-21dbus-daemon1
383899420,22cyclictest5068-21ntpq1
105362410,1sleep20-21swapper/22
383899401,25cyclictest30815-21irqstats1
383899381,18cyclictest29769-21latency_hist1
383899371,18cyclictest7051-21df1
383899371,18cyclictest340-21systemd-journal1
383899371,17cyclictest0-21swapper/11
383899370,20cyclictest20009-21apt-get1
383899370,19cyclictest0-21swapper/11
383899370,18cyclictest0-21swapper/11
383899370,18cyclictest0-21swapper/11
383899370,17cyclictest0-21swapper/11
383899361,19cyclictest10889-21/usr/sbin/munin1
383899360,21cyclictest7490-21cpu1
383899360,20cyclictest7283-21mailstats1
383899360,19cyclictest0-21swapper/11
383899360,18cyclictest0-21swapper/11
383899360,17cyclictest0-21swapper/11
383899360,16cyclictest0-21swapper/11
383899351,18cyclictest517-21dbus-daemon1
383899350,20cyclictest1-21systemd1
383899350,17cyclictest0-21swapper/11
383899350,17cyclictest0-21swapper/11
3846993413,18cyclictest8241-21apt-get3
383899341,30cyclictest571-21gdbus1
383899341,30cyclictest517-21dbus-daemon1
383899340,17cyclictest0-21swapper/11
383899340,16cyclictest0-21swapper/11
383899330,18cyclictest0-21swapper/11
383899320,18cyclictest0-21swapper/11
383899320,17cyclictest0-21swapper/11
383899310,17cyclictest0-21swapper/11
383899310,16cyclictest0-21swapper/11
384299302,6cyclictest28-21ksoftirqd/22
383899301,26cyclictest571-21gdbus1
383899301,26cyclictest517-21dbus-daemon1
383899300,16cyclictest0-21swapper/11
383899300,16cyclictest0-21swapper/11
383899300,16cyclictest0-21swapper/11
3838992913,14cyclictest29961-21cat1
3838992913,13cyclictest7177-21/usr/sbin/munin1
383899291,26cyclictest571-21gdbus1
383899291,14cyclictest0-21swapper/11
383899281,24cyclictest340-21systemd-journal1
383899281,24cyclictest340-21systemd-journal1
3838992811,14cyclictest14255-21expr1
383899280,15cyclictest0-21swapper/11
384299273,6cyclictest28-21ksoftirqd/22
383899279,15cyclictest28303-21cat1
3838992712,12cyclictest486-21sendmail1
3834992712,12cyclictest24144-21latency0
67382260,2sleep30-21swapper/33
384299261,6cyclictest28-21ksoftirqd/22
384299261,5cyclictest0-21swapper/22
383899269,15cyclictest20574-21sed1
383899261,23cyclictest571-21gdbus1
383899261,22cyclictest340-21systemd-journal1
3838992612,11cyclictest18940-21/usr/sbin/munin1
383899260,1cyclictest0-21swapper/11
383899260,15cyclictest32037-21/usr/sbin/munin1
384299250,9cyclictest28-21ksoftirqd/22
383899259,14cyclictest517-21dbus-daemon1
383899258,14cyclictest22464-21if_enp3s01
383899252,18cyclictest0-21swapper/11
383899251,21cyclictest9586-21awk1
3838992512,11cyclictest15759-21/usr/sbin/munin1
384699241,21cyclictest340-21systemd-journal3
384299246,6cyclictest28-21ksoftirqd/22
384299245,6cyclictest28-21ksoftirqd/22
384299243,9cyclictest28-21ksoftirqd/22
384299243,6cyclictest28-21ksoftirqd/22
384299242,6cyclictest28-21ksoftirqd/22
384299242,6cyclictest28-21ksoftirqd/22
3842992421,2cyclictest28-21ksoftirqd/22
3842992416,5cyclictest1415-21sendmail2
384299240,5cyclictest271rcuc/22
383899248,14cyclictest8410-21cpu1
383899242,19cyclictest7535-21munin-run1
383899241,20cyclictest16701-21missed_timers1
384699239,12cyclictest35-21ksoftirqd/33
384699234,17cyclictest3769-21sendmail-mta3
384699234,17cyclictest22738-21cat3
384699231,4cyclictest517-21dbus-daemon3
384299239,3cyclictest111rcu_preempt2
384299236,9cyclictest28-21ksoftirqd/22
384299233,7cyclictest28-21ksoftirqd/22
384299233,7cyclictest28-21ksoftirqd/22
384299233,7cyclictest28-21ksoftirqd/22
384299233,6cyclictest28-21ksoftirqd/22
384299233,6cyclictest28-21ksoftirqd/22
384299232,6cyclictest28-21ksoftirqd/22
3842992318,3cyclictest14514-21latency_hist2
384299231,6cyclictest28-21ksoftirqd/22
384299231,6cyclictest28-21ksoftirqd/22
3842992312,3cyclictest111rcu_preempt2
384299230,5cyclictest28-21ksoftirqd/22
384299230,5cyclictest28-21ksoftirqd/22
384299230,13cyclictest28-21ksoftirqd/22
383899239,11cyclictest24050-21/usr/sbin/munin1
383899230,20cyclictest3974-21find1
296642230,1sleep00-21swapper/00
211782230,3sleep3340-21systemd-journal3
384699229,11cyclictest35-21ksoftirqd/33
384699228,12cyclictest35-21ksoftirqd/33
384699228,12cyclictest0-21swapper/33
384699224,16cyclictest23509-21sendmail-mta3
384699224,16cyclictest1036-1kworker/3:3H3
384699223,17cyclictest31789-21sendmail-mta3
384699223,17cyclictest18998-21sendmail-mta3
384699223,17cyclictest18545-21sendmail-mta3
384699223,17cyclictest15520-21sendmail-mta3
384699223,17cyclictest11459-21sendmail-mta3
3846992217,3cyclictest9809-21df_inode3
3846992215,4cyclictest13853-21df3
384699221,4cyclictest518-21in:imuxsock3
384699221,19cyclictest5053-21munin-run3
384299223,7cyclictest28-21ksoftirqd/22
384299223,6cyclictest28-21ksoftirqd/22
384299223,6cyclictest28-21ksoftirqd/22
384299223,6cyclictest28-21ksoftirqd/22
384299222,7cyclictest28-21ksoftirqd/22
384299222,6cyclictest28-21ksoftirqd/22
384299222,6cyclictest28-21ksoftirqd/22
3842992219,2cyclictest271rcuc/22
384299221,5cyclictest28-21ksoftirqd/22
384299221,2cyclictest111rcu_preempt2
3842992211,3cyclictest111rcu_preempt2
384299220,6cyclictest28-21ksoftirqd/22
384299220,6cyclictest28-21ksoftirqd/22
384299220,6cyclictest28-21ksoftirqd/22
384299220,5cyclictest28-21ksoftirqd/22
252842220,2sleep00-21swapper/00
118392220,1sleep30-21swapper/33
384699213,16cyclictest23050-21sendmail-mta3
384699212,17cyclictest7832-21sendmail-mta3
384699212,17cyclictest6926-21sendmail-mta3
384699212,17cyclictest3311-21sendmail-mta3
384699212,17cyclictest17666-21cat3
3846992115,4cyclictest18408-21df_inode3
3846992114,4cyclictest24362-21fw_packets3
384699211,3cyclictest31302-1kworker/3:0H3
384699211,3cyclictest31302-1kworker/3:0H3
384699211,18cyclictest340-21systemd-journal3
384699210,6cyclictest0-21swapper/33
384699210,19cyclictest25233-21munin-run3
384299213,7cyclictest28-21ksoftirqd/22
384299213,6cyclictest28-21ksoftirqd/22
384299213,6cyclictest28-21ksoftirqd/22
384299213,6cyclictest28-21ksoftirqd/22
384299213,6cyclictest28-21ksoftirqd/22
384299213,5cyclictest28-21ksoftirqd/22
384299213,5cyclictest28-21ksoftirqd/22
384299212,7cyclictest28-21ksoftirqd/22
384299212,7cyclictest28-21ksoftirqd/22
3842992117,2cyclictest271rcuc/22
3842992110,3cyclictest111rcu_preempt2
3842992110,3cyclictest111rcu_preempt2
384299210,9cyclictest28-21ksoftirqd/22
383499211,18cyclictest28866-21munin-plugin-st0
384699202,16cyclictest12064-21uname3
3846992015,3cyclictest6558-21uptime3
3846992015,3cyclictest20545-21basename3
3846992014,4cyclictest32341-21sed3
3846992014,4cyclictest28127-21/usr/sbin/munin3
3846992014,4cyclictest20738-21ntp_states3
3846992014,4cyclictest16203-21uname3
384699201,17cyclictest9050-21latency_hist3
384699201,17cyclictest4626-21apt-get3
384699200,3cyclictest1036-1kworker/3:3H3
384699200,19cyclictest26143-21kworker/3:23
384299206,3cyclictest111rcu_preempt2
384299202,6cyclictest28-21ksoftirqd/22
384299201,6cyclictest28-21ksoftirqd/22
3842992015,3cyclictest271rcuc/22
3842992010,2cyclictest111rcu_preempt2
384299200,5cyclictest28-21ksoftirqd/22
383499208,10cyclictest1569-21apt-get0
3834992015,3cyclictest9-21ksoftirqd/00
3834992015,3cyclictest5296-21/usr/sbin/munin0
3834992014,4cyclictest634-21snmpd0
3834992014,3cyclictest13831-21idleruntime0
383499201,17cyclictest5973-21ls0
3846991915,2cyclictest28421-21df_inode3
3846991914,3cyclictest8869-21cpuspeed3
3846991914,3cyclictest8631-21ntpq3
3846991914,3cyclictest7523-21awk3
3846991914,3cyclictest29041-21date3
3846991914,3cyclictest23547-21ls3
384699191,2cyclictest968-21perf3
384699190,3cyclictest31302-1kworker/3:0H3
384699190,2cyclictest111rcu_preempt3
384299191,6cyclictest271rcuc/22
383499198,10cyclictest515-21avahi-daemon0
3834991914,3cyclictest9664-21ps0
3834991914,3cyclictest8057-21sed0
3834991914,3cyclictest634-21snmpd0
3834991914,3cyclictest4327-21mailstats0
3834991914,3cyclictest27251-21sed0
3834991914,3cyclictest22003-21cut0
3834991914,3cyclictest21419-21/usr/sbin/munin0
3834991914,3cyclictest15957-21hostname0
3834991914,3cyclictest15767-21cat0
3834991914,3cyclictest13573-21cpu0
3834991913,4cyclictest25950-21awk0
3834991913,4cyclictest13863-21ls0
3834991913,4cyclictest10613-21sed0
3834991912,4cyclictest30438-21grep0
3846991816,1cyclictest0-21swapper/33
3846991815,2cyclictest0-21swapper/33
3846991814,2cyclictest11922-21aten2_r9power_e3
3846991813,3cyclictest4523-21cat3
3846991813,3cyclictest4523-21cat3
3846991813,3cyclictest16417-21gltestperf3
3846991813,3cyclictest10135-21awk3
3846991812,4cyclictest10791-21hostname3
384299183,8cyclictest28-21ksoftirqd/22
3834991816,1cyclictest0-21swapper/00
3834991814,2cyclictest7774-21/usr/sbin/munin0
3834991814,2cyclictest19843-21/usr/sbin/munin0
3834991814,2cyclictest19650-21ls0
3834991814,2cyclictest15409-21interrupts0
3834991813,3cyclictest9-21ksoftirqd/00
3834991813,3cyclictest634-21snmpd0
3834991813,3cyclictest3160-21ls0
3834991813,3cyclictest31591-21/usr/sbin/munin0
3834991813,3cyclictest31137-21acpi0
3834991813,3cyclictest30910-21load0
3834991813,3cyclictest23362-21grep0
3834991813,3cyclictest23350-21expr0
3834991813,3cyclictest19337-21cat0
3834991813,3cyclictest17933-21cat0
3834991813,3cyclictest17247-21cut0
3834991813,3cyclictest1512-21latency_hist0
3834991813,3cyclictest11539-21cut0
3834991812,4cyclictest8797-21cat0
3834991812,4cyclictest7114-21awk0
3834991812,4cyclictest2403-21sendmail-mta0
3834991812,4cyclictest11223-21cat0
3834991812,3cyclictest340-21systemd-journal0
3846991712,3cyclictest24916-21ntpq3
383499172,12cyclictest28145-21apt-get0
383499172,12cyclictest27546-21apt-get0
3834991715,1cyclictest0-21swapper/00
3834991713,2cyclictest7533-21latency_hist0
3834991713,2cyclictest6259-21cpu0
3834991713,2cyclictest4427-21df0
3834991713,2cyclictest27982-21/usr/sbin/munin0
3834991713,2cyclictest10697-21/usr/sbin/munin0
3834991712,3cyclictest662-21runrttasks0
3834991712,3cyclictest662-21runrttasks0
3834991712,3cyclictest662-21runrttasks0
3834991712,3cyclictest634-21snmpd0
3834991712,3cyclictest26778-21cat0
383499171,13cyclictest18173-21sort0
3834991612,2cyclictest662-21runrttasks0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional