You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-16 - 11:38
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 16, 2025 00:43:24)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
22912314278,24sleep00-21swapper/00
23892269232,25sleep30-21swapper/33
23872256183,25sleep10-21swapper/11
25502239179,47sleep20-21swapper/22
275999227220,5cyclictest8892-21munin-run1
276499210202,5cyclictest8897-21cron2
2227521580,1sleep30-21swapper/33
275499129124,3cyclictest571-21gdbus0
276999120115,3cyclictest8900-21apt3
172552510,2sleep20-21swapper/22
301482480,1sleep20-21swapper/22
186192470,2sleep30-21swapper/33
2769994013,15cyclictest662-21runrttasks3
276999383,32cyclictest10660-21sendmail-mta3
276999371,22cyclictest417-21taskset3
276999371,21cyclictest9478-21taskset3
276999351,31cyclictest12032-21gltestperf3
276999341,3cyclictest340-21systemd-journal3
276999340,3cyclictest23414-1kworker/3:2H3
276999340,3cyclictest21734-1kworker/3:0H3
276999340,3cyclictest17392-1kworker/3:1H3
2754993413,18cyclictest418-21cut0
2754993413,18cyclictest418-21cut0
2754993312,18cyclictest9576-21expr0
275499327,22cyclictest517-21dbus-daemon0
2754993210,19cyclictest24749-21cut0
2754993210,19cyclictest21826-21cat0
276999317,21cyclictest2655-21sendmail-mta3
276999317,21cyclictest2655-21sendmail-mta3
276999315,23cyclictest0-21swapper/33
2769993113,15cyclictest21478-21grep3
276999311,28cyclictest340-21systemd-journal3
276999311,28cyclictest2622-1kworker/3:1H3
276999311,25cyclictest4592-21apt-get3
2769993112,17cyclictest4189-21taskset3
276999310,3cyclictest0-21swapper/33
276999310,28cyclictest27676-21sendmail-mta3
275499319,19cyclictest517-21dbus-daemon0
275499319,19cyclictest517-21dbus-daemon0
275499316,4cyclictest517-21dbus-daemon0
2754993114,14cyclictest24756-21apt-get0
275499311,27cyclictest15811-21sendmail0
2754993111,18cyclictest23581-21sed0
276999307,20cyclictest15155-21sendmail-mta3
276999306,21cyclictest0-21swapper/33
276999300,4cyclictest8611-21wc3
276999300,3cyclictest26916-21cstates3
276999300,27cyclictest0-21swapper/33
275499309,19cyclictest517-21dbus-daemon0
275499309,18cyclictest517-21dbus-daemon0
2754993018,10cyclictest3908-21sed0
2754993012,16cyclictest20781-21cut0
2754993011,17cyclictest8024-21expr0
2754993010,17cyclictest21571-21grep0
276999297,19cyclictest22849-21sendmail-mta3
276999297,19cyclictest16281-21grep3
276999293,23cyclictest15800-21munin-run3
276999292,24cyclictest31734-21sendmail-mta3
2769992913,14cyclictest32508-21sendmail-mta3
2769992913,14cyclictest19824-21cat3
2769992913,14cyclictest10127-21cat3
2769992913,13cyclictest3908-21aten2.4-expect3
276999291,25cyclictest15595-21sendmail-mta3
276999290,4cyclictest12060-21aten2_r9power_v3
276999290,3cyclictest6262-21df_inode3
276999290,3cyclictest31367-21df_inode3
276999290,26cyclictest27782-21grep3
275499299,17cyclictest30541-21sendmail-mta0
275499298,18cyclictest340-21systemd-journal0
275499298,18cyclictest340-21systemd-journal0
275499298,18cyclictest17696-21sendmail-mta0
275499293,23cyclictest871-21/usr/sbin/munin0
2754992911,15cyclictest662-21runrttasks0
87452280,3sleep0275499cyclictest0
276999287,18cyclictest9936-21grep3
276999285,20cyclictest517-21dbus-daemon3
276999283,21cyclictest11997-21apt-get3
2769992813,13cyclictest8938-21ls3
276999281,24cyclictest517-21dbus-daemon3
2769992812,13cyclictest32520-21expr3
2769992812,13cyclictest32520-21expr3
2769992812,13cyclictest30991-21sendmail-mta3
276999280,2cyclictest754-21cut3
276999280,2cyclictest29976-21switchtime3
276499280,9cyclictest26785-21cat2
275499289,17cyclictest4569-21sendmail-mta0
275499289,17cyclictest31734-21sendmail-mta0
275499289,16cyclictest6387-21grep0
275499289,16cyclictest16605-21mailstats0
275499289,16cyclictest16605-21mailstats0
275499288,18cyclictest13717-21cron0
275499288,18cyclictest0-21swapper/00
275499288,17cyclictest32198-21sed0
275499287,4cyclictest518-21in:imuxsock0
275499286,4cyclictest928-21ls0
275499281,24cyclictest11069-21apt-get0
2754992811,14cyclictest18807-21seq0
291952270,1sleep10-21swapper/11
276999279,15cyclictest24020-21tr3
276999278,17cyclictest20470-21cut3
276999277,18cyclictest28283-21cat3
276999273,21cyclictest30273-21unixbench_singl3
276999272,20cyclictest15125-21apt-get3
2769992712,13cyclictest23994-21load3
2769992712,12cyclictest16428-21ntpq3
2769992712,12cyclictest16428-21ntpq3
2769992711,14cyclictest24758-21dpkg3
276999270,3cyclictest5211-21grep3
2764992713,4cyclictest21957-21sed2
275499278,17cyclictest27337-21expr0
275499278,16cyclictest16271-21timerandwakeup0
275499278,15cyclictest340-21systemd-journal0
275499277,4cyclictest11630-21cut0
275499273,2cyclictest0-21swapper/00
2754992712,13cyclictest13519-21/usr/sbin/munin0
276999264,20cyclictest5988-21expr3
276999264,20cyclictest5988-21expr3
276999261,21cyclictest340-21systemd-journal3
276999261,21cyclictest27339-21apt-get3
276999260,1cyclictest0-21swapper/33
2764992617,5cyclictest7631-21apt-get2
275999260,24cyclictest20258-21kworker/1:21
275499269,14cyclictest4925-21ls0
275499269,14cyclictest31350-21cat0
275499268,16cyclictest27676-21sendmail-mta0
275499268,16cyclictest21140-21latency_hist0
275499267,3cyclictest1177-21ls0
275499266,3cyclictest19165-21mailstats0
275499262,4cyclictest0-21swapper/00
2754992610,14cyclictest9-21ksoftirqd/00
72762250,1sleep00-21swapper/00
276999258,15cyclictest4003-21pmu-power3
276999255,18cyclictest18709-21cat3
276999252,18cyclictest0-21swapper/33
276999251,2cyclictest19536-21sendmail-mta3
276999251,21cyclictest16503-21taskset3
275499257,3cyclictest13964-21acpi0
275499253,6cyclictest24567-21apt-get0
275499252,4cyclictest0-21swapper/00
275499248,2cyclictest0-21swapper/00
275499246,5cyclictest3406-21sendmail-mta0
275499246,2cyclictest6690-21sed0
275499246,2cyclictest6690-21sed0
275499245,4cyclictest11011-21grep0
275499242,4cyclictest26592-21apt-get0
275499241,6cyclictest3821-21chrt0
275499241,5cyclictest6618-21apt-get0
275499240,21cyclictest27320-21/usr/sbin/munin0
121882240,1sleep10-21swapper/11
275999230,21cyclictest19925-21kworker/1:11
275499231,5cyclictest25057-21perf0
275499221,6cyclictest0-21swapper/00
275499221,5cyclictest9639-21sh0
275499221,4cyclictest3922-21ntpq0
275499220,20cyclictest0-21swapper/00
276499219,10cyclictest16919-21sendmail2
276499218,10cyclictest517-21dbus-daemon2
276499218,10cyclictest517-21dbus-daemon2
276499216,12cyclictest517-21dbus-daemon2
2764992114,4cyclictest911-21cut2
2759992115,4cyclictest9151-21grep1
2759992114,4cyclictest10003-21strings1
275999210,5cyclictest0-21swapper/11
275999210,20cyclictest0-21swapper/11
276499208,10cyclictest14198-21cpuspeed_turbos2
2764992016,2cyclictest5087-21aten2_r9power_v2
2764992016,2cyclictest5087-21aten2_r9power_v2
2764992015,3cyclictest5703-21missed_timers2
2764992015,3cyclictest31113-21cpuspeed_turbos2
2764992015,3cyclictest2626-21ntpq2
2764992015,3cyclictest12819-21grep2
2764992015,3cyclictest11670-21if_err_enp2s02
2764992014,4cyclictest4158-21expr2
2764992014,4cyclictest28040-21wc2
2764992014,4cyclictest14935-21date2
2764992014,4cyclictest10950-21idleruntime-cro2
2764992013,4cyclictest825-21cat2
2764992012,6cyclictest517-21dbus-daemon2
2764992012,5cyclictest31490-21aten2.4-expect2
2764992012,5cyclictest30083-21timerandwakeup2
2759992017,2cyclictest0-21swapper/11
2759992017,2cyclictest0-21swapper/11
2759992015,3cyclictest6970-21/usr/sbin/munin1
2759992015,3cyclictest31150-21ls1
2759992015,3cyclictest27251-21sh1
2759992015,3cyclictest22115-21ntp_states1
2759992014,4cyclictest32748-21sed1
2759992013,4cyclictest29711-21ntpq1
179772200,11sleep121-21ksoftirqd/11
276499197,10cyclictest571-21gdbus2
276499197,10cyclictest21728-21cron2
2764991915,2cyclictest8972-21cstates2
2764991915,2cyclictest6970-21/usr/sbin/munin2
2764991915,2cyclictest3075-21apt-get2
2764991915,2cyclictest26192-21ntp_states2
2764991914,3cyclictest31153-21sh2
2764991914,3cyclictest31019-21aten2_r9power_p2
2764991914,3cyclictest27905-21mailstats2
2764991914,3cyclictest23605-21sendmail-mta2
2764991914,3cyclictest22861-21fw_packets2
2764991914,3cyclictest18884-21ls2
2764991914,3cyclictest15554-21acpi2
2764991914,3cyclictest15554-21acpi2
2764991914,3cyclictest11928-21df_inode2
2764991912,5cyclictest517-21dbus-daemon2
275999192,14cyclictest20980-21dump-pmu-power1
2759991916,2cyclictest0-21swapper/11
2759991916,2cyclictest0-21swapper/11
2759991916,2cyclictest0-21swapper/11
2759991916,2cyclictest0-21swapper/11
2759991916,2cyclictest0-21swapper/11
2759991915,2cyclictest28069-21/usr/sbin/munin1
2759991915,2cyclictest23245-21/usr/sbin/munin1
2759991914,3cyclictest634-21snmpd1
2759991914,3cyclictest15547-21/usr/sbin/munin1
2759991914,3cyclictest15547-21/usr/sbin/munin1
2759991914,3cyclictest13901-21sed1
2759991913,4cyclictest7678-21cut1
2759991913,4cyclictest2419-21seq1
2759991913,4cyclictest21-21ksoftirqd/11
2759991913,4cyclictest18226-21grep1
2759991913,4cyclictest17822-21basename1
2759991913,4cyclictest16951-21sh1
2759991913,4cyclictest16931-21sendmail1
2759991913,4cyclictest15393-21cat1
2764991814,2cyclictest19455-21users2
2764991813,3cyclictest991-21unixbench-2d2
2764991813,3cyclictest991-21unixbench-2d2
2764991813,3cyclictest4612-21seq2
2764991813,3cyclictest18556-21interrupts2
2764991813,3cyclictest17620-21fw_packets2
2764991813,3cyclictest14724-21latency2
2764991812,4cyclictest7952-21cut2
2764991812,4cyclictest2670-21cut2
2764991812,4cyclictest26222-21seq2
2764991812,4cyclictest23948-21sed2
2764991812,3cyclictest340-21systemd-journal2
276499181,12cyclictest26063-21apt-get2
276499180,7cyclictest22160-21apt2
2759991816,1cyclictest0-21swapper/11
2759991816,1cyclictest0-21swapper/11
2759991814,2cyclictest8624-21/usr/sbin/munin1
2759991814,2cyclictest25297-21/usr/sbin/munin1
2759991814,2cyclictest23995-21/usr/sbin/munin1
2759991813,3cyclictest8047-21seq1
2759991813,3cyclictest6218-21expr1
2759991813,3cyclictest6002-21sendmail_mailst1
2759991813,3cyclictest5085-21/usr/sbin/munin1
2759991813,3cyclictest2746-21seq1
2759991813,3cyclictest2746-21seq1
2759991813,3cyclictest23339-21sed1
2759991813,3cyclictest21100-21sed1
2759991813,3cyclictest18441-21ls1
2759991813,3cyclictest15748-21sh1
2759991813,3cyclictest12832-21latency_hist1
2759991812,4cyclictest517-21dbus-daemon1
2759991812,4cyclictest2936-21/usr/sbin/munin1
2759991812,4cyclictest18610-21cat1
2759991812,3cyclictest5123-21idleruntime1
2759991812,3cyclictest31872-21tail1
2759991811,4cyclictest14409-21expr1
276499173,10cyclictest22211-21apt-get2
2764991715,1cyclictest0-21swapper/22
2764991713,2cyclictest9722-21aten2.4-expect2
2764991713,2cyclictest662-21runrttasks2
2764991712,3cyclictest662-21runrttasks2
2764991712,3cyclictest5185-21if_err_enp2s02
2764991712,3cyclictest16346-21seq2
2764991712,3cyclictest14518-21ps2
2764991711,4cyclictest29744-21seq2
2764991711,4cyclictest20630-21fw_packets2
2764991711,3cyclictest30254-21cpu2
2759991714,2cyclictest0-21swapper/11
2759991713,2cyclictest3057-21/usr/sbin/munin1
2759991712,3cyclictest9641-21/usr/sbin/munin1
2759991712,3cyclictest4258-21fw_packets1
2759991712,3cyclictest3238-21seq1
2759991712,3cyclictest29970-21mailstats1
2759991712,3cyclictest26110-21aten2_r9power_e1
2759991711,4cyclictest12162-21sed1
276499163,11cyclictest13321-21grep2
276499161,13cyclictest7158-21unixbench_multi2
275999163,8cyclictest19951-21apt-get1
275999152,11cyclictest24585-21basename1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional