You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-31 - 10:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 31, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
69042292248,33sleep10-21swapper/11
83062289232,45sleep20-21swapper/22
82072265227,25sleep30-21swapper/33
84142251177,61sleep00-21swapper/00
862599200194,4cyclictest13557-21strings0
863699158154,2cyclictest0-21swapper/33
863299138134,2cyclictest0-21swapper/22
158521320,2sleep2863299cyclictest2
8629999692,2cyclictest0-21swapper/11
862999430,32cyclictest27374-21seq1
155172420,2sleep00-21swapper/00
862999381,28cyclictest28723-21sendmail-mta1
862999381,22cyclictest13064-21taskset1
862999381,22cyclictest13064-21taskset1
862999380,24cyclictest12806-21sed1
862999380,22cyclictest27253-21chrt1
862999370,24cyclictest515-21avahi-daemon1
862999370,23cyclictest3439-21chrt1
862999370,21cyclictest3188-21runrttasks1
862999360,22cyclictest19311-21chrt1
862999342,29cyclictest571-21gdbus1
862999341,30cyclictest553-21grep1
862999341,30cyclictest4437-21needreboot1
862999341,30cyclictest28928-21grep1
8629993412,20cyclictest18069-21expr1
8629993412,19cyclictest32211-21aten2_r9power_c1
862999340,31cyclictest340-21systemd-journal1
862999332,28cyclictest340-21systemd-journal1
8629993313,18cyclictest24661-21/usr/sbin/munin1
8629993313,18cyclictest24661-21/usr/sbin/munin1
8629993313,17cyclictest11921-21cut1
8629993312,19cyclictest29674-21cut1
8629993311,19cyclictest2928-21forks1
8629993310,20cyclictest21865-21cat1
8629993310,20cyclictest20804-21sed1
8629993212,17cyclictest4526-21/usr/sbin/munin1
8629993211,18cyclictest28361-21sendmail-mta1
8629993211,18cyclictest15557-21aten2_r9power_e1
8629993210,20cyclictest23697-21/usr/sbin/munin1
8629993210,19cyclictest31624-21cron1
862999318,21cyclictest4851-21sendmail-mta1
8629993113,16cyclictest422-21aten2.4-expect1
8629993112,17cyclictest7029-21latency_hist1
8629993111,18cyclictest18260-21latency_hist1
8629993111,17cyclictest7300-21/usr/sbin/munin1
8629993111,17cyclictest5933-21/usr/sbin/munin1
8629993111,17cyclictest12371-21/usr/sbin/munin1
862999309,19cyclictest20799-21cat1
862999309,18cyclictest26371-21grep1
862999309,18cyclictest13466-21sort1
862999308,20cyclictest20763-21cat1
862999308,19cyclictest340-21systemd-journal1
862999308,19cyclictest24631-21sendmail-mta1
862999307,20cyclictest32450-21sendmail-mta1
8629993010,17cyclictest14491-21aten2_r9power_e1
862999300,27cyclictest9102-21/usr/sbin/munin1
862999300,1cyclictest0-21swapper/11
862999298,19cyclictest29341-21cat1
862999298,18cyclictest8246-21sendmail-mta1
862999298,18cyclictest1797-21latency1
862999293,23cyclictest12329-21sendmail-mta1
862999292,22cyclictest10264-21ntp_states1
862999291,23cyclictest3880-21apt-get1
862999291,23cyclictest18885-21apt-get1
863699281,20cyclictest0-21swapper/33
862999287,18cyclictest31800-21sendmail-mta1
862999287,18cyclictest24502-21grep1
862999285,20cyclictest340-21systemd-journal1
862999285,20cyclictest11987-21sendmail-mta1
862999282,22cyclictest0-21swapper/11
862999281,24cyclictest17739-21/usr/sbin/munin1
862999280,25cyclictest9339-21grep1
862999280,25cyclictest20906-21acpi1
8636992717,6cyclictest29620-21perf3
863699271,21cyclictest15939-21perf3
862999278,16cyclictest76622chrt1
862999278,16cyclictest76622chrt1
862999270,24cyclictest15779-21tr1
862999270,24cyclictest13721-21grep1
862999270,1cyclictest0-21swapper/11
863699267,17cyclictest0-21swapper/33
863699266,17cyclictest0-21swapper/33
863699265,17cyclictest0-21swapper/33
863699261,22cyclictest9807-21idleruntime-cro3
862999260,23cyclictest14189-21aten2_r9power_e1
61152260,2sleep00-21swapper/00
183222260,3sleep2271rcuc/22
117372260,1sleep20-21swapper/22
117372260,1sleep20-21swapper/22
863699254,4cyclictest0-21swapper/33
863699254,3cyclictest0-21swapper/33
863699254,18cyclictest16072-21sendmail-mta3
8636992513,7cyclictest7756-21perf3
214652250,4sleep0101rcuc/00
199492250,1sleep30-21swapper/33
863699244,18cyclictest5245-21sendmail-mta3
863699244,17cyclictest6402-21cat3
863699244,17cyclictest23314-21sendmail-mta3
863699243,18cyclictest28361-21sendmail-mta3
863699243,18cyclictest13039-21sendmail-mta3
863699242,4cyclictest340-21systemd-journal3
8636992418,4cyclictest0-21swapper/33
8636992417,4cyclictest340-21systemd-journal3
863699234,17cyclictest3470-21sendmail-mta3
863699234,17cyclictest30638-21cat3
863699234,17cyclictest19198-21sendmail-mta3
863699233,17cyclictest27540-21latency_hist3
863699233,17cyclictest17135-21sendmail-mta3
8636992316,4cyclictest340-21systemd-journal3
8636992315,5cyclictest5714-21sendmail-msp3
8636992315,5cyclictest20311-21munin-run3
863699231,19cyclictest571-21gdbus3
863699231,19cyclictest18283-1kworker/3:1H3
863699231,19cyclictest1-21systemd3
863699226,14cyclictest0-21swapper/33
863699224,17cyclictest35-21ksoftirqd/33
863699223,17cyclictest22354-21latency_hist3
863699222,3cyclictest0-21swapper/33
863699222,3cyclictest0-21swapper/33
863699221,4cyclictest340-21systemd-journal3
8636992214,5cyclictest7023-21cron3
863699221,18cyclictest0-21swapper/33
863699220,19cyclictest4299-21perf3
863699212,17cyclictest29592-21latency_hist3
863699212,17cyclictest2324-21cat3
863699212,17cyclictest12475-21latency_hist3
8636992114,4cyclictest7798-21grep3
8636992114,4cyclictest2391-21ntpq3
863699211,18cyclictest16420-21sendmail-mta3
863699211,17cyclictest6164-1kworker/3:0H3
863699211,17cyclictest17327-21sleep3
8636992110,6cyclictest5954-21apt-get3
8636992110,6cyclictest5954-21apt-get3
863699210,4cyclictest18283-1kworker/3:1H3
863699210,18cyclictest18624-21munin-run3
863699210,18cyclictest18395-21cat3
8632992115,4cyclictest517-21dbus-daemon2
8632992115,4cyclictest5068-21timerandwakeup2
8632992112,7cyclictest662-21runrttasks2
8625992115,4cyclictest29608-21sendmail0
8625992114,4cyclictest29250-21grep0
8625992111,6cyclictest31489-21apt-get0
270642210,17sleep027156-21diskstats0
863699208,10cyclictest7096-21sed3
863699206,11cyclictest340-21systemd-journal3
863699203,11cyclictest30829-21apt-get3
863699202,10cyclictest8670-21apt-get3
863699201,16cyclictest1-21systemd3
863699200,18cyclictest15248-21sendmail3
863299207,11cyclictest517-21dbus-daemon2
8632992015,3cyclictest14085-21if_err_enp2s02
8632992015,3cyclictest13229-21ntpq2
8632992014,4cyclictest1956-21df2
8632992014,4cyclictest19421-21open_files2
8632992014,4cyclictest15941-21diskstats2
8632992014,3cyclictest23416-21sh2
8632992014,3cyclictest22327-21kernelversion2
863299200,18cyclictest970-21sed2
8625992018,1cyclictest0-21swapper/00
8625992015,3cyclictest634-21snmpd0
8625992013,4cyclictest8668-21apt0
8625992013,4cyclictest21688-21cut0
862599201,16cyclictest32517-21tr0
270672200,9sleep20-21swapper/22
8636991916,2cyclictest0-21swapper/33
8636991916,2cyclictest0-21swapper/33
8636991915,2cyclictest26825-21latency_hist3
8636991915,2cyclictest23427-21latency_hist3
8636991914,3cyclictest1980-21ntp_states3
8636991913,4cyclictest22274-21awk3
863299199,8cyclictest19536-21latency_hist2
863299198,3cyclictest111rcu_preempt2
863299196,11cyclictest0-21swapper/22
8632991915,2cyclictest22859-21timerwakeupswit2
8632991914,3cyclictest30338-21seq2
8632991914,3cyclictest30050-21apt-config2
8632991914,3cyclictest29983-21cpu2
8632991914,3cyclictest29431-21seq2
8632991914,3cyclictest29299-21apt-config2
8632991914,3cyclictest2580-21aten2.4-expect2
8632991914,3cyclictest2243-21df2
8632991914,3cyclictest19562-21sed2
8632991914,3cyclictest18984-21aten2_r9power_v2
8632991914,3cyclictest15219-21cron2
8632991914,3cyclictest12218-21needreboot2
8632991913,4cyclictest9523-21cat2
8632991913,4cyclictest8494-21date2
8632991913,4cyclictest517-21dbus-daemon2
8632991913,4cyclictest26416-21sed2
8632991913,4cyclictest22375-21systemctl2
8632991912,4cyclictest7316-21apt2
863299190,2cyclictest517-21dbus-daemon2
862599198,6cyclictest20569-21apt-get0
8625991915,2cyclictest12563-21cpu0
8625991914,3cyclictest9431-21irqstats0
8625991914,3cyclictest634-21snmpd0
8625991914,3cyclictest633-21ls0
8625991914,3cyclictest340-21systemd-journal0
8625991914,3cyclictest25016-21/usr/sbin/munin0
8625991914,3cyclictest22745-21tr0
8625991913,4cyclictest4912-21expr0
8625991913,4cyclictest4012-21cat0
8625991913,4cyclictest32450-21sendmail-mta0
8625991913,4cyclictest31933-21apt-get0
8625991913,4cyclictest29497-21seq0
8625991913,4cyclictest1847-21expr0
8625991913,4cyclictest12329-21sendmail-mta0
8625991913,3cyclictest1215-21aten2.4-expect0
862599191,16cyclictest17284-21cron0
8625991911,5cyclictest14928-21cpu0
109692190,2sleep00-21swapper/00
863699180,3cyclictest11894-21sort3
8632991814,2cyclictest26418-21irqstats2
8632991814,2cyclictest24059-21cstates2
8632991814,2cyclictest23690-21mailstats2
8632991814,2cyclictest16412-21open_inodes2
8632991813,3cyclictest9828-21gltestperf2
8632991813,3cyclictest9506-21nfs4_client2
8632991813,3cyclictest6985-21rt-features2
8632991813,3cyclictest6985-21rt-features2
8632991813,3cyclictest5195-21cut2
8632991813,3cyclictest27651-21sed2
8632991813,3cyclictest26942-21cpuspeed2
8632991813,3cyclictest24459-21memory2
8632991813,3cyclictest20225-21cat2
8632991813,3cyclictest15836-21sendmail_mailst2
8632991813,3cyclictest14930-21sed2
8632991813,3cyclictest13999-21ls2
8632991812,4cyclictest7435-21seq2
863299180,16cyclictest0-21swapper/22
8625991816,1cyclictest0-21swapper/00
8625991814,2cyclictest7300-21/usr/sbin/munin0
8625991814,2cyclictest4922-21rt-features0
8625991814,2cyclictest23704-21/usr/sbin/munin0
8625991814,2cyclictest19590-21/usr/sbin/munin0
8625991813,3cyclictest9058-21sendmail_mailst0
8625991813,3cyclictest6841-21awk0
8625991813,3cyclictest6841-21awk0
8625991813,3cyclictest5240-21/usr/sbin/munin0
8625991813,3cyclictest30131-21gdbus0
8625991813,3cyclictest27533-21cron0
8625991813,3cyclictest24931-21expr0
8625991813,3cyclictest24931-21expr0
8625991813,3cyclictest2180-21expr0
8625991813,3cyclictest18567-21sh0
8625991813,3cyclictest14366-21sort0
8625991812,4cyclictest517-21dbus-daemon0
8625991812,4cyclictest29970-21hostname0
8625991812,4cyclictest17135-21sendmail-mta0
8625991812,4cyclictest13208-21cat0
8625991811,4cyclictest15231-21cron0
8625991810,6cyclictest11742-21tr0
8625991810,6cyclictest11742-21tr0
8636991712,3cyclictest24102-21ls3
8636991711,4cyclictest30762-21grep3
8632991715,1cyclictest0-21swapper/22
8632991713,2cyclictest662-21runrttasks2
8632991713,2cyclictest32173-21unixbench_singl2
8632991712,3cyclictest27933-21cut2
8632991712,3cyclictest25586-21open_files2
8632991712,3cyclictest25586-21open_files2
8632991712,3cyclictest1120-21aten2.4-expect2
8632991711,4cyclictest8937-21awk2
8632991711,4cyclictest3702-21grep2
8632991710,5cyclictest517-21dbus-daemon2
863299170,16cyclictest0-21swapper/22
8625991715,1cyclictest0-21swapper/00
8625991715,1cyclictest0-21swapper/00
8625991715,1cyclictest0-21swapper/00
8625991713,2cyclictest662-21runrttasks0
8625991713,2cyclictest19576-21sed0
8625991712,3cyclictest662-21runrttasks0
8625991712,3cyclictest29413-21/usr/sbin/munin0
8625991712,3cyclictest27169-21aten2_r9power_p0
8625991712,3cyclictest2589-21aten2_r9power_v0
8625991712,3cyclictest24051-21mailstats0
8625991711,4cyclictest13278-21cut0
8625991711,3cyclictest8246-21sendmail-mta0
8625991710,5cyclictest10601-21grep0
862599160,15cyclictest0-21swapper/00
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional