You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-30 - 08:59
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 30, 2025 00:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
32052269176,23sleep10-21swapper/11
32162257221,24sleep20-21swapper/22
31972257179,43sleep30-21swapper/33
30472252192,48sleep00-21swapper/00
1599721190,3sleep2349099cyclictest2
269752640,4sleep026980-21unixbench_singl0
162862560,2sleep216282-21perf2
222512500,2sleep30-21swapper/33
271512490,1sleep20-21swapper/22
52132460,3sleep30-21swapper/33
110302400,10sleep121-21ksoftirqd/11
348699390,37cyclictest23052-21kworker/1:11
349099350,33cyclictest8504-21kworker/2:12
3483993513,19cyclictest31474-21cron0
3483993413,18cyclictest4095-21cut0
3483993312,18cyclictest4892-21cat0
3483993311,19cyclictest14673-21awk0
348399328,21cyclictest517-21dbus-daemon0
3483993212,18cyclictest5407-21cat0
3483993211,18cyclictest32044-21sendmail-mta0
3483993211,18cyclictest10679-21sendmail-mta0
3483993210,19cyclictest15995-21sendmail-mta0
104952320,3sleep0348399cyclictest0
348399319,4cyclictest517-21dbus-daemon0
3483993111,17cyclictest517-21dbus-daemon0
3483993110,18cyclictest16944-21sendmail-mta0
348399309,19cyclictest517-21dbus-daemon0
348399308,4cyclictest517-21dbus-daemon0
348399308,3cyclictest20770-21aten2_r9power_v0
3483993014,14cyclictest7517-21/usr/sbin/munin0
3483993012,15cyclictest10017-21latency_hist0
3483993011,16cyclictest31783-21aten2_r9power_e0
3483993010,17cyclictest340-21systemd-journal0
3483993010,17cyclictest32145-21cat0
348399299,3cyclictest517-21dbus-daemon0
348399299,3cyclictest517-21dbus-daemon0
348399299,3cyclictest10884-21grep0
348399298,5cyclictest340-21systemd-journal0
348399298,4cyclictest340-21systemd-journal0
348399298,4cyclictest27972-21sendmail-mta0
348399297,4cyclictest517-21dbus-daemon0
348399297,4cyclictest340-21systemd-journal0
348399291,9cyclictest340-21systemd-journal0
348399291,10cyclictest340-21systemd-journal0
3483992910,17cyclictest30276-21latency_hist0
3483992910,16cyclictest18836-21ls0
348399289,3cyclictest17121-21cat0
348399289,3cyclictest14300-21ntpq0
348399289,3cyclictest12877-21sendmail-mta0
348399281,10cyclictest340-21systemd-journal0
3483992810,16cyclictest662-21runrttasks0
3483992810,15cyclictest28263-21if_enp3s00
348399277,4cyclictest10872-21cat0
348399277,3cyclictest0-21swapper/00
348399276,4cyclictest1480-21aten2.4-expect0
348399275,5cyclictest28592-21cron0
3483992710,15cyclictest662-21runrttasks0
264272270,3sleep2349099cyclictest2
348399269,3cyclictest26402-21latency_hist0
348399267,3cyclictest517-21dbus-daemon0
348399267,17cyclictest0-21swapper/00
348399267,16cyclictest0-21swapper/00
348399262,5cyclictest23719-21apt-get0
348399261,6cyclictest515-21avahi-daemon0
349599255,17cyclictest0-21swapper/33
348399258,2cyclictest29617-21cat0
348399257,2cyclictest15175-21cat0
348399252,6cyclictest8650-21apt-get0
349599244,17cyclictest0-21swapper/33
349599243,18cyclictest27972-21sendmail-mta3
3486992416,5cyclictest8772-21sh1
348399247,3cyclictest312-21cstates0
348399247,3cyclictest312-21cstates0
348399247,2cyclictest23183-21taskset0
348399246,3cyclictest11342-21packagekitd0
348399245,5cyclictest638-21ntpd0
348399245,5cyclictest638-21ntpd0
348399244,3cyclictest13369-21rt-features0
348399242,4cyclictest19872-21apt-get0
348399241,6cyclictest19150-21cron0
94532230,2sleep30-21swapper/33
349599238,13cyclictest0-21swapper/33
349599235,16cyclictest0-21swapper/33
349599234,17cyclictest5310-21sendmail-mta3
349599234,17cyclictest29308-21sendmail-mta3
349599234,17cyclictest2149-21sendmail-mta3
349599234,17cyclictest12877-21sendmail-mta3
349599232,18cyclictest0-21swapper/33
349599231,4cyclictest16841-21/usr/sbin/munin3
349599231,20cyclictest517-21dbus-daemon3
3495992310,3cyclictest662-21runrttasks3
349099238,3cyclictest42742grep2
348399236,2cyclictest17328-21apt-key0
349599224,16cyclictest21064-21sendmail-mta3
349599224,16cyclictest19457-21sendmail-mta3
349599224,16cyclictest19457-21sendmail-mta3
349599223,17cyclictest944-21sendmail-mta3
349599223,17cyclictest8486-21sendmail-mta3
349599223,17cyclictest5083-21sendmail-mta3
349599223,17cyclictest18188-21sendmail-mta3
349599223,17cyclictest14088-21sendmail-mta3
349599223,17cyclictest10026-21sendmail-mta3
349599223,16cyclictest24209-21sendmail-mta3
349599222,17cyclictest15045-21sendmail-mta3
3495992217,3cyclictest29030-21apt-get3
3495992216,4cyclictest21059-21df3
349599221,4cyclictest518-21in:imuxsock3
349599221,3cyclictest340-21systemd-journal3
349099220,19cyclictest7322-21sed2
3486992215,4cyclictest11811-21diskstats1
348699221,18cyclictest4537-21awk1
3483992214,5cyclictest2992-21df_inode0
179792220,1sleep20-21swapper/22
349599218,11cyclictest662-21runrttasks3
349599217,13cyclictest8776-21sendmail3
349599212,17cyclictest4391-21sendmail-mta3
349599212,17cyclictest4369-21apt3
349599212,17cyclictest32686-21sendmail-mta3
3495992115,4cyclictest32580-21cpu3
3495992115,4cyclictest32580-21cpu3
3495992115,4cyclictest32151-21unixbench-2d3
3495992115,4cyclictest27958-21threads3
349599211,18cyclictest9197-21apt-get3
349599211,17cyclictest0-21swapper/33
349599210,4cyclictest26103-21awk3
349099212,16cyclictest8862-21grep2
3490992116,3cyclictest28-21ksoftirqd/22
3486992117,3cyclictest21-21ksoftirqd/11
3486992115,4cyclictest12316-21/usr/sbin/munin1
348399212,4cyclictest2450-21munin-run0
95692200,2sleep20-21swapper/22
93892200,2sleep10-21swapper/11
3495992015,3cyclictest22627-21threads3
3495992015,3cyclictest19304-21cupsd3
3495992015,3cyclictest13517-21cpuspeed_turbos3
349599201,3cyclictest571-21gdbus3
349099202,17cyclictest0-21swapper/22
3490992017,2cyclictest0-21swapper/22
3490992015,3cyclictest9272-21processes2
3490992015,3cyclictest10451-21users2
3490992014,4cyclictest27057-21seq2
3490992014,4cyclictest17298-21open_inodes2
3486992017,2cyclictest0-21swapper/11
3486992016,2cyclictest0-21swapper/11
3486992015,3cyclictest634-21snmpd1
3486992015,3cyclictest32431-21/usr/sbin/munin1
3486992015,3cyclictest32431-21/usr/sbin/munin1
3486992015,3cyclictest10285-21/usr/sbin/munin1
3486992014,4cyclictest22669-21seq1
3486992014,4cyclictest18399-21wc1
3486992013,4cyclictest5942-21sh1
349599194,13cyclictest0-21swapper/33
3495991915,2cyclictest11399-21awk3
3495991914,3cyclictest9636-21uptime3
3495991914,3cyclictest5891-21ntp_kernel_pll_3
3495991914,3cyclictest30557-21ntpq3
3495991914,3cyclictest2963-21ntp_kernel_pll_3
3495991914,3cyclictest24662-21aten2_r9power_e3
3495991914,3cyclictest20888-21expr3
3495991914,3cyclictest19396-21pmu-power3
3495991914,3cyclictest13174-21ntpq3
3495991913,4cyclictest32394-21date3
349599191,2cyclictest0-21swapper/33
349099194,4cyclictest28-21ksoftirqd/22
349099193,3cyclictest28-21ksoftirqd/22
3490991916,2cyclictest0-21swapper/22
3490991914,3cyclictest4914-21/usr/sbin/munin2
3490991914,3cyclictest31724-21ntpq2
3490991914,3cyclictest2579-21sed2
3490991914,3cyclictest20223-21sed2
3490991913,4cyclictest5184-21seq2
3490991913,4cyclictest29300-21seq2
3490991913,4cyclictest25227-21seq2
3490991913,4cyclictest19782-21sed2
3490991913,4cyclictest19782-21sed2
3490991913,4cyclictest11367-21seq2
3490991912,4cyclictest5816-21awk2
3490991912,4cyclictest25250-21grep2
349099191,16cyclictest26056-21grep2
349099191,16cyclictest0-21swapper/22
3486991916,2cyclictest0-21swapper/11
3486991915,2cyclictest462-21/usr/sbin/munin1
3486991914,3cyclictest9561-21/usr/sbin/munin1
3486991914,3cyclictest3615-21rt-features1
3486991914,3cyclictest29829-21sed1
3486991914,3cyclictest2689-21grep1
3486991914,3cyclictest19414-21/usr/sbin/munin1
3486991913,4cyclictest3440-21seq1
3486991913,4cyclictest26274-21seq1
3486991912,4cyclictest16332-21sh1
348699190,4cyclictest20627-21/usr/sbin/munin1
3483991914,3cyclictest7480-21cat0
3495991815,2cyclictest0-21swapper/33
3495991813,3cyclictest29013-21cat3
3495991813,3cyclictest14563-21aten2_r9power_p3
3495991813,3cyclictest1333-21/usr/sbin/munin3
3495991812,4cyclictest4957-21cat3
3495991812,4cyclictest23580-21ntpq3
3495991812,3cyclictest907-21cat3
3495991811,5cyclictest19045-21grep3
349599180,2cyclictest21647-21latency_hist3
349099182,9cyclictest8402-21chrt2
3490991816,1cyclictest0-21swapper/22
3490991816,1cyclictest0-21swapper/22
3490991816,1cyclictest0-21swapper/22
3490991816,1cyclictest0-21swapper/22
3490991816,1cyclictest0-21swapper/22
3490991816,1cyclictest0-21swapper/22
3490991814,2cyclictest3080-21proc_pri2
3490991814,2cyclictest26671-21/usr/sbin/munin2
3490991814,2cyclictest22677-21/usr/sbin/munin2
3490991813,3cyclictest22011-21idleruntime2
3490991813,3cyclictest21848-21cat2
3490991813,3cyclictest2053-21cut2
3490991813,3cyclictest19853-21/usr/sbin/munin2
3490991813,3cyclictest1775-21sh2
3490991812,4cyclictest7104-21cpuspeed_turbos2
3490991812,4cyclictest22166-21sort2
349099181,15cyclictest4437-21sed2
3490991811,4cyclictest32693-21grep2
348699183,10cyclictest24236-21apt-get1
3486991815,2cyclictest0-21swapper/11
3486991814,2cyclictest8380-21/usr/sbin/munin1
3486991814,2cyclictest7618-21sed1
3486991814,2cyclictest4914-21/usr/sbin/munin1
3486991814,2cyclictest26798-21/usr/sbin/munin1
3486991814,2cyclictest18582-21/usr/sbin/munin1
3486991814,2cyclictest13420-21aten2_r9power_c1
3486991813,3cyclictest9583-21idleruntime1
3486991813,3cyclictest9170-21sendmail-mta1
3486991813,3cyclictest8226-21/usr/sbin/munin1
3486991813,3cyclictest634-21snmpd1
3486991813,3cyclictest634-21snmpd1
3486991813,3cyclictest5473-21/usr/sbin/munin1
3486991813,3cyclictest30253-21idleruntime1
3486991813,3cyclictest20501-21/usr/sbin/munin1
3486991813,3cyclictest15305-21/usr/sbin/munin1
3486991813,3cyclictest14628-21cut1
3486991812,4cyclictest29034-21cut1
3486991812,4cyclictest28431-21sed1
3486991812,4cyclictest22201-21grep1
3486991812,4cyclictest13002-21basename1
348699181,1cyclictest0-21swapper/11
348699181,1cyclictest0-21swapper/11
3483991813,3cyclictest662-21runrttasks0
349099172,4cyclictest22573-21apt-get2
3490991715,1cyclictest0-21swapper/22
3490991713,2cyclictest662-21runrttasks2
3490991713,2cyclictest662-21runrttasks2
3490991712,3cyclictest829-21needreboot2
3490991712,3cyclictest31754-21awk2
3490991712,3cyclictest29798-21aten2_r9power_p2
3490991712,3cyclictest25746-21cat2
3490991711,4cyclictest18188-21sendmail-mta2
349099170,1cyclictest0-21swapper/22
349099170,16cyclictest0-21swapper/22
349099170,16cyclictest0-21swapper/22
3486991715,1cyclictest0-21swapper/11
3486991715,1cyclictest0-21swapper/11
3486991713,2cyclictest21453-21/usr/sbin/munin1
3486991713,2cyclictest11239-21/usr/sbin/munin1
3486991712,3cyclictest662-21runrttasks1
3486991712,3cyclictest6307-21/usr/sbin/munin1
3486991712,3cyclictest31329-21grep1
3486991712,3cyclictest26576-21cut1
3486991712,3cyclictest23448-21ntp_offset1
3486991712,3cyclictest19373-21awk1
3486991712,3cyclictest18188-21sendmail-mta1
3486991711,4cyclictest29268-21sh1
3490991614,1cyclictest0-21swapper/22
3490991611,3cyclictest1671-21grep2
348699169,4cyclictest697-21aten2.4-expect1
3486991610,3cyclictest662-21runrttasks1
348699160,1cyclictest0-21swapper/11
348699160,15cyclictest0-21swapper/11
3490991510,3cyclictest15556-21cut2
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional