You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-12 - 00:03
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Thu Dec 11, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
80762307268,25sleep00-21swapper/00
83462300160,25sleep10-21swapper/11
80292268228,26sleep30-21swapper/33
81642231194,24sleep20-21swapper/22
856899205200,3cyclictest26017-21apt-get0
857099177170,4cyclictest26036-21idleruntime-cro1
2457021490,2sleep2857699cyclictest2
960321280,2sleep0856899cyclictest0
857699122117,3cyclictest26029-21munin-run2
85799910297,3cyclictest26032-21perf3
320702560,7sleep228-21ksoftirqd/22
38322520,4sleep20-21swapper/22
178782520,2sleep20-21swapper/22
93252470,2sleep09331-21cpuspeed_turbos0
857699271,21cyclictest505-21dbus-daemon2
857999263,20cyclictest2-21kthreadd3
8576992617,5cyclictest27406-21sh2
8576992617,5cyclictest27406-21sh2
857699261,20cyclictest14919-21perf2
857699251,20cyclictest505-21dbus-daemon2
857699244,18cyclictest3181-21cat2
8576992411,3cyclictest5115-21latency_hist2
8570992418,4cyclictest17792-21cron1
857699234,17cyclictest19467-21cat2
857699233,17cyclictest31451-21latency_hist2
857699231,5cyclictest2082-21systemd-journal2
8576992315,4cyclictest10771-21latency_hist2
857699231,4cyclictest12482-21munin-run2
857699230,4cyclictest6414-21grep2
8568992317,3cyclictest9280-21find0
857699229,11cyclictest7148-21apt2
857699223,17cyclictest21315-21latency_hist2
8576992214,4cyclictest665-21runrttasks2
857699221,3cyclictest21926-21apt-config2
8576992212,5cyclictest0-21swapper/22
857699221,18cyclictest30147-21ls2
857699221,18cyclictest28334-21cron2
857099222,18cyclictest2683-21cron1
8568992214,4cyclictest30366-21sh0
8568992213,4cyclictest170932sleep00
856899220,20cyclictest0-21swapper/00
8579992116,3cyclictest9478-21needreboot3
8579992116,3cyclictest6002-21irqstats3
8579992116,3cyclictest23696-21aten2_r9power_p3
8579992116,3cyclictest17342-21cpuspeed_turbos3
857699213,11cyclictest23621-21chrt2
857699212,17cyclictest29179-21cat2
857699212,17cyclictest13452-21procmail2
857699212,16cyclictest16963-21ls2
8576992116,2cyclictest14556-21sendmail-msp2
8576992116,2cyclictest14556-21sendmail-msp2
8576992115,4cyclictest15309-21idleruntime-cro2
857699211,4cyclictest16016-21munin-run2
8576992113,4cyclictest2082-21systemd-journal2
8576992112,6cyclictest505-21dbus-daemon2
8576992112,5cyclictest2292-21cron2
857699211,17cyclictest3904-21latency_hist2
857699211,17cyclictest2082-21systemd-journal2
857699210,18cyclictest4326-21munin-run2
8570992116,3cyclictest5530-21seq1
8570992115,4cyclictest31075-21sh1
8570992115,4cyclictest2185-21ntpq1
8570992115,4cyclictest19568-21df_inode1
8570992114,5cyclictest21823-21dirname1
8570992114,4cyclictest23174-21seq1
8570992114,4cyclictest10624-21seq1
8570992110,6cyclictest3346-21apt-get1
856899212,17cyclictest13279-21idleruntime-cro0
8568992114,4cyclictest21943-21sh0
8568992114,4cyclictest1499-21sort0
8568992113,5cyclictest6747-21sendmail0
8568992111,8cyclictest665-21runrttasks0
73052210,2sleep10-21swapper/11
8579992015,3cyclictest9542-21idleruntime3
8579992015,3cyclictest8438-21vmstat3
8579992015,3cyclictest6364-21uptime3
8579992015,3cyclictest6053-21/usr/sbin/munin3
8579992015,3cyclictest26054-21df3
8579992015,3cyclictest26054-21df3
8579992015,3cyclictest25944-21latency3
8579992015,3cyclictest23662-21uptime3
8579992015,3cyclictest20013-21ntpq3
8579992014,4cyclictest5848-21unixbench-2d3
8579992014,4cyclictest5164-21date3
8579992014,3cyclictest4695-21kernelversion3
8579992011,7cyclictest9555-21sh3
8579992011,7cyclictest9555-21sh3
857999201,16cyclictest32422-21apt-get3
857699208,10cyclictest32406-21mailstats2
857699207,3cyclictest25542-21tr2
8576992016,2cyclictest19573-21df_inode2
8576992015,2cyclictest8204-21aten2_r9power_p2
857699201,4cyclictest2082-21systemd-journal2
8576992014,4cyclictest7009-21/usr/sbin/munin2
8576992014,3cyclictest5813-21turbostat.cron2
857699201,3cyclictest32517-21apt-config2
8576992012,5cyclictest665-21runrttasks2
857699201,17cyclictest6985-21cat2
857699201,16cyclictest12122-1kworker/2:2H2
8576992011,5cyclictest505-21dbus-daemon2
857699200,3cyclictest28170-21chrt2
857699200,18cyclictest12122-1kworker/2:2H2
857699200,17cyclictest24982-21cron2
857699200,17cyclictest23988-21munin-run2
8570992015,3cyclictest29691-21apt-get1
8570992015,3cyclictest23648-21entropy1
8570992015,3cyclictest23599-21/usr/sbin/munin1
8570992015,3cyclictest15570-21find1
8570992015,3cyclictest11143-21proc_pri1
8570992014,4cyclictest8265-21seq1
8570992014,4cyclictest7610-21seq1
8570992014,4cyclictest26927-21cat1
8570992014,4cyclictest1056-21mailstats1
8570992014,3cyclictest3646-21switchtime1
8570992014,3cyclictest2007-21acpi1
8570992014,3cyclictest10615-21seq1
8570992013,4cyclictest29017-21df_inode1
8570992011,5cyclictest21-21ksoftirqd/11
856899207,3cyclictest27874-21unixbench_multi0
8568992015,3cyclictest23090-21sed0
8568992014,4cyclictest19992-21sed0
8568992014,3cyclictest2082-21systemd-journal0
8579991915,2cyclictest15092-21ntp_offset3
857999191,4cyclictest0-21swapper/33
8579991914,3cyclictest9656-21if_err_enp2s03
8579991914,3cyclictest781-21cat3
8579991914,3cyclictest32151-21df3
8579991914,3cyclictest31552-21pluginstate3
8579991914,3cyclictest3096-21expr3
8579991914,3cyclictest26987-21sh3
8579991914,3cyclictest20677-21threads3
8579991914,3cyclictest18390-21gltestperf3
8579991914,3cyclictest16120-21aten2_r9power_v3
8579991914,3cyclictest14202-21swap3
8579991914,3cyclictest12656-21cut3
8579991914,3cyclictest12245-21find3
8579991914,3cyclictest11931-21cron3
8579991914,3cyclictest11882-21cat3
8579991913,4cyclictest16008-21diskstats3
8579991910,5cyclictest22223-21apt-get3
857699192,15cyclictest12867-21latency_hist2
8576991916,2cyclictest0-21swapper/22
8576991915,2cyclictest30374-21/usr/sbin/munin2
8576991915,2cyclictest16569-21apt-get2
857699191,3cyclictest505-21dbus-daemon2
8570991917,1cyclictest0-21swapper/11
8570991915,2cyclictest22129-21apt-config1
8570991915,2cyclictest21158-21/usr/sbin/munin1
8570991915,2cyclictest14827-21aten2_r9power_e1
8570991914,3cyclictest8896-21ls1
8570991914,3cyclictest4980-21expr1
8570991914,3cyclictest32571-21sed1
8570991914,3cyclictest27680-21hostname1
8570991914,3cyclictest24300-21/usr/sbin/munin1
8570991914,3cyclictest23192-21which1
8570991914,3cyclictest19401-21seq1
8570991914,3cyclictest17500-21acpi1
8570991913,4cyclictest12702-21cut1
8570991913,4cyclictest12588-21cat1
8570991913,3cyclictest26778-21seq1
857099191,15cyclictest14307-21ls1
8570991910,5cyclictest19540-21apt-get1
856899192,10cyclictest665-21runrttasks0
8568991916,2cyclictest0-21swapper/00
8568991915,3cyclictest9-21ksoftirqd/00
8568991914,3cyclictest889-21expr0
8568991914,3cyclictest31862-21aten2.4-expect0
8568991914,3cyclictest30844-21ls0
8568991914,3cyclictest28021-21expr0
8568991914,3cyclictest25221-21seq0
8568991914,3cyclictest17148-21cat0
8568991914,3cyclictest15841-21sed0
8568991914,3cyclictest13390-21sed0
8568991914,3cyclictest13390-21sed0
8568991914,3cyclictest11086-21/usr/sbin/munin0
8568991913,4cyclictest5021-21seq0
8568991913,4cyclictest30449-21cut0
8568991913,3cyclictest15200-21aten2.4-expect0
8568991912,4cyclictest3887-21grep0
8568991912,4cyclictest24825-21cat0
8568991912,4cyclictest11316-21wc0
8568991912,4cyclictest11316-21wc0
856899191,16cyclictest31060-21latency_hist0
856899191,16cyclictest2094-21kworker/0:10
857999182,13cyclictest14518-21sh3
857999182,13cyclictest14518-21sh3
8579991814,2cyclictest13987-21aten2_r9power_c3
8579991813,3cyclictest8739-21if_err_enp2s03
8579991813,3cyclictest818-21cat3
8579991813,3cyclictest7008-21ls3
8579991813,3cyclictest29138-21sed3
8579991813,3cyclictest24877-21cat3
8579991813,3cyclictest24266-21readlink3
8579991813,3cyclictest22869-21grep3
8579991813,3cyclictest21501-21seq3
8579991813,3cyclictest1901-21if_enp3s03
8579991813,3cyclictest15531-21cat3
8579991813,2cyclictest12772-21timerandwakeup3
8579991812,4cyclictest28926-21expr3
8579991812,4cyclictest28692-21expr3
8579991812,4cyclictest17456-21gpgconf3
8579991812,4cyclictest15313-21expr3
8579991812,3cyclictest8218-21needreboot3
8579991812,3cyclictest27576-21timerwakeupswit3
8579991811,4cyclictest2973-21grep3
857699183,8cyclictest32442-21apt-get2
8576991813,3cyclictest9736-21expr2
8576991813,3cyclictest9736-21expr2
857699181,1cyclictest0-21swapper/22
8576991811,4cyclictest18472-21diskstats2
857699180,15cyclictest2684-21cron2
8570991814,2cyclictest9441-21/usr/sbin/munin1
8570991814,2cyclictest9441-21/usr/sbin/munin1
8570991814,2cyclictest31445-21aten2_r9power_v1
8570991814,2cyclictest27255-21/usr/sbin/munin1
8570991814,2cyclictest12818-21aten2_r9power_p1
8570991814,2cyclictest12818-21aten2_r9power_p1
8570991814,2cyclictest11720-21aten2.4-expect1
8570991813,3cyclictest8542-21sh1
8570991813,3cyclictest548-21grep1
8570991813,3cyclictest546-21sh1
8570991813,3cyclictest30478-21hostname1
8570991813,3cyclictest25619-21/usr/sbin/munin1
8570991813,3cyclictest25619-21/usr/sbin/munin1
8570991813,3cyclictest14444-21grep1
8570991813,3cyclictest12967-21seq1
8570991812,4cyclictest21607-21seq1
8570991812,4cyclictest19260-21expr1
8570991812,4cyclictest13545-21hostname1
857099180,16cyclictest0-21swapper/11
856899187,9cyclictest9-21ksoftirqd/00
856899187,10cyclictest9-21ksoftirqd/00
856899185,11cyclictest9-21ksoftirqd/00
856899182,12cyclictest26953-21tail0
856899182,12cyclictest26953-21tail0
8568991816,1cyclictest0-21swapper/00
8568991816,1cyclictest0-21swapper/00
8568991814,2cyclictest22205-21/usr/sbin/munin0
8568991814,2cyclictest21708-21latency_hist0
8568991814,2cyclictest2000-21/usr/sbin/munin0
8568991813,3cyclictest665-21runrttasks0
8568991813,3cyclictest665-21runrttasks0
8568991813,3cyclictest665-21runrttasks0
8568991813,3cyclictest5255-21wc0
8568991813,3cyclictest31831-21grep0
8568991813,3cyclictest13148-21hostname0
8568991812,4cyclictest6326-21tr0
8568991812,4cyclictest24881-21seq0
8568991812,4cyclictest22279-21cut0
8568991812,4cyclictest12636-21cat0
8568991812,3cyclictest20101-21grep0
8568991811,4cyclictest15913-21cat0
181322180,2sleep00-21swapper/00
8579991713,2cyclictest18460-21df3
8579991713,2cyclictest13522-21apt-get3
8579991712,3cyclictest3755-21needreboot3
8579991712,3cyclictest32167-21sh3
8579991712,3cyclictest30904-21ls3
8579991712,3cyclictest2203-21grep3
8576991713,2cyclictest9373-21cut2
8576991712,3cyclictest13965-21latency_hist2
857099174,7cyclictest7416-21apt-get1
8570991713,2cyclictest7126-21aten2_r9power_v1
8570991712,3cyclictest28956-21if_enp3s01
8570991712,3cyclictest18174-21gzip1
8570991712,3cyclictest15858-21expr1
8570991712,2cyclictest148612chrt1
856899172,9cyclictest32442-21apt-get0
8568991715,1cyclictest0-21swapper/00
8568991712,3cyclictest9116-21forks0
8568991711,3cyclictest10185-21cut0
8568991710,4cyclictest7415-21apt0
8579991612,2cyclictest21158-21/usr/sbin/munin3
857999160,1cyclictest0-21swapper/33
857999160,15cyclictest0-21swapper/33
8570991610,3cyclictest12489-21uptime1
856899165,9cyclictest9-21ksoftirqd/00
8568991614,1cyclictest0-21swapper/00
8568991611,3cyclictest19751-21ls0
8576991510,3cyclictest14223-21cpuspeed_turbos2
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional