You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 05:04
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Mon Dec 29, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
277432296213,65sleep30-21swapper/33
267272257171,28sleep20-21swapper/22
280812250217,22sleep00-21swapper/00
279982241207,21sleep10-21swapper/11
3146221640,2sleep32840099cyclictest3
125832610,4sleep12839299cyclictest1
307112540,3sleep32840099cyclictest3
270692540,2sleep00-21swapper/00
164602450,1sleep10-21swapper/11
28392993512,4cyclictest517-21dbus-daemon1
28392993413,3cyclictest26926-21if_enp3s01
313482330,2sleep00-21swapper/00
28392993314,2cyclictest13719-21/usr/sbin/munin1
67492300,7sleep3351ksoftirqd/33
2839299292,7cyclictest4930-21apt-get1
28392992912,4cyclictest9864-21interrupts1
2840099277,17cyclictest0-21swapper/33
28396992613,3cyclictest5675-21cut2
2840099255,18cyclictest515-21avahi-daemon3
2840099255,17cyclictest0-21swapper/33
2840099254,18cyclictest27975-21sendmail-mta3
2840099253,19cyclictest11004-21cron3
2839699250,23cyclictest19281-21kworker/2:22
43272240,3sleep10-21swapper/11
2840099244,17cyclictest0-21swapper/33
2840099242,19cyclictest0-21swapper/33
2840099234,2cyclictest0-21swapper/33
2840099234,17cyclictest27345-21sendmail-mta3
2840099233,18cyclictest3115-21sendmail-mta3
2840099233,18cyclictest13143-21latency_hist3
2840099232,3cyclictest0-21swapper/33
28400992317,4cyclictest20939-21perf3
2840099231,4cyclictest518-21in:imuxsock3
2840099231,4cyclictest28055-1kworker/3:0H3
2840099231,4cyclictest13472-21munin-run3
28400992313,1cyclictest0-21swapper/33
2839699233,18cyclictest23333-21sh2
2839699230,14cyclictest96562/usr/sbin/munin2
241582230,2sleep30-21swapper/33
199592230,3sleep10-21swapper/11
2840099226,14cyclictest0-21swapper/33
2840099223,17cyclictest19469-21sendmail-mta3
2840099223,17cyclictest12284-21sendmail-mta3
2840099222,3cyclictest0-21swapper/33
28400992215,4cyclictest25455-21perf3
2840099221,3cyclictest515-21avahi-daemon3
2840099221,3cyclictest2872-1kworker/3:2H3
2840099221,19cyclictest15393-21taskset3
2840099221,18cyclictest517-21dbus-daemon3
2840099220,19cyclictest17145-21munin-run3
2840099220,19cyclictest15398-1kworker/3:1H3
2839699229,11cyclictest11505-21cat2
28392992211,3cyclictest22967-21latency_hist1
96642210,2sleep00-21swapper/00
2840099218,12cyclictest35-21ksoftirqd/33
2840099216,13cyclictest662-21runrttasks3
2840099216,13cyclictest662-21runrttasks3
2840099211,4cyclictest11238-21cups-browsed3
2840099211,18cyclictest7916-21/usr/sbin/munin3
2840099211,18cyclictest15058-21taskset3
2840099211,17cyclictest340-21systemd-journal3
2840099211,17cyclictest28055-1kworker/3:0H3
28400992110,6cyclictest7608-21apt-get3
2840099210,19cyclictest5307-21munin-run3
2840099210,19cyclictest16283-21kworker/3:33
28396992116,3cyclictest12604-21open_files2
28396992115,4cyclictest9037-21seq2
28396992115,4cyclictest25402-21perf2
28396992114,4cyclictest28980-21df_inode2
28396992114,4cyclictest28980-21df_inode2
28396992114,4cyclictest1597-21sed2
2839699211,17cyclictest31419-21unixbench_singl2
2839299211,18cyclictest2620-21turbostat.cron1
28390992118,2cyclictest0-21swapper/00
28390992116,3cyclictest517-21dbus-daemon0
28390992116,3cyclictest3456-21sort0
28390992113,5cyclictest14039-21latency0
158092210,3sleep10-21swapper/11
28400992015,3cyclictest25002-21munin-run3
28400992015,3cyclictest17603-21aten2_r9power_v3
28400992015,3cyclictest16847-21vmstat3
28400992014,4cyclictest1715-21hostname3
28400992014,4cyclictest16366-21cat3
2840099201,17cyclictest2909-21cat3
2840099201,17cyclictest26041-21cat3
2840099200,3cyclictest566-21polkitd3
2840099200,3cyclictest31847-21perf3
2840099200,3cyclictest28055-1kworker/3:0H3
2839699202,15cyclictest18315-21sort2
28396992017,2cyclictest0-21swapper/22
28396992015,3cyclictest637-21timerwakeupswit2
28396992015,3cyclictest30234-21entropy2
28396992015,3cyclictest19642-21sed2
28396992015,3cyclictest15103-21ls2
28396992014,4cyclictest27807-21seq2
28396992014,4cyclictest25874-21ls2
28396992014,4cyclictest15111-21seq2
28396992014,4cyclictest11820-21sort2
28396992013,5cyclictest517-21dbus-daemon2
28392992014,4cyclictest517-21dbus-daemon1
28392992014,4cyclictest18074-21cat1
28392992013,4cyclictest1287-21sendmail-mta1
28390992018,1cyclictest0-21swapper/00
28390992017,2cyclictest0-21swapper/00
28390992015,3cyclictest340-21systemd-journal0
28390992015,3cyclictest22050-21ntp_offset0
28390992015,3cyclictest20767-21sendmail-mta0
28390992015,3cyclictest11722-21cut0
28390992014,4cyclictest9264-21cut0
28390992014,4cyclictest634-21snmpd0
28390992014,4cyclictest3760-21sed0
28400991917,1cyclictest0-21swapper/33
28400991916,2cyclictest0-21swapper/33
28400991914,3cyclictest4688-21idleruntime-cro3
28400991914,3cyclictest31831-21awk3
28400991913,4cyclictest19186-21munin-run3
28400991913,4cyclictest14650-21sed3
2840099191,17cyclictest571-21gdbus3
2840099191,17cyclictest0-21swapper/33
2840099191,16cyclictest0-21swapper/33
2840099190,17cyclictest10370-21latency_hist3
28396991917,1cyclictest0-21swapper/22
28396991917,1cyclictest0-21swapper/22
28396991916,2cyclictest0-21swapper/22
28396991916,2cyclictest0-21swapper/22
28396991914,3cyclictest31934-21load2
28396991914,3cyclictest3183-21aten2_r9power_p2
28396991914,3cyclictest28566-21ntp_kernel_pll_2
28396991914,3cyclictest27929-21cpuspeed2
28396991914,3cyclictest27010-21grep2
28396991914,3cyclictest26368-21switchtime2
28396991914,3cyclictest24142-21expr2
28396991914,3cyclictest2111-21kernelversion2
28396991914,3cyclictest20642-21expr2
28396991914,3cyclictest19508-21aten2_r9power_c2
28396991914,3cyclictest19327-21ls2
28396991914,3cyclictest15581-21cpu2
28396991913,4cyclictest7683-21cat2
28396991913,4cyclictest6655-21seq2
28396991913,4cyclictest517-21dbus-daemon2
28396991913,4cyclictest2942-21date2
28396991913,4cyclictest27352-21kworker/u8:12
28396991912,5cyclictest517-21dbus-daemon2
2839699190,17cyclictest1071-21load2
2839299192,14cyclictest11468-21ls1
28392991915,2cyclictest517-21dbus-daemon1
28392991914,3cyclictest4562-21rt-features1
28392991914,3cyclictest32739-21/usr/sbin/munin1
28392991914,3cyclictest30037-21/usr/sbin/munin1
28392991914,3cyclictest29816-21hostname1
28392991914,3cyclictest26305-21sed1
28392991914,3cyclictest21573-21/usr/sbin/munin1
28392991914,3cyclictest17814-21/usr/sbin/munin1
28392991914,3cyclictest12886-21seq1
28392991913,4cyclictest6947-21basename1
28392991913,4cyclictest6281-21cron1
28392991913,4cyclictest32491-21cut1
28392991913,4cyclictest13744-21sh1
28392991912,4cyclictest25228-21sendmail-mta1
28392991911,6cyclictest25674-21cat1
2839299191,16cyclictest23714-21sh1
2839099192,15cyclictest18581-21grep0
28390991917,1cyclictest0-21swapper/00
28390991915,3cyclictest9-21ksoftirqd/00
28390991915,2cyclictest30506-21munin-node0
28390991914,3cyclictest634-21snmpd0
28390991914,3cyclictest17814-21/usr/sbin/munin0
28390991914,3cyclictest16248-21ntp_states0
28390991914,3cyclictest13392-21/usr/sbin/munin0
28390991914,3cyclictest12671-21/usr/sbin/munin0
28390991914,3cyclictest11366-21cat0
28390991913,4cyclictest8349-21idleruntime-cro0
28390991913,4cyclictest7664-21expr0
28390991913,4cyclictest31286-21sed0
28390991913,4cyclictest25228-21sendmail-mta0
28390991913,4cyclictest20392-21awk0
28390991913,4cyclictest11868-21cat0
28390991913,4cyclictest11061-21expr0
2839099191,2cyclictest0-21swapper/00
2840099186,10cyclictest14494-21basename3
28400991814,2cyclictest17162-21aten2_r9power_v3
28400991813,3cyclictest22490-21pmu-power3
28396991816,1cyclictest0-21swapper/22
28396991816,1cyclictest0-21swapper/22
28396991815,2cyclictest13311-21/usr/sbin/munin2
28396991814,2cyclictest29973-21if_enp3s02
28396991814,2cyclictest29056-21expr2
28396991813,3cyclictest4749-21cat2
28396991813,3cyclictest3385-21expr2
28396991813,3cyclictest31850-21ls2
28396991813,3cyclictest26190-21ls2
28396991813,3cyclictest2597-21ntpq2
28396991813,3cyclictest24099-21ntpq2
28396991813,3cyclictest10458-21sed2
28396991813,3cyclictest10380-21threads2
28396991812,4cyclictest517-21dbus-daemon2
28396991812,4cyclictest517-21dbus-daemon2
28396991812,4cyclictest517-21dbus-daemon2
28396991810,6cyclictest517-21dbus-daemon2
2839299182,14cyclictest9050-21head1
28392991814,3cyclictest497-21cron1
28392991814,2cyclictest1444-21/usr/sbin/munin1
28392991814,2cyclictest13392-21/usr/sbin/munin1
28392991813,3cyclictest9334-21cat1
28392991813,3cyclictest7958-21expr1
28392991813,3cyclictest6677-21sed1
28392991813,3cyclictest31382-21date1
28392991813,3cyclictest30714-21/usr/sbin/munin1
28392991813,3cyclictest29567-21sort1
28392991813,3cyclictest25852-21cat1
28392991813,3cyclictest25699-21/usr/sbin/munin1
28392991813,3cyclictest20974-21ls1
28392991813,3cyclictest19255-21latency_hist1
28392991813,3cyclictest1684-21/usr/sbin/munin1
28392991813,3cyclictest12894-21cat1
28392991813,3cyclictest11781-21cat1
28392991813,3cyclictest11361-21/usr/sbin/munin1
28392991812,4cyclictest29715-21cut1
28392991812,4cyclictest29343-21sendmail-mta1
28392991812,4cyclictest16994-21sendmail-mta1
28392991812,3cyclictest29080-21grep1
28392991812,3cyclictest29080-21grep1
28392991811,5cyclictest517-21dbus-daemon1
28392991811,4cyclictest517-21dbus-daemon1
28392991811,4cyclictest23913-21cat1
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991816,1cyclictest0-21swapper/00
28390991814,2cyclictest8578-21/usr/sbin/munin0
28390991813,3cyclictest7587-21/usr/sbin/munin0
28390991813,3cyclictest6362-21sed0
28390991813,3cyclictest5568-21uname0
28390991813,3cyclictest5418-21expr0
28390991813,3cyclictest3220-21seq0
28390991813,3cyclictest31909-21expr0
28390991813,3cyclictest29209-21cat0
28390991813,3cyclictest24013-21aten2_r9power_e0
28390991813,3cyclictest23843-21cat0
28390991813,3cyclictest22838-21open_inodes0
28390991813,3cyclictest19961-21aten2_r9power_p0
28390991812,4cyclictest29346-21sed0
28390991812,4cyclictest29346-21sed0
28390991812,4cyclictest25665-21expr0
28390991811,5cyclictest22788-21sed0
2839099180,8cyclictest29187-21grep0
28400991712,3cyclictest20276-21cat3
28396991712,3cyclictest427-21sed2
28396991712,3cyclictest21104-21cat2
28396991712,3cyclictest19088-21ls2
28396991711,4cyclictest7846-21cat2
2839299172,10cyclictest21543-21apt-get1
28392991713,2cyclictest17237-21cpu1
28392991712,3cyclictest662-21runrttasks1
28392991712,3cyclictest3723-21awk1
28392991712,3cyclictest29136-21awk1
28392991712,3cyclictest27581-21ls1
28392991712,3cyclictest23967-21cat1
28392991712,3cyclictest19482-21/usr/sbin/munin1
28392991711,4cyclictest517-21dbus-daemon1
28390991713,2cyclictest15432-21/usr/sbin/munin0
28390991712,3cyclictest9474-21sh0
28390991712,3cyclictest26029-21cat0
28390991712,3cyclictest17764-21latency_hist0
28390991712,3cyclictest14849-21aten2.4-expect0
28390991711,4cyclictest495-21cat0
28390991611,3cyclictest27732-21/usr/sbin/munin0
2839099160,15cyclictest0-21swapper/00
28390991510,3cyclictest1034-21latency0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional