You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-19 - 21:05
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Fri Dec 19, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
240492405269,115sleep10-21swapper/11
250252274178,24sleep20-21swapper/22
250262249206,29sleep30-21swapper/33
252342230191,26sleep00-21swapper/00
2548899214207,4cyclictest26706-21ls0
2881721720,3sleep12549299cyclictest1
2549299169164,3cyclictest0-21swapper/11
2549399162155,4cyclictest0-21swapper/22
537721590,2sleep00-21swapper/00
2549499116109,4cyclictest26707-21sort3
270652510,2sleep335-21ksoftirqd/33
72542410,1sleep20-21swapper/22
279952300,4sleep02548899cyclictest0
221872290,2sleep20-21swapper/22
322552270,3sleep32549499cyclictest3
2549499257,16cyclictest0-21swapper/33
195212250,1sleep10-21swapper/11
2549499245,3cyclictest0-21swapper/33
2549499243,18cyclictest12220-21sendmail-mta3
2549499240,7cyclictest24772-1kworker/3:0H3
25492992415,7cyclictest5793-21gltestperf1
2548899241,20cyclictest31469-21cpuspeed_turbos0
2549499235,2cyclictest0-21swapper/33
2549499234,17cyclictest18545-21sendmail-mta3
2549499234,17cyclictest13331-21sendmail-mta3
25494992316,4cyclictest20779-21apt-get3
25494992310,11cyclictest662-21runrttasks3
2549499230,5cyclictest24772-1kworker/3:0H3
25488992316,4cyclictest340-21systemd-journal0
219882230,2sleep00-21swapper/00
219882230,2sleep00-21swapper/00
2549499224,16cyclictest8151-21sendmail-mta3
2549499224,16cyclictest35-21ksoftirqd/33
2549499224,16cyclictest28847-21sendmail-mta3
2549499224,16cyclictest26706-21sendmail-mta3
2549499223,17cyclictest9267-21sendmail-mta3
2549499223,17cyclictest6506-21sendmail-mta3
2549499223,17cyclictest31279-21sendmail-mta3
2549499223,17cyclictest30769-21sendmail-mta3
2549499223,17cyclictest29957-21sendmail-mta3
2549499223,17cyclictest22810-21sendmail-mta3
2549499223,17cyclictest22810-21sendmail-mta3
2549499223,17cyclictest22604-21sendmail-mta3
2549499223,17cyclictest21494-21sendmail-mta3
2549499223,17cyclictest17420-21sendmail-mta3
2549499223,17cyclictest14657-21sendmail-mta3
2549499221,19cyclictest24618-21munin-run3
2549499221,19cyclictest24618-21munin-run3
2549399222,17cyclictest26871-21idleruntime-cro2
25493992215,4cyclictest30540-21ntp_states2
25493992213,6cyclictest517-21dbus-daemon2
25488992218,3cyclictest21287-21kworker/u8:00
25488992216,3cyclictest24620-21uname0
2548899221,4cyclictest9-21ksoftirqd/00
66652210,2sleep10-21swapper/11
2549499213,17cyclictest7108-21awk3
2549499212,17cyclictest491-21latency_hist3
2549499212,17cyclictest3965-21sendmail-mta3
25494992116,3cyclictest340-21systemd-journal3
25494992116,3cyclictest31027-21munin-run3
25494992115,4cyclictest27295-21cpuspeed3
2549499211,4cyclictest515-21avahi-daemon3
2549499211,18cyclictest9667-21/usr/sbin/munin3
2549499211,17cyclictest30689-21apt-get3
2549499210,4cyclictest518-21in:imuxsock3
2549499210,4cyclictest24772-1kworker/3:0H3
2549499210,4cyclictest20928-21munin-run3
2549499210,19cyclictest30156-21awk3
2549399218,11cyclictest517-21dbus-daemon2
25493992115,4cyclictest25004-21sh2
25492992115,4cyclictest4560-21seq1
25492992115,4cyclictest28593-21seq1
2548899211,7cyclictest2074-21latency_hist0
25488992116,3cyclictest662-21runrttasks0
25488992115,4cyclictest1354-21turbostat.cron0
2549499208,11cyclictest35-21ksoftirqd/33
2549499208,11cyclictest35-21ksoftirqd/33
2549499207,11cyclictest0-21swapper/33
25494992017,2cyclictest0-21swapper/33
25494992015,3cyclictest9707-21threads3
25494992014,4cyclictest517-21dbus-daemon3
25494992014,4cyclictest15956-21cat3
2549499201,3cyclictest12799-21perf3
2549499200,5cyclictest0-21swapper/33
2549399206,12cyclictest517-21dbus-daemon2
25493992015,3cyclictest5460-21switchtime2
25493992015,3cyclictest4204-21unixbench_singl2
25493992015,3cyclictest31565-21ntpq2
25493992015,3cyclictest28648-21seq2
25493992013,5cyclictest517-21dbus-daemon2
25492992017,2cyclictest9652-21kworker/1:11
25492992015,3cyclictest4361-21/usr/sbin/munin1
25492992015,3cyclictest2782-21awk1
25492992015,3cyclictest24641-21seq1
25492992015,3cyclictest18384-21seq1
25492992015,3cyclictest16337-21seq1
25492992014,4cyclictest8939-21expr1
25492992014,4cyclictest634-21snmpd1
25492992014,4cyclictest2053-21seq1
25492992013,5cyclictest517-21dbus-daemon1
2549299200,19cyclictest0-21swapper/11
2548899209,9cyclictest18918-21cron0
25488992017,2cyclictest9-21ksoftirqd/00
25488992015,3cyclictest9-21ksoftirqd/00
25488992015,3cyclictest9-21ksoftirqd/00
25488992015,3cyclictest4016-21grep0
25488992015,3cyclictest21520-21missed_timers0
25488992015,3cyclictest19917-21sed0
25488992014,4cyclictest634-21snmpd0
25488992014,3cyclictest15516-21cut0
25488992013,5cyclictest517-21dbus-daemon0
115012200,1sleep00-21swapper/00
259522190,3sleep125957-21cut1
25494991915,2cyclictest13264-21irqstats3
25494991914,3cyclictest7283-21cat3
25494991914,3cyclictest14866-21sort3
25494991913,4cyclictest27193-21awk3
2549499191,17cyclictest0-21swapper/33
2549499190,17cyclictest4118-21latency_hist3
2549499190,17cyclictest32063-1kworker/3:2H3
2549499190,17cyclictest2727-21sendmail-mta3
2549399199,6cyclictest21191-21apt-get2
2549399199,6cyclictest21191-21apt-get2
2549399192,5cyclictest6406-21apt-get2
25493991914,3cyclictest8099-21timerandwakeup2
25493991914,3cyclictest5995-21sed2
25493991914,3cyclictest5564-21wc2
25493991914,3cyclictest32403-21sed2
25493991914,3cyclictest31718-21awk2
25493991914,3cyclictest31067-21sendmail2
25493991914,3cyclictest29489-21sed2
25493991914,3cyclictest10864-21wc2
25493991913,4cyclictest8310-21cut2
25493991913,4cyclictest11332-21sed2
25493991913,4cyclictest10820-21cat2
25493991913,3cyclictest340-21systemd-journal2
25493991912,4cyclictest517-21dbus-daemon2
25493991910,6cyclictest14454-21sendmail-mta2
2549399190,17cyclictest32489-21cut2
25492991916,2cyclictest0-21swapper/11
25492991915,2cyclictest22999-21/usr/sbin/munin1
25492991914,3cyclictest7355-21forks1
25492991914,3cyclictest32763-21seq1
25492991914,3cyclictest30996-21cat1
25492991914,3cyclictest21-21ksoftirqd/11
25492991914,3cyclictest2087-21perf1
25492991914,3cyclictest17810-21/usr/sbin/munin1
25492991914,3cyclictest13682-21ntp_kernel_pll_1
25492991914,3cyclictest13223-21seq1
25492991914,3cyclictest11550-21ls1
25492991914,3cyclictest10767-21dump-pmu-power1
25492991913,4cyclictest28082-21cron1
25492991913,4cyclictest21555-21cat1
25492991913,4cyclictest20722-21pluginstate1
25492991913,4cyclictest17891-21which1
25492991913,4cyclictest14798-21seq1
25492991912,4cyclictest24463-21sendmail-mta1
25492991912,4cyclictest24463-21sendmail-mta1
2548899198,2cyclictest111rcu_preempt0
25488991916,2cyclictest0-21swapper/00
25488991916,2cyclictest0-21swapper/00
25488991916,2cyclictest0-21swapper/00
25488991916,2cyclictest0-21swapper/00
25488991915,2cyclictest895-21/usr/sbin/munin0
25488991914,3cyclictest9-21ksoftirqd/00
25488991914,3cyclictest9-21ksoftirqd/00
25488991914,3cyclictest634-21snmpd0
25488991914,3cyclictest29237-21/usr/sbin/munin0
25488991914,3cyclictest15898-21sh0
25488991914,3cyclictest13775-21memory0
25488991913,4cyclictest6414-21cat0
25488991913,4cyclictest10833-21cat0
2548899191,2cyclictest111rcu_preempt0
25488991912,4cyclictest23973-21sort0
2548899190,17cyclictest11838-21gzip0
297252180,2sleep00-21swapper/00
25494991814,2cyclictest31950-21packagekitd3
25494991813,3cyclictest6405-21apt3
25494991813,3cyclictest4691-21cpuspeed3
25494991813,3cyclictest27588-21sh3
25494991812,4cyclictest4728-21date3
25494991812,4cyclictest23768-21basename3
2549499180,3cyclictest19903-21grep3
2549499180,16cyclictest0-21swapper/33
2549399182,5cyclictest815-21apt-get2
25493991814,2cyclictest15913-21aten2_r9power_v2
25493991814,2cyclictest14623-21ntp_states2
25493991813,3cyclictest9497-21grep2
25493991813,3cyclictest30128-21which2
25493991813,3cyclictest30110-21latency_hist2
25493991813,3cyclictest20428-21unixbench-2d2
25493991813,3cyclictest11535-21sed2
25493991812,4cyclictest517-21dbus-daemon2
25493991812,4cyclictest31178-21apt2
25493991812,4cyclictest2591-21cut2
25493991812,4cyclictest22965-21cut2
25493991812,4cyclictest22965-21cut2
25493991811,5cyclictest5463-21cat2
25493991811,5cyclictest517-21dbus-daemon2
25493991811,5cyclictest517-21dbus-daemon2
25492991814,2cyclictest4877-21/usr/sbin/munin1
25492991814,2cyclictest17103-21/usr/sbin/munin1
25492991813,3cyclictest8753-21/usr/sbin/munin1
25492991813,3cyclictest7631-21cat1
25492991813,3cyclictest29367-21aten2_r9power_v1
25492991813,3cyclictest2535-21seq1
25492991813,3cyclictest23947-21acpi1
25492991813,3cyclictest21971-21aten2_r9power_p1
25492991813,3cyclictest21971-21aten2_r9power_p1
25492991813,3cyclictest20483-21sed1
25492991813,3cyclictest16930-21cat1
25492991813,3cyclictest16518-21seq1
25492991813,3cyclictest15875-21cat1
25492991813,3cyclictest12886-21expr1
25492991813,3cyclictest10586-21/usr/sbin/munin1
25492991813,3cyclictest1028-21seq1
25492991812,4cyclictest517-21dbus-daemon1
25492991812,4cyclictest517-21dbus-daemon1
25492991812,4cyclictest32094-21cat1
25492991812,4cyclictest25085-21hostname1
25492991812,4cyclictest21191-21apt-get1
25492991812,4cyclictest21191-21apt-get1
25492991812,4cyclictest20763-21acpi1
25492991812,4cyclictest15670-21date1
25492991812,3cyclictest20361-21sed1
25492991810,5cyclictest2600-21grep1
2548899186,3cyclictest9-21ksoftirqd/00
2548899186,3cyclictest9-21ksoftirqd/00
25488991816,1cyclictest0-21swapper/00
25488991814,3cyclictest9-21ksoftirqd/00
25488991814,3cyclictest8545-21/usr/sbin/munin0
25488991814,2cyclictest26288-21/usr/sbin/munin0
25488991814,2cyclictest25055-21/usr/sbin/munin0
25488991813,3cyclictest8834-21sh0
25488991813,3cyclictest662-21runrttasks0
25488991813,3cyclictest662-21runrttasks0
25488991813,3cyclictest6145-21ntpq0
25488991813,3cyclictest56750irq/130-enp2s00
25488991813,3cyclictest30671-21/usr/sbin/munin0
25488991813,3cyclictest10992-21/usr/sbin/munin0
25488991812,4cyclictest517-21dbus-daemon0
25488991812,4cyclictest15326-21grep0
25494991712,3cyclictest15980-21pmu-power3
25493991715,1cyclictest0-21swapper/22
25493991715,1cyclictest0-21swapper/22
25493991713,2cyclictest27620-21munin-node2
25493991713,2cyclictest20145-21uptime2
25493991712,3cyclictest28367-21threads2
25493991712,3cyclictest26467-21missed_timers2
25493991712,3cyclictest20837-21date2
2549399171,1cyclictest0-21swapper/22
25493991711,4cyclictest28221-21sed2
2549399171,13cyclictest22410-21sed2
2549399171,13cyclictest22410-21sed2
25493991711,3cyclictest16802-21aten2.4-expect2
2549399170,2cyclictest292-21jbd2/mmcblk0p2-2
2549399170,15cyclictest0-21swapper/22
25492991713,2cyclictest29644-21/usr/sbin/munin1
25492991713,2cyclictest2944-21/usr/sbin/munin1
25492991713,2cyclictest27206-21/usr/sbin/munin1
25492991712,3cyclictest4919-21basename1
25488991715,1cyclictest0-21swapper/00
25488991714,2cyclictest18712-21ntp_states0
25488991713,2cyclictest9-21ksoftirqd/00
25488991713,2cyclictest14847-21/usr/sbin/munin0
25488991712,3cyclictest662-21runrttasks0
25488991712,3cyclictest29134-21/usr/sbin/munin0
25488991712,3cyclictest21361-21ls0
2548899171,15cyclictest0-21swapper/00
25488991711,4cyclictest21256-21grep0
2549399161,5cyclictest1111-21needreboot2
25493991614,1cyclictest0-21swapper/22
25493991612,2cyclictest23503-21gltestperf2
2549399161,13cyclictest18282-21tr2
25493991611,3cyclictest16638-21latency_hist2
2549399160,15cyclictest0-21swapper/22
25492991611,3cyclictest10981-21unixbench_multi1
25488991611,3cyclictest7181-21kernelversion0
2548899160,15cyclictest0-21swapper/00
25493991510,3cyclictest700-21expr2
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional