You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-07 - 18:56
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sun Dec 07, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
105172304265,26sleep00-21swapper/00
1085399282277,3cyclictest0-21swapper/11
103452279242,24sleep20-21swapper/22
103672247181,47sleep30-21swapper/33
106452241202,26sleep10-21swapper/11
1086099228224,3cyclictest0-21swapper/33
1084899206201,3cyclictest6497-21strings0
1085799204200,2cyclictest0-21swapper/22
1689821430,1sleep10-21swapper/11
857621400,4sleep01084899cyclictest0
180722500,1sleep00-21swapper/00
83462440,2sleep10-21swapper/11
40102420,1sleep00-21swapper/00
75802390,2sleep10-21swapper/11
1086099333,4cyclictest35-21ksoftirqd/33
1086099320,6cyclictest35-21ksoftirqd/33
10853993215,4cyclictest13106-21unixbench_multi1
1086099318,2cyclictest111rcu_preempt3
10853993116,2cyclictest27179-21timerwakeupswit1
10860992910,2cyclictest111rcu_preempt3
10860992910,2cyclictest111rcu_preempt3
1086099277,2cyclictest111rcu_preempt3
10860992722,2cyclictest341rcuc/33
1086099262,5cyclictest35-21ksoftirqd/33
1086099262,5cyclictest35-21ksoftirqd/33
1085799264,3cyclictest28-21ksoftirqd/22
1086099255,2cyclictest111rcu_preempt3
1085799255,3cyclictest28-21ksoftirqd/22
1085799251,2cyclictest20082-21munin-run2
1086099242,6cyclictest35-21ksoftirqd/33
10860992416,5cyclictest505-21dbus-daemon3
10860992412,3cyclictest35-21ksoftirqd/33
10860992412,3cyclictest35-21ksoftirqd/33
1085799247,2cyclictest111rcu_preempt2
10857992411,11cyclictest28-21ksoftirqd/22
10848992417,4cyclictest17456-21cron0
10848992417,4cyclictest17456-21cron0
1084899240,12cyclictest168352cat0
1084899240,12cyclictest168352cat0
1086099234,4cyclictest35-21ksoftirqd/33
10860992317,4cyclictest9061-21cut3
10860992311,3cyclictest35-21ksoftirqd/33
10860992311,3cyclictest35-21ksoftirqd/33
10860992310,3cyclictest35-21ksoftirqd/33
1085799234,17cyclictest17448-21cat2
1085799234,17cyclictest17448-21cat2
1085799234,16cyclictest0-21swapper/22
1085799231,3cyclictest29515-21munin-run2
10857992312,9cyclictest18993-21switchtime2
10857992310,10cyclictest14208-21expr2
10853992318,3cyclictest28203-21cron1
1086099227,2cyclictest111rcu_preempt3
1086099226,2cyclictest111rcu_preempt3
1086099221,9cyclictest0-21swapper/33
10860992216,4cyclictest312-21memory3
10860992215,4cyclictest35-21ksoftirqd/33
10860992214,4cyclictest35-21ksoftirqd/33
10860992211,3cyclictest35-21ksoftirqd/33
10860992211,3cyclictest35-21ksoftirqd/33
10860992210,3cyclictest35-21ksoftirqd/33
10860992210,3cyclictest35-21ksoftirqd/33
1085799229,2cyclictest27725-21idleruntime-cro2
1085799223,4cyclictest28-21ksoftirqd/22
1085799223,17cyclictest21511-21latency_hist2
1085799222,18cyclictest0-21swapper/22
10857992216,4cyclictest32614-21if_enp2s02
1085799221,3cyclictest32171-21munin-run2
1085799220,2cyclictest111rcu_preempt2
10848992218,2cyclictest9-21ksoftirqd/00
10848992217,3cyclictest31063-21if_enp2s00
10848992213,6cyclictest16031-21sendmail0
1086099219,2cyclictest35-21ksoftirqd/33
1086099219,2cyclictest35-21ksoftirqd/33
1086099217,2cyclictest111rcu_preempt3
1086099214,10cyclictest24015-21apt-get3
1086099213,9cyclictest0-21swapper/33
1086099212,9cyclictest0-21swapper/33
1086099212,2cyclictest35-21ksoftirqd/33
10860992115,4cyclictest6010-21sed3
10860992115,3cyclictest26378-21proc_pri3
10860992115,3cyclictest10376-21nfs4_client3
10860992114,4cyclictest17652-21cron3
1086099211,10cyclictest35-21ksoftirqd/33
1085799217,2cyclictest111rcu_preempt2
1085799217,2cyclictest111rcu_preempt2
1085799212,17cyclictest5184-21cat2
1085799212,17cyclictest27175-21cat2
1085799212,17cyclictest21729-21awk2
10857992116,3cyclictest746-21users2
10857992116,3cyclictest29763-21/usr/sbin/munin2
10857992115,4cyclictest25091-21wc2
1085799211,3cyclictest18081-21perf2
1085799211,3cyclictest10001-21munin-run2
10857992111,6cyclictest8137-21apt-get2
1085799210,4cyclictest9169-21taskset2
1085799210,18cyclictest12883-21munin-node2
10853992116,3cyclictest5429-21idleruntime-cro1
10853992116,3cyclictest5429-21idleruntime-cro1
10853992114,4cyclictest6282-21grep1
1084899211,6cyclictest7953-21apt0
10848992116,3cyclictest30373-21seq0
10848992115,4cyclictest9081-21head0
10848992115,4cyclictest17439-21seq0
10848992115,3cyclictest22833-21awk0
1084899210,13cyclictest111rcu_preempt0
20272200,17sleep22138-21/usr/sbin/munin2
1086099208,3cyclictest35-21ksoftirqd/33
1086099203,4cyclictest0-21swapper/33
1086099202,9cyclictest0-21swapper/33
1086099201,7cyclictest35-21ksoftirqd/33
1086099201,6cyclictest35-21ksoftirqd/33
1086099201,6cyclictest35-21ksoftirqd/33
1086099201,6cyclictest0-21swapper/33
1086099201,5cyclictest0-21swapper/33
1086099201,4cyclictest0-21swapper/33
10860992014,3cyclictest24418-21sed3
10860992014,3cyclictest1649-21aten2.4-expect3
1086099200,6cyclictest35-21ksoftirqd/33
1086099200,6cyclictest35-21ksoftirqd/33
1086099200,17cyclictest29325-21grep3
1085799208,2cyclictest111rcu_preempt2
1085799208,11cyclictest28-21ksoftirqd/22
1085799205,13cyclictest3890-21cron2
1085799203,3cyclictest111rcu_preempt2
1085799203,3cyclictest111rcu_preempt2
1085799203,2cyclictest111rcu_preempt2
1085799202,2cyclictest111rcu_preempt2
10857992016,3cyclictest28-21ksoftirqd/22
10857992016,2cyclictest4068-21sh2
10857992016,2cyclictest4068-21sh2
10857992015,3cyclictest7943-21munin-run2
10857992015,3cyclictest27503-21switchtime2
10857992015,3cyclictest13144-21pmu-power2
10857992015,3cyclictest11160-21proc_pri2
10857992014,4cyclictest30648-21cut2
10857992014,4cyclictest18089-21expr2
10857992014,4cyclictest17655-21awk2
1085799201,14cyclictest14236-21apt-get2
1085799200,2cyclictest111rcu_preempt2
10853992016,2cyclictest19494-21timerandwakeup1
10853992015,3cyclictest5807-21seq1
10853992015,3cyclictest5807-21seq1
10853992015,3cyclictest32025-21/usr/sbin/munin1
10853992015,3cyclictest29763-21/usr/sbin/munin1
10853992015,3cyclictest18706-21/usr/sbin/munin1
10853992015,3cyclictest10999-21/usr/sbin/munin1
10853992014,4cyclictest29983-21seq1
10853992014,4cyclictest21751-21/usr/sbin/munin1
10853992014,4cyclictest13181-21seq1
10853992014,3cyclictest21-21ksoftirqd/11
10853992014,3cyclictest21-21ksoftirqd/11
10853992012,5cyclictest3907-21sh1
1084899202,6cyclictest9-21ksoftirqd/00
10848992016,3cyclictest9-21ksoftirqd/00
10848992015,3cyclictest7359-21sed0
10848992015,3cyclictest5790-21seq0
10848992015,3cyclictest5364-21seq0
10848992015,3cyclictest5364-21seq0
10848992015,3cyclictest25308-21uptime0
10848992015,3cyclictest16260-21seq0
10848992015,3cyclictest14129-21seq0
10848992015,3cyclictest13680-21seq0
10848992015,3cyclictest11792-21/usr/sbin/munin0
10848992014,4cyclictest18154-21date0
10848992014,3cyclictest32445-21acpi0
1086099191,8cyclictest0-21swapper/33
1086099191,6cyclictest35-21ksoftirqd/33
1086099191,5cyclictest0-21swapper/33
1086099191,5cyclictest0-21swapper/33
1086099191,5cyclictest0-21swapper/33
1086099191,5cyclictest0-21swapper/33
10860991915,2cyclictest29763-21/usr/sbin/munin3
10860991913,4cyclictest2815-21sed3
10860991912,4cyclictest20858-21gltestperf3
10860991912,4cyclictest20858-21gltestperf3
1086099190,6cyclictest35-21ksoftirqd/33
1086099190,6cyclictest35-21ksoftirqd/33
1086099190,6cyclictest35-21ksoftirqd/33
1086099190,10cyclictest35-21ksoftirqd/33
1085799196,11cyclictest2082-21systemd-journal2
10857991915,2cyclictest11568-21/usr/sbin/munin2
10857991914,3cyclictest8093-21expr2
10857991914,3cyclictest28418-21fw_packets2
10857991914,3cyclictest27158-21cat2
10857991914,3cyclictest21634-21grep2
10857991914,3cyclictest21634-21grep2
10857991914,3cyclictest10503-21memory2
1085799191,3cyclictest28-21ksoftirqd/22
10857991913,4cyclictest2059-21awk2
1085799191,16cyclictest24148-21sendmail2
10857991911,5cyclictest22432-21grep2
10857991910,3cyclictest111rcu_preempt2
1085399193,13cyclictest3190-21awk1
10853991915,2cyclictest8213-21/usr/sbin/munin1
10853991915,2cyclictest30378-21/usr/sbin/munin1
10853991915,2cyclictest25402-21/usr/sbin/munin1
10853991915,2cyclictest23353-21/usr/sbin/munin1
10853991915,2cyclictest2024-21apt1
10853991915,2cyclictest16682-21/usr/sbin/munin1
10853991914,3cyclictest7255-21sed1
10853991914,3cyclictest665-21runrttasks1
10853991914,3cyclictest31980-21seq1
10853991914,3cyclictest30688-21sed1
10853991914,3cyclictest29861-21seq1
10853991914,3cyclictest22785-21df_inode1
10853991914,3cyclictest22051-21seq1
10853991914,3cyclictest22051-21seq1
10853991914,3cyclictest14644-21aten2_r9power_c1
10853991914,3cyclictest14576-21wc1
10853991914,3cyclictest14327-21aten2.4-expect1
10853991914,3cyclictest11211-21seq1
10853991913,4cyclictest9899-21expr1
10853991913,4cyclictest26194-21sed1
10853991913,4cyclictest25915-21seq1
10853991913,4cyclictest16290-21ls1
10853991913,4cyclictest11669-21seq1
10853991913,3cyclictest505-21dbus-daemon1
10853991912,5cyclictest18607-21cat1
10853991910,6cyclictest29534-21sendmail1
10848991914,3cyclictest5822-21seq0
10848991914,3cyclictest5822-21seq0
10848991914,3cyclictest31781-21/usr/sbin/munin0
10848991914,3cyclictest29467-21seq0
10848991914,3cyclictest28836-21expr0
10848991914,3cyclictest20258-21seq0
10848991914,3cyclictest18598-21sed0
10848991914,3cyclictest17028-21cat0
10848991914,3cyclictest10999-21/usr/sbin/munin0
10848991914,3cyclictest10450-21open_inodes0
10848991913,4cyclictest8277-21cat0
10848991913,4cyclictest4108-21sed0
10848991913,4cyclictest15400-21seq0
10848991913,4cyclictest14211-21cat0
10848991913,4cyclictest11697-21date0
10848991912,5cyclictest10534-21grep0
1084899190,6cyclictest7875-21dump-pmu-power0
10857991813,3cyclictest334-21expr2
10857991813,3cyclictest30198-21cut2
10857991813,3cyclictest22368-21expr2
1085799181,15cyclictest10038-21gltestperf2
1085799180,3cyclictest12118-21latency_hist2
10853991814,2cyclictest5198-21latency_hist1
10853991814,2cyclictest32436-21/usr/sbin/munin1
10853991814,2cyclictest15938-21cpuspeed_turbos1
10853991814,2cyclictest15938-21cpuspeed_turbos1
10853991814,2cyclictest13620-21/usr/sbin/munin1
10853991813,3cyclictest4131-21sh1
10853991813,3cyclictest32528-21/usr/sbin/munin1
10853991813,3cyclictest28686-21sed1
10853991813,3cyclictest1603-21/usr/sbin/munin1
10853991813,3cyclictest10948-21latency1
10853991812,4cyclictest9612-21grep1
10853991812,4cyclictest21888-21sed1
10853991812,4cyclictest14799-21grep1
10853991812,3cyclictest31791-21find1
1084899184,3cyclictest111rcu_preempt0
1084899182,4cyclictest111rcu_preempt0
10848991814,2cyclictest26517-21if_enp3s00
10848991814,2cyclictest23954-21if_enp3s00
10848991814,2cyclictest18305-21/usr/sbin/munin0
10848991813,3cyclictest665-21runrttasks0
10848991813,3cyclictest32119-21hostname0
10848991813,3cyclictest30368-21ls0
10848991813,3cyclictest26427-21/usr/sbin/munin0
10848991813,3cyclictest25808-21expr0
10848991813,3cyclictest25541-21seq0
10860991714,2cyclictest35-21ksoftirqd/33
10857991713,2cyclictest4833-21missed_timers2
1085399178,7cyclictest21083-21aten2_r9power_c1
10853991715,1cyclictest0-21swapper/11
10853991713,2cyclictest19730-21/usr/sbin/munin1
10853991713,2cyclictest12596-21/usr/sbin/munin1
10853991712,3cyclictest6162-21/usr/sbin/munin1
10853991712,3cyclictest25457-21seq1
10853991712,3cyclictest18116-21expr1
1084899172,3cyclictest111rcu_preempt0
10848991712,3cyclictest8600-21ntpq0
10848991712,3cyclictest30146-21cat0
10848991712,3cyclictest22455-21cut0
10848991712,3cyclictest22441-21cat0
10848991712,3cyclictest1618-21awk0
10848991712,3cyclictest14698-21awk0
10848991711,4cyclictest945-21ntpq0
10848991711,4cyclictest29670-21latency_hist0
10848991614,1cyclictest0-21swapper/00
10848991611,3cyclictest22107-21sh0
10848991611,3cyclictest22107-21sh0
10848991611,3cyclictest1814-21expr0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional