You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-25 - 05:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Thu Dec 25, 2025 00:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
260982262183,43sleep20-21swapper/22
260662257185,25sleep00-21swapper/00
259542254181,25sleep30-21swapper/33
258322253183,39sleep10-21swapper/11
2631599227222,3cyclictest28368-21munin-run3
2631099172167,3cyclictest28391-21awk2
2630799172165,4cyclictest28384-21perf1
1451221490,1sleep3341rcuc/33
2952921400,3sleep02630499cyclictest0
2630499118113,3cyclictest28375-21apt-get0
297642490,2sleep121-21ksoftirqd/11
6072450,2sleep30-21swapper/33
173032440,2sleep20-21swapper/22
256352410,1sleep30-21swapper/33
105692400,1sleep00-21swapper/00
2631599324,2cyclictest111rcu_preempt3
2631599288,18cyclictest0-21swapper/33
26315992810,16cyclictest35-21ksoftirqd/33
2630799289,17cyclictest31263-21tr1
2631599277,2cyclictest0-21swapper/33
2631599277,17cyclictest0-21swapper/33
2631599276,18cyclictest340-21systemd-journal3
2631599265,19cyclictest515-21avahi-daemon3
26315992622,2cyclictest340-21systemd-journal3
26315992512,11cyclictest35-21ksoftirqd/33
211452250,1sleep00-21swapper/00
2631599246,15cyclictest20878-21rm3
2631599246,15cyclictest20878-21rm3
2631599244,18cyclictest7736-21sendmail-mta3
2631599244,18cyclictest35-21ksoftirqd/33
2631599244,17cyclictest14116-21sendmail-mta3
2631599243,18cyclictest340-21systemd-journal3
2631599243,18cyclictest340-21systemd-journal3
2631599243,18cyclictest23794-21sendmail-mta3
2631599242,2cyclictest111rcu_preempt3
2631599241,20cyclictest515-21avahi-daemon3
2631599235,16cyclictest32587-21sendmail-mta3
2631599234,4cyclictest35-21ksoftirqd/33
2631599234,17cyclictest31968-21sendmail-mta3
2631599234,17cyclictest3080-21sendmail-mta3
2631599234,17cyclictest13788-21cat3
2631599233,18cyclictest28096-21sendmail-mta3
2631599233,18cyclictest19710-21sendmail-mta3
2631599233,17cyclictest29898-21sendmail-mta3
2631599233,17cyclictest24111-21sendmail-mta3
2631599232,18cyclictest0-21swapper/33
2631599232,18cyclictest0-21swapper/33
2631599231,4cyclictest5317-1kworker/3:0H3
2631599231,4cyclictest340-21systemd-journal3
26315992312,3cyclictest35-21ksoftirqd/33
2631599231,20cyclictest571-21gdbus3
2631599231,19cyclictest12489-21ntp_states3
2631599231,19cyclictest12234-21munin-run3
2631599231,14cyclictest0-21swapper/33
2631599225,3cyclictest35-21ksoftirqd/33
2631599223,18cyclictest25126-21awk3
2631599223,17cyclictest18523-21sendmail-mta3
2631599222,3cyclictest0-21swapper/33
2631599222,18cyclictest0-21swapper/33
2631599221,5cyclictest340-21systemd-journal3
2631599221,3cyclictest17796-21munin-run3
26315992212,3cyclictest35-21ksoftirqd/33
2631099221,5cyclictest25816-21sendmail-mta2
2631099221,17cyclictest1963-21/usr/sbin/munin2
26307992214,5cyclictest340-21systemd-journal1
2630799220,5cyclictest0-21swapper/11
2631599214,10cyclictest111rcu_preempt3
2631599212,17cyclictest30698-21latency_hist3
2631599212,16cyclictest31066-21date3
2631599211,3cyclictest5317-1kworker/3:0H3
2631599211,3cyclictest35-21ksoftirqd/33
26315992112,3cyclictest35-21ksoftirqd/33
2631599211,17cyclictest31794-21apt-get3
2631599211,17cyclictest19820-21turbostat3
2631599210,3cyclictest23620-1kworker/3:2H3
2631599210,3cyclictest23620-1kworker/3:2H3
2631099218,10cyclictest27900-21sendmail-mta2
26310992116,3cyclictest4820-21sed2
26310992116,3cyclictest4820-21sed2
26310992116,3cyclictest24155-21nfs4_client2
26310992115,4cyclictest12507-21open_inodes2
2630799212,12cyclictest634-21snmpd1
26307992116,3cyclictest29732-21sed1
2630799211,5cyclictest518-21in:imuxsock1
26307992115,4cyclictest7451-21ls1
26307992115,4cyclictest29397-21seq1
26307992115,4cyclictest16424-21df_inode1
2630799211,4cyclictest571-21gdbus1
26304992114,4cyclictest645-21seq0
2630499210,5cyclictest0-21swapper/00
105632210,4sleep22631099cyclictest2
26315992014,4cyclictest21168-21load3
2631599200,3cyclictest9623-21/usr/sbin/munin3
2631099203,14cyclictest26010-21systemctl2
26310992014,4cyclictest11310-21ntpq2
26310992013,4cyclictest28690-21df2
26310992011,7cyclictest662-21runrttasks2
26310992010,8cyclictest19535-21kworker/u8:22
2631099200,17cyclictest30868-21cut2
26307992015,3cyclictest12483-21ntp_states1
26307992015,3cyclictest1057-21/usr/sbin/munin1
26307992014,4cyclictest3947-21cat1
26307992014,4cyclictest3256-21perf1
26307992014,4cyclictest29585-21unixbench_multi1
26307992013,4cyclictest5991-21grep1
26307992013,4cyclictest14510-21cut1
26307992011,6cyclictest517-21dbus-daemon1
26304992017,2cyclictest26297-21cyclictest0
26304992015,3cyclictest634-21snmpd0
26304992015,3cyclictest634-21snmpd0
26304992015,3cyclictest6095-21/usr/sbin/munin0
26304992015,3cyclictest16310-21apt-get0
26304992014,4cyclictest32078-21sh0
26304992014,4cyclictest22114-21apt0
26304992014,4cyclictest1163-21sed0
26315991916,2cyclictest0-21swapper/33
26315991916,2cyclictest0-21swapper/33
26315991916,2cyclictest0-21swapper/33
2631599191,5cyclictest1719-21cron3
26315991914,3cyclictest4455-21cat3
26315991914,3cyclictest35-21ksoftirqd/33
2631599190,17cyclictest7006-21lockfile-remove3
2631099197,3cyclictest517-21dbus-daemon2
26310991916,2cyclictest0-21swapper/22
26310991915,2cyclictest31253-21cut2
26310991915,2cyclictest23111-21interrupts2
26310991914,3cyclictest6371-21cut2
26310991914,3cyclictest30002-21seq2
26310991914,3cyclictest29444-21expr2
26310991914,3cyclictest27136-21open_inodes2
26310991914,3cyclictest26067-21ls2
26310991914,3cyclictest25829-21unixbench_multi2
26310991914,3cyclictest24043-21cut2
26310991914,3cyclictest21910-21interrupts2
26310991914,3cyclictest20684-21cat2
26310991914,3cyclictest19378-21head2
26310991914,3cyclictest19378-21head2
26310991914,3cyclictest17734-21ntpq2
26310991914,3cyclictest1466-21open_inodes2
26310991913,4cyclictest9342-21sh2
26310991913,4cyclictest517-21dbus-daemon2
26310991913,4cyclictest3315-21cpuspeed2
26310991913,4cyclictest30852-21cat2
26310991913,4cyclictest22027-21cat2
26310991913,4cyclictest18266-21sort2
26310991913,4cyclictest1660-21cat2
26310991913,4cyclictest15550-21seq2
26310991913,4cyclictest11829-21sendmail-mta2
2631099190,16cyclictest11871-21cut2
2630799192,11cyclictest634-21snmpd1
26307991915,2cyclictest634-21snmpd1
26307991915,2cyclictest21032sleep11
26307991914,3cyclictest9231-21awk1
26307991914,3cyclictest634-21snmpd1
26307991914,3cyclictest634-21snmpd1
26307991914,3cyclictest4923-21seq1
26307991914,3cyclictest4923-21seq1
26307991914,3cyclictest31891-21df1
26307991914,3cyclictest29784-21seq1
26307991914,3cyclictest26136-21seq1
26307991914,3cyclictest23300-21/usr/sbin/munin1
26307991914,3cyclictest17800-21idleruntime-cro1
26307991913,4cyclictest8865-21cut1
26307991913,4cyclictest5267-21cat1
26307991913,4cyclictest5267-21cat1
26307991913,4cyclictest28888-21cat1
26307991913,4cyclictest21801-21seq1
26307991912,4cyclictest517-21dbus-daemon1
26307991911,5cyclictest24858-21wc1
2630799191,10cyclictest0-21swapper/11
2630799190,17cyclictest31623-21grep1
2630499194,5cyclictest1-21systemd0
26304991916,2cyclictest0-21swapper/00
26304991916,2cyclictest0-21swapper/00
26304991916,2cyclictest0-21swapper/00
26304991916,2cyclictest0-21swapper/00
26304991915,3cyclictest9-21ksoftirqd/00
26304991915,2cyclictest26254-21/usr/sbin/munin0
26304991915,2cyclictest0-21swapper/00
26304991914,3cyclictest7038-21ps0
26304991914,3cyclictest634-21snmpd0
26304991914,3cyclictest29338-21expr0
26304991914,3cyclictest26354-21proc_pri0
26304991914,3cyclictest25861-21seq0
26304991914,3cyclictest24163-21/usr/sbin/munin0
26304991914,3cyclictest22893-21sh0
26304991914,3cyclictest20117-21apt-get0
26304991914,3cyclictest16247-21ls0
26304991914,2cyclictest27514-21sendmail_mailst0
26304991913,4cyclictest9920-21expr0
26304991913,4cyclictest30178-21cut0
26304991913,4cyclictest13386-21sh0
26304991913,4cyclictest1057-21/usr/sbin/munin0
26304991912,4cyclictest21482-21cpuspeed0
2630499191,15cyclictest6885-21sed0
2630499190,3cyclictest517-21dbus-daemon0
2630499190,3cyclictest30789-21/usr/sbin/munin0
2631599182,2cyclictest35-21ksoftirqd/33
2631099189,7cyclictest14006-21aten2_r9power_e2
26310991816,1cyclictest0-21swapper/22
26310991816,1cyclictest0-21swapper/22
26310991813,3cyclictest7244-21aten2_r9power_c2
26310991813,3cyclictest699-21cat2
26310991813,3cyclictest6051-21ntp_offset2
26310991813,3cyclictest5850-21sed2
26310991813,3cyclictest5850-21sed2
26310991813,3cyclictest31873-21cat2
26310991813,3cyclictest28281-21if_enp2s02
26310991813,3cyclictest2719-21seq2
26310991813,3cyclictest22229-21aten2_r9power_v2
26310991813,3cyclictest21466-21rt-features2
26310991813,3cyclictest19475-21swap2
26310991813,3cyclictest15729-21open_files2
26310991813,3cyclictest12201-21date2
26310991813,3cyclictest12170-21cpuspeed_turbos2
26310991812,4cyclictest30434-21cut2
26310991812,4cyclictest12919-21diskstats2
2631099180,16cyclictest6543-21entropy2
26307991814,2cyclictest6095-21/usr/sbin/munin1
26307991814,2cyclictest10445-21/usr/sbin/munin1
26307991813,3cyclictest3632-21sed1
26307991813,3cyclictest32339-21/usr/sbin/munin1
26307991813,3cyclictest30649-21grep1
26307991813,3cyclictest14808-21/usr/sbin/munin1
26307991812,4cyclictest571-21gdbus1
26307991812,4cyclictest517-21dbus-daemon1
2630799181,15cyclictest15737-21run-parts1
26307991811,4cyclictest517-21dbus-daemon1
26307991810,5cyclictest6963-21sh1
2630799180,16cyclictest0-21swapper/11
2630799180,16cyclictest0-21swapper/11
2630799180,16cyclictest0-21swapper/11
26304991816,1cyclictest0-21swapper/00
26304991816,1cyclictest0-21swapper/00
26304991814,2cyclictest23300-21/usr/sbin/munin0
26304991814,2cyclictest18465-21aten2.4-expect0
26304991814,2cyclictest12512-21aten2_r9power_c0
26304991814,2cyclictest10189-21/usr/sbin/munin0
26304991813,3cyclictest9668-21seq0
26304991813,3cyclictest5610-21cat0
26304991813,3cyclictest31842-21sh0
26304991813,3cyclictest28606-21ntp_states0
26304991813,3cyclictest18015-21cat0
26304991813,3cyclictest17315-21sh0
26304991813,3cyclictest15205-21expr0
26304991813,3cyclictest12376-21diskstats0
26304991813,3cyclictest11919-21seq0
26304991813,3cyclictest1187-21timerwakeupswit0
26304991812,4cyclictest517-21dbus-daemon0
26304991812,4cyclictest517-21dbus-daemon0
26304991812,4cyclictest3848-21cat0
26310991715,1cyclictest0-21swapper/22
26310991712,3cyclictest8386-21cat2
26310991712,3cyclictest27154-21expr2
26310991712,3cyclictest16292-21/usr/sbin/munin2
2630799177,9cyclictest520-21rs:main1
26307991715,1cyclictest0-21swapper/11
26307991714,2cyclictest0-21swapper/11
26307991713,2cyclictest24184-21/usr/sbin/munin1
26307991713,2cyclictest10189-21/usr/sbin/munin1
26307991712,3cyclictest4438-21expr1
26307991711,4cyclictest19650-21cat1
26307991711,4cyclictest19650-21cat1
26307991711,4cyclictest12824-21cat1
26304991715,1cyclictest0-21swapper/00
26304991715,1cyclictest0-21swapper/00
26304991713,2cyclictest19206-21ls0
26304991712,3cyclictest13975-21/usr/sbin/munin0
26304991711,4cyclictest4028-21awk0
26304991711,4cyclictest23514-21unixbench_singl0
26304991710,4cyclictest340-21systemd-journal0
2630499170,16cyclictest0-21swapper/00
26310991611,3cyclictest32379-21aten2_r9power_c2
26310991611,3cyclictest16209-21ls2
26307991614,1cyclictest0-21swapper/11
26307991612,2cyclictest26450-21/usr/sbin/munin1
26307991611,3cyclictest18018-21/usr/sbin/munin1
2630799160,1cyclictest0-21swapper/11
2630499169,4cyclictest15038-21switchtime0
2630499159,4cyclictest12483-21tr0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional