You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 17:58
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Mon Dec 29, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
174432271182,69sleep20-21swapper/22
181002263178,49sleep00-21swapper/00
181012261198,53sleep10-21swapper/11
178092236202,23sleep30-21swapper/33
2336821590,1sleep30-21swapper/33
200512500,2sleep20-21swapper/22
172042420,2sleep10-21swapper/11
186792370,2sleep10-21swapper/11
246832360,2sleep00-21swapper/00
260012260,1sleep30-21swapper/33
1831499260,24cyclictest4788-21sendmail-mta3
18311992621,3cyclictest517-21dbus-daemon2
1830299260,24cyclictest24221-21kworker/0:00
18314992516,3cyclictest35-21ksoftirqd/33
18314992514,2cyclictest1945-21sendmail-mta3
1831199259,4cyclictest28-21ksoftirqd/22
18311992517,5cyclictest27045-21sendmail2
18311992517,5cyclictest23827-21sh2
1830699258,2cyclictest111rcu_preempt1
18311992412,9cyclictest0-21swapper/22
18302992418,4cyclictest517-21dbus-daemon0
1830299241,21cyclictest14899-21kworker/0:20
1831499234,17cyclictest2912-21awk3
1831499231,4cyclictest27013-1kworker/3:1H3
1831499230,2cyclictest0-21swapper/33
18311992314,6cyclictest340-21systemd-journal2
18302992317,3cyclictest13407-21cron0
1831499224,16cyclictest19584-21sendmail-mta3
1831499224,16cyclictest10426-21latency_hist3
1831499223,17cyclictest8902-21sendmail-mta3
1831499223,17cyclictest8249-21sendmail-mta3
1831499223,17cyclictest6367-21awk3
1831499223,17cyclictest24834-21sendmail-mta3
1831499223,17cyclictest12338-21sendmail-mta3
1831499223,17cyclictest10791-21sendmail-mta3
1831499222,18cyclictest21921-21cat3
1831499221,3cyclictest340-21systemd-journal3
1831499221,3cyclictest26656-1kworker/3:1H3
1831499221,3cyclictest18135-1kworker/3:2H3
1831499221,3cyclictest18135-1kworker/3:2H3
1831499221,18cyclictest23971-21/usr/sbin/munin3
18311992213,6cyclictest4788-21sendmail-mta2
1830699227,3cyclictest145502ntp_states1
18306992216,3cyclictest20628-21seq1
1830299226,4cyclictest29828-21unixbench_multi0
18302992218,3cyclictest9-21ksoftirqd/00
1830299220,13cyclictest111rcu_preempt0
179252220,5sleep31831499cyclictest3
30532210,2sleep10-21swapper/11
1831499213,16cyclictest684-21sendmail-mta3
1831499212,17cyclictest16778-21cat3
18314992115,4cyclictest27714-21df_inode3
1831499211,18cyclictest32447-21/usr/sbin/munin3
1831499211,18cyclictest1948-21apt-get3
1831499211,17cyclictest1486-21/usr/sbin/munin3
1831499211,17cyclictest0-21swapper/33
1831499210,18cyclictest32307-21cron3
1831199216,4cyclictest517-21dbus-daemon2
1831199215,14cyclictest30128-21ls2
1831199211,7cyclictest30143-21ntp_kernel_pll_2
18311992110,6cyclictest0-21swapper/22
18306992116,3cyclictest8241-21turbostat.cron1
18306992116,3cyclictest25182-21/usr/sbin/munin1
18306992115,4cyclictest28037-21seq1
18306992115,4cyclictest10538-21/usr/sbin/munin1
1830699211,18cyclictest571-21gdbus1
1830699210,5cyclictest0-21swapper/11
1830299217,4cyclictest9-21ksoftirqd/00
18302992116,3cyclictest3008-21cat0
18302992115,4cyclictest742-21entropy0
18302992115,4cyclictest634-21snmpd0
18302992115,4cyclictest16792-21/usr/sbin/munin0
18302992114,5cyclictest517-21dbus-daemon0
18302992114,4cyclictest32536-21date0
18302992114,4cyclictest11440-21awk0
168972210,4sleep2271rcuc/22
267622200,2sleep121-21ksoftirqd/11
242672200,16sleep10-21swapper/11
1831499202,16cyclictest8973-21cat3
18314992015,3cyclictest619-21gltestperf3
18314992015,3cyclictest3266-21open_inodes3
18314992015,3cyclictest23376-21ls3
18314992014,4cyclictest22890-21seq3
1831499201,3cyclictest12331-21apt-get3
1831499201,17cyclictest30135-21perf3
1831499201,17cyclictest20938-21cat3
1831499201,17cyclictest20821-21latency_hist3
1831499201,17cyclictest13422-21munin-run3
1831499200,18cyclictest24547-21cpu3
1831499200,17cyclictest4055-21awk3
1831499200,17cyclictest23740-21forks3
1831199202,8cyclictest111rcu_preempt2
18311992015,3cyclictest27102-21sed2
18311992015,3cyclictest24064-21cat2
18311992014,4cyclictest19288-21awk2
18311992014,4cyclictest10529-21wc2
18311992014,3cyclictest6978-21sendmail2
18311992014,3cyclictest662-21runrttasks2
18311992014,3cyclictest31211-21sendmail2
18311992013,4cyclictest12106-21grep2
18311992012,5cyclictest10305-21ls2
1830699202,15cyclictest3202-21basename1
18306992016,2cyclictest27278-21/usr/sbin/munin1
18306992015,3cyclictest8151-21run-parts1
18306992015,3cyclictest6354-21grep1
18306992015,3cyclictest5210-21irqstats1
18306992015,3cyclictest25939-21sh1
18306992014,4cyclictest12800-21cut1
18306992014,4cyclictest12800-21cut1
18306992011,5cyclictest517-21dbus-daemon1
18306992010,6cyclictest517-21dbus-daemon1
1830699200,18cyclictest14509-21kworker/1:01
18302992015,3cyclictest32082-21if_err_enp2s00
18302992015,3cyclictest27240-21acpi0
18302992015,3cyclictest26305-21apt0
18302992015,3cyclictest22401-21cpuspeed0
18302992015,3cyclictest16075-21grep0
18302992014,4cyclictest4628-21seq0
18302992014,4cyclictest32395-21seq0
18302992014,4cyclictest25045-21seq0
18302992014,4cyclictest17284-21seq0
18302992014,4cyclictest10432-21cron0
18302992013,5cyclictest517-21dbus-daemon0
18302992013,5cyclictest517-21dbus-daemon0
18302992013,5cyclictest21697-21seq0
18302992013,4cyclictest28095-21sendmail-mta0
1831499195,12cyclictest21792-21taskset3
1831499194,13cyclictest517-21dbus-daemon3
18314991915,2cyclictest27490-21cpuspeed_turbos3
18314991914,3cyclictest14655-21processes3
18314991914,3cyclictest12534-21sendmail_mailst3
18314991913,4cyclictest27838-21seq3
18314991913,4cyclictest23104-21cut3
18314991913,4cyclictest17271-21vmstat3
18314991913,3cyclictest25171-21open_inodes3
1831499191,2cyclictest16424-21taskset3
1831499191,2cyclictest0-21swapper/33
18314991912,4cyclictest7172-21cat3
1831499190,17cyclictest11483-21cat3
1831199192,8cyclictest111rcu_preempt2
1831199192,11cyclictest23301-21chrt2
1831199191,5cyclictest0-21swapper/22
18311991914,3cyclictest5663-21cat2
18311991914,3cyclictest4304-21latency_hist2
18311991914,3cyclictest17804-21cron2
18311991913,4cyclictest29151-21ls2
18311991913,4cyclictest25021-21sed2
18311991913,4cyclictest17012-21threads2
18311991913,3cyclictest8549-21grep2
18311991913,3cyclictest4154-21xargs2
18311991913,3cyclictest10838-21cut2
18311991912,4cyclictest517-21dbus-daemon2
18311991912,4cyclictest32317-21sh2
1831199190,5cyclictest0-21swapper/22
1831199190,16cyclictest12112-21chrt2
18306991916,2cyclictest0-21swapper/11
18306991915,3cyclictest21-21ksoftirqd/11
18306991915,2cyclictest5036-21/usr/sbin/munin1
18306991915,2cyclictest16018-21/usr/sbin/munin1
18306991914,3cyclictest662-21runrttasks1
18306991914,3cyclictest6593-21/usr/sbin/munin1
18306991914,3cyclictest3768-21sed1
18306991914,3cyclictest31471-21/usr/sbin/munin1
18306991914,3cyclictest30662-21/usr/sbin/munin1
18306991914,3cyclictest21108-21/usr/sbin/munin1
18306991914,3cyclictest10586-21sed1
18306991914,3cyclictest10322-21basename1
18306991913,4cyclictest517-21dbus-daemon1
18306991913,4cyclictest2590-21sendmail-mta1
18306991913,4cyclictest10341-21sed1
18306991911,5cyclictest29970-21sendmail-mta1
1830299196,10cyclictest9-21ksoftirqd/00
18302991914,3cyclictest4386-21/usr/sbin/munin0
18302991914,3cyclictest28675-21cat0
18302991914,3cyclictest26844-21seq0
18302991914,3cyclictest22717-21seq0
18302991914,3cyclictest20603-21seq0
18302991914,3cyclictest17909-21/usr/sbin/munin0
18302991914,3cyclictest16018-21/usr/sbin/munin0
18302991914,3cyclictest14337-21seq0
18302991914,2cyclictest25414-21aten2_r9power_p0
18302991913,4cyclictest9589-21/usr/sbin/munin0
18302991913,4cyclictest8457-21cat0
18302991913,4cyclictest8147-21ntpq0
18302991913,4cyclictest517-21dbus-daemon0
18302991913,4cyclictest517-21dbus-daemon0
18302991913,4cyclictest29270-21/usr/sbin/munin0
18302991912,4cyclictest4647-21aten2_r9power_p0
18302991912,4cyclictest4207-21cat0
18302991911,6cyclictest23677-21sendmail-mta0
1830299190,18cyclictest3696-21kworker/0:00
18314991815,2cyclictest0-21swapper/33
18314991815,2cyclictest0-21swapper/33
18314991813,3cyclictest26314-21proc_pri3
18314991813,3cyclictest26260-21which3
18314991813,3cyclictest14015-21sed3
18314991812,4cyclictest5999-21awk3
1831499180,17cyclictest0-21swapper/33
1831199184,9cyclictest25342-21apt-get2
1831199182,10cyclictest662-21runrttasks2
1831199181,5cyclictest8404-21munin-run2
18311991815,2cyclictest0-21swapper/22
18311991814,2cyclictest14550-21ntp_states2
18311991814,2cyclictest13508-21/usr/sbin/munin2
18311991813,3cyclictest14897-21hostname2
1831199181,1cyclictest0-21swapper/22
18311991811,5cyclictest21128-21sort2
18311991811,4cyclictest18921-21aten2.4-expect2
18311991810,5cyclictest517-21dbus-daemon2
1831199180,5cyclictest6778-21cstates2
1831199180,17cyclictest0-21swapper/22
1831199180,16cyclictest0-21swapper/22
1831199180,16cyclictest0-21swapper/22
18306991816,1cyclictest0-21swapper/11
18306991814,2cyclictest24922-21sendmail1
18306991814,2cyclictest22023-21/usr/sbin/munin1
18306991814,2cyclictest19018-21/usr/sbin/munin1
18306991814,2cyclictest18451-21/usr/sbin/munin1
18306991814,2cyclictest18451-21/usr/sbin/munin1
18306991814,2cyclictest14758-21/usr/sbin/munin1
18306991813,3cyclictest517-21dbus-daemon1
18306991813,3cyclictest4161-21sendmail-mta1
18306991813,3cyclictest30160-21ntp_offset1
18306991813,3cyclictest21-21ksoftirqd/11
18306991813,3cyclictest19974-21/usr/sbin/munin1
18306991813,3cyclictest18939-21ntpq1
18306991813,3cyclictest16095-21wc1
18306991813,3cyclictest14054-21sed1
18306991813,3cyclictest10699-21/usr/sbin/munin1
18306991812,4cyclictest8143-21sh1
18306991812,4cyclictest14985-21cut1
18306991812,4cyclictest1152-21ntpq1
18306991811,4cyclictest24834-21sendmail-mta1
18306991810,5cyclictest11497-21apt-get1
1830699180,16cyclictest0-21swapper/11
18302991814,2cyclictest16967-21/usr/sbin/munin0
18302991813,3cyclictest7824-21cat0
18302991813,3cyclictest6802-21expr0
18302991813,3cyclictest31712-21expr0
18302991813,3cyclictest2626-21aten2_r9power_v0
18302991813,3cyclictest15461-21sh0
18302991813,3cyclictest12724-21/usr/sbin/munin0
18302991813,3cyclictest12724-21/usr/sbin/munin0
18302991813,3cyclictest11870-21ls0
18302991812,4cyclictest20115-21sendmail-mta0
18302991812,4cyclictest20115-21sendmail-mta0
18302991812,4cyclictest15689-21cat0
18302991812,4cyclictest10198-21seq0
18302991811,5cyclictest792-21cut0
18302991811,5cyclictest517-21dbus-daemon0
1830299180,16cyclictest0-21swapper/00
18314991712,3cyclictest30730-21vmstat3
18314991712,3cyclictest17431-21if_err_enp3s03
18314991711,4cyclictest31889-21if_enp3s03
1831199173,9cyclictest18469-21apt-get2
1831199173,9cyclictest18469-21apt-get2
1831199172,7cyclictest111rcu_preempt2
18311991714,1cyclictest0-21swapper/22
18311991712,3cyclictest31488-21apt2
18306991713,2cyclictest29311-21/usr/sbin/munin1
18306991713,2cyclictest17909-21/usr/sbin/munin1
18306991710,4cyclictest5039-21interrupts1
18306991710,4cyclictest31337-21cut1
18302991713,2cyclictest29311-21/usr/sbin/munin0
18302991711,4cyclictest1-21systemd0
18314991611,3cyclictest29185-21expr3
1831199169,5cyclictest651-21cron2
1831199169,5cyclictest13242-21gltestperf2
1831199169,5cyclictest13242-21gltestperf2
1831199164,3cyclictest111rcu_preempt2
18311991611,3cyclictest6410-21sed2
18311991611,3cyclictest26746-21expr2
18311991610,3cyclictest27582-21cstates2
1831199160,1cyclictest0-21swapper/22
18306991612,2cyclictest21222-21/usr/sbin/munin1
18311991510,3cyclictest662-21runrttasks2
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional