You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-14 - 17:05
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack9slot2.osadl.org (updated Sun Dec 14, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
136142318178,25sleep30-21swapper/33
132642282213,51sleep10-21swapper/11
136962266179,69sleep00-21swapper/00
1404899256252,2cyclictest0-21swapper/00
1406299251244,4cyclictest18190-21strings3
136782248183,52sleep20-21swapper/22
2367721650,3sleep21405899cyclictest2
1401021540,4sleep01404899cyclictest0
1405399147143,2cyclictest0-21swapper/11
2386321300,3sleep01404899cyclictest0
261521240,2sleep20-21swapper/22
261521240,2sleep20-21swapper/22
14058999591,2cyclictest0-21swapper/22
88232550,4sleep11405399cyclictest1
145762420,1sleep10-21swapper/11
294472390,9sleep09-21ksoftirqd/00
149462250,2sleep00-21swapper/00
1406299253,20cyclictest20502-21sendmail-mta3
139692250,1sleep00-21swapper/00
14058992412,6cyclictest223442chrt2
14048992419,3cyclictest16159-21tr0
1406299234,17cyclictest8801-21sendmail-mta3
1406299234,17cyclictest5342-21sendmail-mta3
1406299234,17cyclictest25985-21sendmail-mta3
1406299234,17cyclictest17375-21sendmail-mta3
1406299234,17cyclictest13478-21sendmail-mta3
1406299234,17cyclictest1210-21sendmail-mta3
1406299231,4cyclictest19574-21grep3
1405899239,4cyclictest5559-21tr2
14058992316,4cyclictest12318-21idleruntime-cro2
233612220,1sleep00-21swapper/00
1406299224,3cyclictest0-21swapper/33
1406299224,16cyclictest6070-21sendmail-mta3
1406299223,17cyclictest30061-21sendmail-mta3
1406299223,17cyclictest29156-21sendmail-mta3
1406299223,17cyclictest1998-21sendmail-mta3
1406299221,3cyclictest22804-1kworker/3:2H3
1405399222,18cyclictest16243-21head1
136622220,1sleep213666-21cut2
1406299213,16cyclictest21029-21sendmail-mta3
1406299213,16cyclictest15824-21sendmail-mta3
1406299213,16cyclictest10124-21sendmail-mta3
1406299212,3cyclictest0-21swapper/33
1406299212,17cyclictest21447-21sendmail-mta3
1406299212,17cyclictest21447-21sendmail-mta3
1406299212,17cyclictest18274-21sendmail-mta3
1406299212,17cyclictest15500-21latency_hist3
1406299212,17cyclictest13310-21sendmail-mta3
14062992116,3cyclictest8822-21/usr/sbin/munin3
1406299211,3cyclictest22804-1kworker/3:2H3
1406299211,18cyclictest25236-21munin-run3
1406299211,17cyclictest6923-21munin-run3
1406299210,8cyclictest136662cut3
14058992117,3cyclictest28-21ksoftirqd/22
14058992115,4cyclictest2337-21wc2
14058992114,4cyclictest31757-21dump-pmu-power2
14058992114,4cyclictest14841-21grep2
14053992115,4cyclictest517-21dbus-daemon1
14053992115,4cyclictest14616-21df_inode1
1404899212,17cyclictest3496-21sendmail-msp0
14048992115,4cyclictest25717-21fw_packets0
14048992114,5cyclictest32587-21cat0
47542200,1sleep10-21swapper/11
1406299207,11cyclictest0-21swapper/33
1406299207,11cyclictest0-21swapper/33
1406299202,2cyclictest0-21swapper/33
14062992016,2cyclictest24675-21taskset3
1406299201,5cyclictest11628-21sendmail-msp3
14062992014,4cyclictest3577-21cut3
14062992014,4cyclictest27376-21cut3
14062992014,4cyclictest12144-21uname3
1406299201,3cyclictest517-21dbus-daemon3
14058992015,3cyclictest6589-21nfs4_client2
14058992015,3cyclictest32215-21memory2
14058992015,3cyclictest27273-21sh2
14058992013,4cyclictest11889-21aten2.4-expect2
1405899201,17cyclictest8801-21sendmail-mta2
14053992017,2cyclictest0-21swapper/11
14053992015,3cyclictest634-21snmpd1
14053992015,3cyclictest26637-21ls1
14053992015,3cyclictest21420-21/usr/sbin/munin1
14053992014,4cyclictest4908-21sh1
14053992014,4cyclictest20776-21grep1
14053992014,4cyclictest20776-21grep1
14053992014,3cyclictest21466-21cat1
14053992013,4cyclictest19560-21sendmail1
1404899206,11cyclictest14397-21switchtime0
14048992017,2cyclictest0-21swapper/00
14048992015,3cyclictest634-21snmpd0
14048992015,3cyclictest30410-21diskstats0
14048992015,3cyclictest25476-21/usr/sbin/munin0
14062991915,2cyclictest9619-21acpi3
14062991915,2cyclictest29715-21cat3
14062991914,3cyclictest5845-21if_enp3s03
14062991914,3cyclictest4160-21pluginstate3
14062991914,3cyclictest30723-21memory3
14062991914,3cyclictest18241-21vmstat3
14062991914,3cyclictest11068-21idleruntime3
14062991913,4cyclictest32260-21latency3
14062991912,4cyclictest3046-21cut3
14062991912,4cyclictest15038-21expr3
1406299191,16cyclictest8245-21munin-run3
1406299191,16cyclictest0-21swapper/33
1406299190,17cyclictest340-21systemd-journal3
1405899193,10cyclictest16665-21chrt2
14058991917,1cyclictest0-21swapper/22
14058991917,1cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991916,2cyclictest0-21swapper/22
14058991915,2cyclictest27947-21/usr/sbin/munin2
14058991914,3cyclictest31601-21cut2
14058991914,3cyclictest30645-21wc2
14058991914,3cyclictest22685-21sh2
14058991914,3cyclictest20652-21latency_hist2
14058991914,3cyclictest10517-21unixbench_multi2
14058991913,4cyclictest8660-21ntp_states2
14058991913,3cyclictest16305-21if_enp3s02
14058991912,4cyclictest571-21gdbus2
14058991912,4cyclictest27685-21idleruntime-cro2
14058991911,5cyclictest4248-21sed2
1405399193,10cyclictest27965-21apt-get1
14053991916,2cyclictest0-21swapper/11
14053991914,3cyclictest634-21snmpd1
14053991914,3cyclictest558-21cat1
14053991914,3cyclictest25891-21/usr/sbin/munin1
14053991914,3cyclictest21839-21/usr/sbin/munin1
14053991914,3cyclictest21-21ksoftirqd/11
14053991914,3cyclictest20055-21basename1
14053991914,3cyclictest13278-21seq1
14053991914,3cyclictest10291-21dump-pmu-power1
14053991913,4cyclictest26778-21seq1
14053991913,4cyclictest23651-21grep1
14053991913,4cyclictest17708-21sh1
14053991912,5cyclictest517-21dbus-daemon1
14053991912,5cyclictest517-21dbus-daemon1
14053991910,7cyclictest7608-21cpuspeed_turbos1
1404899193,14cyclictest10332-21sort0
14048991917,1cyclictest0-21swapper/00
14048991916,2cyclictest0-21swapper/00
14048991915,2cyclictest31459-21/usr/sbin/munin0
14048991915,2cyclictest15323-21/usr/sbin/munin0
14048991914,3cyclictest9588-21sh0
14048991914,3cyclictest32581-21mktemp0
14048991914,3cyclictest16459-21sed0
14048991913,4cyclictest28600-21grep0
14048991913,4cyclictest22934-21grep0
14048991913,4cyclictest18811-21date0
1404899191,16cyclictest16392-21cron0
143772180,4sleep10-21swapper/11
1406299185,11cyclictest23227-21turbostat.cron3
14062991815,2cyclictest0-21swapper/33
14062991814,2cyclictest14769-21ntp_offset3
14062991813,3cyclictest28265-21ntp_kernel_err3
14062991813,3cyclictest2819-21sh3
14062991813,3cyclictest2819-21sh3
14062991813,3cyclictest26968-21cat3
14062991813,3cyclictest23199-21ntpq3
14062991813,3cyclictest22246-21expr3
14062991812,4cyclictest6283-21expr3
14062991812,4cyclictest26432-21awk3
14062991812,4cyclictest20467-21sendmail3
14062991812,4cyclictest13325-21aten2_r9power_c3
1406299181,15cyclictest6906-1kworker/3:1H3
1406299180,17cyclictest0-21swapper/33
1405899183,10cyclictest15936-21apt-get2
14058991816,1cyclictest0-21swapper/22
14058991816,1cyclictest0-21swapper/22
14058991816,1cyclictest0-21swapper/22
14058991816,1cyclictest0-21swapper/22
14058991815,2cyclictest0-21swapper/22
14058991815,2cyclictest0-21swapper/22
14058991814,2cyclictest2195-21if_enp2s02
14058991813,3cyclictest9428-21sort2
14058991813,3cyclictest28182-21sed2
14058991813,3cyclictest21159-21awk2
14058991813,3cyclictest21159-21awk2
14058991813,3cyclictest19475-21cut2
14058991813,3cyclictest17767-21/usr/sbin/munin2
14058991813,3cyclictest13663-21expr2
14058991812,4cyclictest7683-21sed2
14058991812,4cyclictest27194-21sed2
14058991812,4cyclictest24919-21seq2
14058991812,4cyclictest16040-21grep2
14058991810,5cyclictest24463-21aten2_r9power_p2
14053991816,1cyclictest0-21swapper/11
14053991816,1cyclictest0-21swapper/11
14053991816,1cyclictest0-21swapper/11
14053991816,1cyclictest0-21swapper/11
14053991816,1cyclictest0-21swapper/11
14053991814,2cyclictest9750-21aten2_r9power_v1
14053991814,2cyclictest29546-21/usr/sbin/munin1
14053991814,2cyclictest18875-21/usr/sbin/munin1
14053991814,2cyclictest15323-21/usr/sbin/munin1
14053991814,2cyclictest12568-21/usr/sbin/munin1
14053991813,3cyclictest5140-21/usr/sbin/munin1
14053991813,3cyclictest4456-21apt1
14053991813,3cyclictest435-21sh1
14053991813,3cyclictest3238-21find1
14053991813,3cyclictest29886-21awk1
14053991813,3cyclictest29736-21grep1
14053991813,3cyclictest21138-21seq1
14053991813,3cyclictest18766-21cat1
14053991813,3cyclictest1830-21awk1
14053991813,3cyclictest15250-21cat1
14053991812,4cyclictest517-21dbus-daemon1
14053991812,4cyclictest2842-21cron1
14053991812,4cyclictest27547-21cut1
1405399180,16cyclictest0-21swapper/11
1404899183,3cyclictest9-21ksoftirqd/00
14048991816,1cyclictest0-21swapper/00
14048991815,2cyclictest28554-21if_enp3s00
14048991814,2cyclictest634-21snmpd0
14048991814,2cyclictest634-21snmpd0
14048991814,2cyclictest5140-21/usr/sbin/munin0
14048991814,2cyclictest19003-21cstates0
14048991813,3cyclictest8250-21sh0
14048991813,3cyclictest340-21systemd-journal0
14048991813,3cyclictest340-21systemd-journal0
14048991813,3cyclictest25432-21grep0
14048991813,3cyclictest23859-21if_err_enp3s00
14048991813,3cyclictest19915-21cut0
14048991813,3cyclictest17767-21/usr/sbin/munin0
14048991813,3cyclictest1374-21sort0
14048991812,4cyclictest8414-21cat0
14048991812,4cyclictest8309-21cut0
14048991812,4cyclictest23600-21cat0
14048991812,4cyclictest21495-21grep0
14048991812,4cyclictest11600-21cat0
14048991812,3cyclictest28168-21sh0
1404899181,16cyclictest0-21swapper/00
14048991811,5cyclictest31800-21cpuspeed0
1404899181,15cyclictest23198-21grep0
14062991712,3cyclictest25675-21perf3
14062991712,3cyclictest1626-21forks3
14058991715,1cyclictest0-21swapper/22
14058991715,1cyclictest0-21swapper/22
14058991714,2cyclictest0-21swapper/22
14058991712,3cyclictest5007-21cron2
14058991712,3cyclictest4848-21sed2
14058991712,3cyclictest31316-21sed2
14058991712,3cyclictest22186-21seq2
14058991712,3cyclictest21467-21grep2
14058991712,3cyclictest19196-21cut2
14058991711,4cyclictest9821-21grep2
1405399179,5cyclictest12424-21timerandwakeup1
1405399173,9cyclictest11861-21apt-get1
14053991712,3cyclictest6098-21expr1
14053991712,3cyclictest31197-21cat1
14053991712,3cyclictest20707-21expr1
14053991712,3cyclictest14332-21entropy1
14053991712,3cyclictest10741-21cat1
14053991711,4cyclictest517-21dbus-daemon1
14048991715,1cyclictest0-21swapper/00
14048991715,1cyclictest0-21swapper/00
14048991713,3cyclictest28429-21/usr/sbin/munin0
14048991713,2cyclictest4243-21expr0
14048991712,3cyclictest29546-21/usr/sbin/munin0
14048991712,3cyclictest1652-21cat0
14048991711,4cyclictest517-21dbus-daemon0
14048991711,4cyclictest517-21dbus-daemon0
14048991711,4cyclictest4864-21sendmail-mta0
14048991711,4cyclictest4221-21idleruntime-cro0
14048991711,4cyclictest4221-21idleruntime-cro0
14048991711,4cyclictest25276-21uptime0
1404899170,16cyclictest0-21swapper/00
14058991611,3cyclictest11790-21sed2
1405399169,4cyclictest19424-21missed_timers1
1405399167,8cyclictest2086-21gltestperf1
14053991612,2cyclictest9790-21/usr/sbin/munin1
14048991611,3cyclictest19237-21expr0
14048991610,4cyclictest31402-21grep0
14048991610,4cyclictest12771-21grep0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional