You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-28 - 20:27
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sun Dec 28, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
41692291230,50sleep10-21swapper/11
32432282251,18sleep30-21swapper/33
41602261188,24sleep20-21swapper/22
42782260193,34sleep00-21swapper/00
1022921170,2sleep3453199cyclictest3
21672600,4sleep10-21swapper/11
179412480,1sleep30-21swapper/33
452699476,16cyclictest10345-21cat2
305622460,3sleep10-21swapper/11
452699456,24cyclictest517-21dbus-daemon2
452699456,24cyclictest517-21dbus-daemon2
155872450,2sleep0451899cyclictest0
4526994212,17cyclictest11526-21unixbench_multi2
452699394,20cyclictest3567-21cpuspeed_turbos2
452699391,22cyclictest23167-21sort2
4526993812,13cyclictest662-21runrttasks2
452699371,21cyclictest25823-21sed2
452699353,29cyclictest571-21gdbus2
452699344,17cyclictest340-21systemd-journal2
452699344,16cyclictest0-21swapper/22
4526993315,16cyclictest2040-21threads2
453199320,30cyclictest21014-21kworker/3:03
280452320,3sleep10-21swapper/11
4526993114,15cyclictest10885-21seq2
452699310,3cyclictest4663-21/usr/sbin/munin2
4526993015,13cyclictest32436-21timerandwakeup2
4526993013,14cyclictest10928-21uname2
452699296,20cyclictest30367-21cpuspeed2
4526992913,14cyclictest22338-21unixbench-2d2
4526992912,15cyclictest29581-21ls2
4526992912,15cyclictest10675-21cat2
4526992912,15cyclictest10675-21cat2
4526992912,14cyclictest9640-21sendmail-mta2
452699290,4cyclictest1216-21pmu-power2
452699290,4cyclictest11238-21cups-browsed2
452699290,3cyclictest5098-21cstates2
452699290,3cyclictest30188-21chrt2
452699290,3cyclictest20166-21taskset2
453199285,20cyclictest515-21avahi-daemon3
452699286,20cyclictest517-21dbus-daemon2
452699285,20cyclictest5740-21cat2
452699281,24cyclictest26188-21cpuspeed_turbos2
4526992812,14cyclictest27348-21cut2
4526992811,15cyclictest517-21dbus-daemon2
4526992811,14cyclictest517-21dbus-daemon2
452699280,4cyclictest32648-21irqstats2
452699280,3cyclictest6519-21/usr/sbin/munin2
4523992814,11cyclictest7759-21awk1
453199277,17cyclictest0-21swapper/33
452699276,18cyclictest517-21dbus-daemon2
452699276,18cyclictest12241-21/usr/sbin/munin2
452699271,3cyclictest26278-21sort2
4526992713,12cyclictest30937-21grep2
4526992713,12cyclictest24871-21rt-features2
4526992713,12cyclictest18908-21head2
452699271,23cyclictest21069-21irqstats2
4526992712,13cyclictest16573-21awk2
4526992710,14cyclictest517-21dbus-daemon2
4526992710,14cyclictest517-21dbus-daemon2
452699270,3cyclictest6125-21apt-get2
452699270,3cyclictest20005-21expr2
452699270,3cyclictest18777-21cat2
452699270,3cyclictest17384-21memory2
452699270,3cyclictest17216-21open_files2
452699270,3cyclictest13317-21memory2
452699270,2cyclictest2724-21ntp_states2
4523992716,2cyclictest9148-21cron1
452699268,15cyclictest20121-21grep2
452699265,18cyclictest517-21dbus-daemon2
4526992612,12cyclictest24154-21aten2_r9power_v2
4526992612,12cyclictest24154-21aten2_r9power_v2
452699261,18cyclictest7374-21chrt2
452699260,3cyclictest5797-21taskset2
452699260,3cyclictest3048-21/usr/sbin/munin2
452699260,2cyclictest98862sleep22
452699260,2cyclictest16416-21ntpq2
453199254,18cyclictest3971-21sendmail-mta3
453199254,18cyclictest32283-21sendmail-mta3
453199254,18cyclictest31603-21sendmail-mta3
453199254,18cyclictest12172-21sendmail-mta3
453199254,18cyclictest12172-21sendmail-mta3
452699258,14cyclictest4990-21if_err_enp2s02
452699256,17cyclictest571-21gdbus2
452699250,2cyclictest30069-1kworker/2:0H2
452699250,2cyclictest28588-21irqstats2
452699250,2cyclictest14707-21df_inode2
452699250,22cyclictest11827-21cstates2
4523992520,3cyclictest1381-21dump-pmu-power1
4518992511,7cyclictest662-21runrttasks0
4518992511,7cyclictest662-21runrttasks0
146532250,4sleep335-21ksoftirqd/33
453199246,15cyclictest0-21swapper/33
453199244,17cyclictest9640-21sendmail-mta3
453199244,17cyclictest447-21sendmail-mta3
453199244,17cyclictest22392-21cat3
453199243,18cyclictest5548-21sendmail-mta3
453199241,19cyclictest11822-21munin-run3
452699247,14cyclictest0-21swapper/22
452699244,18cyclictest0-21swapper/22
452699242,3cyclictest14085-21if_enp3s02
4523992418,4cyclictest21-21ksoftirqd/11
453199234,17cyclictest17167-21sendmail-mta3
453199234,16cyclictest0-21swapper/33
453199233,17cyclictest6351-21sendmail-mta3
453199233,17cyclictest29780-21sendmail-mta3
453199233,17cyclictest21280-21sendmail-mta3
453199233,17cyclictest0-21swapper/33
4531992317,4cyclictest517-21dbus-daemon3
453199231,19cyclictest9014-21sendmail-mta3
453199231,19cyclictest15281-21munin-run3
453199231,19cyclictest1360-21munin-run3
4518992317,4cyclictest31160-21grep0
453199223,17cyclictest6171-21latency_hist3
453199223,17cyclictest27542-21sendmail-mta3
453199223,17cyclictest2665-21cat3
453199223,17cyclictest20649-21cat3
453199222,18cyclictest23431-21sendmail-mta3
453199222,17cyclictest0-21swapper/33
4531992216,3cyclictest340-21systemd-journal3
4531992215,5cyclictest14035-21dump-pmu-power3
4531992215,4cyclictest2109-21cat3
4531992214,5cyclictest517-21dbus-daemon3
453199221,3cyclictest340-21systemd-journal3
453199221,3cyclictest28367-21munin-run3
453199221,3cyclictest28367-21munin-run3
453199221,18cyclictest31952-21munin-run3
4518992215,4cyclictest340-21systemd-journal0
4518992215,4cyclictest28371-21sh0
4518992215,4cyclictest28371-21sh0
267462220,4sleep126748-21strings1
453199213,16cyclictest21524-21latency_hist3
453199212,2cyclictest0-21swapper/33
453199212,2cyclictest0-21swapper/33
453199212,17cyclictest31022-21latency_hist3
453199211,18cyclictest241382chrt3
453199210,4cyclictest340-21systemd-journal3
453199210,18cyclictest23472-21latency_hist3
4523992116,3cyclictest634-21snmpd1
4523992116,3cyclictest634-21snmpd1
4523992114,5cyclictest517-21dbus-daemon1
4518992115,4cyclictest10252-21cron0
4518992114,4cyclictest6895-21tail0
451899211,17cyclictest730-21gltestperf0
92222200,3sleep121-21ksoftirqd/11
453199202,16cyclictest26941-21latency_hist3
4531992016,2cyclictest27406-21/usr/sbin/munin3
4531992016,2cyclictest18144-21awk3
4531992015,3cyclictest26335-21cpuspeed_turbos3
4531992014,4cyclictest13083-21sed3
453199201,3cyclictest0-21swapper/33
453199201,17cyclictest3619-21munin-run3
453199201,17cyclictest0-21swapper/33
453199201,16cyclictest10271-21idleruntime-cro3
453199200,3cyclictest7922-21perf3
452399208,9cyclictest3925-21cut1
4523992015,3cyclictest27233-21aten2_r9power_c1
4523992015,3cyclictest16106-21seq1
4523992015,3cyclictest12669-21sh1
4523992014,4cyclictest4043-21/usr/sbin/munin1
4523992014,4cyclictest30152-21date1
4523992014,4cyclictest16441-21hostname1
4523992014,4cyclictest15528-21/usr/sbin/munin1
452399200,19cyclictest0-21swapper/11
4518992015,3cyclictest9-21ksoftirqd/00
4518992014,4cyclictest634-21snmpd0
4518992014,4cyclictest29238-21/usr/sbin/munin0
4518992014,4cyclictest26005-21cut0
4518992013,5cyclictest23560-21grep0
4518992013,4cyclictest9986-21sendmail0
4531991913,4cyclictest9792-21expr3
4531991913,4cyclictest9792-21expr3
4531991913,3cyclictest26328-21idleruntime-cro3
4523991915,2cyclictest30169-21/usr/sbin/munin1
4523991914,3cyclictest5768-21which1
4523991914,3cyclictest3871-21if_enp3s01
4523991914,3cyclictest29989-21load1
4523991914,3cyclictest23815-21seq1
4523991914,3cyclictest21668-21/usr/sbin/munin1
4523991914,3cyclictest17558-21/usr/sbin/munin1
4523991914,3cyclictest12454-21processes1
4523991914,3cyclictest10902-21expr1
4523991914,3cyclictest10902-21expr1
4523991914,3cyclictest10398-21cat1
4523991913,4cyclictest9831-21expr1
4523991913,4cyclictest9831-21expr1
4523991913,4cyclictest28931-21grep1
4523991913,4cyclictest23465-21expr1
4523991913,4cyclictest22504-21hostname1
451899198,9cyclictest1374-21idleruntime-cro0
451899192,10cyclictest634-21snmpd0
4518991915,2cyclictest9-21ksoftirqd/00
4518991914,3cyclictest634-21snmpd0
4518991914,3cyclictest32496-21timerwakeupswit0
4518991914,3cyclictest25028-21cut0
4518991914,3cyclictest15530-21/usr/sbin/munin0
4518991914,3cyclictest12328-21ntpq0
4518991913,4cyclictest5632-21sed0
451899191,16cyclictest30389-21cron0
43972190,2sleep30-21swapper/33
77582180,1sleep10-21swapper/11
4531991816,1cyclictest0-21swapper/33
4531991816,1cyclictest0-21swapper/33
4531991814,2cyclictest17656-21aten2_r9power_p3
4531991813,3cyclictest662-21runrttasks3
4531991813,3cyclictest29391-21sed3
4531991812,4cyclictest9388-21grep3
4531991812,4cyclictest6403-21grep3
453199181,14cyclictest25630-21munin-run3
452399186,9cyclictest340-21systemd-journal1
452399181,7cyclictest515-21avahi-daemon1
4523991816,1cyclictest0-21swapper/11
4523991816,1cyclictest0-21swapper/11
4523991816,1cyclictest0-21swapper/11
4523991816,1cyclictest0-21swapper/11
4523991816,1cyclictest0-21swapper/11
4523991815,2cyclictest0-21swapper/11
4523991814,2cyclictest25133-21/usr/sbin/munin1
4523991814,2cyclictest13488-21/usr/sbin/munin1
4523991813,3cyclictest6419-21/usr/sbin/munin1
4523991813,3cyclictest634-21snmpd1
4523991813,3cyclictest4361-21/usr/sbin/munin1
4523991813,3cyclictest32260-21which1
4523991813,3cyclictest20170-21latency_hist1
4523991813,3cyclictest17184-21basename1
4523991813,3cyclictest1662-21missed_timers1
4523991813,3cyclictest10506-21expr1
4523991812,4cyclictest4140-21basename1
4523991812,4cyclictest26135-21hostname1
4523991812,4cyclictest16832-21grep1
4523991812,3cyclictest19246-21idleruntime1
452399181,15cyclictest0-21swapper/11
4523991811,4cyclictest340-21systemd-journal1
452399180,15cyclictest27303-21wc1
452399180,15cyclictest27303-21wc1
451899188,4cyclictest517-21dbus-daemon0
451899182,12cyclictest340-21systemd-journal0
4518991816,1cyclictest0-21swapper/00
4518991816,1cyclictest0-21swapper/00
4518991814,3cyclictest9-21ksoftirqd/00
4518991814,2cyclictest30765-21sed0
4518991814,2cyclictest23908-21aten2_r9power_p0
4518991813,3cyclictest9377-21ls0
4518991813,3cyclictest8553-21idleruntime0
4518991813,3cyclictest634-21snmpd0
4518991813,3cyclictest6107-21/usr/sbin/munin0
4518991813,3cyclictest4240-21cpuspeed0
4518991813,3cyclictest31257-21swap0
4518991813,3cyclictest25133-21/usr/sbin/munin0
4518991813,3cyclictest17298-21which0
4518991813,3cyclictest15273-21cron0
4518991813,3cyclictest13487-21/usr/sbin/munin0
4518991813,3cyclictest12989-21sh0
4518991812,4cyclictest9436-21cat0
4518991812,4cyclictest517-21dbus-daemon0
4518991812,4cyclictest4141-21cat0
4518991812,4cyclictest29780-21sendmail-mta0
4518991812,4cyclictest2314-21/usr/sbin/munin0
4518991812,4cyclictest10033-21/usr/sbin/munin0
451899181,1cyclictest175512sleep00
451899180,6cyclictest11994-21cron0
4523991713,2cyclictest14327-21aten2_r9power_e1
4523991712,3cyclictest32633-21sh1
4523991712,3cyclictest21629-21cat1
4523991712,3cyclictest20524-21wc1
4523991712,3cyclictest1630-21/usr/sbin/munin1
451899175,3cyclictest30302wc0
451899173,3cyclictest0-21swapper/00
451899173,3cyclictest0-21swapper/00
451899172,9cyclictest662-21runrttasks0
4518991715,1cyclictest0-21swapper/00
4518991715,1cyclictest0-21swapper/00
4518991712,3cyclictest662-21runrttasks0
4518991712,3cyclictest23431-21sendmail-mta0
4518991712,3cyclictest16985-21expr0
4518991712,3cyclictest16610-21mailstats0
4518991712,3cyclictest14030-21cron0
4518991711,4cyclictest18015-21grep0
451899171,13cyclictest340-21systemd-journal0
451899171,13cyclictest340-21systemd-journal0
4523991612,2cyclictest32672-21/usr/sbin/munin1
451899163,7cyclictest24518-21apt-get0
4518991612,2cyclictest662-21runrttasks0
4518991611,3cyclictest21602-21cat0
4518991610,4cyclictest24334-21wc0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional