You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-22 - 23:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Mon Dec 22, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
466499278272,4cyclictest27455-21awk2
43732273208,35sleep10-21swapper/11
44502256178,43sleep30-21swapper/33
42222256219,25sleep00-21swapper/00
43942254217,25sleep20-21swapper/22
466099142135,4cyclictest27432-21perf1
596921310,3sleep30-21swapper/33
466899114109,3cyclictest27458-21sendmail-msp3
465699110105,2cyclictest27410-21munin-run0
281892550,2sleep228196-21gltestperf2
31482540,2sleep00-21swapper/00
466899277,17cyclictest0-21swapper/33
466899265,19cyclictest16869-21date3
466899265,18cyclictest0-21swapper/33
4660992618,5cyclictest21567-21perf1
466099260,25cyclictest12306-21kworker/1:11
466099260,24cyclictest20036-21kworker/1:11
466899258,3cyclictest0-21swapper/33
466899254,18cyclictest0-21swapper/33
466899245,17cyclictest0-21swapper/33
466899245,16cyclictest0-21swapper/33
466899244,18cyclictest15507-21sendmail-mta3
466899244,17cyclictest8302-21sendmail-mta3
466899244,17cyclictest17304-21sendmail-mta3
4656992419,3cyclictest2598-21sh0
466899234,17cyclictest24678-21sendmail-mta3
466899234,17cyclictest23775-21sendmail-mta3
466899234,17cyclictest20602-21sendmail-mta3
466899233,18cyclictest9144-21sendmail-mta3
466899233,18cyclictest25227-21sendmail-mta3
466899233,17cyclictest3913-21sendmail-mta3
466899233,17cyclictest19697-21sendmail-mta3
466899233,17cyclictest13232-21sendmail-mta3
466899232,3cyclictest0-21swapper/33
4668992316,4cyclictest26055-21cat3
466899231,4cyclictest9026-1kworker/3:0H3
466899231,3cyclictest9026-1kworker/3:0H3
466899231,20cyclictest517-21dbus-daemon3
466899231,19cyclictest340-21systemd-journal3
466899230,5cyclictest9026-1kworker/3:0H3
466899223,17cyclictest4208-21sendmail-mta3
466899223,17cyclictest2370-21cat3
466899223,17cyclictest21145-21sendmail-mta3
466899223,17cyclictest15523-21cat3
466899222,3cyclictest0-21swapper/33
466899222,18cyclictest23012-21cat3
466899222,17cyclictest28774-21sendmail-mta3
466899222,17cyclictest10675-21cat3
4668992216,3cyclictest6404-21turbostat.cron3
466899221,3cyclictest9296-1kworker/3:1H3
466899221,3cyclictest31497-21idleruntime-cro3
466899220,20cyclictest21877-21/usr/sbin/munin3
466499229,11cyclictest23541-21sed2
4664992216,4cyclictest12258-21df_inode2
4660992216,3cyclictest18709-21dump-pmu-power1
466099221,5cyclictest0-21swapper/11
4656992215,4cyclictest10178-21cat0
466899212,17cyclictest8295-21sendmail-mta3
4668992115,4cyclictest16851-21seq3
4668992113,5cyclictest548-21ls3
466899211,17cyclictest30651-21idleruntime-cro3
466899211,17cyclictest291552sleep33
466899211,17cyclictest11328-21latency_hist3
466899210,3cyclictest9296-1kworker/3:1H3
4664992116,3cyclictest16557-21kernelversion2
4664992110,9cyclictest26510-21packagekitd2
4660992115,4cyclictest13900-21grep1
4660992114,4cyclictest18403-21pmu-power1
4656992116,3cyclictest9126-21sh0
4656992116,3cyclictest5213-21/usr/sbin/munin0
4656992110,9cyclictest9293-21sort0
466899203,16cyclictest17843-21latency_hist3
466899201,4cyclictest6102-21munin-run3
466899201,2cyclictest0-21swapper/33
4668992012,5cyclictest2020-21munin-run3
466899201,17cyclictest9026-1kworker/3:0H3
466899200,18cyclictest9296-1kworker/3:1H3
466899200,18cyclictest14723-21cat3
4664992015,3cyclictest31885-21cpu2
4664992015,3cyclictest27597-21users2
4664992015,3cyclictest2658-21aten2_r9power_p2
4664992015,3cyclictest2137-21missed_timers2
4664992014,4cyclictest9010-21sed2
4664992014,4cyclictest7712-21gzip2
4664992014,4cyclictest2279-21seq2
4664992013,5cyclictest1700-21seq2
466099209,6cyclictest14888-21apt-get1
4660992017,2cyclictest0-21swapper/11
4660992015,3cyclictest634-21snmpd1
4660992015,3cyclictest634-21snmpd1
4660992014,4cyclictest24841-21idleruntime-cro1
466099201,3cyclictest0-21swapper/11
4656992015,3cyclictest31937-21rt-features0
4656992015,3cyclictest2868-21/usr/sbin/munin0
4656992015,3cyclictest27007-21needreboot0
4656992015,3cyclictest24602-21sh0
4656992015,3cyclictest13860-21/usr/sbin/munin0
4656992015,3cyclictest13403-21perf0
4656992014,4cyclictest31137-21seq0
4656992014,4cyclictest17376-21cut0
4656992013,4cyclictest9-21ksoftirqd/00
4656992013,4cyclictest7716-21which0
4656992013,4cyclictest10815-21acpi0
4656992012,5cyclictest15434-21sendmail0
4668991914,3cyclictest22702-21ntp_states3
4668991913,4cyclictest29248-21cut3
4668991913,4cyclictest27988-21sendmail3
4668991913,4cyclictest23028-21seq3
4668991913,3cyclictest11120-21idleruntime-cro3
466899191,1cyclictest26916-21sendmail-msp3
4668991911,5cyclictest9548-21sendmail3
466899190,17cyclictest2645-21perf3
4664991917,1cyclictest0-21swapper/22
4664991915,2cyclictest24218-21if_err_enp3s02
4664991915,2cyclictest22362-21idleruntime2
4664991914,3cyclictest9781-21date2
4664991914,3cyclictest9073-21expr2
4664991914,3cyclictest7880-21if_err_enp3s02
4664991914,3cyclictest7508-21acpi2
4664991914,3cyclictest6481-21cat2
4664991914,3cyclictest29535-21awk2
4664991914,3cyclictest29061-21needreboot2
4664991914,3cyclictest24270-21aten2_r9power_v2
4664991914,3cyclictest1842-21processes2
4664991914,3cyclictest17816-21open_inodes2
4664991914,3cyclictest17590-21cpu2
4664991914,3cyclictest17132-21seq2
4664991914,3cyclictest12225-21ntpq2
4664991913,4cyclictest5353-21cat2
4664991913,4cyclictest17403-21date2
4664991912,5cyclictest9939-21expr2
4664991911,6cyclictest14690-21cut2
466499191,16cyclictest0-21swapper/22
4660991916,2cyclictest0-21swapper/11
4660991915,3cyclictest21-21ksoftirqd/11
4660991915,2cyclictest2558-21/usr/sbin/munin1
4660991914,3cyclictest634-21snmpd1
4660991914,3cyclictest4303-21/usr/sbin/munin1
4660991914,3cyclictest24699-21sed1
4660991914,3cyclictest21-21ksoftirqd/11
4660991914,3cyclictest21-21ksoftirqd/11
4660991914,3cyclictest14029-21timerandwakeup1
4660991912,4cyclictest5209-21aten2.4-expect1
4660991912,4cyclictest26241-21xargs1
466099191,16cyclictest30944-21cron1
4660991911,5cyclictest3158-21cut1
466099190,3cyclictest15507-21sendmail-mta1
4656991915,2cyclictest31196-21/usr/sbin/munin0
4656991915,2cyclictest12253-21sh0
4656991914,3cyclictest7935-21sh0
4656991914,3cyclictest3449-21ls0
4656991914,3cyclictest29599-21df0
4656991914,3cyclictest22283-21cpu0
4656991914,3cyclictest17370-21seq0
4656991914,3cyclictest15295-21cat0
4656991914,3cyclictest1265-21date0
4656991913,4cyclictest32264-21procmail0
4656991913,4cyclictest17191-21grep0
4656991913,4cyclictest15482-21mii-tool0
4656991913,4cyclictest1432-21grep0
4656991913,3cyclictest7422-21acpi0
4656991911,5cyclictest27286-21cpu0
466899183,9cyclictest17459-21apt-get3
466899183,8cyclictest1361-21apt-get3
4668991815,2cyclictest5232-21apt-get3
466899180,16cyclictest15195-21sleep3
466499187,9cyclictest31260-21uname2
466499186,10cyclictest517-21dbus-daemon2
4664991816,1cyclictest0-21swapper/22
4664991816,1cyclictest0-21swapper/22
4664991816,1cyclictest0-21swapper/22
4664991816,1cyclictest0-21swapper/22
4664991814,2cyclictest9638-21pmu-power2
4664991814,2cyclictest3430-21apt-get2
4664991814,2cyclictest24210-21aten2.4-expect2
4664991814,2cyclictest22440-21ntp_states2
4664991814,2cyclictest20756-21kernelversion2
4664991813,3cyclictest31070-21unixbench_singl2
4664991813,3cyclictest27724-21if_enp3s02
4664991813,3cyclictest2517-21cat2
4664991813,3cyclictest21379-21cat2
4664991813,3cyclictest18699-21cat2
4664991813,3cyclictest10002-21latency2
4664991812,4cyclictest7053-21cat2
4664991812,4cyclictest5795-21expr2
4664991812,4cyclictest3312-21diskstats2
4664991812,4cyclictest30896-21acpi2
4664991812,4cyclictest27040-21date2
4664991812,4cyclictest21049-21unixbench-2d2
4664991812,4cyclictest17718-21apt-get2
4664991812,3cyclictest30402-21seq2
466499180,16cyclictest0-21swapper/22
466099188,8cyclictest1063-21cpuspeed_turbos1
466099188,7cyclictest0-21swapper/11
466099184,8cyclictest31214-21apt-get1
4660991816,1cyclictest0-21swapper/11
4660991816,1cyclictest0-21swapper/11
4660991814,3cyclictest11339-21/usr/sbin/munin1
4660991814,2cyclictest28239-21/usr/sbin/munin1
4660991814,2cyclictest24142-21/usr/sbin/munin1
4660991814,2cyclictest21863-21aten2_r9power_e1
4660991814,2cyclictest19506-21/usr/sbin/munin1
4660991813,3cyclictest9959-21expr1
4660991813,3cyclictest27492-21expr1
4660991813,3cyclictest26187-21/usr/sbin/munin1
4660991813,3cyclictest21-21ksoftirqd/11
4660991813,3cyclictest21-21ksoftirqd/11
4660991813,3cyclictest2081-21sed1
4660991813,3cyclictest15892-21/usr/sbin/munin1
4660991813,3cyclictest12242-21expr1
4660991812,4cyclictest30484-21sed1
4660991812,4cyclictest14586-21awk1
4660991812,3cyclictest9862-21xargs1
4660991811,5cyclictest517-21dbus-daemon1
4660991811,4cyclictest9592-21grep1
4660991811,4cyclictest32526-21sendmail-mta1
4660991811,4cyclictest0-21swapper/11
465699186,10cyclictest9-21ksoftirqd/00
4656991814,3cyclictest4824-21gpgv0
4656991814,2cyclictest19677-21latency0
4656991814,2cyclictest19506-21/usr/sbin/munin0
4656991813,3cyclictest8163-21seq0
4656991813,3cyclictest662-21runrttasks0
4656991813,3cyclictest662-21runrttasks0
4656991813,3cyclictest634-21snmpd0
4656991813,3cyclictest4733-21hostname0
4656991813,3cyclictest21358-21cat0
4656991813,3cyclictest19783-21aten2_r9power_c0
4656991813,3cyclictest18056-21find0
4656991813,3cyclictest17466-21aten2_r9power_c0
4656991813,3cyclictest11740-21ls0
4656991812,4cyclictest7686-21df_inode0
4656991812,4cyclictest3067-21seq0
4656991812,4cyclictest29123-21basename0
4656991812,4cyclictest28236-21ls0
4656991812,4cyclictest23618-21cut0
4656991812,4cyclictest17304-21sendmail-mta0
4656991812,4cyclictest1225-21cat0
4656991811,4cyclictest25222-21cpu0
203202180,3sleep10-21swapper/11
4668991713,2cyclictest11824-21/usr/sbin/munin3
4664991715,1cyclictest0-21swapper/22
4664991715,1cyclictest0-21swapper/22
4664991712,3cyclictest20266-21missed_timers2
4664991712,3cyclictest11472-21kernelversion2
4664991711,4cyclictest14899-21cat2
466099179,6cyclictest0-21swapper/11
466099173,9cyclictest7519-21apt-get1
4660991713,2cyclictest26534-21/usr/sbin/munin1
4660991713,2cyclictest20992-21/usr/sbin/munin1
4660991712,3cyclictest7016-21expr1
4660991712,3cyclictest662-21runrttasks1
4660991712,3cyclictest30755-21date1
4660991712,3cyclictest15840-21df1
4660991712,2cyclictest11640-21aten2.4-expect1
4656991713,2cyclictest9-21ksoftirqd/00
4656991713,2cyclictest28388-21cpu0
4656991712,3cyclictest662-21runrttasks0
4656991712,3cyclictest4204-21missed_timers0
4656991712,3cyclictest21870-21hostname0
4656991712,3cyclictest13089-21cpuspeed_turbos0
4656991711,3cyclictest23807-21missed_timers0
4660991612,2cyclictest662-21runrttasks1
4660991612,2cyclictest22155-21aten2_r9power_c1
4660991610,3cyclictest960-21grep1
4656991612,2cyclictest8925-21cpuspeed0
4656991611,3cyclictest634-21snmpd0
4656991610,3cyclictest18545-21grep0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional