You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-05 - 23:51
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Fri Dec 05, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
311282277195,67sleep20-21swapper/22
312762275192,68sleep30-21swapper/33
3141499252244,5cyclictest26785-21sendmail1
309392249212,25sleep10-21swapper/11
309942243179,34sleep00-21swapper/00
3140999207200,4cyclictest26772-21munin-run0
1693221510,2sleep33142399cyclictest3
3142399124119,3cyclictest26800-21basename3
80502560,4sleep10-21swapper/11
3142399438,3cyclictest22037-21processes3
107572400,2sleep33142399cyclictest3
31423993714,20cyclictest10185-21expr3
31423993614,18cyclictest1230-21sh3
3141799356,9cyclictest15406-21expr2
31423993413,19cyclictest14958-21aten2_r9power_c3
31423993413,18cyclictest7854-21date3
3142399339,4cyclictest505-21dbus-daemon3
3142399337,23cyclictest16080-21sh3
3142399332,7cyclictest13577-21apt-get3
3142399332,6cyclictest3358-21apt-get3
31423993313,18cyclictest31544-21sh3
31423993312,18cyclictest20526-21ntp_kernel_err3
31423993312,18cyclictest1229-21latency_hist3
31423993311,19cyclictest20862-21date3
3142399323,8cyclictest5143-21apt-get3
3142399323,7cyclictest29056-21apt-get3
3142399323,23cyclictest1090-21apt-get3
3142399322,9cyclictest31105-21apt-get3
3142399321,5cyclictest13300-21apt-get3
3142399321,5cyclictest13300-21apt-get3
3141799329,20cyclictest29151-21grep2
3141799324,9cyclictest19104-21chmod2
3142399319,4cyclictest12940-21cut3
3142399319,19cyclictest163842chrt3
3142399312,5cyclictest6807-21apt-get3
3142399311,4cyclictest0-21swapper/33
3141799315,10cyclictest18799-21grep2
3142399303,7cyclictest7190-21apt-get3
3142399303,4cyclictest696-21apt-get3
3142399302,5cyclictest2733-21apt-get3
3142399302,4cyclictest0-21swapper/33
3142399301,7cyclictest5836-21apt-get3
3142399301,7cyclictest5836-21apt-get3
3142399301,7cyclictest2470-21munin-run3
3142399301,4cyclictest0-21swapper/33
31423993010,4cyclictest20228-21sendmail3
3141799305,9cyclictest22969-21cat2
3141799304,10cyclictest29321-21dpkg2
3141799300,10cyclictest0-21swapper/22
69752290,4sleep03140999cyclictest0
3142399298,3cyclictest25574-21grep3
3142399296,4cyclictest10245-21cat3
3142399292,7cyclictest27818-21apt-get3
3142399292,5cyclictest29837-21apt-get3
3142399291,6cyclictest3120-21apt-get3
3142399291,5cyclictest27126-21apt-get3
3141799295,9cyclictest15009-21/usr/sbin/munin2
3141799295,8cyclictest20276-21cat2
3141799294,10cyclictest26598-21chrt2
3141799293,9cyclictest3021-21taskset2
3141799290,16cyclictest0-21swapper/22
3142399285,4cyclictest17238-21grep3
3142399284,5cyclictest505-21dbus-daemon3
3142399284,3cyclictest20211-21sh3
3142399282,4cyclictest23745-21apt-get3
3142399281,6cyclictest6470-21munin-run3
3142399281,6cyclictest29450-21apt-get3
3142399281,6cyclictest23551-21gltestperf3
3142399281,6cyclictest12447-21perf3
31423992811,14cyclictest4314-21needreboot3
3141799286,19cyclictest11688-21munin-run2
3141799285,9cyclictest29929-21sh2
3141799284,9cyclictest16616-21chrt2
3142399273,5cyclictest1479-21apt-get3
3142399272,5cyclictest8832-21apt-get3
3142399272,4cyclictest17658-21apt-get3
3142399272,4cyclictest11555-21apt-get3
3142399271,6cyclictest5751-21cron3
3142399271,6cyclictest5751-21cron3
3142399271,6cyclictest26163-21idleruntime-cro3
3142399271,5cyclictest6550-21readlink3
3142399271,5cyclictest505-21dbus-daemon3
3142399271,5cyclictest3095-21cron3
3142399271,5cyclictest28804-21munin-run3
3142399270,7cyclictest12645-21perf3
3142399266,2cyclictest15893-21cat3
3142399264,4cyclictest24321-21if_enp2s03
3142399260,5cyclictest13041-21sh3
3141799265,7cyclictest9702-21ntp_states2
3141799261,9cyclictest0-21swapper/22
3142399251,5cyclictest23484-21cron3
3141799253,9cyclictest1603-21find2
3141799253,6cyclictest0-21swapper/22
3141799252,7cyclictest9504-21/usr/sbin/munin2
31414992518,4cyclictest31623-21idleruntime-cro1
53032230,3sleep1201rcuc/11
3141799234,5cyclictest0-21swapper/22
3141799234,5cyclictest0-21swapper/22
3141799234,5cyclictest0-21swapper/22
3141799233,17cyclictest5745-21latency_hist2
3141799233,17cyclictest5745-21latency_hist2
3141799231,6cyclictest0-21swapper/22
31417992310,4cyclictest308-21ntpq2
3141799230,8cyclictest0-21swapper/22
31417992216,3cyclictest16781-21threads2
3141799221,4cyclictest8963-21munin-run2
3141799220,9cyclictest0-21swapper/22
31414992216,3cyclictest28148-21/usr/sbin/munin1
31414992215,4cyclictest15368-21sendmail1
182372220,1sleep10-21swapper/11
3141799219,10cyclictest23157-21aten2_r9power_p2
3141799216,12cyclictest3606-21ntp_states2
3141799214,15cyclictest9163-21sendmail-mta2
3141799212,17cyclictest9653-21latency_hist2
31417992116,3cyclictest5438-21cut2
31417992115,4cyclictest32753-21ntp_offset2
31417992115,3cyclictest831-21munin-run2
31417992114,4cyclictest2082-21systemd-journal2
31417992114,4cyclictest1965-21ntpq2
3141799211,3cyclictest28891-21munin-run2
3141799211,18cyclictest5123-21latency_hist2
31417992110,6cyclictest6746-21apt-get2
3141799210,8cyclictest0-21swapper/22
31414992115,4cyclictest2477-21run-parts1
31414992115,3cyclictest2082-21systemd-journal1
31414992113,5cyclictest32755-21ntpq1
31409992115,4cyclictest23507-21sendmail0
31409992115,4cyclictest2306-21seq0
31409992115,4cyclictest13253-21seq0
3141799208,8cyclictest25788-21apt-get2
3141799203,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,6cyclictest28-21ksoftirqd/22
3141799202,5cyclictest28-21ksoftirqd/22
3141799202,17cyclictest440-21awk2
3141799201,5cyclictest0-21swapper/22
31417992015,3cyclictest27475-21gltestperf2
31417992015,3cyclictest20196-21cron2
31417992015,3cyclictest18126-21timerwakeupswit2
31417992014,4cyclictest5972-21grep2
31417992014,4cyclictest5972-21grep2
31417992014,4cyclictest26359-21date2
31417992013,4cyclictest17571-21cat2
3141799200,3cyclictest25528-21munin-run2
3141499204,9cyclictest32332-21apt-get1
31414992015,3cyclictest14653-21munin-plugin-st1
31414992015,3cyclictest10721-21needreboot1
31414992014,4cyclictest7527-21seq1
31414992014,4cyclictest7527-21seq1
31414992014,4cyclictest26696-21seq1
31414992014,4cyclictest11235-21seq1
31409992016,2cyclictest7196-21aten2_r9power_c0
31409992015,3cyclictest9395-21apt-config0
31409992015,3cyclictest11629-21seq0
31409992014,4cyclictest23071-21apt-get0
31409992014,4cyclictest15842-21cat0
31409992014,4cyclictest15273-21seq0
31409992013,4cyclictest24112-21cat0
3140999200,1cyclictest0-21swapper/00
3141799192,5cyclictest28-21ksoftirqd/22
3141799192,5cyclictest28-21ksoftirqd/22
3141799192,5cyclictest28-21ksoftirqd/22
3141499193,9cyclictest7888-21apt-get1
3141499193,9cyclictest19692-21apt-get1
31414991917,1cyclictest0-21swapper/11
31414991915,2cyclictest31087-21/usr/sbin/munin1
31414991915,2cyclictest27800-21/usr/sbin/munin1
31414991915,2cyclictest14924-21/usr/sbin/munin1
31414991914,3cyclictest3495-21/usr/sbin/munin1
31414991914,3cyclictest27545-21cron1
31414991914,3cyclictest24823-21grep1
31414991914,3cyclictest23053-21/usr/sbin/munin1
31414991914,3cyclictest1563-21ntp_offset1
31414991914,3cyclictest15621-21/usr/sbin/munin1
31414991914,3cyclictest13813-21sed1
31414991914,3cyclictest13813-21sed1
31414991911,4cyclictest22225-21timerwakeupswit1
3140999192,15cyclictest3242-21cron0
3140999192,14cyclictest7222-21head0
31409991915,2cyclictest3934-21df_inode0
31409991914,3cyclictest32310-21sh0
31409991914,3cyclictest24628-21awk0
31409991914,3cyclictest1686-21cat0
31409991914,3cyclictest12281-21seq0
31409991913,4cyclictest6184-21expr0
31409991913,4cyclictest6184-21expr0
31409991913,4cyclictest6123-21basename0
31409991913,4cyclictest5296-21cat0
31409991913,4cyclictest413-21cron0
31409991913,4cyclictest28977-21date0
31409991913,4cyclictest27885-21cat0
31409991913,4cyclictest20363-21cut0
31409991913,4cyclictest1402-21cut0
31409991913,4cyclictest12719-21seq0
3140999190,17cyclictest13852-21kworker/0:10
31423991811,4cyclictest9144-21sh3
3142399180,16cyclictest0-21swapper/33
3141499182,9cyclictest14275-21apt-get1
31414991816,1cyclictest0-21swapper/11
31414991816,1cyclictest0-21swapper/11
31414991816,1cyclictest0-21swapper/11
31414991814,2cyclictest3340-21/usr/sbin/munin1
31414991814,2cyclictest10848-21/usr/sbin/munin1
3141499181,3cyclictest9145-21apt1
31414991813,3cyclictest6474-21cron1
31414991813,3cyclictest5882-21sed1
31414991813,3cyclictest5882-21sed1
31414991813,3cyclictest4729-21seq1
31414991813,3cyclictest30407-21awk1
31414991813,3cyclictest27013-21/usr/sbin/munin1
31414991813,3cyclictest23727-21/usr/sbin/munin1
31414991813,3cyclictest2066-21cat1
31414991813,3cyclictest15352-21seq1
31414991813,3cyclictest13496-21cut1
31414991812,4cyclictest18182-21grep1
31414991812,3cyclictest21-21ksoftirqd/11
31414991811,5cyclictest2082-21systemd-journal1
31414991811,4cyclictest10333-21gdbus1
3141499180,16cyclictest0-21swapper/11
31409991816,1cyclictest0-21swapper/00
31409991816,1cyclictest0-21swapper/00
31409991816,1cyclictest0-21swapper/00
31409991816,1cyclictest0-21swapper/00
31409991814,2cyclictest6788-21/usr/sbin/munin0
31409991814,2cyclictest3109-21acpi0
31409991814,2cyclictest27800-21/usr/sbin/munin0
31409991814,2cyclictest2715-21/usr/sbin/munin0
31409991813,3cyclictest9297-21expr0
31409991813,3cyclictest665-21runrttasks0
31409991813,3cyclictest665-21runrttasks0
31409991813,3cyclictest5941-21ls0
31409991813,3cyclictest5941-21ls0
31409991813,3cyclictest21950-21seq0
31409991813,3cyclictest2082-21systemd-journal0
31409991813,3cyclictest20168-21expr0
31409991813,3cyclictest18927-21latency_hist0
31409991813,3cyclictest13339-21aten2_r9power_e0
31409991813,3cyclictest13339-21aten2_r9power_e0
31409991813,3cyclictest12879-21acpi0
31409991813,3cyclictest11155-21timerwakeupswit0
31409991812,4cyclictest665-21runrttasks0
31409991812,4cyclictest26355-21cat0
31409991812,4cyclictest12391-21grep0
3140999181,14cyclictest8839-21grep0
31423991712,3cyclictest22865-21latency_hist3
31414991715,1cyclictest0-21swapper/11
31414991715,1cyclictest0-21swapper/11
31414991715,1cyclictest0-21swapper/11
31414991713,2cyclictest8813-21/usr/sbin/munin1
31414991713,2cyclictest6794-21aten2_r9power_e1
31414991713,2cyclictest2466-21latency_hist1
31414991713,2cyclictest22865-21latency_hist1
31414991713,2cyclictest1071-21/usr/sbin/munin1
31414991712,3cyclictest665-21runrttasks1
31414991712,3cyclictest23228-21seq1
31414991712,3cyclictest13085-21cut1
31414991710,4cyclictest20998-21gltestperf1
3140999173,8cyclictest18995-21apt-get0
31409991715,1cyclictest0-21swapper/00
31409991712,3cyclictest665-21runrttasks0
31409991712,3cyclictest665-21runrttasks0
31409991712,3cyclictest5308-21basename0
31409991712,3cyclictest29793-21cat0
31409991712,3cyclictest29643-21cat0
31409991712,3cyclictest23233-21seq0
31409991712,3cyclictest1844-21cat0
31409991711,4cyclictest30710-21sh0
31409991711,4cyclictest16765-21date0
31414991614,1cyclictest0-21swapper/11
3141499160,15cyclictest0-21swapper/11
31409991611,3cyclictest9333-21latency_hist0
31409991611,3cyclictest829-21latency_hist0
3141499138,3cyclictest665-21runrttasks1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional