You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-11 - 00:33
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack9slot2.osadl.org (updated Sun May 10, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
247342278203,64sleep20-21swapper/22
2496799262258,3cyclictest0-21swapper/00
244472260187,26sleep00-21swapper/00
244382252215,24sleep10-21swapper/11
247552246181,24sleep30-21swapper/33
2497499239232,4cyclictest28647-21strings1
2497999184180,2cyclictest0-21swapper/22
2498299157154,2cyclictest0-21swapper/33
1492821570,3sleep02496799cyclictest0
1502121280,1sleep215023-21uname2
47732610,2sleep10-21swapper/11
255002520,3sleep0101rcuc/00
271102480,2sleep30-21swapper/33
225972460,3sleep121-21ksoftirqd/11
161502450,1sleep30-21swapper/33
2497999371,5cyclictest21346-21cmp2
2498299359,9cyclictest10950-21grep3
2498299325,16cyclictest0-21swapper/33
24979993211,5cyclictest32685-21grep2
2498299315,15cyclictest0-21swapper/33
214412300,7sleep2281ksoftirqd/22
2497999293,9cyclictest24516-21apt-get2
2497999292,8cyclictest6562-21apt-get2
2497999292,8cyclictest16580-21apt-get2
2498299285,8cyclictest0-21swapper/33
2497999283,8cyclictest29070-21apt-get2
2497999283,8cyclictest20752-21apt-get2
2497999272,9cyclictest13087-21apt-get2
24979992717,5cyclictest23847-21munin-run2
2498299268,10cyclictest290701apt-get3
2497999251,4cyclictest537-21gdbus2
2496799250,11cyclictest65492cut0
2498299247,14cyclictest1353-21cut3
2496799242,19cyclictest23843-21cron0
24982992317,4cyclictest8370-21munin-run3
24982992313,6cyclictest15156-21apt-get3
2497999235,15cyclictest31727-21cron2
2497999233,17cyclictest16492-21cat2
24979992316,4cyclictest4241-21cron2
24979992315,6cyclictest480-21cron2
24979992315,5cyclictest27496-21grep2
2496799237,9cyclictest22805-21apt-get0
2496799233,13cyclictest32389-21taskset0
24967992317,3cyclictest32281-21ntpq0
24982992214,5cyclictest20123-21munin-run3
24982992213,5cyclictest26156-21apt-get3
24982992213,5cyclictest25113-21apt-get3
24982992212,8cyclictest21716-21head3
24982992211,8cyclictest24625-21perf3
24982992210,9cyclictest2521-21ntp_states3
2497999223,17cyclictest5609-21latency_hist2
2497999223,17cyclictest28418-21latency_hist2
2497999221,4cyclictest325-21systemd-journal2
2497999221,4cyclictest25865-21cron2
2497999221,4cyclictest25865-21cron2
2497999221,4cyclictest24601-21cron2
2497999221,3cyclictest28049-21sleep2
24979992211,9cyclictest27871-21ntp_states2
2497999221,18cyclictest17005-21idleruntime-cro2
2496799229,7cyclictest72752chrt0
24967992217,3cyclictest28435-21sleep0
24967992216,3cyclictest9323-21acpi0
24967992215,4cyclictest29089-21aten2_r9power_p0
65442210,2sleep30-21swapper/33
2498299219,9cyclictest16433-21ntp_states3
2498299219,10cyclictest16227-21apt-get3
2498299211,7cyclictest0-21swapper/33
24982992113,5cyclictest22489-21entropy3
24982992112,5cyclictest29924-21apt-get3
24982992112,5cyclictest20379-21apt-get3
24982992111,7cyclictest11824-21munin-run3
2497999212,17cyclictest20179-21cat2
2497999212,16cyclictest1357-21latency_hist2
2497999212,15cyclictest2595-21munin-run2
24979992117,2cyclictest240962chrt2
2497999211,5cyclictest32489-21cron2
24979992115,3cyclictest14167-21sed2
24979992114,4cyclictest25849-21grep2
24979992114,4cyclictest16723-21tail2
2497999211,3cyclictest24779-1kworker/2:0H2
2497999211,18cyclictest8072-21awk2
2497999211,17cyclictest6986-21munin-run2
2497999211,17cyclictest24779-1kworker/2:0H2
2497999211,17cyclictest0-21swapper/22
24979992110,6cyclictest10407-21apt-get2
24974992117,3cyclictest18035-21cron1
24974992117,2cyclictest10470-21ls1
24974992116,3cyclictest20732-21/usr/sbin/munin1
24974992116,3cyclictest13118-21processes1
24974992116,3cyclictest1022-21/usr/sbin/munin1
24974992115,4cyclictest1910-21seq1
24967992116,3cyclictest22441-21/usr/sbin/munin0
24967992114,4cyclictest9199-21ntpq0
24967992114,4cyclictest2395-21sed0
67812200,4sleep16783-21sed1
2498299209,8cyclictest9555-21ntp_states3
2498299209,8cyclictest9201-21latency_hist3
2498299209,8cyclictest1533-21load3
2498299208,9cyclictest31216-21cut3
2498299208,9cyclictest13306-21nfs4_client3
24982992015,3cyclictest30842-21cpu3
24982992014,4cyclictest25869-21/usr/sbin/munin3
24982992014,4cyclictest25869-21/usr/sbin/munin3
24982992014,4cyclictest25203-21cat3
24982992013,5cyclictest6977-21cron3
24982992013,4cyclictest4248-21munin-run3
24982992013,4cyclictest30664-21cstates3
24982992012,5cyclictest28227-21apt-get3
24982992012,5cyclictest19103-21cat3
24982992012,5cyclictest11395-21apt-get3
24982992011,6cyclictest29169-21/usr/sbin/munin3
24982992011,6cyclictest23215-21memory3
24982992011,6cyclictest1777-21munin-run3
24982992011,5cyclictest14532-21apt-get3
24982992010,8cyclictest5378-21awk3
24982992010,7cyclictest19619-21/usr/sbin/munin3
24982992010,7cyclictest19307-21munin-node3
24982992010,7cyclictest14007-21/usr/sbin/munin3
24982992010,7cyclictest10168-21sleep3
2498299200,17cyclictest0-21swapper/33
2497999203,15cyclictest20492-21latency_hist2
2497999202,6cyclictest4191-21apt-get2
24979992014,4cyclictest9633-21awk2
24979992014,4cyclictest2736-21cut2
2497999201,17cyclictest31420-21apt-get2
2497999201,17cyclictest25958-21latency_hist2
2497999200,3cyclictest6963-1kworker/2:1H2
2497999200,3cyclictest21794-21basename2
24974992016,2cyclictest13435-21/usr/sbin/munin1
24974992015,3cyclictest30631-21seq1
24974992015,3cyclictest19973-21kernelversion1
24974992015,3cyclictest1530-21seq1
24974992014,4cyclictest24122-21/usr/sbin/munin1
24967992014,4cyclictest1678-21ntp_states0
24967992014,3cyclictest25988-21basename0
24967992013,4cyclictest325-21systemd-journal0
2496799201,16cyclictest3944-21ls0
24982991916,2cyclictest0-21swapper/33
24982991914,3cyclictest9435-21sh3
24982991914,3cyclictest3915-21missed_timers3
24982991914,3cyclictest26796-21cat3
24982991913,4cyclictest7681-21cron3
24982991913,4cyclictest31977-21acpi3
24982991913,4cyclictest0-21swapper/33
24982991912,5cyclictest9761-21munin-run3
24982991912,5cyclictest9761-21munin-run3
24982991911,6cyclictest25972-21turbostat.cron3
24982991911,5cyclictest26956-21/usr/sbin/munin3
24982991911,5cyclictest2163-21basename3
24982991911,5cyclictest17015-21/usr/sbin/munin3
24982991911,5cyclictest13948-21/usr/sbin/munin3
24982991911,5cyclictest12513-21/usr/sbin/munin3
24982991910,7cyclictest1430-21plymouth3
24982991910,6cyclictest10832-21/usr/sbin/munin3
24979991914,3cyclictest9524-21cat2
24979991914,3cyclictest17365-21basename2
24979991913,4cyclictest30213-21sed2
24979991913,4cyclictest12645-21apt-config2
24979991913,4cyclictest12472-21expr2
24979991913,3cyclictest5943-21cut2
24979991912,5cyclictest512-21dbus-daemon2
24979991912,4cyclictest13186-21cron2
2497999190,3cyclictest6963-1kworker/2:1H2
2497999190,3cyclictest12536-1kworker/2:0H2
2497499191,7cyclictest325-21systemd-journal1
24974991915,2cyclictest27092-21munin-node1
24974991915,2cyclictest27092-21munin-node1
24974991915,2cyclictest23821-21apt-config1
24974991915,2cyclictest23821-21apt-config1
24974991915,2cyclictest12439-21/usr/sbin/munin1
24974991915,2cyclictest0-21swapper/11
24974991914,3cyclictest7252-21/usr/sbin/munin1
24974991914,3cyclictest5178-21/usr/sbin/munin1
24974991914,3cyclictest4837-21seq1
24974991914,3cyclictest31970-21/usr/sbin/munin1
24974991914,3cyclictest31146-21/usr/sbin/munin1
24974991914,3cyclictest29906-21/usr/sbin/munin1
24974991914,3cyclictest28337-21seq1
24974991914,3cyclictest27092-21munin-node1
24974991914,3cyclictest2032-21date1
24974991914,3cyclictest17548-21grep1
24974991914,3cyclictest14157-21/usr/sbin/munin1
24974991914,3cyclictest12434-21seq1
24974991914,3cyclictest11294-21sh1
24974991914,3cyclictest10014-21/usr/sbin/munin1
24974991913,4cyclictest7430-21ntpq1
24974991913,4cyclictest587-21seq1
24974991913,4cyclictest512-21dbus-daemon1
24974991913,4cyclictest512-21dbus-daemon1
24974991913,4cyclictest32427-21seq1
24974991913,4cyclictest28989-21date1
24974991913,4cyclictest17904-21cut1
24974991913,4cyclictest17681-21sh1
24974991913,4cyclictest17041-21date1
24974991913,4cyclictest15108-21cat1
2496799193,9cyclictest31165-21apt-get0
2496799193,9cyclictest21692-21apt-get0
24967991916,2cyclictest0-21swapper/00
24967991916,2cyclictest0-21swapper/00
24967991914,3cyclictest29052-21/usr/sbin/munin0
24967991914,3cyclictest25244-21sed0
24967991914,3cyclictest25244-21sed0
24967991914,3cyclictest13992-21grep0
24967991913,4cyclictest19636-21grep0
24967991912,4cyclictest21223-21apt-key0
24967991912,4cyclictest12508-21cron0
24967991911,5cyclictest14263-21munin-plugin-st0
24982991811,4cyclictest18046-21diskstats3
2497999183,9cyclictest1634-21apt-get2
24979991816,1cyclictest0-21swapper/22
24979991813,3cyclictest668-21runrttasks2
24979991813,3cyclictest4256-21cat2
24979991812,4cyclictest8715-21load2
24979991812,4cyclictest8715-21load2
24979991812,4cyclictest5678-21grep2
2497999180,16cyclictest0-21swapper/22
2497499183,9cyclictest18325-21apt-get1
24974991814,2cyclictest19680-21/usr/sbin/munin1
24974991813,3cyclictest9418-21wc1
24974991813,3cyclictest668-21runrttasks1
24974991813,3cyclictest6238-21expr1
24974991813,3cyclictest28208-21/usr/sbin/munin1
24974991813,3cyclictest27776-21seq1
24974991813,3cyclictest24853-21/usr/sbin/munin1
24974991813,3cyclictest21-21ksoftirqd/11
24974991813,3cyclictest19588-21sh1
24974991813,3cyclictest13910-21uname1
24974991813,3cyclictest10778-21seq1
24974991812,4cyclictest29396-21expr1
24974991812,4cyclictest24839-21grep1
24974991812,4cyclictest23998-21seq1
24974991812,4cyclictest12939-21seq1
24974991811,4cyclictest2103-21grep1
2496799183,9cyclictest31988-21apt-get0
24967991816,1cyclictest0-21swapper/00
24967991815,2cyclictest0-21swapper/00
24967991815,2cyclictest0-21swapper/00
24967991814,2cyclictest19680-21/usr/sbin/munin0
24967991814,2cyclictest19646-21grep0
24967991813,3cyclictest668-21runrttasks0
24967991813,3cyclictest668-21runrttasks0
24967991813,3cyclictest4915-21sed0
24967991813,3cyclictest17348-21sed0
24967991813,3cyclictest14157-21/usr/sbin/munin0
24967991813,3cyclictest10387-21/usr/sbin/munin0
24967991812,4cyclictest9399-21seq0
24967991812,4cyclictest9399-21seq0
24967991812,4cyclictest32546-21cups-browsed0
24967991812,4cyclictest29657-21grep0
24967991812,4cyclictest29045-21df0
24967991812,3cyclictest668-21runrttasks0
24967991812,3cyclictest668-21runrttasks0
24967991810,5cyclictest11717-21grep0
24979991712,3cyclictest668-21runrttasks2
24974991713,3cyclictest4172-21/usr/sbin/munin1
24974991712,3cyclictest18254-21seq1
24974991711,4cyclictest32098-21seq1
24974991711,4cyclictest26979-21grep1
2497499170,16cyclictest0-21swapper/11
2496799172,12cyclictest26737-21basename0
24967991715,1cyclictest0-21swapper/00
24967991713,2cyclictest668-21runrttasks0
24967991713,2cyclictest14103-21interrupts0
24967991712,3cyclictest668-21runrttasks0
24967991712,3cyclictest668-21runrttasks0
24967991712,3cyclictest5187-21ps0
24967991712,3cyclictest5094-21cat0
24967991712,3cyclictest2245-21timerandwakeup0
24967991712,3cyclictest14513-21/usr/sbin/munin0
24967991712,3cyclictest11822-21latency_hist0
24967991710,4cyclictest8729-21aten2.4-expect0
24967991710,4cyclictest32532-21sendmail0
24967991710,3cyclictest1683-21aten2_r9power_e0
24967991611,3cyclictest668-21runrttasks0
24967991611,3cyclictest668-21runrttasks0
24967991611,3cyclictest30268-21cstates0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional