You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-26 - 11:18
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Thu Mar 26, 2026 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
327472281202,43sleep20-21swapper/22
13742249177,24sleep30-21swapper/33
13712242169,25sleep00-21swapper/00
14072224188,24sleep10-21swapper/11
640721500,2sleep1160999cyclictest1
1278221400,2sleep00-21swapper/00
2556021370,2sleep00-21swapper/00
31772660,10sleep33181-21cpuspeed_turbos3
314342620,3sleep20-21swapper/22
52912460,1sleep10-21swapper/11
195572440,3sleep119560-21unixbench_multi1
326512430,1sleep10-21swapper/11
161599418,9cyclictest21063-21cat3
278142400,1sleep227816-21cmp2
1615993511,8cyclictest20701-21dpkg3
1615993510,10cyclictest16167-21cat3
1613993514,5cyclictest3088-21apt-get2
1615993410,9cyclictest16051-21awk3
1615993410,10cyclictest28899-21munin-run3
1615993312,8cyclictest10512-21grep3
318152320,6sleep121-21ksoftirqd/11
161599319,9cyclictest3025-21cat3
1615993111,8cyclictest19878-21cat3
1615993110,8cyclictest17232-21aten2.4-expect3
161599307,13cyclictest5920-21taskset3
161599306,8cyclictest0-21swapper/33
161599302,15cyclictest0-21swapper/33
161399303,9cyclictest13058-21apt-get2
161599297,9cyclictest14321-21/usr/sbin/munin3
161599294,9cyclictest0-21swapper/33
1615992912,15cyclictest10614-21aten2.4-expect3
161599289,16cyclictest28175-21aten2.4-expect3
161599288,7cyclictest1913-21cron3
161599286,8cyclictest0-21swapper/33
161599275,7cyclictest0-21swapper/33
161399278,4cyclictest27056-21cron2
161399275,20cyclictest5988-21dump-pmu-power2
171632260,2sleep00-21swapper/00
161599267,7cyclictest0-21swapper/33
1615992612,11cyclictest25017-21irqstats3
1615992517,6cyclictest18301-21/usr/sbin/munin3
1615992513,9cyclictest7314-21/usr/sbin/munin3
1615992513,10cyclictest17202-21/usr/sbin/munin3
1615992512,10cyclictest16857-21/usr/sbin/munin3
1615992511,11cyclictest4528-21cstates3
1615992510,12cyclictest32291-21cut3
1615992413,9cyclictest30920-21/usr/sbin/munin3
1615992413,8cyclictest25266-21/usr/sbin/munin3
1615992413,8cyclictest25266-21/usr/sbin/munin3
1615992413,6cyclictest9509-21apt-get3
1615992412,9cyclictest7807-21nfs4_client3
1615992412,9cyclictest30148-21/usr/sbin/munin3
1615992412,9cyclictest29483-21/usr/sbin/munin3
1615992412,9cyclictest26405-21/usr/sbin/munin3
1615992412,9cyclictest21942-21/usr/sbin/munin3
1615992412,9cyclictest1591-21/usr/sbin/munin3
1615992412,9cyclictest1031-21open_inodes3
1615992412,9cyclictest1031-21open_inodes3
1615992412,10cyclictest22354-21/usr/sbin/munin3
1615992410,12cyclictest14488-21pmu-power3
161399241,20cyclictest24094-40mandb2
161399241,19cyclictest3659-21munin-run2
1604992411,10cyclictest30151-21cat0
1615992315,6cyclictest10193-21cat3
1615992314,5cyclictest11033-21apt-get3
1615992312,9cyclictest29601-21/usr/sbin/munin3
1615992312,9cyclictest20569-21/usr/sbin/munin3
1615992312,9cyclictest18566-21/usr/sbin/munin3
1615992312,9cyclictest14207-21/usr/sbin/munin3
1615992312,8cyclictest9386-21users3
1615992312,8cyclictest7695-21/usr/sbin/munin3
1615992312,8cyclictest7113-21/usr/sbin/munin3
1615992312,8cyclictest32033-21if_err_enp2s03
1615992312,8cyclictest27041-21/usr/sbin/munin3
1615992311,9cyclictest31466-21unixbench-2d3
1615992311,9cyclictest23898-21interrupts3
1615992311,9cyclictest2298-21/usr/sbin/munin3
1615992311,9cyclictest22835-21aten2_r9power_p3
1613992315,4cyclictest325-21systemd-journal2
161399231,19cyclictest14375-21sendmail-mta2
161399231,18cyclictest2655-21sendmail-mta2
1609992317,4cyclictest7727-21ls1
1604992312,3cyclictest10778-21sendmail0
1615992216,4cyclictest15213-21if_err_enp3s03
1615992215,5cyclictest28216-21/usr/sbin/munin3
1615992214,6cyclictest6158-21/usr/sbin/munin3
1615992212,8cyclictest21308-21aten2_r9power_v3
1615992212,8cyclictest1266-21diskstats3
1615992212,8cyclictest12472-21/usr/sbin/munin3
1615992212,7cyclictest9094-21if_err_enp2s03
1615992212,7cyclictest9094-21if_err_enp2s03
1615992212,7cyclictest3087-21/usr/sbin/munin3
1615992211,9cyclictest14101-21/usr/sbin/munin3
1615992211,8cyclictest12884-21nfs4_client3
161399224,16cyclictest25547-21latency_hist2
1613992215,4cyclictest325-21systemd-journal2
1613992214,5cyclictest512-21dbus-daemon2
1613992212,5cyclictest9002-21apt-get2
161399220,19cyclictest32294-21sendmail2
1609992216,4cyclictest31983-21dump-pmu-power1
1604992214,5cyclictest23771-21acpi0
90722210,1sleep20-21swapper/22
323732210,2sleep00-21swapper/00
1615992110,7cyclictest0-21swapper/33
161399212,3cyclictest0-21swapper/22
161399212,17cyclictest5666-21latency_hist2
161399212,17cyclictest29170-21cat2
161399212,17cyclictest13820-21latency_hist2
161399212,14cyclictest22753-21apt-get2
161399212,13cyclictest21209-21apt-get2
1613992115,4cyclictest512-21dbus-daemon2
1613992114,4cyclictest30589-21seq2
1613992114,4cyclictest22050-21perf2
161399211,17cyclictest19986-21cron2
161399211,17cyclictest14052-1kworker/2:1H2
1613992111,6cyclictest17141-21apt-get2
161399210,3cyclictest268832sleep22
161399210,3cyclictest268832sleep22
161399210,19cyclictest0-21swapper/22
161399210,18cyclictest8744-21munin-run2
1609992116,3cyclictest713-21sed1
1604992115,4cyclictest8001-21seq0
1604992115,4cyclictest6664-21seq0
161399209,7cyclictest9509-21apt-get2
161399202,16cyclictest3545-21latency_hist2
1613992016,2cyclictest6684-21latency_hist2
1613992015,3cyclictest18407-21latency_hist2
1613992014,4cyclictest643-21cut2
1613992014,4cyclictest643-21cut2
161399201,3cyclictest29137-1kworker/2:1H2
1613992013,4cyclictest325-21systemd-journal2
161399201,1cyclictest28145-21apt-get2
161399201,17cyclictest29137-1kworker/2:1H2
161399201,17cyclictest19428-21latency_hist2
161399201,17cyclictest1784-21cat2
161399201,17cyclictest17502-21cat2
1609992015,3cyclictest22043-21dump-pmu-power1
1609992015,3cyclictest20450-21sed1
1609992015,3cyclictest14325-21idleruntime-cro1
1609992014,4cyclictest25247-21ntpq1
1609992014,4cyclictest24506-21seq1
1609992014,4cyclictest15334-21cron1
1609992013,5cyclictest27231-21grep1
160499201,6cyclictest0-21swapper/00
1604992015,3cyclictest9636-21sh0
1604992015,3cyclictest668-21runrttasks0
1604992015,3cyclictest668-21runrttasks0
1604992015,3cyclictest27100-21/usr/sbin/munin0
1604992015,3cyclictest17873-21ls0
1604992015,3cyclictest17330-21threads0
1604992015,3cyclictest16132-21seq0
1604992015,3cyclictest11440-21seq0
1604992014,4cyclictest373-21seq0
1604992014,4cyclictest26768-21seq0
1604992014,4cyclictest26768-21seq0
1604992013,5cyclictest27127-21cat0
1604992013,4cyclictest3500-21df0
149282200,3sleep00-21swapper/00
161399199,8cyclictest25616-21timerwakeupswit2
161399195,12cyclictest0-21swapper/22
1613991916,2cyclictest0-21swapper/22
1613991915,2cyclictest0-21swapper/22
1613991914,3cyclictest20993-21sed2
1613991913,4cyclictest22613-21ls2
1613991913,3cyclictest27929-21needreboot2
1613991912,3cyclictest668-21runrttasks2
161399191,16cyclictest6166-21latency_hist2
161399191,16cyclictest16389-21perf2
161399191,16cyclictest0-21swapper/22
161399190,17cyclictest28176-21cron2
161399190,17cyclictest23709-21cat2
1609991916,2cyclictest0-21swapper/11
1609991916,2cyclictest0-21swapper/11
1609991916,2cyclictest0-21swapper/11
1609991916,2cyclictest0-21swapper/11
1609991915,2cyclictest2014-21cpuspeed_turbos1
1609991914,3cyclictest9771-21idleruntime-cro1
1609991914,3cyclictest9356-21ntpq1
1609991914,3cyclictest9356-21ntpq1
1609991914,3cyclictest29141-21/usr/sbin/munin1
1609991914,3cyclictest25794-21sed1
1609991914,3cyclictest11891-21grep1
1609991914,3cyclictest11271-21cron1
1609991914,3cyclictest10715-21seq1
1609991913,4cyclictest9295-21sed1
1609991913,4cyclictest6791-21seq1
1609991913,4cyclictest16147-21sed1
1609991913,3cyclictest22496-21idleruntime-cro1
1609991912,4cyclictest3127-21awk1
1609991912,4cyclictest13969-21awk1
160999191,16cyclictest0-21swapper/11
160999190,2cyclictest25086-21apt-get1
160999190,2cyclictest25086-21apt-get1
160499196,4cyclictest9-21ksoftirqd/00
1604991915,2cyclictest23965-21timerwakeupswit0
1604991915,2cyclictest19308-21sh0
1604991914,3cyclictest870-21sed0
1604991914,3cyclictest8115-21threads0
1604991914,3cyclictest668-21runrttasks0
1604991914,3cyclictest5947-21hostname0
1604991914,3cyclictest5130-21load0
1604991914,3cyclictest30190-21apt-get0
1604991914,3cyclictest28360-21processes0
1604991914,3cyclictest27540-21seq0
1604991914,3cyclictest20518-21cut0
1604991914,3cyclictest14023-21seq0
1604991913,4cyclictest25849-21seq0
1604991913,4cyclictest24362-21ls0
1604991913,4cyclictest19965-21tr0
1604991913,4cyclictest18242-21hostname0
1604991913,4cyclictest16304-21sed0
1604991913,4cyclictest15303-21cat0
1604991913,4cyclictest1478-21diskstats0
160499191,16cyclictest19069-21cut0
1604991911,5cyclictest20387-21cpu0
1613991814,2cyclictest31214-21/usr/sbin/munin2
1613991813,3cyclictest668-21runrttasks2
1613991813,3cyclictest668-21runrttasks2
1613991813,3cyclictest1514-21grep2
1613991810,5cyclictest21468-21munin-run2
161399180,3cyclictest8220-21cron2
161399180,2cyclictest24736-21kworker/u8:12
160999189,7cyclictest4722-21grep1
160999186,2cyclictest11800-21idleruntime-cro1
1609991816,1cyclictest0-21swapper/11
1609991814,2cyclictest2885-21apt1
1609991814,2cyclictest28431-21/usr/sbin/munin1
1609991814,2cyclictest25789-21/usr/sbin/munin1
1609991814,2cyclictest17123-21/usr/sbin/munin1
1609991813,3cyclictest4120-21cut1
1609991813,3cyclictest32536-21/usr/sbin/munin1
1609991813,3cyclictest32536-21/usr/sbin/munin1
1609991813,3cyclictest27100-21/usr/sbin/munin1
1609991813,3cyclictest2255-21expr1
1609991813,3cyclictest22269-21/usr/sbin/munin1
1609991813,3cyclictest16870-21sed1
1609991812,4cyclictest512-21dbus-daemon1
1609991812,4cyclictest25067-21grep1
1609991812,4cyclictest11686-21sed1
1609991810,3cyclictest5265-21tr1
1609991810,3cyclictest0-21swapper/11
160999180,16cyclictest0-21swapper/11
1604991814,2cyclictest668-21runrttasks0
1604991814,2cyclictest21731-21aten2_r9power_c0
1604991814,2cyclictest2160-21/usr/sbin/munin0
1604991814,2cyclictest13040-21/usr/sbin/munin0
1604991813,3cyclictest7333-21apt-key0
1604991813,3cyclictest7324-21ls0
1604991813,3cyclictest668-21runrttasks0
1604991813,3cyclictest4974-21sh0
1604991813,3cyclictest32415-21cat0
1604991813,3cyclictest22097-21awk0
1604991813,3cyclictest11833-21cat0
1604991812,4cyclictest4997-21cat0
160499180,17cyclictest0-21swapper/00
305252170,3sleep00-21swapper/00
161399172,9cyclictest23267-21apt-get2
1613991715,1cyclictest0-21swapper/22
1609991713,2cyclictest6440-21/usr/sbin/munin1
1609991713,2cyclictest28127-21/usr/sbin/munin1
1609991712,3cyclictest668-21runrttasks1
1609991712,3cyclictest31178-21perf1
1609991712,3cyclictest22446-21cat1
1609991712,3cyclictest17695-21tr1
1609991712,3cyclictest0-21swapper/11
1609991711,4cyclictest16212-21seq1
1604991713,2cyclictest28944-21sed0
1604991713,2cyclictest11541-21apt-get0
1604991712,3cyclictest3461-21if_enp3s00
1604991712,3cyclictest23167-21ntpq0
1604991712,3cyclictest20736-21aten2_r9power_e0
1604991712,3cyclictest1871-21aten2_r9power_p0
1604991712,3cyclictest14983-21seq0
1604991711,4cyclictest369-21expr0
1604991711,4cyclictest369-21expr0
1613991611,3cyclictest6338-21ls2
160999169,4cyclictest12308-21cpuspeed_turbos1
1609991611,3cyclictest668-21runrttasks1
1609991611,3cyclictest3070-21/usr/sbin/munin1
1609991611,3cyclictest21-21ksoftirqd/11
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional