You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-26 - 00:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Wed Mar 25, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
284672255185,41sleep10-21swapper/11
284212254185,56sleep00-21swapper/00
285832251215,24sleep30-21swapper/33
284132240176,51sleep20-21swapper/22
2883499192186,4cyclictest10641-21sendmail-msp2
2435921510,6sleep1211ksoftirqd/11
2883799134129,3cyclictest10593-21munin-run3
2882999116113,2cyclictest0-21swapper/11
288259910397,3cyclictest10619-21perf0
63212570,1sleep10-21swapper/11
291072500,2sleep00-21swapper/00
214552420,2sleep00-21swapper/00
28837994011,9cyclictest24377-21sed3
2883799358,15cyclictest30544-21/usr/sbin/munin3
28837993511,9cyclictest6485-21chrt3
28837993511,9cyclictest11321-21cron3
313232340,2sleep00-21swapper/00
2882999331,6cyclictest21-21ksoftirqd/11
2882999330,5cyclictest21-21ksoftirqd/11
2882999324,5cyclictest201rcuc/11
2883799315,14cyclictest0-21swapper/33
28825993113,5cyclictest9-21ksoftirqd/00
2883799308,7cyclictest25255-21irqstats3
28837993012,15cyclictest24117-21gltestperf3
2882999301,5cyclictest201rcuc/11
2883799294,9cyclictest0-21swapper/33
2883799294,8cyclictest0-21swapper/33
2882999293,6cyclictest21-21ksoftirqd/11
2882999293,6cyclictest21-21ksoftirqd/11
28829992911,7cyclictest21-21ksoftirqd/11
28825992920,3cyclictest9-21ksoftirqd/00
28825992918,3cyclictest9-21ksoftirqd/00
2883799285,7cyclictest0-21swapper/33
2883799284,10cyclictest0-21swapper/33
2883799284,10cyclictest0-21swapper/33
28837992811,14cyclictest5754-21needreboot3
28825992820,2cyclictest9-21ksoftirqd/00
28825992812,4cyclictest9-21ksoftirqd/00
51392270,3sleep10-21swapper/11
51392270,3sleep10-21swapper/11
2883799276,8cyclictest0-21swapper/33
2883799275,8cyclictest0-21swapper/33
2882999273,5cyclictest21-21ksoftirqd/11
2882999272,2cyclictest21-21ksoftirqd/11
28829992712,3cyclictest111rcu_preempt1
2882999270,6cyclictest21-21ksoftirqd/11
2882999270,6cyclictest21-21ksoftirqd/11
28825992715,3cyclictest9-21ksoftirqd/00
2882599270,5cyclictest9-21ksoftirqd/00
77782260,8sleep228-21ksoftirqd/22
2883799269,14cyclictest155031aten2.4-expect3
2883799269,14cyclictest155031aten2.4-expect3
2883799268,15cyclictest29829-21cat3
2883799266,7cyclictest0-21swapper/33
2882999268,6cyclictest21-21ksoftirqd/11
2882999263,6cyclictest21-21ksoftirqd/11
2882999260,5cyclictest21-21ksoftirqd/11
2882999260,5cyclictest21-21ksoftirqd/11
2882999260,14cyclictest21-21ksoftirqd/11
2882599266,4cyclictest9-21ksoftirqd/00
28825992622,3cyclictest9-21ksoftirqd/00
28825992616,3cyclictest9-21ksoftirqd/00
28825992614,3cyclictest9-21ksoftirqd/00
28825992613,4cyclictest9-21ksoftirqd/00
221132260,1sleep00-21swapper/00
2882999253,6cyclictest21-21ksoftirqd/11
2882999253,5cyclictest21-21ksoftirqd/11
2882999250,6cyclictest21-21ksoftirqd/11
2882999250,5cyclictest21-21ksoftirqd/11
2882599258,4cyclictest9-21ksoftirqd/00
2882599257,4cyclictest9-21ksoftirqd/00
2882599257,4cyclictest9-21ksoftirqd/00
28825992516,3cyclictest9-21ksoftirqd/00
28825992516,3cyclictest9-21ksoftirqd/00
28825992515,3cyclictest9-21ksoftirqd/00
28825992511,4cyclictest9-21ksoftirqd/00
28825992510,3cyclictest9-21ksoftirqd/00
306912240,1sleep20-21swapper/22
28837992417,4cyclictest3211-21awk3
28834992412,7cyclictest31647-21apt-get2
2882999245,7cyclictest21-21ksoftirqd/11
2882999243,2cyclictest111rcu_preempt1
2882999242,6cyclictest21-21ksoftirqd/11
28829992421,2cyclictest201rcuc/11
2882999240,7cyclictest21-21ksoftirqd/11
2882999240,7cyclictest21-21ksoftirqd/11
2882999240,7cyclictest21-21ksoftirqd/11
2882599249,4cyclictest9-21ksoftirqd/00
2882599248,4cyclictest9-21ksoftirqd/00
2882599248,4cyclictest9-21ksoftirqd/00
2882599247,3cyclictest9-21ksoftirqd/00
2882599247,2cyclictest111rcu_preempt0
28825992415,3cyclictest9-21ksoftirqd/00
28825992415,3cyclictest9-21ksoftirqd/00
28825992414,3cyclictest9-21ksoftirqd/00
28825992412,3cyclictest9-21ksoftirqd/00
292192230,2sleep30-21swapper/33
2883799238,12cyclictest15639-21sort3
2883799238,12cyclictest10097-21sh3
2883799237,14cyclictest20883-21grep3
2883799234,7cyclictest0-21swapper/33
28837992315,6cyclictest325-21systemd-journal3
2883499234,17cyclictest18873-21cat2
28834992311,10cyclictest20368-21sed2
2882999236,8cyclictest111rcu_preempt1
2882999234,6cyclictest21-21ksoftirqd/11
2882999234,10cyclictest21-21ksoftirqd/11
2882999233,7cyclictest21-21ksoftirqd/11
2882999233,6cyclictest21-21ksoftirqd/11
2882999232,6cyclictest21-21ksoftirqd/11
2882999232,6cyclictest21-21ksoftirqd/11
2882999232,6cyclictest21-21ksoftirqd/11
28829992319,2cyclictest201rcuc/11
2882999231,5cyclictest0-21swapper/11
2882999230,7cyclictest201rcuc/11
2882999230,6cyclictest21-21ksoftirqd/11
2882599238,5cyclictest5000-21seq0
2882599238,5cyclictest5000-21seq0
2882599235,7cyclictest9-21ksoftirqd/00
28825992314,3cyclictest9-21ksoftirqd/00
2883799222,7cyclictest0-21swapper/33
28837992212,5cyclictest26472-21apt-get3
2883499223,17cyclictest6216-21latency_hist2
28834992215,4cyclictest4144-21ntpq2
28834992215,4cyclictest4144-21ntpq2
2883499221,4cyclictest17233-21perf2
2883499221,4cyclictest17233-21perf2
2883499221,19cyclictest512-21dbus-daemon2
2883499221,19cyclictest32553-21perf2
28834992210,7cyclictest19533-21apt-get2
2882999226,8cyclictest111rcu_preempt1
2882999225,9cyclictest21-21ksoftirqd/11
2882999224,9cyclictest21-21ksoftirqd/11
2882999224,6cyclictest21-21ksoftirqd/11
2882999223,9cyclictest21-21ksoftirqd/11
2882999223,6cyclictest21-21ksoftirqd/11
2882999223,10cyclictest21-21ksoftirqd/11
2882999222,6cyclictest21-21ksoftirqd/11
2882999222,5cyclictest0-21swapper/11
2882999221,5cyclictest21-21ksoftirqd/11
2882999220,7cyclictest21-21ksoftirqd/11
2882599228,4cyclictest9-21ksoftirqd/00
2882599224,3cyclictest9-21ksoftirqd/00
2882599223,3cyclictest9-21ksoftirqd/00
28825992214,3cyclictest9-21ksoftirqd/00
28825992214,3cyclictest9-21ksoftirqd/00
28825992214,3cyclictest9-21ksoftirqd/00
28825992212,3cyclictest9-21ksoftirqd/00
28837992116,3cyclictest14677-21sendmail3
28837992112,5cyclictest9028-21apt-get3
2883499212,17cyclictest24955-21cat2
2883499212,17cyclictest22881-21sendmail-mta2
2883499212,17cyclictest11326-21latency_hist2
28834992115,4cyclictest17751-21perf2
28834992115,4cyclictest11760-21uptime2
28834992114,4cyclictest325-21systemd-journal2
28834992114,4cyclictest325-21systemd-journal2
28834992114,4cyclictest1955-21sh2
28834992113,5cyclictest537-21gdbus2
2883499211,18cyclictest6733-21munin-run2
2883499211,18cyclictest537-21gdbus2
2883499211,18cyclictest512-21dbus-daemon2
2883499211,17cyclictest15705-21perf2
2883499210,4cyclictest537-21gdbus2
2883499210,4cyclictest13433-21apt-config2
2883499210,18cyclictest22806-21diskstats2
2882999213,7cyclictest21-21ksoftirqd/11
2882999213,5cyclictest21-21ksoftirqd/11
2882999213,5cyclictest21-21ksoftirqd/11
2882999212,6cyclictest21-21ksoftirqd/11
2882999212,6cyclictest21-21ksoftirqd/11
2882999212,6cyclictest21-21ksoftirqd/11
2882999212,6cyclictest21-21ksoftirqd/11
2882999211,7cyclictest21-21ksoftirqd/11
2882999211,6cyclictest21-21ksoftirqd/11
2882999211,6cyclictest21-21ksoftirqd/11
2882999210,7cyclictest25099-21gltestperf1
2882999210,7cyclictest21-21ksoftirqd/11
2882599219,3cyclictest9-21ksoftirqd/00
2882599218,2cyclictest111rcu_preempt0
2882599215,2cyclictest23583-21acpi0
2882599214,3cyclictest9-21ksoftirqd/00
28825992116,3cyclictest1897-21processes0
28825992115,4cyclictest22130-21seq0
28825992114,5cyclictest6324-21cut0
28825992113,2cyclictest9-21ksoftirqd/00
2883799209,8cyclictest24350-21sort3
2883799208,9cyclictest20917-21ntp_states3
2883799202,7cyclictest0-21swapper/33
28837992015,3cyclictest31738-21sed3
28837992015,3cyclictest31738-21sed3
28837992015,3cyclictest29219-21cpuspeed_turbos3
28837992015,3cyclictest22379-21procmail3
28837992014,4cyclictest12343-21sed3
28837992012,5cyclictest30765-21apt-get3
28837992011,6cyclictest3070-21perf3
28837992011,6cyclictest26186-21munin-run3
28837992011,5cyclictest4448-21apt-get3
28834992017,2cyclictest0-21swapper/22
28834992015,3cyclictest10848-21perf2
28834992014,4cyclictest14555-21seq2
28834992014,3cyclictest17456-21acpi2
28834992013,4cyclictest537-21gdbus2
2883499201,2cyclictest11379-1kworker/2:0H2
2883499201,16cyclictest8047-21cron2
2883499201,16cyclictest0-21swapper/22
2883499200,3cyclictest7132-21perf2
2883499200,3cyclictest580-1kworker/2:1H2
2883499200,18cyclictest19778-21cron2
2883499200,18cyclictest19778-21cron2
2882999202,5cyclictest21-21ksoftirqd/11
2882999201,6cyclictest21-21ksoftirqd/11
2882999200,6cyclictest29669-21gltestperf1
2882599206,5cyclictest111rcu_preempt0
2882599202,4cyclictest9-21ksoftirqd/00
2882599201,6cyclictest32203-21taskset0
28825992015,3cyclictest26879-21cron0
28825992014,4cyclictest32119-21seq0
2882599200,6cyclictest9-21ksoftirqd/00
28837991916,2cyclictest0-21swapper/33
28837991916,2cyclictest0-21swapper/33
28837991914,3cyclictest7905-21idleruntime3
28837991914,3cyclictest31486-21cpuspeed_turbos3
28837991914,3cyclictest12376-21/usr/sbin/munin3
28837991914,3cyclictest1037-21ntp_offset3
28837991913,4cyclictest6044-21ls3
28837991913,4cyclictest23183-21mii-tool3
28837991913,4cyclictest16216-21basename3
28837991913,3cyclictest15972-21cut3
28837991912,5cyclictest29475-21munin-run3
28837991912,5cyclictest0-21swapper/33
28837991912,4cyclictest31025-21munin-node3
28837991912,4cyclictest18204-21cat3
28837991912,4cyclictest18204-21cat3
28837991911,5cyclictest3343-21df3
28837991911,5cyclictest21363-21grep3
28837991910,6cyclictest1242-21ntp_states3
28837991910,6cyclictest1242-21ntp_states3
28837991910,6cyclictest10401-21aten2_r9power_c3
28837991910,5cyclictest2228-21apt-get3
28837991910,5cyclictest16963-21apt-get3
2883799190,8cyclictest0-21swapper/33
2883799190,16cyclictest325-21systemd-journal3
2883499191,6cyclictest24413-21apt-get2
28834991914,3cyclictest668-21runrttasks2
28834991914,3cyclictest537-21gdbus2
28834991914,3cyclictest537-21gdbus2
28834991914,3cyclictest23433-21ntp_kernel_err2
28834991914,3cyclictest15794-21ntpq2
28834991913,4cyclictest21407-21awk2
2883499191,2cyclictest0-21swapper/22
2883499191,16cyclictest2141-21latency_hist2
2883499191,16cyclictest1996-1kworker/2:0H2
2883499191,16cyclictest12642-21latency_hist2
2883499190,4cyclictest32328-21cron2
2883499190,17cyclictest1996-1kworker/2:0H2
2883499190,17cyclictest18235-21latency_hist2
2882599199,3cyclictest9-21ksoftirqd/00
2882599196,2cyclictest111rcu_preempt0
2882599194,4cyclictest9-21ksoftirqd/00
2882599193,10cyclictest31235-21seq0
2882599193,10cyclictest31235-21seq0
2882599192,5cyclictest9-21ksoftirqd/00
28825991913,4cyclictest7357-21sh0
28825991913,4cyclictest29507-21cat0
28825991913,4cyclictest23419-21gzip0
2882599190,4cyclictest9-21ksoftirqd/00
28837991813,3cyclictest16450-21apt-get3
28837991812,4cyclictest27162-21find3
28837991811,5cyclictest25540-21df_inode3
28837991811,4cyclictest4200-21apt3
28834991816,1cyclictest0-21swapper/22
28834991813,3cyclictest29023-21cut2
28834991812,4cyclictest668-21runrttasks2
28834991812,4cyclictest27711-21cut2
28834991811,4cyclictest4713-21idleruntime-cro2
2883499180,3cyclictest23322-21cat2
2882599189,3cyclictest9-21ksoftirqd/00
2882599186,5cyclictest111rcu_preempt0
2883499178,6cyclictest1-21systemd2
28834991713,2cyclictest4580-21cstates2
28834991712,3cyclictest668-21runrttasks2
28834991712,3cyclictest14411-21/usr/sbin/munin2
28834991712,3cyclictest13748-21head2
2883499171,1cyclictest0-21swapper/22
28834991614,1cyclictest0-21swapper/22
2883499161,13cyclictest0-21swapper/22
2883499160,1cyclictest0-21swapper/22
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional