You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-23 - 22:00
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 23, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
211522252178,17sleep20-21swapper/22
211212252179,25sleep10-21swapper/11
210952252180,24sleep00-21swapper/00
210282244170,62sleep30-21swapper/33
1340121710,2sleep32140399cyclictest3
3276321490,3sleep12139699cyclictest1
271032620,1sleep00-21swapper/00
114532580,3sleep22140199cyclictest2
159032560,3sleep3341rcuc/33
123012510,2sleep30-21swapper/33
270332500,2sleep30-21swapper/33
21392994614,17cyclictest14219-21seq0
2139299419,18cyclictest29672-21seq0
2139299416,19cyclictest25173-21unixbench_singl0
140392410,2sleep30-21swapper/33
242112390,1sleep30-21swapper/33
2139299360,3cyclictest8472-21sendmail-mta0
2139299351,3cyclictest24560-21sendmail-mta0
2139299341,4cyclictest17091-21/usr/sbin/munin0
2139299341,3cyclictest18372-21sendmail-mta0
2140199333,9cyclictest8142-21wc2
2140199331,30cyclictest23038-21kworker/2:22
2139299331,29cyclictest4721-21grep0
2139299329,20cyclictest1731-21sendmail-mta0
2139299328,21cyclictest4087-21sendmail-mta0
2139299325,24cyclictest27063-21tr0
2139299320,8cyclictest520-21rs:main0
2139299320,4cyclictest340-21systemd-journal0
21403993114,3cyclictest35-21ksoftirqd/33
21392993115,14cyclictest25379-21cat0
21392993115,13cyclictest11337-21grep0
2139299311,4cyclictest340-21systemd-journal0
21392993114,15cyclictest20131-21cat0
21392993114,15cyclictest20131-21cat0
21392993114,14cyclictest15910-21cron0
2139299311,26cyclictest2392-21grep0
2139299310,2cyclictest571-21gdbus0
2139299310,2cyclictest0-21swapper/00
2140399307,2cyclictest111rcu_preempt3
21403993012,16cyclictest35-21ksoftirqd/33
2140199305,10cyclictest2481-21cron2
2140199303,6cyclictest20642-21chrt2
2139299302,23cyclictest3949-21apt-get0
2139299302,23cyclictest27035-21apt-get0
21392993014,14cyclictest20982-21cut0
21392993014,14cyclictest20982-21cut0
2139299300,4cyclictest634-21snmpd0
2139299300,4cyclictest29808-21/usr/sbin/munin0
2139299300,3cyclictest12564-21sendmail-mta0
2140399294,10cyclictest35-21ksoftirqd/33
21403992910,4cyclictest35-21ksoftirqd/33
2140399290,7cyclictest35-21ksoftirqd/33
2140199296,9cyclictest19734-21cstates2
2140199296,9cyclictest19734-21cstates2
2140199295,10cyclictest23224-21cut2
2140199294,10cyclictest5032-21sed2
2140199294,10cyclictest25234-21grep2
2140199293,9cyclictest32224-21apt-config2
2140199292,11cyclictest28-21ksoftirqd/22
2139299299,18cyclictest31577-21gltestperf0
2139299299,17cyclictest9911-21sendmail-mta0
2139299298,19cyclictest571-21gdbus0
2139299297,20cyclictest25713-21cups-browsed0
2139299292,22cyclictest10678-21apt-get0
2139299291,4cyclictest571-21gdbus0
21392992914,13cyclictest30472-21cat0
21392992914,13cyclictest16212-21aten2.4-expect0
21392992913,14cyclictest3201-21which0
2139299290,4cyclictest23224-21sendmail-mta0
2139299290,3cyclictest25210-21ntpq0
2139299290,2cyclictest23433-21cat0
2139299290,2cyclictest12999-21cstates0
2140399288,11cyclictest111rcu_preempt3
2140399284,6cyclictest35-21ksoftirqd/33
21403992810,10cyclictest35-21ksoftirqd/33
21401992813,6cyclictest28-21ksoftirqd/22
2140199281,15cyclictest3807-21chrt2
2139299288,18cyclictest10421-21basename0
2139299288,17cyclictest6193-21cpuspeed0
2139299288,17cyclictest19314-21cat0
2139299287,18cyclictest30088-21sendmail-mta0
2139299287,18cyclictest20461-21sendmail-mta0
2139299286,20cyclictest1658-21head0
2139299285,20cyclictest6696-21date0
2139299283,20cyclictest21749-21apt-get0
2139299282,21cyclictest28334-21apt-get0
21392992814,12cyclictest24982-21aten2_r9power_c0
21392992810,15cyclictest4401-21sendmail-mta0
21392992810,15cyclictest26871-21cat0
2139299280,3cyclictest27919-21irqstats0
2139299280,3cyclictest11756-21taskset0
2140399279,10cyclictest35-21ksoftirqd/33
2140399277,9cyclictest35-21ksoftirqd/33
2140199274,6cyclictest27823-21chrt2
2140199273,9cyclictest14472-21cstates2
2140199272,9cyclictest26570-21cpuspeed_turbos2
2140199270,7cyclictest28-21ksoftirqd/22
2140199270,10cyclictest31905-21chrt2
2140199270,10cyclictest14409-21chrt2
2139299279,16cyclictest340-21systemd-journal0
2139299277,17cyclictest517-21dbus-daemon0
2139299270,4cyclictest571-21gdbus0
216752260,2sleep321682-21gltestperf3
2140399267,11cyclictest111rcu_preempt3
2140399267,11cyclictest111rcu_preempt3
2140399267,11cyclictest111rcu_preempt3
2140399267,10cyclictest35-21ksoftirqd/33
2140399266,3cyclictest111rcu_preempt3
2140399261,9cyclictest35-21ksoftirqd/33
2140399260,7cyclictest35-21ksoftirqd/33
2140399260,7cyclictest35-21ksoftirqd/33
2140199265,9cyclictest517-21dbus-daemon2
2140199263,6cyclictest249652sleep22
2140199263,6cyclictest23051-21sed2
2140199263,6cyclictest183372sleep22
2140199263,20cyclictest138642chrt2
2140199262,8cyclictest21147-21apt-get2
2140199262,7cyclictest28-21ksoftirqd/22
2140199261,10cyclictest317-21chrt2
21401992610,6cyclictest28-21ksoftirqd/22
2140199260,10cyclictest12499-21chrt2
2139299269,14cyclictest2097-21uptime0
2139299265,18cyclictest18295-21/usr/sbin/munin0
2139299265,18cyclictest18295-21/usr/sbin/munin0
2139299262,20cyclictest6246-21apt-get0
2139299260,3cyclictest8883-21apt-get0
2140399259,14cyclictest10658-21latency_hist3
2140399258,2cyclictest111rcu_preempt3
2140399257,2cyclictest111rcu_preempt3
2140399252,7cyclictest35-21ksoftirqd/33
21403992512,4cyclictest35-21ksoftirqd/33
21403992511,3cyclictest111rcu_preempt3
2140199255,6cyclictest0-21swapper/22
2140199253,6cyclictest8593-21chrt2
2140199253,6cyclictest31894-21chrt2
2140199253,6cyclictest16291-21chrt2
2140199253,6cyclictest11984-21chrt2
2140199252,7cyclictest217192sleep22
2140199252,6cyclictest44702sleep22
2140199252,6cyclictest300662sleep22
2140199252,6cyclictest296162sleep22
2140199252,6cyclictest271rcuc/22
2140199252,6cyclictest271rcuc/22
2140199252,6cyclictest184722sleep22
2140199252,6cyclictest1581-21chrt2
2140199252,6cyclictest0-21swapper/22
2140199252,5cyclictest258352sleep22
21401992510,12cyclictest517-21dbus-daemon2
2140199250,9cyclictest17703-21chrt2
2139699252,20cyclictest19551-21grep1
2139299252,19cyclictest12971-21apt-get0
2139299252,18cyclictest14706-21apt-get0
2139299251,5cyclictest1-21systemd0
2139299250,22cyclictest4478-21/usr/sbin/munin0
2140399248,14cyclictest111rcu_preempt3
2140399248,11cyclictest111rcu_preempt3
2140399247,2cyclictest111rcu_preempt3
2140399247,12cyclictest111rcu_preempt3
2140399246,3cyclictest111rcu_preempt3
2140399244,17cyclictest1731-21sendmail-mta3
2140399244,17cyclictest14300-21sendmail-mta3
21403992421,2cyclictest341rcuc/33
2140399240,7cyclictest35-21ksoftirqd/33
2140399240,14cyclictest35-21ksoftirqd/33
2140399240,12cyclictest300392proc_pri3
2140199243,7cyclictest25221-21chrt2
2140199243,6cyclictest20246-21chrt2
2140199243,6cyclictest1597-21taskset2
2140199242,6cyclictest97412sleep22
2140199242,6cyclictest76562sleep22
2140199242,6cyclictest3638-21chrt2
2140199242,6cyclictest27007-21chrt2
2140199242,6cyclictest165702sleep22
2140199242,6cyclictest0-21swapper/22
2140199242,5cyclictest62832sleep22
2140199241,6cyclictest115912chrt2
2140199240,9cyclictest0-21swapper/22
2140199240,13cyclictest8865-21taskset2
2139699244,18cyclictest0-21swapper/11
2140399234,17cyclictest27929-21sendmail-mta3
2140399232,6cyclictest35-21ksoftirqd/33
2140399231,6cyclictest35-21ksoftirqd/33
2140399231,5cyclictest35-21ksoftirqd/33
2140199232,7cyclictest14427-21chrt2
2140199232,6cyclictest0-21swapper/22
2140199232,5cyclictest83402sleep22
2140199230,7cyclictest28-21ksoftirqd/22
2140199230,6cyclictest142222sleep22
2140199230,11cyclictest27837-21taskset2
2140399224,8cyclictest19841-21taskset3
2140399224,8cyclictest19841-21taskset3
2140399224,16cyclictest5575-21sendmail-mta3
2140399224,16cyclictest16631-21sendmail-mta3
2140399223,6cyclictest35-21ksoftirqd/33
2140399223,17cyclictest4087-21sendmail-mta3
2140399223,17cyclictest25074-21cat3
2140399223,17cyclictest17800-21sendmail-mta3
21403992218,2cyclictest341rcuc/33
2140399221,6cyclictest35-21ksoftirqd/33
21401992210,10cyclictest21398-21grep2
21401992210,10cyclictest21398-21grep2
2140199220,7cyclictest28-21ksoftirqd/22
21396992216,4cyclictest7425-21ntpq1
167302220,5sleep12139699cyclictest1
2140399215,8cyclictest7624-21runrttasks3
2140399213,6cyclictest35-21ksoftirqd/33
2140399212,17cyclictest26005-21sendmail-mta3
2140399212,11cyclictest35-21ksoftirqd/33
2140399211,6cyclictest35-21ksoftirqd/33
2140399211,6cyclictest35-21ksoftirqd/33
2140399210,7cyclictest35-21ksoftirqd/33
2140399210,7cyclictest35-21ksoftirqd/33
2140399210,6cyclictest35-21ksoftirqd/33
21396992116,3cyclictest28316-21/usr/sbin/munin1
2140399205,6cyclictest35-21ksoftirqd/33
2140399200,18cyclictest3745-21cat3
2139699204,9cyclictest10943-21apt-get1
21396992016,2cyclictest24218-21/usr/sbin/munin1
21396992015,3cyclictest634-21snmpd1
21396992015,3cyclictest25506-21cut1
21396992015,3cyclictest20855-21/usr/sbin/munin1
21396992015,3cyclictest20855-21/usr/sbin/munin1
21396992015,3cyclictest18199-21/usr/sbin/munin1
21396992015,3cyclictest18199-21/usr/sbin/munin1
21396992015,3cyclictest14688-21/usr/sbin/munin1
21396992014,4cyclictest7613-21sed1
21396992014,4cyclictest23187-21ntp_kernel_pll_1
21396992014,3cyclictest1964-21aten2.4-expect1
21396992013,4cyclictest6777-21idleruntime1
21396992013,4cyclictest2202-21basename1
21396992011,6cyclictest517-21dbus-daemon1
2139699200,17cyclictest0-21swapper/11
99262190,1sleep10-21swapper/11
21403991914,4cyclictest21625-21apt-config3
21396991915,3cyclictest21129-21/usr/sbin/munin1
21396991915,2cyclictest8864-21/usr/sbin/munin1
21396991915,2cyclictest8603-21/usr/sbin/munin1
21396991915,2cyclictest4197-21/usr/sbin/munin1
21396991915,2cyclictest24350-21/usr/sbin/munin1
21396991914,3cyclictest31080-21/usr/sbin/munin1
21396991914,3cyclictest30217-21/usr/sbin/munin1
21396991914,3cyclictest28417-21ls1
21396991914,3cyclictest19386-21/usr/sbin/munin1
21396991914,3cyclictest19386-21/usr/sbin/munin1
21396991914,3cyclictest12688-21/usr/sbin/munin1
21396991913,4cyclictest8526-21gltestperf1
21396991913,4cyclictest31991-21sendmail-mta1
21396991913,4cyclictest14300-21sendmail-mta1
21396991912,5cyclictest340-21systemd-journal1
2139699191,16cyclictest18850-21apt-config1
2139699187,9cyclictest571-21gdbus1
2139699182,10cyclictest634-21snmpd1
21396991816,1cyclictest0-21swapper/11
21396991816,1cyclictest0-21swapper/11
21396991815,2cyclictest23187-21/usr/sbin/munin1
21396991814,2cyclictest28448-21/usr/sbin/munin1
21396991814,2cyclictest2753-21/usr/sbin/munin1
21396991814,2cyclictest20252-21/usr/sbin/munin1
21396991814,2cyclictest17080-21aten2_r9power_e1
21396991813,3cyclictest5931-21sed1
21396991813,3cyclictest3283-21sed1
21396991813,3cyclictest27742-21awk1
21396991813,3cyclictest27268-21/usr/sbin/munin1
21396991813,3cyclictest24863-21ls1
21396991813,3cyclictest14746-21cat1
21396991813,3cyclictest13057-21awk1
21396991813,3cyclictest12958-21cat1
21396991812,4cyclictest30798-21grep1
21396991811,4cyclictest4988-21sed1
21396991811,4cyclictest19024-21sort1
21396991713,2cyclictest10298-21/usr/sbin/munin1
21396991712,3cyclictest662-21runrttasks1
21396991712,3cyclictest4302-21sed1
21396991712,3cyclictest21572-21/usr/sbin/munin1
21396991711,4cyclictest7095-21wc1
21396991711,4cyclictest30394-21unixbench_multi1
21396991711,4cyclictest10564-21sed1
2139699170,16cyclictest0-21swapper/11
21396991614,1cyclictest0-21swapper/11
21396991611,3cyclictest634-21snmpd1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional