You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-10 - 19:23
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 10, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
304382318279,26sleep10-21swapper/11
303282308270,25sleep30-21swapper/33
288182280242,25sleep00-21swapper/00
3076399262258,2cyclictest0-21swapper/22
3076199243237,4cyclictest8333-21strings1
305542240204,24sleep20-21swapper/22
3075799216211,3cyclictest0-21swapper/00
114821580,6sleep13076199cyclictest1
3077199130126,2cyclictest0-21swapper/33
27192640,4sleep13076199cyclictest1
236092520,4sleep13076199cyclictest1
258122510,2sleep30-21swapper/33
96732450,3sleep33077199cyclictest3
282512440,1sleep10-21swapper/11
36872350,2sleep20-21swapper/22
141422350,1sleep00-21swapper/00
30771993213,3cyclictest31996-21cat3
30771993212,4cyclictest4038-21sed3
30771993113,3cyclictest4660-21memory3
30771993013,3cyclictest7975-21proc_pri3
30763993025,3cyclictest5699-21dump-pmu-power2
3076399301,25cyclictest31868-21awk2
3077199282,8cyclictest14138-21apt-get3
30763992815,11cyclictest281ksoftirqd/22
30761992516,5cyclictest2886-21sendmail1
137362250,2sleep113741-21sed1
30761992417,4cyclictest27145-21ls1
3075799243,20cyclictest0-21swapper/00
174302240,5sleep117435-21pmu-power1
45452230,2sleep30-21swapper/33
30771992318,3cyclictest28093-21head3
3076399236,15cyclictest0-21swapper/22
30763992316,4cyclictest4097-21sh2
30763992315,5cyclictest12839-21df2
30763992312,6cyclictest1098-21apt-get2
3076399230,21cyclictest14760-21kworker/2:02
30761992314,5cyclictest4930-21sh1
30761992313,6cyclictest26648-21sendmail1
3076399223,17cyclictest6442-21latency_hist2
30763992216,4cyclictest26630-21munin-run2
3076399221,3cyclictest29398-21apt-get2
3076399221,3cyclictest27197-21apt-get2
3076399221,3cyclictest22566-21munin-run2
3076399221,2cyclictest9769-21munin-run2
3076399221,18cyclictest14133-21munin-run2
3076399220,20cyclictest6706-21latency_hist2
30761992214,4cyclictest32108-21sh1
30761992212,6cyclictest505-21dbus-daemon1
30757992215,4cyclictest27186-21cat0
30757992211,8cyclictest30256-21cut0
30771992116,3cyclictest26624-21cron3
30771992116,3cyclictest23898-21find3
30771992115,4cyclictest9428-21expr3
30771992115,4cyclictest19651-21uname3
3076399219,11cyclictest28-21ksoftirqd/22
3076399213,13cyclictest10369-21apt-get2
3076399213,13cyclictest10369-21apt-get2
3076399212,17cyclictest16477-21cat2
30763992115,4cyclictest22857-21which2
3076399211,3cyclictest2046-1kworker/2:0H2
3076399210,18cyclictest23296-1kworker/2:2H2
3076399210,18cyclictest20432-21cut2
30761992114,4cyclictest16450-21grep1
30761992111,6cyclictest5978-21apt-get1
30757992115,4cyclictest8034-21seq0
199242210,5sleep1211ksoftirqd/11
30771992015,3cyclictest7983-21acpi3
30771992015,3cyclictest20654-21sed3
30771992015,3cyclictest11700-21interrupts3
30771992014,4cyclictest23982-21sed3
30771992013,4cyclictest31266-21grep3
30771992012,5cyclictest505-21dbus-daemon3
3076399207,2cyclictest111rcu_preempt2
3076399206,8cyclictest26385-21dump-pmu-power2
30763992016,2cyclictest14868-21df_inode2
30763992015,3cyclictest23883-21sendmail_mailst2
30763992015,3cyclictest17557-21tr2
30763992014,4cyclictest699-21sed2
30763992014,4cyclictest23683-21df2
30763992014,3cyclictest18582-21vmstat2
3076399201,1cyclictest23913-21apt-get2
3076399201,17cyclictest19706-21sendmail-mta2
3076399201,17cyclictest11115-21cups-browsed2
3076399200,3cyclictest23014-21munin-run2
3076399200,3cyclictest2082-21systemd-journal2
3076399200,2cyclictest1890-21apt2
30761992015,3cyclictest21433-21irqstats1
30761992015,3cyclictest18762-21/usr/sbin/munin1
30761992014,4cyclictest16078-21grep1
30761992013,5cyclictest22317-21cron1
30761992013,4cyclictest665-21runrttasks1
30761992013,4cyclictest14712-21pmu-power1
30761992012,5cyclictest27386-21basename1
30761992011,5cyclictest1892-21apt-get1
30757992015,3cyclictest32460-21seq0
30757992015,3cyclictest22285-21gzip0
30757992014,4cyclictest30465-21cat0
30757992014,4cyclictest22320-21seq0
30757992014,4cyclictest20929-21seq0
295252200,1sleep10-21swapper/11
30771991914,3cyclictest5240-21sh3
30771991914,3cyclictest4426-21unixbench-2d3
30771991914,3cyclictest30756-21awk3
30771991914,3cyclictest30704-21basename3
30771991914,3cyclictest2474-21idleruntime3
30771991914,3cyclictest13099-21seq3
30771991913,4cyclictest18524-21hostname3
30771991913,4cyclictest12129-21sed3
30771991913,4cyclictest10333-21gdbus3
30771991913,3cyclictest13101-21awk3
30771991913,3cyclictest10924-21cut3
30771991913,3cyclictest10924-21cut3
30771991912,4cyclictest3371-21run-parts3
30771991912,4cyclictest2082-21systemd-journal3
3077199191,16cyclictest27902-21wc3
3077199190,17cyclictest1941-21runrttasks3
3076399193,2cyclictest28-21ksoftirqd/22
3076399192,15cyclictest21374-21grep2
3076399192,15cyclictest0-21swapper/22
30763991914,3cyclictest7242-21pmu-power2
30763991914,3cyclictest20611-21wc2
30763991914,3cyclictest14334-21cat2
30763991914,3cyclictest12940-21wc2
30763991914,3cyclictest10459-21vmstat2
3076399191,3cyclictest7741-21munin-run2
30763991913,3cyclictest30785-21expr2
3076399191,13cyclictest15799-21apt-get2
3076399190,3cyclictest23296-1kworker/2:2H2
3076399190,17cyclictest23296-1kworker/2:2H2
3076399190,16cyclictest3972-21apt-config2
3076199194,9cyclictest7003-21apt-get1
3076199193,9cyclictest30921-21apt-get1
3076199193,9cyclictest10029-21apt-get1
30761991915,2cyclictest4906-21/usr/sbin/munin1
30761991915,2cyclictest28269-21/usr/sbin/munin1
30761991914,3cyclictest8491-21sed1
30761991914,3cyclictest4662-21/usr/sbin/munin1
30761991914,3cyclictest29203-21/usr/sbin/munin1
30761991914,3cyclictest12410-21/usr/sbin/munin1
30761991913,4cyclictest26284-21seq1
30761991913,4cyclictest18686-21ntp_states1
30761991913,4cyclictest1479-21sed1
30761991913,3cyclictest12569-21ntpq1
30761991912,4cyclictest6076-21basename1
30761991911,4cyclictest4028-21aten2_r9power_v1
3076199190,7cyclictest18948-21munin-run1
30757991915,2cyclictest5995-21aten2_r9power_c0
30757991915,2cyclictest26217-21/usr/sbin/munin0
30757991915,2cyclictest26217-21/usr/sbin/munin0
30757991915,2cyclictest10351-21/usr/sbin/munin0
30757991915,2cyclictest10351-21/usr/sbin/munin0
30757991914,3cyclictest852-21awk0
30757991914,3cyclictest494-21expr0
30757991914,3cyclictest32727-21/usr/sbin/munin0
30757991914,3cyclictest28072-21sh0
30757991914,3cyclictest25844-21sed0
30757991914,3cyclictest25731-21sed0
30757991914,3cyclictest2082-21systemd-journal0
30757991914,3cyclictest19407-21seq0
30757991914,3cyclictest14983-21cut0
30757991914,3cyclictest12798-21cat0
30757991914,3cyclictest12558-21cat0
30757991913,4cyclictest8928-21cat0
30757991913,4cyclictest22281-21seq0
30757991913,4cyclictest20586-21cat0
30757991913,4cyclictest17574-21expr0
30757991913,4cyclictest11835-21seq0
30757991913,3cyclictest31603-21grep0
30757991912,4cyclictest3248-21expr0
30757991912,4cyclictest28062-21awk0
304502190,2sleep2271rcuc/22
184932190,1sleep018512-21apt-get0
3077199183,9cyclictest12429-21apt-get3
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991816,1cyclictest0-21swapper/33
30771991813,3cyclictest7798-21cat3
30771991813,3cyclictest505-21dbus-daemon3
30771991813,3cyclictest26975-21seq3
30771991813,3cyclictest25448-21ntpq3
30771991813,3cyclictest21279-21cat3
30771991813,3cyclictest15567-21wc3
30771991812,4cyclictest9943-21expr3
30771991812,4cyclictest935-21rt-features3
3077199181,16cyclictest0-21swapper/33
3077199180,16cyclictest0-21swapper/33
30763991816,1cyclictest0-21swapper/22
30763991814,2cyclictest13099-21/usr/sbin/munin2
30763991813,3cyclictest527-21ls2
30763991813,3cyclictest26362-21sh2
30763991813,3cyclictest26362-21sh2
30763991813,3cyclictest21138-21unixbench-2d2
30763991812,3cyclictest31303-21aten2_r9power_c2
3076399181,16cyclictest0-21swapper/22
3076399181,13cyclictest865-21apt-get2
3076399181,13cyclictest28686-21apt-get2
3076399180,16cyclictest11821-21dump-pmu-power2
30761991814,2cyclictest2880-21/usr/sbin/munin1
30761991814,2cyclictest27178-21/usr/sbin/munin1
30761991814,2cyclictest22829-21/usr/sbin/munin1
30761991813,3cyclictest8522-21ls1
30761991813,3cyclictest665-21runrttasks1
30761991813,3cyclictest30692-21/usr/sbin/munin1
30761991813,3cyclictest23384-21seq1
30761991813,3cyclictest21606-21expr1
30761991813,3cyclictest10944-21basename1
30761991813,3cyclictest10944-21basename1
30761991813,3cyclictest10578-21gzip1
30761991812,4cyclictest32727-21/usr/sbin/munin1
30761991812,4cyclictest31295-21cut1
30761991812,4cyclictest29951-21/usr/sbin/munin1
30761991812,4cyclictest15222-21grep1
30761991812,3cyclictest11054-21basename1
30757991816,1cyclictest0-21swapper/00
30757991814,2cyclictest2657-21cstates0
30757991813,3cyclictest8332-21cstates0
30757991813,3cyclictest6706-21latency_hist0
30757991813,3cyclictest5692-21expr0
30757991813,3cyclictest4877-21awk0
30757991813,3cyclictest32594-21grep0
30757991813,3cyclictest3158-21aten2_r9power_c0
30757991813,3cyclictest2954-21basename0
30757991813,3cyclictest29179-21expr0
30757991813,3cyclictest16017-21cpuspeed_turbos0
30757991813,3cyclictest15804-21unixbench_singl0
30757991813,3cyclictest10783-21seq0
30757991813,3cyclictest10422-21expr0
30757991812,4cyclictest5988-21seq0
30757991812,4cyclictest26325-21cat0
30757991812,4cyclictest22772-21cat0
119602180,4sleep00-21swapper/00
30771991713,2cyclictest346-21aten2_r9power_p3
30771991712,3cyclictest665-21runrttasks3
30771991712,3cyclictest28603-21grep3
30771991712,3cyclictest22574-21basename3
30771991712,3cyclictest21240-21fw_packets3
30771991712,3cyclictest19687-21gltestperf3
30771991712,3cyclictest19062-21sed3
30771991712,3cyclictest17282-21expr3
30771991711,4cyclictest21882-21awk3
30771991711,3cyclictest5009-21aten2_r9power_p3
3077199170,16cyclictest0-21swapper/33
30763991712,3cyclictest12108-21sendmail_mailst2
3076199174,7cyclictest14713-21apt-get1
3076199173,9cyclictest19866-21apt-get1
3076199172,9cyclictest9034-21apt-get1
30761991713,2cyclictest23255-21/usr/sbin/munin1
30761991713,2cyclictest17517-21missed_timers1
30761991712,3cyclictest6695-21expr1
30761991712,3cyclictest26677-21cut1
30761991711,4cyclictest3726-21apt1
30761991710,4cyclictest29834-21timerandwakeup1
30757991715,1cyclictest0-21swapper/00
30757991713,2cyclictest23255-21/usr/sbin/munin0
30757991712,3cyclictest7323-21grep0
30757991712,3cyclictest665-21runrttasks0
30757991712,3cyclictest665-21runrttasks0
30757991712,3cyclictest5227-21basename0
30757991712,3cyclictest32705-21basename0
30757991712,3cyclictest20218-21expr0
30757991712,3cyclictest16073-21grep0
30757991712,3cyclictest10785-21timerwakeupswit0
30757991711,4cyclictest32447-21awk0
30757991711,4cyclictest23566-21seq0
30757991711,4cyclictest16472-21/usr/sbin/munin0
30771991611,3cyclictest32052-21missed_timers3
30771991611,3cyclictest1378-21tail3
30771991611,3cyclictest13538-21df3
3076399161,14cyclictest0-21swapper/22
3076199162,8cyclictest5177-21apt-get1
30761991610,4cyclictest13201-21cut1
30757991611,3cyclictest1000-21cpu0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional