You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-11 - 20:10
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Mon May 11, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
59362271234,24sleep10-21swapper/11
628199259253,4cyclictest0-21swapper/33
61092258186,24sleep20-21swapper/22
61072251185,54sleep00-21swapper/00
60702249215,23sleep30-21swapper/33
626999202197,3cyclictest8276-21perf0
627799177172,3cyclictest8259-21munin-run2
1154621710,3sleep3628199cyclictest3
1154621710,3sleep3628199cyclictest3
344221380,4sleep1627399cyclictest1
627399135128,5cyclictest8281-21awk1
238322560,2sleep223784-21latency_hist2
156932490,1sleep1201rcuc/11
247302460,3sleep00-21swapper/00
627799441,20cyclictest23615-21cat2
97172430,2sleep09715-21tail0
627799430,22cyclictest3835-21cat2
627799420,18cyclictest15078-21cat2
627799381,18cyclictest429-21latency_hist2
267362380,1sleep20-21swapper/22
627799370,19cyclictest24787-21latency_hist2
627799361,19cyclictest2468-21telnet2
627799360,20cyclictest11297-21apt-get2
627799360,20cyclictest11297-21apt-get2
6277993519,14cyclictest21956-21date2
627799351,17cyclictest20764-21grep2
627799350,21cyclictest17146-21taskset2
627799350,20cyclictest27851-21gpgv2
627799341,18cyclictest18531-21ps2
627799340,19cyclictest21680-21ps2
627799340,19cyclictest14188-21ntpq2
6269993415,3cyclictest32250-21cpuspeed0
627799332,18cyclictest24595-21ntp_kernel_err2
627799331,29cyclictest31862-21grep2
627799330,30cyclictest9809-21procmail2
627799330,18cyclictest11300-21grep2
6269993314,3cyclictest23244-21sed0
6269993313,4cyclictest10206-21cat0
627799320,29cyclictest7812-21perf2
627799320,18cyclictest10299-21grep2
627799320,17cyclictest0-21swapper/22
6269993212,4cyclictest24212-21grep0
627799310,22cyclictest278801apt-get2
627799310,18cyclictest0-21swapper/22
627799310,18cyclictest0-21swapper/22
627799310,17cyclictest2209-21seq2
6269993113,4cyclictest60750irq/130-enp2s00
627799301,15cyclictest0-21swapper/22
627799300,28cyclictest0-21swapper/22
627799300,17cyclictest0-21swapper/22
627799300,17cyclictest0-21swapper/22
627799300,17cyclictest0-21swapper/22
627799300,16cyclictest0-21swapper/22
626999303,8cyclictest14172-21apt-get0
6269993013,3cyclictest1698-21vmstat0
6277992914,13cyclictest25839-21ps2
627799291,15cyclictest0-21swapper/22
627799291,15cyclictest0-21swapper/22
627799290,16cyclictest0-21swapper/22
627799290,16cyclictest0-21swapper/22
627799290,16cyclictest0-21swapper/22
627799290,13cyclictest0-21swapper/22
6269992914,2cyclictest668-21runrttasks0
6277992814,12cyclictest17153-21sh2
6277992812,14cyclictest10466-21fw_packets2
6277992811,14cyclictest26127-21expr2
627799280,16cyclictest0-21swapper/22
627799280,15cyclictest0-21swapper/22
20712280,5sleep0626999cyclictest0
627799279,15cyclictest30193-21hostname2
6277992713,12cyclictest2132-21df2
6277992713,11cyclictest3932-21aten2_r9power_c2
627799271,24cyclictest12927-21awk2
6277992712,13cyclictest9086-21ps2
6277992711,14cyclictest3199-21cat2
6277992711,14cyclictest24637-21grep2
6277992710,14cyclictest20289-21ntpq2
6277992710,14cyclictest18303-21acpi2
627799270,24cyclictest5372-21ntp_states2
242172270,2sleep30-21swapper/33
627799260,13cyclictest7678-21latency_hist2
627799259,13cyclictest9503-21gltestperf2
627799259,13cyclictest4957-21aten2_r9power_p2
627799250,23cyclictest19351-21munin-run2
627799250,23cyclictest1439-21munin-run2
627399255,8cyclictest21-21ksoftirqd/11
6273992520,3cyclictest21-21ksoftirqd/11
627799241,18cyclictest32193-21apt-get2
627799240,22cyclictest30824-21munin-run2
626999241,7cyclictest16066-21cron0
6269992416,1cyclictest0-21swapper/00
6269992414,6cyclictest668-21runrttasks0
627799238,13cyclictest26968-21tail2
627799238,13cyclictest26968-21tail2
627799231,19cyclictest13983-21/usr/sbin/munin2
626999230,10cyclictest90752ls0
232182230,1sleep30-21swapper/33
88662220,3sleep3628199cyclictest3
627799221,18cyclictest17517-21sort2
6273992218,3cyclictest21-21ksoftirqd/11
13102220,4sleep30-21swapper/33
6281992115,4cyclictest9754-21dump-pmu-power3
6281992115,3cyclictest15695-21diskstats3
6281992112,5cyclictest325-21systemd-journal3
6273992115,4cyclictest24557-21needreboot1
6273992115,4cyclictest10528-21sed1
626999213,16cyclictest26627-21cron0
626999212,16cyclictest13035-21turbostat0
6269992116,3cyclictest5850-21/usr/sbin/munin0
6269992114,5cyclictest29755-21sendmail0
20962210,1sleep00-21swapper/00
71862200,2sleep10-21swapper/11
6281992017,2cyclictest0-21swapper/33
6281992015,3cyclictest32403-21cpuspeed3
6281992015,3cyclictest2757-21ls3
6281992015,3cyclictest13071-21processes3
6281992015,3cyclictest1285-21sendmail-mta3
6281992014,4cyclictest27266-21cat3
6281992014,4cyclictest10882-21ntp_kernel_pll_3
6281992012,5cyclictest5023-21grep3
6273992015,3cyclictest4520-21cat1
6273992015,3cyclictest32134-21seq1
6273992015,3cyclictest2543-21turbostat.cron1
6273992014,4cyclictest7553-21cat1
6273992014,4cyclictest6549-21seq1
6273992014,4cyclictest28881-21cut1
6273992014,4cyclictest28881-21cut1
6273992014,4cyclictest23639-21sed1
6273992014,4cyclictest19897-21cut1
6273992014,4cyclictest1455-21idleruntime-cro1
6273992014,3cyclictest15488-21cpu1
6273992013,5cyclictest26728-21cut1
627399200,18cyclictest0-21swapper/11
6269992015,3cyclictest26923-21aten2_r9power_c0
6269992015,3cyclictest26923-21aten2_r9power_c0
6269992015,3cyclictest23770-21cpuspeed0
6269992015,3cyclictest18206-21sed0
6269992014,4cyclictest7554-21cat0
6269992013,4cyclictest668-21runrttasks0
6269992013,4cyclictest31356-21grep0
628199192,14cyclictest5304-21taskset3
6281991914,3cyclictest7690-21grep3
6281991914,3cyclictest4247-21vmstat3
6281991914,3cyclictest30961-21date3
6281991914,3cyclictest28164-21sed3
6281991914,3cyclictest28164-21sed3
6281991914,3cyclictest27119-21seq3
6281991914,3cyclictest22567-21swap3
6281991914,3cyclictest21410-21ls3
6281991914,3cyclictest16982-21wc3
6281991914,3cyclictest16480-21switchtime3
6281991914,3cyclictest15688-21users3
6281991914,3cyclictest13754-21cat3
6281991913,4cyclictest8999-21cut3
6281991913,4cyclictest22423-21load3
6281991913,4cyclictest18778-21grep3
6281991913,4cyclictest14593-21df3
6281991912,4cyclictest325-21systemd-journal3
6281991912,4cyclictest28994-21grep3
628199191,15cyclictest30620-21cut3
627399191,9cyclictest21-21ksoftirqd/11
6273991916,2cyclictest0-21swapper/11
6273991916,2cyclictest0-21swapper/11
6273991916,2cyclictest0-21swapper/11
6273991916,2cyclictest0-21swapper/11
6273991914,3cyclictest3252-21ntp_offset1
6273991914,3cyclictest30047-21pluginstate1
6273991914,3cyclictest24704-21kernelversion1
6273991914,3cyclictest18761-21cat1
6273991914,3cyclictest18663-21cat1
6273991914,3cyclictest1805-21/usr/sbin/munin1
6273991914,3cyclictest17636-21cut1
6273991914,3cyclictest14926-21load1
6273991914,3cyclictest14257-21/usr/sbin/munin1
6273991914,3cyclictest13095-21sh1
6273991914,3cyclictest13095-21sh1
6273991913,4cyclictest32483-21grep1
6273991913,4cyclictest29740-21cat1
6273991912,4cyclictest9920-21ntpq1
627399190,6cyclictest24233-21sshd1
6269991916,2cyclictest0-21swapper/00
6269991916,2cyclictest0-21swapper/00
6269991916,2cyclictest0-21swapper/00
6269991916,2cyclictest0-21swapper/00
6269991916,2cyclictest0-21swapper/00
6269991916,2cyclictest0-21swapper/00
6269991915,2cyclictest4869-21/usr/sbin/munin0
6269991915,2cyclictest19401-21/usr/sbin/munin0
6269991914,3cyclictest683-21snmpd0
6269991914,3cyclictest15435-21/usr/sbin/munin0
6269991913,4cyclictest4717-21date0
6269991913,4cyclictest26123-21apt-get0
6269991913,4cyclictest17921-21expr0
6269991913,4cyclictest11406-21sed0
6269991913,3cyclictest325-21systemd-journal0
23632190,4sleep335-21ksoftirqd/33
6281991816,1cyclictest0-21swapper/33
6281991816,1cyclictest0-21swapper/33
6281991816,1cyclictest0-21swapper/33
6281991816,1cyclictest0-21swapper/33
6281991814,2cyclictest3896-21/usr/sbin/munin3
6281991814,2cyclictest12202-21apt3
6281991814,2cyclictest12122-21ntp_states3
6281991813,3cyclictest9481-21expr3
6281991813,3cyclictest32451-21expr3
6281991813,3cyclictest28468-21cat3
6281991813,3cyclictest24169-21df3
6281991813,3cyclictest21231-21basename3
6281991813,3cyclictest18195-21kernelversion3
6281991813,3cyclictest13756-21expr3
6281991812,4cyclictest9041-21sort3
6281991812,4cyclictest29474-21cron3
6281991812,4cyclictest26956-21cat3
6281991812,4cyclictest25801-21awk3
6281991812,4cyclictest21052-21sed3
628199181,14cyclictest30633-21apt-get3
6273991816,1cyclictest0-21swapper/11
6273991814,2cyclictest7993-21aten2_r9power_e1
6273991814,2cyclictest13372-21/usr/sbin/munin1
6273991814,2cyclictest13285-21aten2_r9power_c1
6273991814,2cyclictest13147-21/usr/sbin/munin1
6273991814,2cyclictest11207-21/usr/sbin/munin1
6273991813,3cyclictest668-21runrttasks1
6273991813,3cyclictest668-21runrttasks1
6273991813,3cyclictest5602-21sendmail1
6273991813,3cyclictest28616-21if_enp3s01
6273991813,3cyclictest22480-21latency_hist1
6273991813,3cyclictest21512-21seq1
6273991813,3cyclictest11183-21rt-features1
6273991812,4cyclictest6714-21sed1
6273991812,4cyclictest4910-21df1
6273991812,4cyclictest26303-21awk1
6273991812,4cyclictest11136-21cat1
627399180,16cyclictest0-21swapper/11
626999189,7cyclictest25942-21aten2_r9power_v0
626999183,9cyclictest29004-21apt-get0
6269991815,2cyclictest0-21swapper/00
6269991814,2cyclictest13372-21/usr/sbin/munin0
6269991813,3cyclictest937-21cpuspeed0
6269991813,3cyclictest8090-21hostname0
6269991813,3cyclictest668-21runrttasks0
6269991813,3cyclictest4654-21ntpq0
6269991813,3cyclictest31816-21cat0
6269991813,3cyclictest21016-21cstates0
6269991813,3cyclictest13350-21cat0
6269991812,4cyclictest668-21runrttasks0
6281991713,2cyclictest16266-21needreboot3
6281991712,3cyclictest4304-21sed3
6281991712,3cyclictest25103-21ps3
6281991712,3cyclictest18730-21unixbench-2d3
6281991712,3cyclictest10164-21hostname3
6281991711,4cyclictest7953-21sed3
6281991711,4cyclictest19876-21grep3
6273991712,3cyclictest8286-21cat1
6273991712,3cyclictest668-21runrttasks1
6273991712,3cyclictest25426-21cut1
6273991712,3cyclictest12065-21find1
6273991711,3cyclictest7811-21basename1
626999173,9cyclictest15358-21apt-get0
6269991715,1cyclictest0-21swapper/00
6269991715,1cyclictest0-21swapper/00
6269991715,1cyclictest0-21swapper/00
6269991715,1cyclictest0-21swapper/00
6269991715,1cyclictest0-21swapper/00
6269991713,2cyclictest668-21runrttasks0
6269991712,3cyclictest9037-21basename0
6269991712,3cyclictest668-21runrttasks0
6269991712,3cyclictest668-21runrttasks0
6269991712,3cyclictest18238-21ntp_states0
626999170,16cyclictest0-21swapper/00
626999170,16cyclictest0-21swapper/00
6281991611,3cyclictest17315-21find3
6281991611,3cyclictest12240-21switchtime3
627399163,8cyclictest19419-21apt-get1
627399162,8cyclictest21474-21apt-get1
6273991611,3cyclictest668-21runrttasks1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional