You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-06 - 08:45
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 06, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
134852312274,25sleep10-21swapper/11
134812301262,26sleep20-21swapper/22
13988992880,284cyclictest11082-21date2
1399399283278,3cyclictest0-21swapper/33
120532255184,24sleep00-21swapper/00
135542252185,25sleep30-21swapper/33
1397899227221,3cyclictest11075-21gpgv0
1398599175171,2cyclictest0-21swapper/11
40621350,1sleep00-21swapper/00
690121220,3sleep31399399cyclictest3
185272700,4sleep20-21swapper/22
321752680,2sleep232182-21gltestperf2
215682410,1sleep30-21swapper/33
13978993514,4cyclictest9-21ksoftirqd/00
13978993412,4cyclictest9-21ksoftirqd/00
13978992910,4cyclictest9-21ksoftirqd/00
297192280,3sleep20-21swapper/22
1397899278,4cyclictest9-21ksoftirqd/00
1397899277,4cyclictest9-21ksoftirqd/00
13978992618,5cyclictest23927-21sh0
1397899261,10cyclictest9-21ksoftirqd/00
248882250,21sleep124915-21telnet1
13988992512,11cyclictest6605-21sed2
1397899257,4cyclictest9-21ksoftirqd/00
1397899257,4cyclictest9-21ksoftirqd/00
1397899256,4cyclictest9-21ksoftirqd/00
13978992512,4cyclictest9-21ksoftirqd/00
13978992511,5cyclictest9-21ksoftirqd/00
13978992511,3cyclictest111rcu_preempt0
1398899241,21cyclictest10333-21gdbus2
1397899248,4cyclictest9-21ksoftirqd/00
1397899241,5cyclictest9-21ksoftirqd/00
13978992414,6cyclictest505-21dbus-daemon0
13978992412,7cyclictest9430-21apt-get0
1398899234,17cyclictest28436-21cat2
1398899234,17cyclictest19748-21cat2
1398899233,17cyclictest2653-21latency_hist2
1398899231,19cyclictest18563-21sendmail2
13985992318,3cyclictest21-21ksoftirqd/11
1397899237,2cyclictest111rcu_preempt0
1397899236,4cyclictest9-21ksoftirqd/00
1397899234,6cyclictest9-21ksoftirqd/00
13978992314,5cyclictest10401-21idleruntime-cro0
98072220,2sleep20-21swapper/22
13993992216,3cyclictest19478-21kernelversion3
13993992215,4cyclictest31128-21cpuspeed_turbos3
1398899224,17cyclictest326-21awk2
1398899224,17cyclictest18932-21awk2
1398899224,17cyclictest18932-21awk2
1398899221,9cyclictest505-21dbus-daemon2
1398899221,4cyclictest29079-21apt-get2
1398899221,4cyclictest2082-21systemd-journal2
1398899221,3cyclictest505-21dbus-daemon2
1398899221,19cyclictest4352-21latency_hist2
1398899221,18cyclictest26699-21dump-pmu-power2
13985992215,4cyclictest21902-21sh1
13985992210,7cyclictest14807-21apt-get1
1397899229,4cyclictest9-21ksoftirqd/00
1397899228,3cyclictest9-21ksoftirqd/00
1397899226,4cyclictest9-21ksoftirqd/00
1397899224,4cyclictest9-21ksoftirqd/00
1397899224,3cyclictest9-21ksoftirqd/00
13978992217,3cyclictest9-21ksoftirqd/00
13978992217,3cyclictest9-21ksoftirqd/00
13978992213,3cyclictest9-21ksoftirqd/00
13993992116,3cyclictest10477-21sh3
13993992115,4cyclictest11082-21fw_packets3
13993992114,4cyclictest12499-21sendmail_mailst3
1398899214,15cyclictest23980-21cat2
1398899212,17cyclictest31417-21latency_hist2
1398899212,17cyclictest3096-21cat2
1398899212,17cyclictest15384-21cat2
13988992116,3cyclictest21272-21df_inode2
1398899211,4cyclictest25962-21turbostat.cron2
13988992114,4cyclictest2082-21systemd-journal2
1398899211,3cyclictest8054-1kworker/2:2H2
1398899211,3cyclictest23006-21dump-pmu-power2
1398899211,3cyclictest2082-21systemd-journal2
1398899211,3cyclictest2082-21systemd-journal2
1398899211,3cyclictest2082-21systemd-journal2
1398899211,18cyclictest2082-21systemd-journal2
1398899211,18cyclictest13226-21munin-run2
13988992111,6cyclictest12772-21apt-get2
1398899210,3cyclictest26661-21dump-pmu-power2
1398899210,3cyclictest12412-21munin-run2
13985992116,3cyclictest28282-21sh1
13985992114,4cyclictest11831-21expr1
1397899217,4cyclictest9-21ksoftirqd/00
1397899214,4cyclictest9-21ksoftirqd/00
1397899213,6cyclictest9-21ksoftirqd/00
1397899212,2cyclictest9-21ksoftirqd/00
1397899211,7cyclictest9-21ksoftirqd/00
13978992117,3cyclictest9-21ksoftirqd/00
13978992115,4cyclictest30768-21perf0
13978992115,3cyclictest6852-21wc0
1399399204,8cyclictest35-21ksoftirqd/33
13993992016,2cyclictest14158-21sed3
13993992015,3cyclictest9509-21aten2_r9power_p3
13993992015,3cyclictest7100-21aten2_r9power_v3
13993992015,3cyclictest27400-21fw_packets3
13993992015,3cyclictest25803-21open_inodes3
13993992015,3cyclictest21732-21open_inodes3
13993992015,3cyclictest20011-21timerwakeupswit3
13993992014,4cyclictest6923-21date3
13993992014,4cyclictest23256-21expr3
13993992014,4cyclictest22422-21seq3
13993992014,4cyclictest14801-21aten2_r9power_p3
13993992014,3cyclictest5278-21kernelversion3
13993992014,3cyclictest27437-21cpu3
13993992013,4cyclictest17754-21seq3
13993992012,5cyclictest10725-21apt-get3
1399399201,16cyclictest22457-21cut3
13988992015,3cyclictest14439-21sed2
13988992014,4cyclictest1566-21sed2
13988992014,3cyclictest2082-21systemd-journal2
1398899201,3cyclictest8054-1kworker/2:2H2
1398899201,17cyclictest6400-21munin-run2
1398899201,17cyclictest2082-21systemd-journal2
1398899201,17cyclictest0-21swapper/22
1398899201,16cyclictest0-21swapper/22
1398899200,18cyclictest30801-21cat2
1398599202,16cyclictest9115-21tail1
13985992015,3cyclictest4871-21seq1
13985992015,3cyclictest22571-21df_inode1
13985992015,3cyclictest20948-21sh1
13985992015,3cyclictest19586-21/usr/sbin/munin1
13985992015,3cyclictest18762-21/usr/sbin/munin1
13985992014,4cyclictest7423-21diskstats1
13985992014,4cyclictest5250-21grep1
13985992014,4cyclictest30081-21diskstats1
13985992014,4cyclictest26629-21grep1
13985992014,4cyclictest25057-21sh1
13985992014,4cyclictest11395-21cut1
13985992014,3cyclictest22280-21cron1
13985992013,5cyclictest1060-21cut1
13985992013,4cyclictest29168-21cat1
1397899209,3cyclictest9-21ksoftirqd/00
1397899209,3cyclictest111rcu_preempt0
1397899208,4cyclictest9-21ksoftirqd/00
1397899202,3cyclictest111rcu_preempt0
13978992016,2cyclictest9-21ksoftirqd/00
13978992015,3cyclictest5746-21switchtime0
13978992015,3cyclictest1694-21sed0
13978992014,4cyclictest23373-21grep0
13978992013,4cyclictest19095-21grep0
13978992013,4cyclictest17316-21cron0
13978992013,4cyclictest17316-21cron0
13993991914,3cyclictest7305-21load3
13993991914,3cyclictest6446-21latency_hist3
13993991914,3cyclictest4082-21threads3
13993991914,3cyclictest32114-21forks3
13993991914,3cyclictest31353-21ls3
13993991914,3cyclictest29735-21aten2_r9power_p3
13993991914,3cyclictest28276-21latency_hist3
13993991914,3cyclictest2566-21/usr/sbin/munin3
13993991914,3cyclictest20077-21open_inodes3
13993991914,3cyclictest17667-21awk3
13993991914,3cyclictest16744-21/usr/sbin/munin3
13993991914,3cyclictest15787-21proc_pri3
13993991914,3cyclictest15548-21uptime3
13993991914,3cyclictest1508-21sendmail_mailst3
13993991914,3cyclictest11165-21apt-config3
13993991914,2cyclictest8783-21cpu3
13993991913,4cyclictest984-21diskstats3
13993991911,5cyclictest505-21dbus-daemon3
1398899193,11cyclictest0-21swapper/22
13988991914,3cyclictest20993-21idleruntime-cro2
13988991914,3cyclictest15477-21grep2
13988991914,3cyclictest0-21swapper/22
13988991913,4cyclictest5075-21cut2
13988991913,4cyclictest22867-21/usr/sbin/munin2
1398899191,2cyclictest28-21ksoftirqd/22
13988991912,4cyclictest27066-21perf2
1398899191,17cyclictest28750-21awk2
13988991911,4cyclictest8694-21apt-get2
1398899190,5cyclictest32694-21latency_hist2
1398899190,3cyclictest8054-1kworker/2:2H2
1398899190,17cyclictest6313-21latency_hist2
13985991916,2cyclictest24580-21kworker/1:11
13985991915,2cyclictest6557-21/usr/sbin/munin1
13985991914,3cyclictest8685-21find1
13985991914,3cyclictest782-21expr1
13985991914,3cyclictest6293-21seq1
13985991914,3cyclictest4137-21seq1
13985991914,3cyclictest32473-21seq1
13985991914,3cyclictest26156-21sed1
13985991914,3cyclictest22867-21/usr/sbin/munin1
13985991914,3cyclictest18760-21processes1
13985991914,3cyclictest17789-21kernelversion1
13985991914,3cyclictest17789-21kernelversion1
13985991914,3cyclictest13491-21/usr/sbin/munin1
13985991914,3cyclictest1241-21/usr/sbin/munin1
13985991913,4cyclictest5820-21tr1
13985991913,4cyclictest30534-21seq1
13985991913,4cyclictest28585-21seq1
13985991913,4cyclictest24510-21cat1
13985991913,4cyclictest19866-21gzip1
13985991913,4cyclictest17511-21date1
13985991913,4cyclictest17511-21date1
13985991913,4cyclictest15083-21expr1
13985991913,4cyclictest13478-21cat1
13985991913,3cyclictest15729-21seq1
1397899199,2cyclictest111rcu_preempt0
1397899194,7cyclictest9-21ksoftirqd/00
1397899191,6cyclictest9-21ksoftirqd/00
1397899191,6cyclictest9-21ksoftirqd/00
13978991914,3cyclictest9-21ksoftirqd/00
13978991914,3cyclictest665-21runrttasks0
13978991914,3cyclictest4132-21seq0
13978991914,3cyclictest101rcuc/00
13978991913,3cyclictest13067-21cat0
13978991912,4cyclictest6142-21wc0
1397899191,16cyclictest0-21swapper/00
13978991911,4cyclictest30925-21unixbench-2d0
1397899190,6cyclictest9-21ksoftirqd/00
1397899190,10cyclictest15727-21kworker/0:00
13993991814,2cyclictest5423-21aten2_r9power_e3
13993991814,2cyclictest29332-21missed_timers3
13993991814,2cyclictest17563-21df3
13993991814,2cyclictest17563-21df3
13993991813,3cyclictest8101-21wc3
13993991813,3cyclictest31494-21grep3
13993991813,3cyclictest30120-21threads3
13993991813,3cyclictest27215-21expr3
13993991813,3cyclictest23280-21expr3
13993991813,3cyclictest22989-21latency_hist3
13993991813,3cyclictest1954-21latency3
13993991813,3cyclictest18840-21cat3
13993991813,3cyclictest16165-21cat3
13993991813,3cyclictest16165-21cat3
13993991813,3cyclictest14359-21ntp_kernel_err3
13993991813,3cyclictest14141-21diskstats3
13993991813,3cyclictest13243-21if_enp2s03
13993991812,4cyclictest29391-21entropy3
13993991812,4cyclictest25302-21cat3
13993991810,5cyclictest25717-21fw_packets3
1398899181,4cyclictest24658-21latency_hist2
13988991813,3cyclictest21611-21sed2
13988991812,4cyclictest3864-21cut2
13988991812,4cyclictest16810-21cut2
13988991812,4cyclictest10734-21cut2
1398599183,9cyclictest16783-21apt-get1
1398599182,14cyclictest10793-21sed1
13985991815,2cyclictest0-21swapper/11
13985991814,2cyclictest7381-21/usr/sbin/munin1
13985991814,2cyclictest28326-21processes1
13985991813,3cyclictest30961-21/usr/sbin/munin1
13985991813,3cyclictest27110-21cat1
13985991813,3cyclictest18484-21seq1
13985991813,3cyclictest17924-21seq1
13985991813,3cyclictest1504-21cat1
13985991813,3cyclictest14696-21basename1
13985991813,3cyclictest13685-21/usr/sbin/munin1
13985991812,4cyclictest12519-21date1
13985991812,3cyclictest6688-21aten2.4-expect1
13985991812,3cyclictest2622-21sh1
1398599181,16cyclictest0-21swapper/11
13985991810,5cyclictest4552-21apt-get1
1398599180,16cyclictest0-21swapper/11
1398599180,15cyclictest2082-21systemd-journal1
1397899186,3cyclictest9-21ksoftirqd/00
13978991813,3cyclictest30564-21seq0
13978991812,4cyclictest3300-21cat0
13993991715,1cyclictest0-21swapper/33
13993991712,3cyclictest665-21runrttasks3
13993991712,3cyclictest25432-21basename3
1398899172,12cyclictest12688-21apt-get2
13988991715,1cyclictest0-21swapper/22
13988991711,3cyclictest8969-21sed2
13988991710,5cyclictest10333-21gdbus2
13985991712,3cyclictest11912-21cat1
13985991711,4cyclictest29270-21expr1
13985991711,3cyclictest764-21cat1
13978991712,3cyclictest17232-21seq0
13993991614,1cyclictest0-21swapper/33
13993991610,4cyclictest16244-21head3
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional