You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-19 - 08:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Fri Apr 19, 2024 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
41082296259,25sleep20-21swapper/22
42042283213,58sleep30-21swapper/33
41362271241,17sleep00-21swapper/00
32812258171,66sleep10-21swapper/11
459299244234,7cyclictest0-21swapper/00
459599180169,9cyclictest12213-21strings1
3093221460,2sleep0459299cyclictest0
460399117113,3cyclictest0-21swapper/33
89902580,1sleep10-21swapper/11
212742510,2sleep20-21swapper/22
459299469,9cyclictest13836-21cut0
194492460,2sleep00-21swapper/00
290392440,1sleep028216-21/usr/sbin/munin0
169192440,3sleep20-21swapper/22
169192440,3sleep20-21swapper/22
41052430,1sleep20-21swapper/22
268122430,2sleep10-21swapper/11
89812410,1sleep30-21swapper/33
459299355,8cyclictest1341-21cut0
459999341,24cyclictest13162-21idleruntime-cro2
459299336,9cyclictest31925-21awk0
459299326,9cyclictest15101-21head0
459299316,9cyclictest27099-21ntp_states0
459299311,17cyclictest0-21swapper/00
459299305,9cyclictest505-21dbus-daemon0
87402270,12sleep121-21ksoftirqd/11
459299276,8cyclictest665-21runrttasks0
459599261,20cyclictest24172-21apt-get1
459999244,17cyclictest25535-21cat2
459299244,5cyclictest0-21swapper/00
459299244,4cyclictest0-21swapper/00
459299241,9cyclictest0-21swapper/00
459299241,9cyclictest0-21swapper/00
4603992316,4cyclictest19965-21cron3
459999239,4cyclictest15789-21grep2
459999233,2cyclictest0-21swapper/22
459999231,19cyclictest5917-21munin-run2
4595992316,4cyclictest1885-21latency_hist1
459299234,16cyclictest455-21sort0
459299230,9cyclictest0-21swapper/00
239522230,15sleep335-21ksoftirqd/33
460399228,4cyclictest1496-21cron3
460399223,16cyclictest26026-21sh3
4603992215,4cyclictest17946-21cron3
4603992215,4cyclictest17946-21cron3
459999228,12cyclictest0-21swapper/22
459999223,17cyclictest29452-21cat2
4599992216,4cyclictest9914-21munin-run2
459599228,12cyclictest505-21dbus-daemon1
459299221,8cyclictest0-21swapper/00
459299221,8cyclictest0-21swapper/00
4592992216,3cyclictest1902-21sendmail0
460399212,16cyclictest31974-21tr3
4603992115,4cyclictest20591-21df3
4603992115,4cyclictest18836-21ntp_kernel_pll_3
460399210,4cyclictest0-21swapper/33
4599992116,3cyclictest6478-21ntp_offset2
4599992116,3cyclictest4318-21idleruntime2
4599992115,4cyclictest6989-21timerwakeupswit2
459999211,3cyclictest8847-1kworker/2:1H2
459999211,3cyclictest1021-21munin-run2
459999210,3cyclictest14258-21aten2_r9power_v2
4595992116,3cyclictest30197-21/usr/sbin/munin1
4595992116,3cyclictest13162-21awk1
459299219,9cyclictest21500-21unixbench_singl0
4592992113,5cyclictest505-21dbus-daemon0
4592992111,8cyclictest24214-21grep0
4592992110,5cyclictest14201-21apt-get0
459299210,8cyclictest0-21swapper/00
459299210,8cyclictest0-21swapper/00
459299210,8cyclictest0-21swapper/00
4603992015,3cyclictest27431-21timerwakeupswit3
4603992015,3cyclictest22865-21sed3
4603992015,3cyclictest20985-21sed3
4603992015,3cyclictest12639-21needreboot3
4603992014,4cyclictest13572-21users3
4603992012,5cyclictest505-21dbus-daemon3
459999207,10cyclictest10311-21latency2
459999202,16cyclictest15127-21latency_hist2
4599992016,2cyclictest7051-21ntp_states2
4599992016,2cyclictest18052-21aten2_r9power_p2
4599992015,3cyclictest7954-21cat2
4599992015,3cyclictest21006-21rt-features2
4599992015,3cyclictest16856-21latency2
4599992014,4cyclictest26109-21cat2
4599992014,4cyclictest14626-21diskstats2
4599992014,3cyclictest7632-21aten2_r9power_c2
4599992014,3cyclictest29209-21proc_pri2
4599992013,4cyclictest2083-21head2
459999201,17cyclictest21448-21cat2
459999201,17cyclictest13586-21apt-get2
459999201,16cyclictest9565-21run-parts2
459999200,3cyclictest23966-21munin-run2
459999200,18cyclictest5570-21apt2
459599206,3cyclictest61242cat1
4595992016,2cyclictest9372-21/usr/sbin/munin1
4595992015,3cyclictest14180-21seq1
4595992014,4cyclictest3730-21sh1
4595992014,4cyclictest3191-21seq1
4595992014,4cyclictest21623-21seq1
4595992014,4cyclictest15726-21seq1
4595992013,5cyclictest3907-21cron1
4595992013,4cyclictest31284-21seq1
4595992013,4cyclictest26261-21date1
459599200,18cyclictest11941-21cron1
459299207,10cyclictest6693-21munin-node0
459299205,12cyclictest22453-21sed0
4592992014,4cyclictest6693-21munin-node0
4592992014,4cyclictest24228-21http0
4592992014,4cyclictest17668-21wc0
4592992013,4cyclictest665-21runrttasks0
4592992013,4cyclictest18503-21cut0
460399193,9cyclictest22229-21apt-get3
460399192,14cyclictest2112-21cut3
4603991917,1cyclictest0-21swapper/33
4603991916,2cyclictest4584-21cyclictest3
4603991916,2cyclictest0-21swapper/33
4603991915,2cyclictest351ksoftirqd/33
4603991914,3cyclictest7444-21cat3
4603991914,3cyclictest6196-21expr3
4603991914,3cyclictest27384-21sed3
4603991914,3cyclictest17237-21sed3
4603991914,3cyclictest15372-21sed3
4603991914,3cyclictest14499-21expr3
4603991914,3cyclictest13378-21cron3
4603991914,3cyclictest10487-21ntp_kernel_err3
4603991913,4cyclictest8503-21sed3
4603991913,3cyclictest8413-21cat3
4603991913,3cyclictest665-21runrttasks3
4603991913,3cyclictest25467-21turbostat3
460399191,2cyclictest111rcu_preempt3
4603991912,5cyclictest6201-21expr3
460399191,15cyclictest5935-21sleep3
4603991911,5cyclictest505-21dbus-daemon3
4603991911,5cyclictest11141-21cron3
4599991915,2cyclictest8814-21processes2
4599991915,2cyclictest11279-21cat2
4599991914,3cyclictest6679-21open_files2
4599991914,3cyclictest5945-21cat2
4599991914,3cyclictest32595-21apt2
4599991914,3cyclictest31948-21latency_hist2
4599991914,3cyclictest23217-21unixbench-2d2
4599991913,4cyclictest29914-21seq2
4599991913,4cyclictest26584-21ls2
4599991913,3cyclictest11194-21processes2
459999191,2cyclictest1785-21apt-get2
4599991912,4cyclictest15478-21date2
4599991912,4cyclictest12600-21ls2
459999191,16cyclictest32339-21munin-run2
459599193,9cyclictest1610-21apt-get1
4595991916,2cyclictest0-21swapper/11
4595991916,2cyclictest0-21swapper/11
4595991915,2cyclictest24205-21/usr/sbin/munin1
4595991915,2cyclictest19707-21/usr/sbin/munin1
4595991914,3cyclictest6693-21munin-node1
4595991914,3cyclictest5300-21seq1
4595991914,3cyclictest27573-21cut1
4595991914,3cyclictest26639-21ls1
4595991914,3cyclictest26348-21aten2_r9power_e1
4595991914,3cyclictest23697-21/usr/sbin/munin1
4595991914,3cyclictest23376-21seq1
4595991914,3cyclictest19490-21grep1
4595991914,3cyclictest15690-21/usr/sbin/munin1
4595991914,3cyclictest13624-21/usr/sbin/munin1
4595991914,3cyclictest13379-21/usr/sbin/munin1
4595991914,3cyclictest10529-21ntp_states1
4595991913,4cyclictest24047-21cat1
4595991913,4cyclictest23324-21cat1
4595991913,4cyclictest16124-21date1
459599190,16cyclictest8512-21cstates1
459299199,5cyclictest5617-21apt-get0
459299196,9cyclictest0-21swapper/00
459299196,10cyclictest12846-21uname0
459299194,12cyclictest17719-21/usr/sbin/munin0
459299192,5cyclictest9-21ksoftirqd/00
459299192,5cyclictest9-21ksoftirqd/00
459299192,5cyclictest9-21ksoftirqd/00
459299192,5cyclictest9-21ksoftirqd/00
4592991914,2cyclictest16229-21aten2_r9power_c0
4592991914,2cyclictest16229-21aten2_r9power_c0
4592991913,4cyclictest3840-21cut0
4592991913,4cyclictest31965-21cron0
4592991913,4cyclictest31965-21cron0
4592991913,4cyclictest28695-21snmpd0
4592991913,3cyclictest9884-21cut0
4592991911,5cyclictest505-21dbus-daemon0
4592991910,5cyclictest28695-21snmpd0
4592991910,5cyclictest24172-21apt-get0
460399183,9cyclictest15139-21apt-get3
4603991816,1cyclictest0-21swapper/33
4603991816,1cyclictest0-21swapper/33
4603991816,1cyclictest0-21swapper/33
4603991816,1cyclictest0-21swapper/33
4603991814,2cyclictest0-21swapper/33
4603991814,2cyclictest0-21swapper/33
4603991813,3cyclictest6785-21which3
4603991813,3cyclictest20351-21expr3
4603991813,3cyclictest13641-21apt3
4603991812,4cyclictest11107-21awk3
4603991812,3cyclictest24879-21latency3
4603991811,4cyclictest30656-21cut3
460399180,16cyclictest0-21swapper/33
460399180,16cyclictest0-21swapper/33
459999182,13cyclictest26245-21apt-get2
4599991813,3cyclictest29725-21basename2
4599991813,3cyclictest24652-21entropy2
4599991813,3cyclictest24268-21cat2
4599991813,3cyclictest21805-21cut2
4599991813,3cyclictest2087-21expr2
4599991813,3cyclictest10945-21cat2
459999181,1cyclictest0-21swapper/22
4599991811,4cyclictest32199-21acpi2
4599991811,4cyclictest28032-21sh2
459999180,16cyclictest28567-21sendmail-mta2
459999180,16cyclictest19470-21munin-run2
459599183,9cyclictest5812-21apt-get1
459599182,10cyclictest30236-21apt-get1
459599182,10cyclictest30236-21apt-get1
4595991816,1cyclictest0-21swapper/11
4595991816,1cyclictest0-21swapper/11
4595991816,1cyclictest0-21swapper/11
4595991814,3cyclictest22000-21sendmail-mta1
4595991814,2cyclictest31705-21/usr/sbin/munin1
4595991814,2cyclictest15630-21/usr/sbin/munin1
4595991814,2cyclictest12186-21/usr/sbin/munin1
4595991813,3cyclictest6693-21munin-node1
4595991813,3cyclictest2828-21processes1
4595991813,3cyclictest27811-21cut1
4595991813,3cyclictest22858-21ntp_states1
4595991813,3cyclictest19638-21seq1
4595991813,3cyclictest19566-21seq1
4595991812,4cyclictest8185-21expr1
4595991812,4cyclictest4688-21expr1
4595991812,4cyclictest4441-21cut1
4595991812,4cyclictest32382-21sed1
4595991812,4cyclictest30161-21seq1
4595991812,4cyclictest29953-21seq1
4595991812,4cyclictest11021-21cat1
459299187,8cyclictest5550-21munin-run0
459299182,5cyclictest9-21ksoftirqd/00
459299182,5cyclictest9-21ksoftirqd/00
459299182,5cyclictest9-21ksoftirqd/00
459299182,5cyclictest9-21ksoftirqd/00
459299182,5cyclictest9-21ksoftirqd/00
4592991814,2cyclictest4751-21/usr/sbin/munin0
4592991814,2cyclictest3584-21/usr/sbin/munin0
4592991814,2cyclictest28201-21/usr/sbin/munin0
4592991814,2cyclictest20205-21/usr/sbin/munin0
4592991812,4cyclictest15887-21cat0
4592991812,4cyclictest14777-21sed0
4592991812,4cyclictest11094-21grep0
4592991810,5cyclictest22269-21tail0
459299180,5cyclictest0-21swapper/00
460399179,5cyclictest2082-21systemd-journal3
4603991713,2cyclictest5631-21ntp_offset3
4603991713,2cyclictest28365-21irqstats3
4603991712,3cyclictest455-21sed3
4603991712,3cyclictest28471-21cat3
4603991711,4cyclictest2902-21sed3
4603991710,4cyclictest5054-21sed3
460399170,1cyclictest0-21swapper/33
4599991712,3cyclictest665-21runrttasks2
459999171,13cyclictest22174-21apt-get2
459999170,16cyclictest0-21swapper/22
459999170,16cyclictest0-21swapper/22
459999170,16cyclictest0-21swapper/22
4595991715,1cyclictest0-21swapper/11
4595991713,2cyclictest5599-21/usr/sbin/munin1
4595991712,3cyclictest17007-21cat1
4595991712,3cyclictest17007-21cat1
4603991614,1cyclictest0-21swapper/33
4603991611,3cyclictest30231-21cut3
4603991611,2cyclictest2216-21aten2_r9power_e3
460399160,15cyclictest0-21swapper/33
4599991611,3cyclictest665-21runrttasks2
459999160,15cyclictest0-21swapper/22
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional