You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-19 - 08:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Fri Dec 19, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
178082317279,25sleep00-21swapper/00
177882298260,25sleep10-21swapper/11
179212283204,44sleep30-21swapper/33
180122279189,60sleep20-21swapper/22
1828799256249,4cyclictest5325-21cron3
1827699175170,3cyclictest5314-21cron0
3019121420,2sleep10-21swapper/11
1828099141136,3cyclictest5320-21munin-run1
1828499126120,3cyclictest340-21systemd-journal2
258522600,1sleep10-21swapper/11
186752550,4sleep218676-21ntp_kernel_pll_2
120272450,1sleep30-21swapper/33
20002430,3sleep30-21swapper/33
106572410,1sleep10-21swapper/11
171072390,1sleep20-21swapper/22
1827699343,28cyclictest22871-21idleruntime-cro0
1828499310,29cyclictest9498-21kworker/2:12
188872270,2sleep20-21swapper/22
1828799266,18cyclictest340-21systemd-journal3
18284992614,10cyclictest517-21dbus-daemon2
1828799255,19cyclictest515-21avahi-daemon3
1828799252,21cyclictest0-21swapper/33
1828799244,18cyclictest17653-21cat3
18287992413,10cyclictest0-21swapper/33
18287992411,11cyclictest35-21ksoftirqd/33
18284992416,5cyclictest340-21systemd-journal2
18280992415,6cyclictest9790-21apt-get1
261692230,3sleep20-21swapper/22
211352230,2sleep20-21swapper/22
196032230,1sleep20-21swapper/22
1828799235,17cyclictest9449-21sendmail-mta3
1828799234,3cyclictest35-21ksoftirqd/33
1828799234,17cyclictest6781-21sendmail-mta3
1828799234,17cyclictest28832-21sendmail-mta3
1828799234,17cyclictest26379-21sendmail-mta3
1828799234,17cyclictest2405-21sendmail-mta3
1828799234,17cyclictest21984-21sendmail-mta3
1828799234,17cyclictest10874-21sendmail-mta3
1828799233,18cyclictest15471-21sendmail-mta3
1828799233,18cyclictest1289-21sendmail-mta3
1828799232,3cyclictest0-21swapper/33
1828799231,11cyclictest35-21ksoftirqd/33
18287992311,10cyclictest7575-21perf3
1828099231,20cyclictest0-21swapper/11
1827699234,12cyclictest5166-21chrt0
1828799229,12cyclictest35-21ksoftirqd/33
1828799224,16cyclictest24768-21sendmail-mta3
1828799223,17cyclictest7293-21sendmail-mta3
1828799223,17cyclictest31545-21sendmail-mta3
1828799223,17cyclictest27483-21sendmail-mta3
1828799223,17cyclictest25570-21sendmail-mta3
1828799223,17cyclictest23940-21sendmail-mta3
1828799223,17cyclictest23400-21sendmail-mta3
1828799223,17cyclictest21484-21sendmail-mta3
1828799223,17cyclictest20073-21sendmail-mta3
1828799223,17cyclictest19873-21sendmail-mta3
1828799222,18cyclictest11410-21sendmail-mta3
18287992215,4cyclictest1317-21turbostat3
1828799221,18cyclictest10746-21ntp_states3
18287992210,11cyclictest35-21ksoftirqd/33
18284992215,5cyclictest1315-21sendmail2
18280992216,4cyclictest18315-21find1
18280992212,4cyclictest21819-21cut1
18276992210,3cyclictest258552grep0
256162210,3sleep335-21ksoftirqd/33
1828799217,11cyclictest0-21swapper/33
1828799213,16cyclictest13382-21sendmail-mta3
1828799212,17cyclictest27744-21latency_hist3
1828799212,17cyclictest13315-21sendmail-mta3
1828799211,3cyclictest23698-21perf3
1828799211,3cyclictest17818-21apt-key3
18284992115,4cyclictest9792-21wc2
18284992114,4cyclictest24508-21basename2
1828499210,11cyclictest24102-21apt2
18280992116,3cyclictest7616-21/usr/sbin/munin1
18280992115,4cyclictest10018-21missed_timers1
18276992116,3cyclictest21648-21grep0
18276992115,4cyclictest340-21systemd-journal0
18276992114,4cyclictest340-21systemd-journal0
18276992114,4cyclictest24095-21grep0
18276992114,4cyclictest11638-21sh0
18287992015,3cyclictest3215-21seq3
18287992014,4cyclictest25635-21grep3
1828799200,3cyclictest8943-1kworker/3:2H3
1828799200,19cyclictest0-21swapper/33
1828799200,18cyclictest28307-21df_inode3
1828499208,10cyclictest571-21gdbus2
18284992015,3cyclictest32066-21cpu2
18284992015,3cyclictest30710-21latency2
18284992015,3cyclictest30613-21sed2
18284992015,3cyclictest15703-21sh2
18284992015,3cyclictest15703-21sh2
18284992015,3cyclictest14660-21sendmail_mailst2
18284992015,3cyclictest14449-21sed2
18284992014,4cyclictest10353-21sed2
18280992018,1cyclictest0-21swapper/11
18280992015,3cyclictest8730-21seq1
18280992015,3cyclictest7883-21aten2_r9power_e1
18280992015,3cyclictest6725-21timerandwakeup1
18280992015,3cyclictest21985-21seq1
18280992015,3cyclictest19406-21seq1
18280992015,3cyclictest1692-21aten2_r9power_v1
18280992015,3cyclictest13617-21apt-get1
18280992015,3cyclictest1194-21sh1
18280992014,4cyclictest7460-21seq1
18280992014,4cyclictest25101-21expr1
18280992014,4cyclictest17172-21seq1
18280992014,4cyclictest15312-21seq1
18280992014,4cyclictest1213-21seq1
18280992014,4cyclictest11703-21seq1
18280992014,4cyclictest11250-21seq1
1827699202,11cyclictest31152-21chrt0
1827699201,7cyclictest0-21swapper/00
18276992015,3cyclictest770-21sed0
18276992015,3cyclictest15629-21acpi0
18276992014,4cyclictest8981-21grep0
18276992013,4cyclictest662-21runrttasks0
1828799193,2cyclictest35-21ksoftirqd/33
18287991916,2cyclictest0-21swapper/33
18287991915,2cyclictest13911-21/usr/sbin/munin3
18287991915,2cyclictest13911-21/usr/sbin/munin3
18287991914,3cyclictest23741-21mailstats3
18287991914,3cyclictest19367-21sendmail_mailst3
18287991913,3cyclictest15924-21expr3
18287991912,5cyclictest17889-21cut3
1828799191,16cyclictest9921-21grep3
1828799191,16cyclictest0-21swapper/33
1828799190,17cyclictest31055-21cat3
1828799190,17cyclictest28546-21latency_hist3
18284991915,2cyclictest4736-21processes2
18284991914,3cyclictest7362-21sshd2
18284991914,3cyclictest5606-21cut2
18284991914,3cyclictest32470-21expr2
18284991914,3cyclictest32292-21grep2
18284991914,3cyclictest14877-21processes2
18284991913,4cyclictest9276-21seq2
18284991913,4cyclictest517-21dbus-daemon2
18284991913,4cyclictest28235-21rt-features2
18284991913,4cyclictest22298-21expr2
18284991913,4cyclictest19991-21seq2
18284991913,3cyclictest16207-21sh2
18284991912,5cyclictest517-21dbus-daemon2
18284991912,4cyclictest29117-21apt-get2
18284991912,4cyclictest1621-21aten2.4-expect2
18280991916,2cyclictest0-21swapper/11
18280991916,2cyclictest0-21swapper/11
18280991916,2cyclictest0-21swapper/11
18280991915,3cyclictest1681-21/usr/sbin/munin1
18280991915,2cyclictest26767-21/usr/sbin/munin1
18280991915,2cyclictest19724-21/usr/sbin/munin1
18280991914,3cyclictest6189-21grep1
18280991914,3cyclictest5373-21seq1
18280991914,3cyclictest28945-21pmu-power1
18280991914,3cyclictest25452-21seq1
18280991914,3cyclictest22677-21/usr/sbin/munin1
18280991914,3cyclictest22541-21seq1
18280991914,3cyclictest20343-21/usr/sbin/munin1
18280991914,3cyclictest1879-21ls1
18280991913,4cyclictest5171-21seq1
18280991913,4cyclictest31479-21seq1
18280991913,4cyclictest29123-21date1
18280991912,5cyclictest517-21dbus-daemon1
18280991912,4cyclictest22204-21diskstats1
18280991912,4cyclictest15455-21seq1
18280991912,4cyclictest15455-21seq1
18276991916,2cyclictest0-21swapper/00
18276991914,3cyclictest634-21snmpd0
18276991914,3cyclictest29523-21/usr/sbin/munin0
18276991914,3cyclictest23154-21grep0
18276991914,3cyclictest22080-21idleruntime-cro0
18276991914,3cyclictest19300-21mailstats0
18276991914,3cyclictest17915-21sed0
18276991914,3cyclictest17794-21/usr/sbin/munin0
18276991914,3cyclictest12889-21sed0
1827699191,3cyclictest111rcu_preempt0
18276991913,4cyclictest9190-21sed0
18276991913,4cyclictest9055-21sed0
18276991913,4cyclictest662-21runrttasks0
18276991913,4cyclictest27189-21grep0
18276991913,4cyclictest27181-21expr0
18276991912,4cyclictest31800-21cron0
18276991912,4cyclictest25744-21basename0
1827699191,16cyclictest11040-21grep0
18276991911,5cyclictest517-21dbus-daemon0
18276991911,5cyclictest15726-21sendmail0
18276991911,5cyclictest15726-21sendmail0
18287991814,2cyclictest4934-21unixbench_multi3
18287991813,3cyclictest21529-21gltestperf3
18287991812,4cyclictest12736-21nfs4_client3
1828799181,16cyclictest0-21swapper/33
1828499186,10cyclictest571-21gdbus2
1828499185,10cyclictest22402-21cat2
18284991815,2cyclictest0-21swapper/22
18284991813,3cyclictest27873-21acpi2
18284991813,3cyclictest26916-21cpu2
18284991813,3cyclictest25578-21cron2
18284991813,3cyclictest24373-21df_inode2
18284991813,3cyclictest18321-21awk2
18284991813,3cyclictest12221-21expr2
18284991812,4cyclictest571-21gdbus2
18284991812,4cyclictest26671-21seq2
18284991812,4cyclictest17581-21cat2
18284991812,4cyclictest11422-21seq2
18284991812,3cyclictest3635-21sed2
1828499181,16cyclictest0-21swapper/22
18280991814,2cyclictest15965-21/usr/sbin/munin1
18280991814,2cyclictest15792-21aten2_r9power_c1
18280991814,2cyclictest11563-21/usr/sbin/munin1
18280991813,3cyclictest32367-21df1
18280991813,3cyclictest32033-21awk1
18280991813,3cyclictest23893-21expr1
18280991813,3cyclictest18231-21/usr/sbin/munin1
18280991813,3cyclictest13905-21seq1
18280991812,4cyclictest517-21dbus-daemon1
18280991812,4cyclictest23415-21seq1
18280991812,4cyclictest19512-21basename1
18280991812,4cyclictest18416-21cat1
18280991812,4cyclictest1418-21seq1
18280991812,3cyclictest29604-21aten2.4-expect1
1827699186,10cyclictest21537-21perf0
1827699182,15cyclictest0-21swapper/00
18276991816,1cyclictest0-21swapper/00
18276991816,1cyclictest0-21swapper/00
18276991816,1cyclictest0-21swapper/00
18276991816,1cyclictest0-21swapper/00
18276991815,2cyclictest0-21swapper/00
18276991814,2cyclictest27872-21/usr/sbin/munin0
18276991814,2cyclictest25959-21/usr/sbin/munin0
18276991813,3cyclictest7693-21ls0
18276991813,3cyclictest634-21snmpd0
18276991813,3cyclictest31939-21aten2_r9power_e0
18276991813,3cyclictest29099-21/usr/sbin/munin0
18276991813,3cyclictest11434-21latency_hist0
18276991811,4cyclictest23940-21sendmail-mta0
1828799171,15cyclictest0-21swapper/33
18287991711,4cyclictest14585-21ntp_kernel_pll_3
18284991715,1cyclictest0-21swapper/22
18284991715,1cyclictest0-21swapper/22
18284991715,1cyclictest0-21swapper/22
18284991715,1cyclictest0-21swapper/22
18284991714,2cyclictest0-21swapper/22
18284991713,2cyclictest12011-21aten2_r9power_v2
18284991712,3cyclictest517-21dbus-daemon2
18284991712,3cyclictest28869-21ntp_kernel_pll_2
18284991712,3cyclictest26395-21sh2
1828499171,13cyclictest3302-21ls2
18280991712,3cyclictest5389-21cat1
18280991711,4cyclictest26308-21cat1
18280991711,4cyclictest12590-21sed1
18276991715,1cyclictest0-21swapper/00
18276991715,1cyclictest0-21swapper/00
18276991713,3cyclictest7686-21/usr/sbin/munin0
18276991712,3cyclictest662-21runrttasks0
18276991712,3cyclictest24755-21expr0
18276991712,3cyclictest1939-21forks0
18276991712,3cyclictest13897-21cut0
18276991712,3cyclictest13584-21pluginstate0
18276991712,3cyclictest1310-21idleruntime0
18276991711,4cyclictest30113-21cat0
18276991711,4cyclictest14208-21gltestperf0
18276991711,3cyclictest14923-21grep0
18276991710,5cyclictest0-21swapper/00
1827699170,16cyclictest0-21swapper/00
1828499162,3cyclictest24350-21apt-get2
18284991612,2cyclictest662-21runrttasks2
18284991610,4cyclictest517-21dbus-daemon2
18280991611,3cyclictest2906-21readlink1
18280991610,3cyclictest23940-21sendmail-mta1
18276991611,3cyclictest6005-21entropy0
1827699160,15cyclictest0-21swapper/00
1828499151,12cyclictest12109-21cut2
18280991511,2cyclictest15863-21/usr/sbin/munin1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional