You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-30 - 16:48
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Tue Dec 30, 2025 12:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
164862272236,24sleep00-21swapper/00
164842269187,67sleep30-21swapper/33
167622259179,45sleep20-21swapper/22
166272255179,44sleep10-21swapper/11
2135221480,2sleep10-21swapper/11
1722221460,3sleep017217-21aten2.4-expect0
131602660,2sleep00-21swapper/00
129872440,1sleep00-21swapper/00
16952993118,8cyclictest662-21runrttasks0
16952992915,4cyclictest662-21runrttasks0
16952992815,11cyclictest10067-21basename0
1696399277,3cyclictest0-21swapper/33
1696399277,17cyclictest0-21swapper/33
16963992716,10cyclictest0-21swapper/33
1695299270,6cyclictest27500-21cups-browsed0
1696399267,17cyclictest571-21gdbus3
31852251,3sleep03258-21gltestperf0
190812250,1sleep20-21swapper/22
1696399257,15cyclictest12039-21cat3
1696399256,17cyclictest13786-21kworker/u8:03
1696399250,1cyclictest0-21swapper/33
1695799255,18cyclictest0-21swapper/11
1695299252,2cyclictest9-21ksoftirqd/00
1696399244,17cyclictest22104-21sendmail-mta3
16957992418,4cyclictest10331-21sed1
1695299244,12cyclictest9-21ksoftirqd/00
1695299244,12cyclictest9-21ksoftirqd/00
1695299243,3cyclictest9-21ksoftirqd/00
1695299242,6cyclictest9-21ksoftirqd/00
16952992421,2cyclictest101rcuc/00
16952992421,2cyclictest101rcuc/00
149122240,3sleep1201rcuc/11
50822230,8sleep228-21ksoftirqd/22
286382230,1sleep20-21swapper/22
1696399234,17cyclictest12585-21sendmail-mta3
1696399233,18cyclictest13888-21sendmail-mta3
1696399233,18cyclictest13888-21sendmail-mta3
1696399233,17cyclictest9829-21sendmail-mta3
1696399233,17cyclictest5724-21sendmail-mta3
1696399233,17cyclictest20429-21sendmail-mta3
1696399232,18cyclictest0-21swapper/33
1696399231,4cyclictest340-21systemd-journal3
1696399231,4cyclictest10099-1kworker/3:2H3
16961992317,4cyclictest7572-21sendmail2
16961992316,4cyclictest12383-21sh2
16957992315,5cyclictest22997-21idleruntime-cro1
1695299233,7cyclictest9-21ksoftirqd/00
1695299233,7cyclictest9-21ksoftirqd/00
1695299233,6cyclictest9-21ksoftirqd/00
16952992319,2cyclictest101rcuc/00
1696399228,11cyclictest0-21swapper/33
1696399226,14cyclictest0-21swapper/33
1696399223,17cyclictest7850-21sendmail-mta3
1696399223,17cyclictest32721-21sendmail-mta3
1696399223,17cyclictest24892-21sendmail-mta3
1696399223,17cyclictest19835-21cat3
1696399223,17cyclictest17652-21sendmail-mta3
1696399223,17cyclictest16323-21sendmail-mta3
1696399223,16cyclictest29953-21sendmail-mta3
1696399223,16cyclictest29953-21sendmail-mta3
1696399222,18cyclictest7645-21cat3
1696399222,18cyclictest23809-21procmail3
1696399221,4cyclictest6593-21/usr/sbin/munin3
1696399221,3cyclictest340-21systemd-journal3
1696399221,18cyclictest3353-21rm3
1696399220,19cyclictest2513-21perf3
1696199229,11cyclictest517-21dbus-daemon2
16961992215,5cyclictest31516-21df_inode2
1695799220,20cyclictest0-21swapper/11
1695299226,9cyclictest9-21ksoftirqd/00
1695299223,6cyclictest9-21ksoftirqd/00
1695299223,6cyclictest9-21ksoftirqd/00
1695299223,5cyclictest9-21ksoftirqd/00
1695299222,6cyclictest9-21ksoftirqd/00
1695299222,5cyclictest9-21ksoftirqd/00
16952992218,2cyclictest101rcuc/00
16952992216,4cyclictest6597-21sh0
16952992213,5cyclictest662-21runrttasks0
16952992210,10cyclictest665-21expr0
1695299220,9cyclictest9-21ksoftirqd/00
10722220,3sleep30-21swapper/33
1696399213,16cyclictest28038-21cat3
16963992115,4cyclictest2447-21df_inode3
16963992115,4cyclictest15730-21munin-run3
16963992115,4cyclictest15730-21munin-run3
16963992115,3cyclictest29916-21ntp_states3
1696399211,18cyclictest340-21systemd-journal3
1696399211,17cyclictest13691-21latency_hist3
1696399210,4cyclictest22814-21apt-get3
1696399210,19cyclictest4383-21kworker/3:23
1696199219,9cyclictest20581-21latency_hist2
1696199218,11cyclictest571-21gdbus2
16961992116,3cyclictest29898-21ntp_kernel_pll_2
16961992116,3cyclictest13489-21ntp_kernel_pll_2
16961992115,4cyclictest12740-21cron2
16961992114,4cyclictest662-21runrttasks2
16961992114,4cyclictest31515-21idleruntime-cro2
16961992112,6cyclictest23947-21sendmail2
1696199211,18cyclictest517-21dbus-daemon2
1696199211,18cyclictest517-21dbus-daemon2
1696199210,18cyclictest7901-21cron2
16957992116,3cyclictest30510-21aten2_r9power_p1
16957992110,7cyclictest18056-21apt-get1
16957992110,6cyclictest16013-21apt-get1
1695299215,9cyclictest9-21ksoftirqd/00
1695299215,9cyclictest9-21ksoftirqd/00
1695299215,5cyclictest9-21ksoftirqd/00
1695299213,6cyclictest9-21ksoftirqd/00
1695299213,6cyclictest9-21ksoftirqd/00
1695299212,7cyclictest9-21ksoftirqd/00
1695299212,7cyclictest9-21ksoftirqd/00
1695299212,6cyclictest9-21ksoftirqd/00
1695299212,6cyclictest9-21ksoftirqd/00
1695299212,6cyclictest9-21ksoftirqd/00
16952992117,2cyclictest101rcuc/00
16952992116,3cyclictest14799-21sendmail0
16952992114,4cyclictest340-21systemd-journal0
1695299211,18cyclictest515-21avahi-daemon0
1695299210,9cyclictest9-21ksoftirqd/00
1695299210,8cyclictest9-21ksoftirqd/00
1695299210,6cyclictest340-21systemd-journal0
202652200,3sleep10-21swapper/11
16963992016,2cyclictest0-21swapper/33
16963992015,3cyclictest28234-21ntp_states3
16963992014,4cyclictest18036-21grep3
16963992014,4cyclictest18036-21grep3
16963992014,3cyclictest22158-21proc_pri3
1696399201,17cyclictest32121-21cron3
1696399201,16cyclictest20796-21runrttasks3
1696399200,5cyclictest26736-21cron3
1696399200,4cyclictest340-21systemd-journal3
1696399200,17cyclictest8699-21diskstats3
1696199209,6cyclictest2024-21apt-get2
1696199208,10cyclictest571-21gdbus2
1696199208,10cyclictest10723-21cut2
1696199205,9cyclictest3734-21apt-get2
1696199202,16cyclictest23434-21cut2
1696199202,12cyclictest26284-21taskset2
16961992015,3cyclictest28-21ksoftirqd/22
16961992014,4cyclictest14954-21cut2
16961992013,4cyclictest32223-21sh2
16961992011,5cyclictest24619-21sendmail2
16957992016,2cyclictest27340-21cstates1
16957992016,2cyclictest22144-21/usr/sbin/munin1
16957992015,3cyclictest6860-21/usr/sbin/munin1
16957992015,3cyclictest3716-21/usr/sbin/munin1
16957992015,3cyclictest3640-21ntp_states1
16957992015,3cyclictest29364-21swap1
16957992015,3cyclictest13175-21sed1
16957992014,4cyclictest9269-21mailstats1
16957992014,4cyclictest26760-21sed1
16957992013,4cyclictest12585-21sendmail-mta1
16957992013,4cyclictest12266-21apt-get1
16957992013,4cyclictest12266-21apt-get1
1695299202,6cyclictest9-21ksoftirqd/00
1695299202,6cyclictest9-21ksoftirqd/00
1695299202,6cyclictest9-21ksoftirqd/00
1695299201,7cyclictest9-21ksoftirqd/00
1695299201,7cyclictest9-21ksoftirqd/00
1695299201,7cyclictest9-21ksoftirqd/00
1695299201,6cyclictest9-21ksoftirqd/00
1695299200,8cyclictest9-21ksoftirqd/00
1695299200,7cyclictest9-21ksoftirqd/00
16963991914,3cyclictest24189-21apt3
16963991914,3cyclictest20103-21taskset3
16963991914,3cyclictest20098-21/usr/sbin/munin3
16963991913,4cyclictest22680-21sendmail-msp3
1696399191,2cyclictest0-21swapper/33
16963991912,4cyclictest9045-21cut3
16963991912,4cyclictest6912-21cat3
1696399190,17cyclictest0-21swapper/33
1696199194,4cyclictest517-21dbus-daemon2
16961991916,2cyclictest0-21swapper/22
16961991914,3cyclictest29045-21seq2
16961991914,3cyclictest28-21ksoftirqd/22
16961991914,3cyclictest22762-21if_err_enp3s02
16961991914,3cyclictest19370-21unixbench_multi2
16961991914,3cyclictest15778-21sed2
16961991913,4cyclictest7624-21memory2
16961991913,4cyclictest30448-21aten2_r9power_p2
16961991913,4cyclictest20343-21cat2
16961991913,4cyclictest17187-21sed2
16961991912,4cyclictest22968-21cron2
1696199191,16cyclictest27315-21cut2
16957991915,2cyclictest32453-21/usr/sbin/munin1
16957991915,2cyclictest20098-21/usr/sbin/munin1
16957991915,2cyclictest19131-21/usr/sbin/munin1
16957991915,2cyclictest12619-21/usr/sbin/munin1
16957991914,3cyclictest826-21awk1
16957991914,3cyclictest5068-21which1
16957991914,3cyclictest30340-21/usr/sbin/munin1
16957991914,3cyclictest26105-21sed1
16957991914,3cyclictest24936-21/usr/sbin/munin1
16957991914,3cyclictest18371-21sed1
16957991914,3cyclictest1347-21/usr/sbin/munin1
16957991914,3cyclictest10218-21/usr/sbin/munin1
16957991913,4cyclictest9480-21sendmail-mta1
16957991913,4cyclictest23591-21expr1
16957991913,4cyclictest15647-21seq1
16957991913,4cyclictest15647-21seq1
16957991912,4cyclictest21232-21timerandwakeup1
1695799190,17cyclictest7589-21chrt1
1695299199,3cyclictest111rcu_preempt0
1695299193,9cyclictest9-21ksoftirqd/00
1695299193,9cyclictest9-21ksoftirqd/00
1695299192,6cyclictest9-21ksoftirqd/00
1695299191,6cyclictest9-21ksoftirqd/00
1695299191,6cyclictest9-21ksoftirqd/00
16952991916,2cyclictest0-21swapper/00
16952991915,2cyclictest22608-21gltestperf0
16952991914,3cyclictest29023-21/usr/sbin/munin0
16952991913,4cyclictest18578-21cat0
16952991913,4cyclictest18578-21cat0
1695299190,6cyclictest9-21ksoftirqd/00
303822180,1sleep30-21swapper/33
16963991813,3cyclictest6098-21date3
16963991813,3cyclictest29196-21pmu-power3
16963991813,3cyclictest10865-21proc_pri3
16963991812,4cyclictest17974-21sh3
16963991812,4cyclictest14116-21ls3
1696399180,17cyclictest0-21swapper/33
1696399180,16cyclictest0-21swapper/33
1696399180,16cyclictest0-21swapper/33
1696199186,10cyclictest571-21gdbus2
1696199185,11cyclictest517-21dbus-daemon2
1696199183,8cyclictest8270-21apt-get2
1696199182,13cyclictest15993-21grep2
1696199181,6cyclictest0-21swapper/22
16961991814,2cyclictest662-21runrttasks2
16961991814,2cyclictest25734-21df_inode2
16961991813,3cyclictest8561-21cat2
16961991813,3cyclictest662-21runrttasks2
16961991813,3cyclictest662-21runrttasks2
16961991813,3cyclictest12653-21sed2
16961991812,4cyclictest518-21in:imuxsock2
16961991812,4cyclictest14229-21cut2
16961991812,4cyclictest14229-21cut2
16961991812,3cyclictest28-21ksoftirqd/22
1696199180,7cyclictest662-21runrttasks2
1696199180,6cyclictest3854-1kworker/2:2H2
1696199180,16cyclictest19130-21sed2
1695799189,6cyclictest2089-21apt-get1
16957991815,2cyclictest0-21swapper/11
16957991814,2cyclictest8908-21/usr/sbin/munin1
16957991814,2cyclictest29678-21/usr/sbin/munin1
16957991814,2cyclictest22895-21/usr/sbin/munin1
16957991814,2cyclictest16341-21/usr/sbin/munin1
16957991814,2cyclictest10481-21apt-config1
16957991813,3cyclictest7007-21cat1
16957991813,3cyclictest634-21snmpd1
16957991813,3cyclictest4426-21expr1
16957991813,3cyclictest32218-21cat1
16957991813,3cyclictest29234-21open_inodes1
16957991813,3cyclictest29234-21open_inodes1
16957991813,3cyclictest23099-21expr1
16957991813,3cyclictest20828-21acpi1
16957991813,3cyclictest2046-21cut1
16957991813,3cyclictest19208-21df1
16957991813,3cyclictest10776-21sh1
16957991812,4cyclictest5727-21pluginstate1
16957991812,4cyclictest26093-21grep1
16957991811,4cyclictest25869-21sendmail-mta1
1695799180,16cyclictest0-21swapper/11
1695299181,5cyclictest0-21swapper/00
16952991813,3cyclictest693-21cat0
1696199173,8cyclictest706-21apt-get2
16961991715,1cyclictest0-21swapper/22
16961991715,1cyclictest0-21swapper/22
16961991715,1cyclictest0-21swapper/22
16961991715,1cyclictest0-21swapper/22
16961991713,2cyclictest32394-21/usr/sbin/munin2
16961991712,3cyclictest662-21runrttasks2
16961991712,3cyclictest5926-21sed2
16961991712,3cyclictest24509-21cstates2
16961991710,5cyclictest517-21dbus-daemon2
1695799173,9cyclictest15054-21apt-get1
16957991713,2cyclictest27856-21expr1
16957991713,2cyclictest16714-21/usr/sbin/munin1
16957991713,2cyclictest16714-21/usr/sbin/munin1
16957991712,3cyclictest16085-21sendmail1
16957991712,3cyclictest12978-21/usr/sbin/munin1
16961991614,1cyclictest0-21swapper/22
16957991611,3cyclictest1175-21grep1
16957991610,4cyclictest29411-21expr1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional