You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-01 - 22:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Thu Jan 01, 2026 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
201122309272,25sleep00-21swapper/00
201342292262,17sleep20-21swapper/22
199122278195,68sleep10-21swapper/11
199192267231,24sleep30-21swapper/33
2032399263257,4cyclictest5947-21strings0
2032799260257,2cyclictest0-21swapper/11
2033699244241,2cyclictest0-21swapper/33
2904721530,3sleep12032799cyclictest1
3248921470,4sleep02032399cyclictest0
2033199133129,2cyclictest0-21swapper/22
194972500,3sleep228-21ksoftirqd/22
194972500,3sleep228-21ksoftirqd/22
142932470,1sleep20-21swapper/22
142932470,1sleep20-21swapper/22
33082430,3sleep12032799cyclictest1
231262390,1sleep00-21swapper/00
20331992714,8cyclictest662-21runrttasks2
2032399268,5cyclictest518-21in:imuxsock0
2033699253,4cyclictest517-21dbus-daemon3
2033699244,17cyclictest29676-21sendmail-mta3
2033699243,18cyclictest517-21dbus-daemon3
277722230,5sleep0515-21avahi-daemon0
2033699238,12cyclictest0-21swapper/33
2033699234,17cyclictest553-21sendmail-mta3
2033699234,17cyclictest5452-21sendmail-mta3
2033699234,17cyclictest28633-21sendmail-mta3
2033699234,17cyclictest25940-21sendmail-mta3
2033699234,17cyclictest25561-21sendmail-mta3
2033699234,17cyclictest21460-21sendmail-mta3
2033699234,17cyclictest19725-21sendmail-mta3
2033699234,17cyclictest19725-21sendmail-mta3
2033699234,17cyclictest17777-21cat3
2033699234,17cyclictest15609-21sendmail-mta3
2033699234,17cyclictest1312-21sendmail-mta3
2033699234,17cyclictest12216-21sendmail-mta3
2033699233,17cyclictest8868-21sendmail-mta3
2033699232,3cyclictest340-21systemd-journal3
2033699231,19cyclictest340-21systemd-journal3
20327992317,4cyclictest11339-21cut1
2033699228,11cyclictest0-21swapper/33
2033699224,16cyclictest4710-21sendmail-mta3
2033699224,16cyclictest17702-21sendmail-mta3
2033699224,16cyclictest16284-21sendmail-mta3
2033699223,17cyclictest9544-21sendmail-mta3
2033699223,17cyclictest24506-21sendmail-mta3
2033699223,17cyclictest22238-21latency_hist3
2033699223,17cyclictest22136-21sendmail-mta3
2033699223,17cyclictest21838-21sendmail-mta3
20336992217,3cyclictest571-21gdbus3
20331992216,4cyclictest9687-21df_inode2
2033199221,18cyclictest14483-21sed2
20327992216,4cyclictest20574-21idleruntime-cro1
2033699218,11cyclictest1-21systemd3
2033699218,11cyclictest0-21swapper/33
20336992115,4cyclictest9379-21ntp_kernel_pll_3
20336992115,4cyclictest3510-21cron3
2033699211,3cyclictest517-21dbus-daemon3
2033699211,3cyclictest30926-21apt-key3
2033699211,18cyclictest5264-21idleruntime-cro3
2033699210,4cyclictest20560-21munin-run3
2033199212,7cyclictest4431-21apt-get2
20331992116,3cyclictest23050-21ntp_states2
20331992116,3cyclictest17844-21cron2
20331992115,4cyclictest21731-21unixbench-2d2
20327992116,3cyclictest19068-21grep1
20327992115,4cyclictest7965-21diskstats1
20327992114,5cyclictest20974-21grep1
2032399212,16cyclictest9877-21cut0
20323992116,3cyclictest28729-21aten2.4-expect0
20323992115,4cyclictest21561-21seq0
20323992114,4cyclictest32091-21fw_packets0
20323992114,4cyclictest14388-21turbostat.cron0
2032399210,20cyclictest11373-21kworker/0:00
105282210,4sleep228-21ksoftirqd/22
20336992015,3cyclictest12241-21pmu-power3
20336992014,4cyclictest30993-21ls3
20336992014,4cyclictest30993-21ls3
20336992014,4cyclictest17414-21cat3
20336992014,4cyclictest17414-21cat3
2033699201,17cyclictest5294-1kworker/3:2H3
2033699200,18cyclictest15153-21apt-get3
20331992018,1cyclictest0-21swapper/22
20331992015,3cyclictest27975-21latency2
20331992015,3cyclictest21043-21ntp_kernel_err2
20331992014,4cyclictest32122-21seq2
20331992014,4cyclictest11277-21seq2
20331992014,3cyclictest28043-21sendmail_mailst2
20327992015,3cyclictest965-21/usr/sbin/munin1
20327992015,3cyclictest29516-21seq1
20327992015,3cyclictest21947-21seq1
20327992015,3cyclictest21852-21/usr/sbin/munin1
20327992015,3cyclictest18091-21/usr/sbin/munin1
20327992015,3cyclictest10512-21awk1
20327992014,4cyclictest9315-21sed1
20327992014,4cyclictest32305-21sed1
20327992014,4cyclictest31563-21date1
20327992014,4cyclictest30029-21grep1
20327992014,4cyclictest22980-21cat1
20327992014,4cyclictest22221-21grep1
20327992013,5cyclictest517-21dbus-daemon1
20327992012,5cyclictest1-21systemd1
2032799201,16cyclictest32458-21cstates1
2032399208,3cyclictest27282-21aten2_r9power_c0
2032399202,15cyclictest20504-21basename0
2032399202,13cyclictest30702-21apt-get0
20323992015,3cyclictest31006-21grep0
20323992015,3cyclictest25206-21acpi0
20323992015,3cyclictest24580-21sed0
20323992015,3cyclictest20231-21aten2_r9power_e0
20323992015,3cyclictest16052-21aten2_r9power_e0
20323992015,3cyclictest11227-21irqstats0
20323992015,3cyclictest11077-21idleruntime-cro0
20323992014,4cyclictest6769-21pluginstate0
20323992014,4cyclictest4230-21cut0
20323992014,4cyclictest22714-21date0
20323992014,4cyclictest20797-21cat0
20323992014,4cyclictest15903-21cat0
20323992014,4cyclictest15903-21cat0
20323992014,3cyclictest3161-21aten2.4-expect0
20323992013,5cyclictest6060-21seq0
2032399201,17cyclictest20415-21sendmail-mta0
2033699199,8cyclictest0-21swapper/33
20336991914,3cyclictest9366-21sh3
20336991914,3cyclictest6391-21idleruntime3
20336991914,3cyclictest571-21gdbus3
20336991914,3cyclictest32735-21aten2_r9power_c3
20336991914,3cyclictest26843-21gltestperf3
20336991914,3cyclictest24933-21munin-run3
20336991914,3cyclictest15311-21grep3
20336991914,3cyclictest15311-21grep3
20336991913,4cyclictest9336-21idleruntime-cro3
20336991913,4cyclictest27778-21idleruntime-cro3
2033699191,2cyclictest0-21swapper/33
20336991912,5cyclictest18597-21grep3
20336991912,4cyclictest6224-21sh3
2033699191,16cyclictest22603-21cron3
2033699190,5cyclictest0-21swapper/33
2033699190,17cyclictest0-21swapper/33
2033199199,8cyclictest9544-21sendmail-mta2
20331991917,1cyclictest0-21swapper/22
20331991917,1cyclictest0-21swapper/22
20331991916,2cyclictest0-21swapper/22
20331991916,2cyclictest0-21swapper/22
20331991916,2cyclictest0-21swapper/22
20331991914,3cyclictest28893-21grep2
20331991914,3cyclictest23988-21seq2
20331991914,3cyclictest21930-21sed2
20331991914,3cyclictest2153-21ls2
20331991913,4cyclictest30590-21date2
20331991913,3cyclictest21785-21grep2
20331991913,3cyclictest14214-21cpuspeed_turbos2
20331991912,5cyclictest517-21dbus-daemon2
2033199191,16cyclictest0-21swapper/22
2033199191,15cyclictest6347-21tr2
2032799196,10cyclictest518-21in:imuxsock1
2032799193,13cyclictest16677-21ps1
20327991916,2cyclictest0-21swapper/11
20327991916,2cyclictest0-21swapper/11
20327991915,2cyclictest7196-21/usr/sbin/munin1
20327991915,2cyclictest20434-21/usr/sbin/munin1
20327991914,3cyclictest634-21snmpd1
20327991914,3cyclictest3626-21sort1
20327991914,3cyclictest32551-21timerandwakeup1
20327991914,3cyclictest31122-21which1
20327991914,3cyclictest31122-21which1
20327991914,3cyclictest27581-21sed1
20327991914,3cyclictest26982-21/usr/sbin/munin1
20327991914,3cyclictest24790-21wc1
20327991914,3cyclictest23287-21expr1
20327991914,3cyclictest22767-21sed1
20327991914,3cyclictest13959-21/usr/sbin/munin1
20327991914,3cyclictest12703-21sed1
20327991913,4cyclictest6825-21expr1
20327991913,4cyclictest5220-21grep1
20327991913,4cyclictest32513-21sort1
20327991913,4cyclictest18557-21grep1
20327991913,4cyclictest18557-21grep1
20327991912,5cyclictest1649-21grep1
20327991912,4cyclictest26869-21sendmail-mta1
20323991915,2cyclictest29019-21/usr/sbin/munin0
20323991915,2cyclictest18091-21/usr/sbin/munin0
20323991914,3cyclictest7240-21sed0
20323991914,3cyclictest5769-21sed0
20323991914,3cyclictest3424-21/usr/sbin/munin0
20323991914,3cyclictest28794-21turbostat.cron0
20323991914,3cyclictest26605-21seq0
20323991914,3cyclictest18312-21cat0
20323991914,3cyclictest17536-21awk0
20323991914,3cyclictest17536-21awk0
20323991914,3cyclictest10215-21seq0
20323991913,4cyclictest3245-21cat0
20323991913,4cyclictest29838-21idleruntime-cro0
20323991913,4cyclictest25705-21awk0
20323991913,4cyclictest23152-21apt-get0
20323991913,4cyclictest22534-21cut0
20323991913,4cyclictest19135-21sendmail_mailst0
20323991913,4cyclictest19135-21sendmail_mailst0
20323991913,4cyclictest14247-21awk0
20323991913,3cyclictest30612-21idleruntime0
20323991913,3cyclictest30612-21idleruntime0
20323991913,3cyclictest16629-21cat0
121162190,1sleep00-21swapper/00
20336991814,2cyclictest0-21swapper/33
20336991813,3cyclictest18531-21ls3
20336991812,4cyclictest23280-21users3
20336991812,4cyclictest22676-21diskstats3
2033199189,7cyclictest5949-21aten2_r9power_p2
2033199186,10cyclictest517-21dbus-daemon2
2033199181,6cyclictest0-21swapper/22
20331991816,1cyclictest0-21swapper/22
20331991816,1cyclictest0-21swapper/22
20331991814,2cyclictest3424-21/usr/sbin/munin2
20331991814,2cyclictest31443-21aten2_r9power_p2
20331991813,3cyclictest8633-21swap2
20331991813,3cyclictest3752-21wc2
20331991813,3cyclictest3540-21sh2
20331991813,3cyclictest30500-21sh2
20331991813,3cyclictest30500-21sh2
20331991813,3cyclictest25828-21cat2
20331991813,3cyclictest20266-21fw_packets2
20331991813,3cyclictest18136-21cat2
20331991813,3cyclictest15145-21gltestperf2
20331991813,3cyclictest11990-21expr2
20331991812,4cyclictest517-21dbus-daemon2
20331991812,4cyclictest30825-21sh2
20331991812,4cyclictest2667-21seq2
20331991812,4cyclictest25583-21grep2
20331991812,4cyclictest22567-21cat2
20331991812,4cyclictest17781-21switchtime2
20331991812,4cyclictest17781-21switchtime2
20327991815,2cyclictest0-21swapper/11
20327991815,2cyclictest0-21swapper/11
20327991815,2cyclictest0-21swapper/11
20327991814,2cyclictest3051-21/usr/sbin/munin1
20327991814,2cyclictest26610-21/usr/sbin/munin1
20327991814,2cyclictest16495-21df_inode1
20327991813,3cyclictest22489-21/usr/sbin/munin1
20327991813,3cyclictest11624-21/usr/sbin/munin1
20327991813,3cyclictest10893-21grep1
20327991812,4cyclictest517-21dbus-daemon1
20327991812,4cyclictest27894-21grep1
20327991812,4cyclictest25561-21sendmail-mta1
20327991811,4cyclictest2885-21sed1
20327991811,4cyclictest16284-21sendmail-mta1
20323991814,2cyclictest11733-21aten2.4-expect0
20323991813,3cyclictest9-21ksoftirqd/00
20323991813,3cyclictest8101-21if_enp2s00
20323991813,3cyclictest7932-21hostname0
20323991813,3cyclictest31608-21cat0
20323991813,3cyclictest28380-21cut0
20323991813,3cyclictest26498-21seq0
20323991813,3cyclictest23791-21open_inodes0
20323991813,3cyclictest22871-21cat0
20323991813,3cyclictest11570-21ls0
20323991813,3cyclictest10340-21expr0
20336991712,3cyclictest26869-21cut3
20336991711,4cyclictest29471-21needreboot3
2033699170,1cyclictest0-21swapper/33
2033199173,8cyclictest29627-21apt-get2
2033199172,9cyclictest6480-21apt-get2
20331991713,2cyclictest662-21runrttasks2
20331991712,3cyclictest662-21runrttasks2
20331991711,4cyclictest11324-21load2
2032799179,5cyclictest340-21systemd-journal1
2032799173,8cyclictest5858-21apt-get1
20327991715,1cyclictest0-21swapper/11
20327991715,1cyclictest0-21swapper/11
20327991712,3cyclictest13338-21/usr/sbin/munin1
20327991712,3cyclictest12600-21/usr/sbin/munin1
20327991711,3cyclictest16044-21aten2.4-expect1
20327991710,4cyclictest24631-21ls1
20323991713,2cyclictest7196-21/usr/sbin/munin0
20323991712,3cyclictest25789-21cat0
20323991712,3cyclictest2143-21sh0
20323991712,3cyclictest14351-21cat0
2033699162,9cyclictest26628-21apt-get3
2033199163,8cyclictest18109-21apt-get2
20331991612,2cyclictest662-21runrttasks2
20331991611,3cyclictest662-21runrttasks2
20331991611,3cyclictest27672-21sendmail_mailst2
20331991611,3cyclictest26374-21expr2
20331991611,3cyclictest17267-21grep2
20323991612,2cyclictest1830-21ntp_kernel_err0
20323991611,3cyclictest661-21expr0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional