You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-31 - 23:48
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Wed Dec 31, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
256002318282,24sleep20-21swapper/22
2590699286279,4cyclictest30281-21perf1
247542274183,74sleep10-21swapper/11
256362264209,38sleep30-21swapper/33
2591299262255,4cyclictest30258-21munin-run3
254252253185,56sleep00-21swapper/00
2590299209205,3cyclictest0-21swapper/00
1587621550,2sleep32591299cyclictest3
2590899112108,2cyclictest0-21swapper/22
177422530,2sleep20-21swapper/22
119182490,1sleep30-21swapper/33
18132480,1sleep30-21swapper/33
290022450,3sleep30-21swapper/33
2590299458,26cyclictest1110-21sendmail-mta0
2590299451,24cyclictest4205-21date0
2590299450,26cyclictest23611-21cat0
309322420,1sleep10-21swapper/11
2590299411,26cyclictest340-21systemd-journal0
2590299411,26cyclictest340-21systemd-journal0
2590299411,25cyclictest571-21gdbus0
2590299411,25cyclictest10495-21touch0
2590299411,24cyclictest515-21avahi-daemon0
2590299410,25cyclictest32584-21ls0
2590299410,20cyclictest9-21ksoftirqd/00
299692400,2sleep30-21swapper/33
2590299401,25cyclictest18121-21date0
2590299401,23cyclictest8343-21/usr/sbin/munin0
2590299400,30cyclictest29449-21sendmail-mta0
2590299400,24cyclictest7020-21cat0
2590299391,25cyclictest1774-21sendmail-mta0
2590299391,24cyclictest31849-21expr0
2590299391,24cyclictest24354-21uname0
2590299391,24cyclictest24354-21uname0
2590299390,25cyclictest25212-21dpkg0
2590299380,25cyclictest15031-21sendmail-mta0
2590299380,24cyclictest21671-21users0
2590299380,24cyclictest11958-21ntpq0
2590299370,34cyclictest24751-21cron0
2590299370,23cyclictest26392-21cpuspeed_turbos0
2590299370,23cyclictest26392-21cpuspeed_turbos0
2590299370,22cyclictest6854-21cat0
25902993615,19cyclictest21998-21tr0
2590299361,32cyclictest1242-21aten2.4-expect0
2590299360,23cyclictest23233-21sendmail-mta0
2590299360,21cyclictest4567-21ps0
2590299350,23cyclictest26028-21sendmail-mta0
2590299350,22cyclictest16353-21runrttasks0
2590299350,21cyclictest0-21swapper/00
2590299350,18cyclictest0-21swapper/00
2590299340,20cyclictest0-21swapper/00
25902993312,19cyclictest27459-21aten2_r9power_e0
25902993310,20cyclictest17129-21sendmail-mta0
2590299330,20cyclictest0-21swapper/00
2590299330,20cyclictest0-21swapper/00
2590299330,18cyclictest0-21swapper/00
2590299321,27cyclictest4227-21/usr/sbin/munin0
25902993212,17cyclictest18867-21/usr/sbin/munin0
25902993210,19cyclictest13064-21cat0
2590299319,19cyclictest9581-21cat0
2590299318,20cyclictest3658-21grep0
2590299318,20cyclictest13392-21sendmail-mta0
2590299317,21cyclictest30621-21sed0
2590299311,27cyclictest6727-21munin-run0
25902993111,18cyclictest26845-21basename0
25902993111,17cyclictest17925-21switchtime0
25902993110,19cyclictest18639-21df0
25902993110,18cyclictest31603-21wc0
2590299310,18cyclictest0-21swapper/00
2590299310,18cyclictest0-21swapper/00
2590299309,19cyclictest18331-21ls0
2590299309,18cyclictest518-21in:imuxsock0
2590299308,20cyclictest29327-21systemctl0
2590299301,26cyclictest24556-21/usr/sbin/munin0
56132290,2sleep20-21swapper/22
56132290,2sleep20-21swapper/22
25902992910,17cyclictest9722-21/usr/sbin/munin0
2590299290,26cyclictest7456-21gltestperf0
2590299290,26cyclictest2277-21latency_hist0
2590299287,18cyclictest307-21sh0
2590299281,24cyclictest26370-21/usr/sbin/munin0
25902992810,16cyclictest662-21runrttasks0
2590299280,25cyclictest22634-21cstates0
2590299275,20cyclictest11373-21apt-get0
2590299271,22cyclictest13135-21apt-get0
2590299270,24cyclictest8363-21switchtime0
156972270,1sleep2271rcuc/22
81312260,2sleep10-21swapper/11
2590299260,23cyclictest1567-21aten2_r9power_e0
2591299244,18cyclictest0-21swapper/33
219452240,1sleep20-21swapper/22
2591299239,12cyclictest662-21runrttasks3
2591299238,13cyclictest2007-21head3
2591299234,17cyclictest9333-21sendmail-mta3
2591299234,17cyclictest9333-21sendmail-mta3
2591299234,17cyclictest25893-21cyclictest3
2591299234,17cyclictest10969-21sendmail-mta3
2591299233,18cyclictest25345-21sendmail-mta3
2591299233,18cyclictest25345-21sendmail-mta3
2591299232,18cyclictest340-21systemd-journal3
2591299231,4cyclictest843-21munin-run3
2591299231,20cyclictest31075-21sendmail-mta3
2591299231,19cyclictest340-21systemd-journal3
2591299231,17cyclictest4405-21sendmail-mta3
25908992318,3cyclictest21390-21ls2
2590899231,19cyclictest340-21systemd-journal2
210292230,2sleep30-21swapper/33
2591299223,17cyclictest5879-21sendmail-mta3
2591299223,17cyclictest23233-21sendmail-mta3
2591299223,17cyclictest21225-21sendmail-mta3
2591299223,17cyclictest1774-21sendmail-mta3
25912992215,4cyclictest24788-21df3
25908992215,4cyclictest662-21runrttasks2
25908992210,10cyclictest517-21dbus-daemon2
245082220,5sleep224501-21aten2.4-expect2
2591299213,16cyclictest8989-21cat3
2591299213,16cyclictest15031-21sendmail-mta3
2591299212,17cyclictest19142-21sendmail-mta3
2591299212,17cyclictest17129-21sendmail-mta3
2591299211,3cyclictest12503-1kworker/3:2H3
2591299211,11cyclictest0-21swapper/33
2591299210,4cyclictest12503-1kworker/3:2H3
2591299210,4cyclictest12503-1kworker/3:2H3
2591299210,19cyclictest277432sleep33
2591299210,19cyclictest277432sleep33
2590899219,10cyclictest7508-21expr2
2590899212,14cyclictest5624-21apt-get2
25908992115,4cyclictest4556-21sh2
2590699211,5cyclictest515-21avahi-daemon1
25906992115,3cyclictest22478-21uname1
25906992114,4cyclictest20019-21sh1
25906992112,6cyclictest517-21dbus-daemon1
2591299207,11cyclictest0-21swapper/33
2591299202,17cyclictest15880-21cron3
2591299202,16cyclictest32424-21sendmail-mta3
25912992015,3cyclictest11747-21sendmail_mailst3
25912992014,4cyclictest9087-21perf3
25912992014,4cyclictest32321-21df3
25912992014,4cyclictest17511-21date3
25912992014,4cyclictest14533-21users3
2591299201,3cyclictest0-21swapper/33
2591299201,2cyclictest3978-21/usr/sbin/munin3
2591299201,17cyclictest24827-21latency_hist3
2591299201,17cyclictest17284-21latency_hist3
2591299201,17cyclictest11531-21perf3
2591299201,16cyclictest28238-1kworker/3:1H3
2591299201,16cyclictest27554-21munin-run3
2591299200,4cyclictest19299-21df3
25908992017,2cyclictest0-21swapper/22
25908992015,3cyclictest25730-21aten2_r9power_c2
25908992014,4cyclictest5490-21date2
25908992014,4cyclictest30559-21sed2
25908992014,4cyclictest17061-21seq2
25908992013,5cyclictest32023-21cat2
25908992010,4cyclictest0-21swapper/22
25906992015,3cyclictest6901-21grep1
25906992015,3cyclictest5186-21sed1
25906992015,3cyclictest31006-21sed1
25906992015,3cyclictest10969-21sendmail-mta1
25906992013,4cyclictest18626-21cron1
25906992012,6cyclictest517-21dbus-daemon1
2590699201,17cyclictest515-21avahi-daemon1
2590699201,17cyclictest515-21avahi-daemon1
25912991915,2cyclictest29586-21cat3
25912991914,3cyclictest9675-21if_err_enp2s03
25912991914,3cyclictest27337-21open_files3
25912991914,3cyclictest24294-21cut3
25912991914,3cyclictest21818-21cpuspeed3
25912991914,3cyclictest18751-21sed3
25912991913,4cyclictest8747-21cat3
25912991913,4cyclictest6384-21update-cracklib3
2591299191,2cyclictest0-21swapper/33
2591299190,17cyclictest23408-1kworker/3:2H3
2591299190,17cyclictest0-21swapper/33
2590899196,10cyclictest23438-21cron2
25908991917,1cyclictest0-21swapper/22
25908991916,2cyclictest0-21swapper/22
25908991914,3cyclictest29158-21sh2
25908991914,3cyclictest22053-21grep2
25908991913,4cyclictest9403-21aten2_r9power_e2
25908991913,4cyclictest13434-21aten2.4-expect2
25908991913,3cyclictest32753-21cat2
25908991912,4cyclictest32314-21plymouth2
25908991912,4cyclictest26079-21latency2
2590899190,18cyclictest0-21swapper/22
25906991917,1cyclictest0-21swapper/11
25906991915,2cyclictest31893-21/usr/sbin/munin1
25906991915,2cyclictest27081-21irqstats1
25906991914,3cyclictest634-21snmpd1
25906991914,3cyclictest6080-21ntpq1
25906991914,3cyclictest6080-21ntpq1
25906991914,3cyclictest29628-21idleruntime-cro1
25906991914,3cyclictest22297-21/usr/sbin/munin1
25906991914,3cyclictest1501-21expr1
25906991914,3cyclictest10162-21sh1
25906991913,4cyclictest28374-21which1
25906991913,4cyclictest12436-21mailstats1
2590699191,16cyclictest0-21swapper/11
25912991813,3cyclictest4215-21rt-features3
25912991813,3cyclictest30171-21expr3
25912991813,3cyclictest22707-21ls3
25912991813,3cyclictest20181-21cat3
2591299181,15cyclictest13144-21munin-run3
2591299181,15cyclictest0-21swapper/33
2591299180,2cyclictest8060-21taskset3
2590899182,12cyclictest31913-21apt-get2
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991816,1cyclictest0-21swapper/22
25908991814,2cyclictest26194-21df2
25908991814,2cyclictest12411-21sendmail_mailst2
25908991813,3cyclictest8778-21seq2
25908991813,3cyclictest24809-21cat2
25908991813,3cyclictest1871-21seq2
25908991813,3cyclictest1472-21sort2
25908991813,3cyclictest11952-21ls2
25908991812,4cyclictest3807-21cat2
25908991812,4cyclictest27820-21seq2
25908991812,4cyclictest27820-21seq2
25908991812,4cyclictest23811-21seq2
25908991812,4cyclictest2375-21cat2
25908991812,4cyclictest1614-21sh2
25908991812,4cyclictest13172-21vmstat2
25908991811,4cyclictest517-21dbus-daemon2
2590899181,12cyclictest0-21swapper/22
25906991816,1cyclictest0-21swapper/11
25906991816,1cyclictest0-21swapper/11
25906991816,1cyclictest0-21swapper/11
25906991814,2cyclictest7661-21cut1
25906991814,2cyclictest31885-21/usr/sbin/munin1
25906991814,2cyclictest25335-21/usr/sbin/munin1
25906991814,2cyclictest14086-21/usr/sbin/munin1
25906991814,2cyclictest12726-21/usr/sbin/munin1
25906991813,3cyclictest662-21runrttasks1
25906991813,3cyclictest634-21snmpd1
25906991813,3cyclictest634-21snmpd1
25906991813,3cyclictest4269-21cat1
25906991813,3cyclictest32533-21date1
25906991813,3cyclictest29863-21aten2_r9power_c1
25906991813,3cyclictest28412-21ls1
25906991813,3cyclictest28031-21munin-node1
25906991813,3cyclictest25970-21wc1
25906991813,3cyclictest2535-21expr1
25906991813,3cyclictest25260-21seq1
25906991813,3cyclictest18589-21ps1
25906991813,3cyclictest18105-21if_err_enp2s01
25906991813,3cyclictest16361-21ntpq1
25906991813,3cyclictest1502-21/usr/sbin/munin1
25906991813,3cyclictest10690-21/usr/sbin/munin1
25906991812,4cyclictest20601-21ls1
25906991811,5cyclictest23398-21ls1
25906991810,5cyclictest27723-21sendmail-mta1
25906991810,5cyclictest27723-21sendmail-mta1
2590699180,16cyclictest0-21swapper/11
2590899173,9cyclictest9074-21apt-get2
25908991712,3cyclictest5190-21expr2
25908991712,3cyclictest28281-21head2
25908991712,3cyclictest18426-21cpuspeed2
25908991712,3cyclictest12483-21turbostat.cron2
25908991710,4cyclictest7720-21aten2.4-expect2
25908991710,4cyclictest7720-21aten2.4-expect2
25908991710,4cyclictest18885-21apt-get2
25906991715,1cyclictest0-21swapper/11
25906991715,1cyclictest0-21swapper/11
25906991713,2cyclictest4227-21/usr/sbin/munin1
25906991713,2cyclictest29848-21/usr/sbin/munin1
25906991712,3cyclictest23471-21gltestperf1
25906991712,3cyclictest17133-21which1
25906991712,3cyclictest12399-21cat1
25906991711,4cyclictest23664-21cut1
25906991711,4cyclictest19912-21expr1
155122170,2sleep115696-21cpuspeed_turbos1
2590899162,12cyclictest20263-21wc2
25908991610,4cyclictest28-21ksoftirqd/22
2590899160,15cyclictest0-21swapper/22
25906991612,2cyclictest25760-21apt-get1
25906991611,3cyclictest9056-21/usr/sbin/munin1
25906991611,3cyclictest662-21runrttasks1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional