You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-20 - 23:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 20, 2025 12:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
133672308232,64sleep00-21swapper/00
148622301264,25sleep30-21swapper/33
147382284216,37sleep20-21swapper/22
1518099280275,3cyclictest0-21swapper/33
147322255219,24sleep10-21swapper/11
1517599218214,2cyclictest0-21swapper/22
1517299206201,3cyclictest0-21swapper/11
1516799123117,4cyclictest24146-21strings0
2139621120,2sleep10-21swapper/11
283702550,3sleep11517299cyclictest1
283702550,3sleep11517299cyclictest1
232882550,4sleep30-21swapper/33
293652430,3sleep09-21ksoftirqd/00
293652430,3sleep09-21ksoftirqd/00
315062410,4sleep31518099cyclictest3
314522410,2sleep30-21swapper/33
1518099353,6cyclictest35-21ksoftirqd/33
1518099319,19cyclictest0-21swapper/33
1518099319,19cyclictest0-21swapper/33
15180993119,2cyclictest341rcuc/33
15167993114,2cyclictest14104-21apt-get0
15180993019,2cyclictest341rcuc/33
15167993014,2cyclictest25188-21unixbench_singl0
1518099287,18cyclictest0-21swapper/33
15180992825,2cyclictest341rcuc/33
15180992817,10cyclictest341rcuc/33
1518099279,6cyclictest340-21systemd-journal3
1518099277,17cyclictest10042-21ls3
1518099276,18cyclictest515-21avahi-daemon3
1518099275,6cyclictest35-21ksoftirqd/33
15180992724,2cyclictest341rcuc/33
15180992716,10cyclictest341rcuc/33
1518099262,17cyclictest35-21ksoftirqd/33
1518099261,6cyclictest35-21ksoftirqd/33
15180992614,2cyclictest341rcuc/33
1518099255,17cyclictest16318-21sendmail-mta3
1518099254,18cyclictest7852-21sendmail-mta3
15180992522,2cyclictest341rcuc/33
15180992514,10cyclictest341rcuc/33
15180992513,10cyclictest341rcuc/33
15180992512,11cyclictest341rcuc/33
1518099244,17cyclictest22602-21sendmail-mta3
1518099244,17cyclictest19339-21sendmail-mta3
1518099243,7cyclictest35-21ksoftirqd/33
1518099243,18cyclictest28030-21sendmail-mta3
1518099243,18cyclictest16972-21sendmail-mta3
1518099242,6cyclictest35-21ksoftirqd/33
15180992421,2cyclictest341rcuc/33
15180992421,2cyclictest341rcuc/33
1518099241,5cyclictest517-21dbus-daemon3
15167992417,4cyclictest28424-21/usr/sbin/munin0
165292231,19sleep116627-21diskstats1
1518099233,6cyclictest35-21ksoftirqd/33
1518099233,6cyclictest35-21ksoftirqd/33
1518099233,5cyclictest35-21ksoftirqd/33
1518099233,5cyclictest35-21ksoftirqd/33
1518099232,7cyclictest35-21ksoftirqd/33
1518099232,18cyclictest0-21swapper/33
1518099232,15cyclictest35-21ksoftirqd/33
1518099231,6cyclictest35-21ksoftirqd/33
15180992316,4cyclictest14127-21readlink3
1518099231,19cyclictest515-21avahi-daemon3
1518099231,19cyclictest24161-21munin-run3
1518099230,7cyclictest35-21ksoftirqd/33
1518099223,6cyclictest35-21ksoftirqd/33
1518099223,6cyclictest35-21ksoftirqd/33
1518099222,6cyclictest35-21ksoftirqd/33
1518099222,17cyclictest340-21systemd-journal3
15180992219,2cyclictest341rcuc/33
1518099221,7cyclictest35-21ksoftirqd/33
1518099221,7cyclictest35-21ksoftirqd/33
1518099221,7cyclictest35-21ksoftirqd/33
1518099221,7cyclictest35-21ksoftirqd/33
1518099221,6cyclictest35-21ksoftirqd/33
15180992215,4cyclictest517-21dbus-daemon3
1518099220,9cyclictest35-21ksoftirqd/33
1518099220,7cyclictest35-21ksoftirqd/33
15175992211,9cyclictest25894-21idleruntime2
1517299221,19cyclictest4767-21tr1
1518099213,6cyclictest35-21ksoftirqd/33
1518099212,5cyclictest0-21swapper/33
1518099211,7cyclictest35-21ksoftirqd/33
1518099211,7cyclictest35-21ksoftirqd/33
1518099211,6cyclictest35-21ksoftirqd/33
1518099211,6cyclictest35-21ksoftirqd/33
15180992114,4cyclictest340-21systemd-journal3
1518099210,7cyclictest35-21ksoftirqd/33
1518099210,7cyclictest35-21ksoftirqd/33
1517599215,1cyclictest0-21swapper/22
1517599214,15cyclictest32058-21grep2
1517599212,16cyclictest1892-21sleep2
15175992116,3cyclictest4842-21open_files2
15175992116,3cyclictest28-21ksoftirqd/22
15175992116,3cyclictest21821-21sh2
15175992116,3cyclictest19436-21sed2
15175992116,3cyclictest15942-21latency_hist2
15175992115,4cyclictest8029-21unixbench_singl2
15175992115,3cyclictest25005-21interrupts2
15175992115,3cyclictest19494-21munin-run2
15175992114,4cyclictest2697-21ls2
15175992114,4cyclictest18050-21sh2
1517299213,15cyclictest30262-21grep1
15172992116,3cyclictest19722-21seq1
15167992116,3cyclictest502-21/usr/sbin/munin0
15167992114,4cyclictest517-21dbus-daemon0
15167992114,4cyclictest517-21dbus-daemon0
60972200,2sleep10-21swapper/11
313012200,3sleep10-21swapper/11
1518099200,7cyclictest35-21ksoftirqd/33
1517599201,7cyclictest22338-21apt-get2
15175992017,2cyclictest0-21swapper/22
15175992017,2cyclictest0-21swapper/22
15175992017,2cyclictest0-21swapper/22
15175992015,3cyclictest9534-21/usr/sbin/munin2
15175992015,3cyclictest9534-21/usr/sbin/munin2
15175992015,3cyclictest6628-21threads2
15175992015,3cyclictest3749-21timerandwakeup2
15175992015,3cyclictest20731-21processes2
15175992015,3cyclictest19640-21users2
15175992015,3cyclictest17324-21cat2
15175992015,3cyclictest17077-21vmstat2
15175992014,4cyclictest31355-21cat2
15175992014,4cyclictest30174-21cat2
15175992014,4cyclictest30174-21cat2
15175992014,4cyclictest2433-21expr2
15175992014,4cyclictest15426-21cat2
15175992014,4cyclictest10317-21sort2
15175992014,3cyclictest18299-21vmstat2
15172992016,2cyclictest13620-21/usr/sbin/munin1
15172992015,3cyclictest24350-21cut1
15172992015,3cyclictest17103-21ls1
15172992015,3cyclictest16384-21seq1
15172992015,3cyclictest13586-21seq1
15172992014,4cyclictest517-21dbus-daemon1
15172992013,4cyclictest517-21dbus-daemon1
15167992017,2cyclictest0-21swapper/00
15167992015,3cyclictest634-21snmpd0
15167992015,3cyclictest5469-21/usr/sbin/munin0
15167992014,4cyclictest17656-21sed0
147132200,3sleep214925-21grep2
273172190,4sleep10-21swapper/11
190772190,1sleep00-21swapper/00
1517599198,9cyclictest27731-21wc2
15175991916,2cyclictest0-21swapper/22
15175991916,2cyclictest0-21swapper/22
15175991914,3cyclictest7035-21needreboot2
15175991914,3cyclictest4995-21seq2
15175991914,3cyclictest340-21systemd-journal2
15175991914,3cyclictest31453-21/usr/sbin/munin2
15175991914,3cyclictest28-21ksoftirqd/22
15175991914,3cyclictest22159-21apt-config2
15175991914,3cyclictest19513-21missed_timers2
15175991914,3cyclictest17099-21open_files2
15175991914,3cyclictest15251-21cat2
15175991914,3cyclictest13186-21ntp_offset2
15175991914,3cyclictest11175-21sh2
15175991913,4cyclictest4941-21sed2
15175991913,4cyclictest28110-21sed2
15175991913,4cyclictest28110-21sed2
15175991913,4cyclictest27262-21cat2
15175991913,4cyclictest22221-21timerwakeupswit2
15175991913,4cyclictest1146-21cat2
15175991912,4cyclictest11173-21diskstats2
1517599190,17cyclictest0-21swapper/22
1517599190,17cyclictest0-21swapper/22
1517299199,6cyclictest1911-21apt-get1
1517299196,4cyclictest21-21ksoftirqd/11
15172991915,2cyclictest8702-21/usr/sbin/munin1
15172991915,2cyclictest8241-21/usr/sbin/munin1
15172991914,3cyclictest9534-21/usr/sbin/munin1
15172991914,3cyclictest9534-21/usr/sbin/munin1
15172991914,3cyclictest634-21snmpd1
15172991914,3cyclictest634-21snmpd1
15172991914,3cyclictest634-21snmpd1
15172991914,3cyclictest30339-21open_inodes1
15172991914,3cyclictest26474-21if_err_enp2s01
15172991914,3cyclictest21-21ksoftirqd/11
15172991914,3cyclictest20550-21sh1
15172991914,3cyclictest19338-21df1
15172991914,3cyclictest14140-21/usr/sbin/munin1
15172991913,4cyclictest634-21snmpd1
15167991915,2cyclictest32503-21/usr/sbin/munin0
15167991915,2cyclictest26125-21sed0
15167991915,2cyclictest16185-21/usr/sbin/munin0
15167991914,3cyclictest5727-21pluginstate0
15167991914,3cyclictest4951-21sendmail-mta0
15167991914,3cyclictest3249-21grep0
15167991914,3cyclictest17966-21/usr/sbin/munin0
15167991914,3cyclictest12082-21/usr/sbin/munin0
15167991914,3cyclictest10645-21cat0
15167991913,4cyclictest517-21dbus-daemon0
15167991913,4cyclictest17526-21cat0
15167991913,4cyclictest14553-21grep0
15167991913,4cyclictest10283-21cat0
15167991913,4cyclictest10283-21cat0
15175991816,1cyclictest0-21swapper/22
15175991816,1cyclictest0-21swapper/22
15175991815,2cyclictest0-21swapper/22
15175991815,2cyclictest0-21swapper/22
15175991814,2cyclictest28424-21/usr/sbin/munin2
15175991813,3cyclictest25474-21sendmail_mailst2
15175991813,3cyclictest12097-21awk2
15175991812,4cyclictest24356-21sed2
1517299183,9cyclictest2593-21apt-get1
1517299183,10cyclictest18241-21apt-get1
15172991814,2cyclictest32276-21/usr/sbin/munin1
15172991814,2cyclictest31551-21aten2_r9power_p1
15172991814,2cyclictest21783-21/usr/sbin/munin1
15172991814,2cyclictest15333-21/usr/sbin/munin1
15172991814,2cyclictest12302-21/usr/sbin/munin1
15172991813,3cyclictest814-21cat1
15172991813,3cyclictest7769-21awk1
15172991813,3cyclictest634-21snmpd1
15172991813,3cyclictest634-21snmpd1
15172991813,3cyclictest26521-21ls1
15172991813,3cyclictest2343-21turbostat.cron1
15172991813,3cyclictest21645-21seq1
15172991813,3cyclictest1834-21expr1
15172991813,3cyclictest17323-21cat1
15172991813,3cyclictest15661-21/usr/sbin/munin1
15172991813,3cyclictest13837-21rt-features1
15172991813,3cyclictest11564-21/usr/sbin/munin1
15172991813,3cyclictest10732-21/usr/sbin/munin1
15172991813,3cyclictest10636-21expr1
15172991812,4cyclictest8764-21ls1
15172991812,4cyclictest16318-21sendmail-mta1
15172991811,5cyclictest517-21dbus-daemon1
15172991811,4cyclictest19754-21cut1
1516799182,10cyclictest18245-21chrt0
15167991816,1cyclictest0-21swapper/00
15167991816,1cyclictest0-21swapper/00
15167991816,1cyclictest0-21swapper/00
15167991816,1cyclictest0-21swapper/00
15167991814,2cyclictest11610-21ntp_offset0
15167991813,3cyclictest8682-21diskstats0
15167991813,3cyclictest5942-21latency_hist0
15167991813,3cyclictest419-21mii-tool0
15167991813,3cyclictest28000-21find0
15167991813,3cyclictest2575-21/usr/sbin/munin0
15167991813,3cyclictest22655-21ntpq0
15167991813,3cyclictest21412-21forks0
15167991813,3cyclictest21340-21seq0
15167991813,3cyclictest14238-21aten2_r9power_p0
15167991812,4cyclictest517-21dbus-daemon0
15167991812,4cyclictest517-21dbus-daemon0
15167991812,4cyclictest340-21systemd-journal0
15167991812,4cyclictest26061-21cpuspeed0
15167991812,4cyclictest13630-21awk0
15167991812,4cyclictest13170-21expr0
15167991812,3cyclictest31007-21aten2.4-expect0
15167991811,4cyclictest26870-21expr0
1516799180,17cyclictest0-21swapper/00
1516799180,16cyclictest0-21swapper/00
15175991713,2cyclictest20014-21latency_hist2
15175991712,3cyclictest9763-21which2
15175991712,3cyclictest30924-21seq2
15175991712,3cyclictest2314-21sed2
1517599170,1cyclictest0-21swapper/22
1517299173,8cyclictest4658-21apt-get1
15172991713,2cyclictest28196-21/usr/sbin/munin1
15172991713,2cyclictest21827-21apt-get1
15172991712,3cyclictest28030-21sendmail-mta1
15172991712,3cyclictest20968-21cat1
15172991711,4cyclictest9955-21cut1
15172991711,4cyclictest9955-21cut1
15172991711,4cyclictest517-21dbus-daemon1
15172991711,3cyclictest10571-21sed1
15167991715,1cyclictest0-21swapper/00
15167991715,1cyclictest0-21swapper/00
15167991714,2cyclictest0-21swapper/00
15167991713,2cyclictest6210-21/usr/sbin/munin0
15167991712,3cyclictest8140-21aten2_r9power_v0
15167991712,3cyclictest8140-21aten2_r9power_v0
15167991712,3cyclictest6915-21cat0
15167991712,3cyclictest662-21runrttasks0
15167991712,3cyclictest662-21runrttasks0
15167991711,3cyclictest31681-21cpuspeed0
15167991711,3cyclictest27435-21aten2_r9power_e0
15167991711,3cyclictest27435-21aten2_r9power_e0
15167991710,5cyclictest517-21dbus-daemon0
15167991710,4cyclictest15095-21cpuspeed_turbos0
1516799170,16cyclictest0-21swapper/00
1516799170,16cyclictest0-21swapper/00
15172991611,3cyclictest662-21runrttasks1
15172991611,3cyclictest662-21runrttasks1
15172991611,3cyclictest662-21runrttasks1
15167991611,3cyclictest18897-21cat0
15167991610,4cyclictest517-21dbus-daemon0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional