You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-08 - 19:51
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Mon Dec 08, 2025 12:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1327923110,26sleep30-21swapper/33
145232299263,24sleep00-21swapper/00
143762294211,68sleep20-21swapper/22
1483999291284,4cyclictest28763-21sendmail-mta0
1484599269260,4cyclictest505-21dbus-daemon1
145242266185,26sleep10-21swapper/11
1485499226221,3cyclictest28730-21munin-run3
2050721770,3sleep31485499cyclictest3
14850999590,3cyclictest0-21swapper/22
91382560,2sleep00-21swapper/00
91382560,2sleep00-21swapper/00
236272550,1sleep30-21swapper/33
45082460,2sleep30-21swapper/33
249402380,1sleep00-21swapper/00
38852370,2sleep00-21swapper/00
156072360,3sleep335-21ksoftirqd/33
14839992815,8cyclictest505-21dbus-daemon0
134672280,2sleep20-21swapper/22
1485499270,26cyclictest0-21swapper/33
1485099261,5cyclictest29663-21munin-run2
11682240,3sleep30-21swapper/33
234312230,4sleep21485099cyclictest2
1485099232,4cyclictest19416-21sendmail2
1485099231,4cyclictest505-21dbus-daemon2
1485099231,19cyclictest25063-21idleruntime-cro2
1485099231,18cyclictest8078-21munin-run2
14845992315,5cyclictest12054-21cron1
70372220,2sleep0101rcuc/00
264982220,2sleep00-21swapper/00
14854992215,4cyclictest19203-21missed_timers3
14854992215,4cyclictest15219-21ntp_offset3
1485099224,17cyclictest0-21swapper/22
1485099221,3cyclictest2057-1kworker/2:1H2
14850992210,10cyclictest20535-21sendmail-mta2
14839992216,3cyclictest17690-21grep0
14839992215,4cyclictest29290-21uptime0
14839992214,5cyclictest30064-21aten2.4-expect0
108132220,2sleep20-21swapper/22
14854992116,3cyclictest334-21dump-pmu-power3
14854992116,3cyclictest14827-21irqstats3
14854992116,3cyclictest12152-21sendmail3
14854992115,4cyclictest19319-21needreboot3
14854992114,4cyclictest5466-21cat3
1485099214,15cyclictest15965-21cron2
1485099213,16cyclictest30359-21latency_hist2
1485099213,16cyclictest23033-21latency_hist2
1485099213,16cyclictest13894-21latency_hist2
1485099212,17cyclictest16238-21cat2
14850992116,3cyclictest26291-21latency2
14850992116,3cyclictest11013-21irqstats2
14850992115,3cyclictest8372-21cpu2
14850992114,5cyclictest27422-21ntpq2
14850992114,4cyclictest0-21swapper/22
1485099211,3cyclictest3605-21sh2
1485099211,3cyclictest317-21munin-run2
1485099211,3cyclictest2630-21apt-get2
1485099211,3cyclictest1571-21munin-run2
1485099211,17cyclictest21015-21load2
1485099210,3cyclictest30760-21munin-run2
1485099210,18cyclictest19659-21/usr/sbin/munin2
14845992116,3cyclictest2630-21needreboot1
14845992115,4cyclictest21327-21seq1
14845992115,4cyclictest19779-21if_enp2s01
14845992114,5cyclictest13309-21awk1
14845992114,4cyclictest4420-21grep1
14845992114,4cyclictest26679-21cron1
14839992114,5cyclictest20341-21sed0
14839992113,5cyclictest16774-21sh0
14839992113,4cyclictest21454-21idleruntime-cro0
14854992015,3cyclictest9383-21threads3
14854992015,3cyclictest6959-21cut3
14854992015,3cyclictest30169-21timerandwakeup3
14854992015,3cyclictest26677-21cron3
14854992015,3cyclictest23470-21dump-pmu-power3
14854992015,3cyclictest23393-21aten2_r9power_v3
14854992015,3cyclictest2270-21fw_packets3
14854992014,4cyclictest3252-21grep3
14854992014,4cyclictest27454-21pluginstate3
14854992014,4cyclictest12457-21sh3
14854992013,4cyclictest22084-21sendmail3
14854992012,5cyclictest32434-21df3
1485099206,12cyclictest7948-21rs:main2
1485099202,16cyclictest0-21swapper/22
14850992015,3cyclictest22344-21sed2
14850992014,3cyclictest4780-21if_err_enp2s02
1485099201,3cyclictest12835-21munin-run2
14850992012,5cyclictest32329-21tr2
1485099201,18cyclictest24686-21awk2
1485099201,17cyclictest8471-21latency_hist2
1485099201,16cyclictest23441-1kworker/2:1H2
1485099200,4cyclictest25483-21cron2
1485099200,4cyclictest25483-21cron2
1485099200,3cyclictest29398-1kworker/2:0H2
1485099200,17cyclictest36392sleep22
1484599207,2cyclictest111rcu_preempt1
14845992015,3cyclictest8053-21/usr/sbin/munin1
14845992015,3cyclictest8053-21/usr/sbin/munin1
14845992015,3cyclictest25484-21apt-key1
14845992015,3cyclictest23417-21seq1
14845992015,3cyclictest19399-21seq1
14845992015,3cyclictest1779-21sed1
14845992015,3cyclictest10174-21seq1
14845992014,4cyclictest3696-21seq1
14845992014,4cyclictest22581-21sed1
14845992014,4cyclictest17823-21seq1
14845992014,4cyclictest16088-21cat1
14845992014,3cyclictest16896-21latency1
14845992013,4cyclictest30552-21cat1
1484599200,18cyclictest18855-21seq1
14839992015,3cyclictest16960-21munin-node0
14839992014,4cyclictest16377-21sed0
14839992014,4cyclictest14197-21cut0
14839992014,3cyclictest27640-21grep0
14839992014,3cyclictest24166-21grep0
14839992013,4cyclictest8012-21grep0
14839992013,4cyclictest22336-21latency_hist0
14839992011,4cyclictest26669-21lldpd0
175802190,2sleep20-21swapper/22
1485499193,10cyclictest8343-21apt-get3
14854991915,2cyclictest4815-21irqstats3
14854991915,2cyclictest31109-21switchtime3
14854991914,3cyclictest7442-21threads3
14854991914,3cyclictest665-21runrttasks3
14854991914,3cyclictest6021-21/usr/sbin/munin3
14854991914,3cyclictest319-21basename3
14854991914,3cyclictest30208-21find3
14854991914,3cyclictest29956-21sort3
14854991914,3cyclictest2906-21ls3
14854991914,3cyclictest25872-21aten2.4-expect3
14854991914,3cyclictest25070-21apt-get3
14854991914,3cyclictest23743-21aten2_r9power_c3
14854991914,3cyclictest23743-21aten2_r9power_c3
14854991914,3cyclictest22252-21turbostat3
14854991914,3cyclictest20217-21ls3
14854991914,3cyclictest17850-21cat3
14854991914,3cyclictest16208-21/usr/sbin/munin3
14854991914,3cyclictest11878-21sh3
14854991913,4cyclictest22336-21latency_hist3
14854991913,4cyclictest14632-21cat3
14854991912,4cyclictest25096-21cat3
14854991912,4cyclictest11392-21cat3
14854991910,7cyclictest23465-21cat3
1485099199,7cyclictest18272-21cron2
14850991916,2cyclictest0-21swapper/22
14850991915,2cyclictest26097-21timerandwakeup2
14850991915,2cyclictest24859-21cstates2
14850991915,2cyclictest17300-21aten2_r9power_v2
14850991915,2cyclictest14090-21latency_hist2
14850991914,3cyclictest17009-21cat2
14850991914,3cyclictest15761-21unixbench_multi2
14850991913,4cyclictest8459-21cut2
14850991913,4cyclictest301-21head2
14850991913,4cyclictest19923-21grep2
14850991913,3cyclictest4246-21sendmail-mta2
14850991912,4cyclictest5817-21sendmail-mta2
1484599198,9cyclictest29434-21sendmail1
14845991915,2cyclictest8220-21/usr/sbin/munin1
14845991915,2cyclictest4663-21/usr/sbin/munin1
14845991915,2cyclictest29986-21/usr/sbin/munin1
14845991915,2cyclictest21258-21/usr/sbin/munin1
14845991915,2cyclictest20702-21df_inode1
14845991914,3cyclictest7038-21expr1
14845991914,3cyclictest32005-21/usr/sbin/munin1
14845991914,3cyclictest24769-21readlink1
14845991914,3cyclictest24769-21readlink1
14845991914,3cyclictest23276-21/usr/sbin/munin1
14845991914,3cyclictest16711-21seq1
14845991914,3cyclictest14976-21/usr/sbin/munin1
14845991914,3cyclictest13868-21seq1
14845991914,3cyclictest12698-21expr1
14845991913,4cyclictest31256-21cat1
14845991913,4cyclictest2567-21cat1
14845991913,4cyclictest24885-21cat1
14845991913,4cyclictest23316-21sh1
14845991913,4cyclictest18347-21cut1
14845991913,4cyclictest13364-21ls1
14845991912,4cyclictest4968-21cat1
14845991912,4cyclictest29216-21cat1
14845991912,4cyclictest26114-21expr1
1484599190,3cyclictest13032-21cat1
1483999192,10cyclictest16412-21chrt0
14839991915,2cyclictest20144-21sed0
14839991914,3cyclictest6623-21df_inode0
14839991914,3cyclictest4164-21/usr/sbin/munin0
14839991914,3cyclictest1161-21seq0
14839991914,3cyclictest11053-21/usr/sbin/munin0
14839991913,4cyclictest9093-21ntpq0
14839991913,4cyclictest3120-21awk0
14839991913,4cyclictest23422-21seq0
14839991913,4cyclictest14967-21sed0
14839991913,3cyclictest10272-21aten2_r9power_c0
14839991912,4cyclictest26270-21grep0
14839991912,3cyclictest2082-21systemd-journal0
1483999191,16cyclictest22833-21cstates0
14854991814,2cyclictest5953-21dump-pmu-power3
14854991814,2cyclictest17182-21/usr/sbin/munin3
14854991813,3cyclictest32020-21vmstat3
14854991813,3cyclictest17576-21swap3
14854991813,3cyclictest1679-21awk3
14854991813,3cyclictest16645-21cpuspeed_turbos3
14854991813,3cyclictest15907-21memory3
14854991813,3cyclictest12997-21ntp_states3
14854991812,4cyclictest28968-21expr3
14854991812,4cyclictest12820-21expr3
14854991810,5cyclictest8769-21tail3
1485099184,11cyclictest10508-21latency_hist2
1485099182,10cyclictest18522-21apt-get2
14850991814,2cyclictest12392-21sendmail-mta2
14850991813,3cyclictest7878-21wc2
14850991813,3cyclictest2989-21processes2
14850991813,3cyclictest20554-21sh2
14850991812,4cyclictest15926-21cut2
14850991812,3cyclictest9154-21switchtime2
14850991812,3cyclictest9154-21switchtime2
14850991811,4cyclictest6234-21aten2.4-expect2
14845991814,2cyclictest26530-21/usr/sbin/munin1
14845991814,2cyclictest16960-21munin-node1
14845991813,3cyclictest7891-21seq1
14845991813,3cyclictest7845-21seq1
14845991813,3cyclictest4565-21cat1
14845991813,3cyclictest4376-21expr1
14845991813,3cyclictest27882-21/usr/sbin/munin1
14845991813,3cyclictest19383-21grep1
14845991813,3cyclictest19120-21if_err_enp2s01
14845991813,3cyclictest16960-21munin-node1
14845991813,3cyclictest11548-21seq1
14845991813,3cyclictest10354-21/usr/sbin/munin1
14845991812,4cyclictest360-21ls1
14845991812,4cyclictest29397-21expr1
1484599181,14cyclictest14432-21find1
14845991811,2cyclictest6021-21/usr/sbin/munin1
1483999183,8cyclictest15161-21apt-get0
1483999183,7cyclictest30617-21apt-get0
14839991814,2cyclictest1809-21/usr/sbin/munin0
14839991813,3cyclictest665-21runrttasks0
14839991813,3cyclictest665-21runrttasks0
14839991813,3cyclictest544-21cat0
14839991813,3cyclictest26530-21/usr/sbin/munin0
14839991813,3cyclictest24215-21sed0
14839991813,3cyclictest24215-21sed0
14839991813,3cyclictest21992-21sed0
14839991813,3cyclictest18409-21sed0
14839991813,3cyclictest16731-21cat0
14839991813,3cyclictest12410-21/usr/sbin/munin0
14839991812,3cyclictest6033-21grep0
14839991812,3cyclictest11775-21vmstat0
14839991811,4cyclictest665-21runrttasks0
14839991811,4cyclictest6225-21cat0
14839991811,4cyclictest20984-21cron0
14839991811,4cyclictest0-21swapper/00
14839991810,4cyclictest29427-21cut0
14854991713,2cyclictest10368-21aten2_r9power_v3
14854991712,3cyclictest13673-21basename3
14854991711,4cyclictest3329-21wc3
14854991710,4cyclictest2082-21systemd-journal3
1485499170,15cyclictest0-21swapper/33
1485099170,16cyclictest0-21swapper/22
1485099170,16cyclictest0-21swapper/22
1484599173,12cyclictest8650-21grep1
1484599172,8cyclictest20478-21apt-get1
14845991713,2cyclictest30599-21/usr/sbin/munin1
14845991711,4cyclictest23054-21basename1
14839991712,3cyclictest665-21runrttasks0
14839991712,3cyclictest665-21runrttasks0
14839991712,3cyclictest4848-21if_enp2s00
14839991712,3cyclictest28124-21grep0
14839991712,3cyclictest23276-21/usr/sbin/munin0
14839991712,3cyclictest10975-21cat0
14839991712,3cyclictest10330-21polkitd0
14839991711,3cyclictest16339-21aten2_r9power_v0
1485499162,8cyclictest8071-21apt-get3
1485499162,8cyclictest8071-21apt-get3
1483999161,13cyclictest32319-21tail0
14839991611,3cyclictest30572-21sshd0
14839991611,3cyclictest14818-21grep0
14839991610,4cyclictest4468-21head0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional