You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-13 - 07:36
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack9slot2.osadl.org (updated Sat Dec 13, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
985299251244,4cyclictest306-21awk3
984499250247,2cyclictest0-21swapper/11
96002249212,25sleep20-21swapper/22
85412237196,16sleep00-21swapper/00
96662234198,24sleep30-21swapper/33
95592232195,25sleep10-21swapper/11
984899199192,4cyclictest32729-21apt-get2
1971721350,1sleep30-21swapper/33
984099117112,2cyclictest0-21swapper/00
54242620,1sleep20-21swapper/22
54242620,1sleep20-21swapper/22
239062570,1sleep10-21swapper/11
168672490,3sleep228-21ksoftirqd/22
103792460,1sleep310382-21awk3
9848994314,17cyclictest10191-21awk2
136602430,1sleep20-21swapper/22
9848993911,16cyclictest662-21runrttasks2
317362350,1sleep331742-21head3
9848993314,9cyclictest0-21swapper/22
9848993211,18cyclictest27406-21if_enp3s02
984899319,19cyclictest29620-21wc2
984899312,26cyclictest27010-21grep2
9848993111,17cyclictest10676-21hostname2
9848993110,19cyclictest10130-21cut2
9848993110,18cyclictest13542-21basename2
984899310,28cyclictest18954-21cat2
984899309,19cyclictest6623-21expr2
984899309,18cyclictest24502-21ls2
9848993015,13cyclictest31000-21uname2
9848993012,15cyclictest24071-21grep2
9848993010,17cyclictest13306-21grep2
984899300,4cyclictest21103-21/usr/sbin/munin2
984899299,18cyclictest15706-21apt-get2
984899299,17cyclictest1717-21ls2
984899291,25cyclictest1019-21aten2.4-expect2
9848992912,15cyclictest32205-21awk2
9848992911,15cyclictest27750-21basename2
985299286,19cyclictest571-21gdbus3
984899288,17cyclictest27409-21unixbench-2d2
984899287,18cyclictest4452-21cat2
9848992812,14cyclictest7996-21cat2
9848992812,13cyclictest29548-21cstates2
9848992811,15cyclictest662-21runrttasks2
984899280,4cyclictest3628-21apt-get2
984899280,4cyclictest21142-21users2
984899280,3cyclictest17122-21diskstats2
984899279,16cyclictest24204-21users2
984899279,15cyclictest517-21dbus-daemon2
984899277,17cyclictest31394-21grep2
984899276,18cyclictest14261-21cat2
9848992710,14cyclictest4299-21unixbench_singl2
9848992710,14cyclictest4299-21unixbench_singl2
984899270,3cyclictest15102-21diskstats2
984899270,3cyclictest10350-21memory2
985299264,19cyclictest35-21ksoftirqd/33
984899267,16cyclictest2445-21latency_hist2
984899266,3cyclictest15269-21sed2
9848992612,11cyclictest662-21runrttasks2
984899260,4cyclictest16851-21df2
984899260,23cyclictest26203-21vmstat2
984899260,23cyclictest20972-21cat2
984899259,13cyclictest305962chrt2
984899257,16cyclictest7089-21latency_hist2
984899257,15cyclictest296372chrt2
984899256,16cyclictest9964-21unixbench_multi2
984899256,16cyclictest13587-21/usr/sbin/munin2
9848992510,13cyclictest6675-21aten2_r9power_p2
984099251,11cyclictest197182which0
984899249,12cyclictest20962-21cpuspeed_turbos2
984899247,15cyclictest24846-21find2
984899247,14cyclictest25882-21ls2
984899241,21cyclictest0-21swapper/22
9848992410,12cyclictest662-21runrttasks2
984899240,22cyclictest6553-21ps2
984899240,21cyclictest11748-21taskset2
984499242,19cyclictest30202-21grep1
985299233,17cyclictest5787-21sendmail-mta3
985299233,17cyclictest5787-21sendmail-mta3
985299232,18cyclictest17320-21sendmail-mta3
985299231,4cyclictest517-21dbus-daemon3
985299231,19cyclictest515-21avahi-daemon3
985299231,19cyclictest340-21systemd-journal3
985299231,19cyclictest15820-21perf3
984899237,13cyclictest8814-21timerwakeupswit2
984899235,3cyclictest15794-21idleruntime-cro2
984899234,3cyclictest24294-21threads2
984899231,2cyclictest0-21swapper/22
9844992317,4cyclictest21030-21cpuspeed_turbos1
9844992315,5cyclictest16717-21tr1
9844992313,6cyclictest18762-21apt-get1
985299223,17cyclictest1588-21latency_hist3
985299222,18cyclictest9058-21latency_hist3
985299221,19cyclictest517-21dbus-daemon3
985299221,19cyclictest517-21dbus-daemon3
985299221,18cyclictest4913-21cat3
985299221,18cyclictest4913-21cat3
985299221,18cyclictest10040-21awk3
984899221,7cyclictest17968-21ls2
984899221,4cyclictest14382-21apt-get2
9844992216,4cyclictest8064-21seq1
9844992216,4cyclictest25298-21grep1
985299214,14cyclictest0-21swapper/33
985299212,17cyclictest15020-21sendmail-mta3
985299212,17cyclictest14313-21cat3
985299212,17cyclictest11618-21sendmail-mta3
9852992114,4cyclictest662-21runrttasks3
985299211,3cyclictest24580-21grep3
9852992113,6cyclictest3642-21awk3
985299211,18cyclictest566-21polkitd3
985299211,18cyclictest1-21systemd3
985299211,17cyclictest20337-21sendmail-mta3
985299211,17cyclictest14762-21munin-run3
985299210,19cyclictest30678-21cron3
985299210,18cyclictest19509-21sendmail3
985299210,18cyclictest0-21swapper/33
984899211,5cyclictest520-21rs:main2
984899211,5cyclictest520-21rs:main2
9844992115,4cyclictest31002-21dump-pmu-power1
9844992115,3cyclictest3604-21cron1
9840992116,3cyclictest27509-21irqstats0
9840992115,4cyclictest634-21snmpd0
985299202,16cyclictest23842-21latency_hist3
9852992015,3cyclictest15524-21ntp_kernel_pll_3
985299201,4cyclictest28972-21cron3
985299201,4cyclictest22896-21sendmail3
9852992014,4cyclictest25160-21find3
9852992014,4cyclictest24720-21cat3
985299201,17cyclictest28441-21sendmail-mta3
985299201,17cyclictest12417-21cat3
985299201,16cyclictest340-21systemd-journal3
985299201,16cyclictest31037-21sendmail-mta3
985299200,3cyclictest4971-21munin-run3
985299200,18cyclictest27935-21awk3
9844992015,3cyclictest634-21snmpd1
9844992015,3cyclictest634-21snmpd1
9844992015,3cyclictest16185-21seq1
9844992015,3cyclictest10793-21seq1
9844992014,4cyclictest16638-21seq1
9840992015,3cyclictest634-21snmpd0
9840992015,3cyclictest634-21snmpd0
9840992015,3cyclictest634-21snmpd0
9840992013,4cyclictest15448-21ls0
9852991916,2cyclictest0-21swapper/33
9852991914,3cyclictest7857-21cut3
9852991914,3cyclictest21007-21sed3
9852991914,3cyclictest11323-21mailstats3
9852991914,3cyclictest1060-21ls3
9852991913,4cyclictest19470-21expr3
985299191,2cyclictest0-21swapper/33
985299191,2cyclictest0-21swapper/33
9852991912,4cyclictest18844-21basename3
985299190,5cyclictest13204-21sed3
985299190,3cyclictest571-21gdbus3
985299190,3cyclictest19474-1kworker/3:2H3
985299190,17cyclictest9870-21sendmail-mta3
985299190,17cyclictest7998-21awk3
984499192,15cyclictest9347-21munin-run1
984499192,15cyclictest14674-21cut1
9844991916,2cyclictest0-21swapper/11
9844991915,2cyclictest6176-21/usr/sbin/munin1
9844991914,3cyclictest946-21apt-config1
9844991914,3cyclictest634-21snmpd1
9844991914,3cyclictest634-21snmpd1
9844991914,3cyclictest4294-21aten2.4-expect1
9844991914,3cyclictest4294-21aten2.4-expect1
9844991914,3cyclictest21121-21aten2_r9power_c1
9844991914,3cyclictest13645-21acpi1
9844991913,4cyclictest18503-21ls1
9844991913,4cyclictest14247-21sed1
9844991913,4cyclictest10147-21grep1
9844991913,3cyclictest16097-21ls1
984499191,16cyclictest0-21swapper/11
9840991916,2cyclictest0-21swapper/00
9840991915,2cyclictest13605-21unixbench_multi0
9840991914,3cyclictest9855-21sed0
9840991914,3cyclictest634-21snmpd0
9840991914,3cyclictest5387-21grep0
9840991914,3cyclictest32231-21find0
9840991914,3cyclictest26570-21latency_hist0
9840991914,3cyclictest25157-21/usr/sbin/munin0
9840991914,3cyclictest2512-21/usr/sbin/munin0
9840991914,3cyclictest19063-21/usr/sbin/munin0
9840991914,3cyclictest18013-21proc_pri0
9840991914,3cyclictest10377-21expr0
9840991913,4cyclictest8506-21cat0
9840991913,4cyclictest31506-21cpuspeed_turbos0
9840991913,4cyclictest19565-21ntpq0
9840991912,4cyclictest31037-21sendmail-mta0
984099191,17cyclictest0-21swapper/00
984099190,17cyclictest30035-21cat0
9852991813,3cyclictest27769-21open_inodes3
9852991812,4cyclictest23123-21seq3
985299181,15cyclictest0-21swapper/33
9852991811,4cyclictest16379-21unixbench_singl3
985299180,3cyclictest30663-21awk3
984499182,14cyclictest5975-21grep1
984499182,14cyclictest18841-21switchtime1
9844991816,1cyclictest0-21swapper/11
9844991816,1cyclictest0-21swapper/11
9844991816,1cyclictest0-21swapper/11
9844991816,1cyclictest0-21swapper/11
9844991816,1cyclictest0-21swapper/11
9844991813,3cyclictest878-21/usr/sbin/munin1
9844991813,3cyclictest634-21snmpd1
9844991813,3cyclictest634-21snmpd1
9844991813,3cyclictest5469-21cat1
9844991813,3cyclictest3927-21cat1
9844991813,3cyclictest30878-21/usr/sbin/munin1
9844991813,3cyclictest2917-21/usr/sbin/munin1
9844991813,3cyclictest2917-21/usr/sbin/munin1
9844991813,3cyclictest23392-21cat1
9844991813,3cyclictest20165-21df1
9844991813,3cyclictest19001-21sed1
9844991813,3cyclictest12660-21aten2.4-expect1
9844991812,4cyclictest15298-21cat1
984499181,16cyclictest0-21swapper/11
9844991811,4cyclictest11510-21cpu1
984099182,10cyclictest634-21snmpd0
9840991816,1cyclictest0-21swapper/00
9840991816,1cyclictest0-21swapper/00
9840991816,1cyclictest0-21swapper/00
9840991816,1cyclictest0-21swapper/00
9840991815,2cyclictest0-21swapper/00
9840991814,2cyclictest634-21snmpd0
9840991814,2cyclictest26244-21aten2_r9power_v0
9840991814,2cyclictest17710-21/usr/sbin/munin0
9840991813,3cyclictest5510-21/usr/sbin/munin0
9840991813,3cyclictest3575-21expr0
9840991813,3cyclictest29695-21sed0
9840991813,3cyclictest25113-21ls0
9840991813,3cyclictest1793-21open_files0
9840991813,3cyclictest12403-21ntp_offset0
9840991813,3cyclictest11628-21acpi0
9840991813,3cyclictest11607-21awk0
9840991813,3cyclictest10073-21cat0
9840991812,4cyclictest5919-21sed0
9840991812,4cyclictest25164-21grep0
9840991812,3cyclictest23012-21latency_hist0
984099181,14cyclictest13405-21apt-get0
9840991810,5cyclictest517-21dbus-daemon0
984099180,16cyclictest21268-21head0
984099180,16cyclictest21268-21head0
9852991712,3cyclictest25080-21expr3
9852991712,3cyclictest15422-21mailstats3
9852991711,4cyclictest340-21systemd-journal3
985299170,15cyclictest0-21swapper/33
9844991715,1cyclictest0-21swapper/11
9844991715,1cyclictest0-21swapper/11
9844991714,2cyclictest0-21swapper/11
9844991713,2cyclictest20769-21/usr/sbin/munin1
9844991713,2cyclictest20769-21/usr/sbin/munin1
9844991712,3cyclictest6339-21idleruntime-cro1
9844991712,3cyclictest31983-21systemctl1
9844991712,3cyclictest28849-21cat1
9844991712,3cyclictest26811-21/usr/sbin/munin1
9844991712,3cyclictest15940-21latency_hist1
9844991712,3cyclictest11825-21cat1
9844991712,3cyclictest11134-21ntpq1
9844991712,3cyclictest10266-21sed1
9844991711,4cyclictest23222-21df1
984499170,15cyclictest0-21swapper/11
9840991715,1cyclictest0-21swapper/00
9840991715,1cyclictest0-21swapper/00
9840991715,1cyclictest0-21swapper/00
9840991713,2cyclictest30878-21/usr/sbin/munin0
9840991712,3cyclictest634-21snmpd0
9840991712,3cyclictest4121-21sed0
9840991712,3cyclictest4121-21sed0
9840991712,3cyclictest24111-21/usr/sbin/munin0
9840991712,3cyclictest23843-21munin-plugin-st0
9840991712,3cyclictest23374-21mii-tool0
9840991712,3cyclictest16071-21expr0
9840991712,3cyclictest15276-21open_inodes0
9840991712,3cyclictest13168-21awk0
9840991712,3cyclictest11952-21munin-node0
9840991712,3cyclictest11358-21/usr/sbin/munin0
9840991711,4cyclictest17559-21sed0
984099171,13cyclictest12567-21sort0
9844991613,2cyclictest10646-21/usr/sbin/munin1
9840991611,3cyclictest11952-21munin-node0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional