You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-21 - 09:46
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack9slot2.osadl.org (updated Sun Dec 21, 2025 00:43:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
76682303219,69sleep30-21swapper/33
76352261186,18sleep20-21swapper/22
76852258182,26sleep00-21swapper/00
801199254250,2cyclictest0-21swapper/22
77422247186,48sleep10-21swapper/11
801799243239,2cyclictest0-21swapper/33
800399239234,3cyclictest17170-21strings0
2281321640,2sleep2801199cyclictest2
255362500,4sleep1800799cyclictest1
19182500,3sleep00-21swapper/00
19182500,3sleep00-21swapper/00
144632490,2sleep30-21swapper/33
289982460,1sleep128982-21pmu-power1
91032440,1sleep00-21swapper/00
300562420,3sleep330052-21turbostat3
800399361,16cyclictest21353-21cron0
8003993513,4cyclictest16267-21expr0
8003993512,4cyclictest1109-21expr0
8003993512,4cyclictest1109-21expr0
8003993512,4cyclictest10036-21date0
800799340,32cyclictest24176-21kworker/1:21
8003993413,3cyclictest5491-21/usr/sbin/munin0
8003993313,3cyclictest5037-21seq0
8003993213,3cyclictest7545-21/usr/sbin/munin0
800399311,7cyclictest32435-21apt-get0
800399291,8cyclictest28053-21chrt0
801799277,3cyclictest0-21swapper/33
8003992612,4cyclictest9442-21unixbench_multi0
52962260,2sleep20-21swapper/22
801799245,4cyclictest515-21avahi-daemon3
801799243,18cyclictest25827-21sendmail-mta3
801799241,20cyclictest571-21gdbus3
801799234,17cyclictest9767-21sendmail-mta3
801799234,17cyclictest7771-21sendmail-mta3
801799233,18cyclictest25294-21sendmail-mta3
801799233,18cyclictest17069-21sendmail-mta3
801799233,17cyclictest32026-21sendmail-mta3
801799232,18cyclictest8913-21sendmail-mta3
801799231,4cyclictest340-21systemd-journal3
801199234,17cyclictest23926-21sendmail2
8011992311,8cyclictest845-21apt-get2
8011992311,8cyclictest845-21apt-get2
8011992310,11cyclictest517-21dbus-daemon2
800399233,11cyclictest9-21ksoftirqd/00
8003992317,4cyclictest5871-21cron0
801799223,17cyclictest9194-21sendmail-mta3
801799223,17cyclictest5096-21sendmail-mta3
801799223,17cyclictest4821-21sendmail-mta3
801799223,17cyclictest29357-21sendmail-mta3
801799223,17cyclictest28469-21sendmail-mta3
801799223,17cyclictest27641-21sendmail-mta3
801799223,17cyclictest13254-21sendmail-mta3
801799223,17cyclictest10099-21sendmail-mta3
801799221,4cyclictest32049-1kworker/3:1H3
801799221,19cyclictest517-21dbus-daemon3
801799220,4cyclictest3685-1kworker/3:0H3
801799220,20cyclictest21298-21munin-run3
801799220,12cyclictest0-21swapper/33
8011992216,4cyclictest12916-21idleruntime-cro2
8011992210,10cyclictest662-21runrttasks2
8003992217,3cyclictest22205-21sh0
206732220,2sleep30-21swapper/33
112802220,1sleep30-21swapper/33
801799219,11cyclictest35-21ksoftirqd/33
801799219,11cyclictest35-21ksoftirqd/33
801799214,4cyclictest29828-21idleruntime-cro3
801799212,17cyclictest23269-21sendmail-mta3
801799212,17cyclictest15942-21sendmail-mta3
801799212,17cyclictest1017-21sendmail-mta3
801799211,4cyclictest3685-1kworker/3:0H3
801799211,18cyclictest0-21swapper/33
801799211,18cyclictest0-21swapper/33
801799211,18cyclictest0-21swapper/33
801799211,17cyclictest15517-21apt-get3
801199212,17cyclictest14941-21cron2
8011992116,3cyclictest9781-21unixbench_multi2
8011992116,3cyclictest28574-21nfs4_client2
8011992114,4cyclictest7902-21idleruntime-cro2
800799216,9cyclictest634-21snmpd1
8007992116,3cyclictest8484-21tee1
800799211,18cyclictest11995-21cron1
8003992116,3cyclictest8559-21aten2_r9power_p0
8003992116,3cyclictest0-21swapper/00
8017992016,2cyclictest0-21swapper/33
8017992015,3cyclictest6430-21ls3
8017992015,3cyclictest27999-21sh3
8017992015,3cyclictest15383-21awk3
8017992015,3cyclictest12390-21cpu3
8017992013,5cyclictest22222-21awk3
801799200,18cyclictest7844-1kworker/3:2H3
801799200,18cyclictest11381-21latency_hist3
801199209,7cyclictest517-21dbus-daemon2
801199202,6cyclictest662-21runrttasks2
8011992017,2cyclictest0-21swapper/22
8011992015,3cyclictest5992-21sed2
8011992015,3cyclictest2696-21sed2
8011992015,3cyclictest2696-21sed2
8011992015,3cyclictest18607-21ntpq2
8011992013,4cyclictest517-21dbus-daemon2
8011992012,5cyclictest517-21dbus-daemon2
801199200,17cyclictest29893-21sendmail-mta2
8007992015,3cyclictest634-21snmpd1
8007992015,3cyclictest1991-21/usr/sbin/munin1
8007992015,3cyclictest16350-21apt-get1
8007992015,3cyclictest14744-21entropy1
8007992014,4cyclictest23919-21sh1
8007992014,4cyclictest19149-21sed1
8007992014,4cyclictest13170-21sed1
8007992014,4cyclictest1254-21cat1
800799200,18cyclictest24176-21kworker/1:21
8003992015,3cyclictest22841-21grep0
8003992014,4cyclictest21648-21cat0
8003992014,4cyclictest13380-21ntp_offset0
8003992013,4cyclictest662-21runrttasks0
8003992013,4cyclictest14465-21grep0
800399201,17cyclictest18678-21pmu-power0
801799192,15cyclictest5856-21cron3
8017991915,2cyclictest18154-21ls3
8017991915,2cyclictest17871-21cstates3
8017991914,3cyclictest29422-21cpuspeed_turbos3
8017991914,3cyclictest2666-21kernelversion3
8017991914,3cyclictest26122-21unixbench_multi3
8017991914,3cyclictest15442-21cron3
8017991913,4cyclictest5947-21sed3
8017991913,4cyclictest30189-21df_inode3
8017991913,4cyclictest27663-21cut3
8017991913,4cyclictest1723-21seq3
801799191,16cyclictest25450-21latency_hist3
801199192,2cyclictest0-21swapper/22
8011991916,2cyclictest0-21swapper/22
8011991916,2cyclictest0-21swapper/22
8011991914,3cyclictest31821-21apt2
8011991913,4cyclictest32191-21awk2
8011991913,4cyclictest26966-21sed2
8011991913,4cyclictest26731-21sed2
8011991913,4cyclictest18498-21grep2
8011991913,4cyclictest17289-21sh2
8011991913,4cyclictest14220-21cut2
8011991912,5cyclictest517-21dbus-daemon2
8011991912,4cyclictest1757-21dump-pmu-power2
8011991912,4cyclictest11020-21sed2
8011991911,5cyclictest9979-21sh2
8011991911,5cyclictest517-21dbus-daemon2
801199191,15cyclictest26958-21sed2
801199190,17cyclictest0-21swapper/22
8007991916,2cyclictest0-21swapper/11
8007991915,2cyclictest5491-21/usr/sbin/munin1
8007991915,2cyclictest11096-21/usr/sbin/munin1
8007991914,3cyclictest32417-21/usr/sbin/munin1
8007991914,3cyclictest28850-21switchtime1
8007991914,3cyclictest20910-21sed1
8007991914,3cyclictest19911-21ls1
8007991913,4cyclictest1904-21grep1
8007991913,4cyclictest1904-21grep1
8007991913,4cyclictest15851-21cat1
8007991913,4cyclictest13669-21apt-get1
8007991913,4cyclictest11538-21tr1
8007991913,3cyclictest4572-21grep1
8007991912,5cyclictest517-21dbus-daemon1
8007991912,5cyclictest12789-21expr1
8007991912,4cyclictest24099-21sh1
8007991912,4cyclictest16479-21wc1
8003991915,2cyclictest24303-21aten2_r9power_v0
8003991915,2cyclictest2344-21cat0
8003991915,2cyclictest13651-21/usr/sbin/munin0
8003991914,3cyclictest9-21ksoftirqd/00
8003991914,3cyclictest4855-21seq0
8003991914,3cyclictest32021-21seq0
8003991914,3cyclictest30393-21find0
8003991914,3cyclictest1750-21pluginstate0
8003991914,3cyclictest13124-21cron0
8003991914,3cyclictest11916-21needreboot0
8003991913,4cyclictest28636-21idleruntime-cro0
8003991913,4cyclictest24090-21date0
8003991913,4cyclictest23247-21grep0
8003991913,4cyclictest17907-21df0
8003991913,4cyclictest17907-21df0
8003991913,4cyclictest15053-21seq0
800399190,17cyclictest20252-21cat0
228542190,2sleep20-21swapper/22
8017991815,2cyclictest0-21swapper/33
8017991815,2cyclictest0-21swapper/33
8017991814,2cyclictest8937-21missed_timers3
8017991813,3cyclictest662-21runrttasks3
8017991813,3cyclictest22637-21swap3
8017991813,3cyclictest1823-21expr3
8017991813,3cyclictest1823-21expr3
8017991812,4cyclictest6900-21users3
801199189,6cyclictest517-21dbus-daemon2
801199182,13cyclictest5968-21grep2
8011991816,1cyclictest0-21swapper/22
8011991816,1cyclictest0-21swapper/22
8011991813,3cyclictest22200-21sh2
8011991813,3cyclictest15449-21pluginstate2
8011991812,4cyclictest5326-21latency_hist2
8011991812,4cyclictest24438-21sed2
8011991812,4cyclictest19447-21tr2
801199180,16cyclictest0-21swapper/22
800799184,12cyclictest10125-21cut1
8007991815,2cyclictest8177-21/usr/sbin/munin1
8007991815,2cyclictest13150-21/usr/sbin/munin1
8007991814,2cyclictest7264-21/usr/sbin/munin1
8007991814,2cyclictest23679-21open_files1
8007991814,2cyclictest21623-21/usr/sbin/munin1
8007991814,2cyclictest18634-21threads1
8007991814,2cyclictest18634-21threads1
8007991813,3cyclictest634-21snmpd1
8007991813,3cyclictest340-21systemd-journal1
8007991813,3cyclictest32218-21sed1
8007991813,3cyclictest30131-21awk1
8007991813,3cyclictest2393-21seq1
8007991813,3cyclictest17977-21ls1
8007991813,3cyclictest17534-21/usr/sbin/munin1
8007991812,4cyclictest960-21basename1
8007991812,4cyclictest960-21basename1
8007991812,4cyclictest5499-21grep1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest517-21dbus-daemon1
8007991812,4cyclictest20744-21ls1
8007991811,4cyclictest517-21dbus-daemon1
800799180,16cyclictest0-21swapper/11
8003991814,2cyclictest4645-21if_enp3s00
8003991814,2cyclictest27040-21needreboot0
8003991814,2cyclictest14521-21/usr/sbin/munin0
8003991813,3cyclictest5848-21cat0
8003991813,3cyclictest497-21cat0
8003991813,3cyclictest30104-21cat0
8003991813,3cyclictest24782-21date0
8003991813,3cyclictest24764-21ls0
8003991813,3cyclictest16009-21grep0
8003991813,3cyclictest10283-21hostname0
8003991812,4cyclictest517-21dbus-daemon0
8003991812,4cyclictest517-21dbus-daemon0
8003991812,4cyclictest26695-21wc0
8003991812,4cyclictest17356-21cat0
800399181,16cyclictest0-21swapper/00
145722180,2sleep014578-21cpuspeed_turbos0
801799170,16cyclictest0-21swapper/33
801199172,11cyclictest3198-21apt-get2
8011991715,1cyclictest0-21swapper/22
8011991715,1cyclictest0-21swapper/22
8011991715,1cyclictest0-21swapper/22
8011991715,1cyclictest0-21swapper/22
8011991712,3cyclictest662-21runrttasks2
8011991712,3cyclictest32452-21aten2_r9power_c2
8011991712,3cyclictest30129-21cat2
8011991712,3cyclictest26369-21cpu2
8011991712,3cyclictest11762-21expr2
8011991711,4cyclictest9742-21grep2
8011991711,4cyclictest2903-21ntpq2
8011991711,4cyclictest28473-21diskstats2
8011991711,3cyclictest7373-21aten2.4-expect2
801199170,1cyclictest0-21swapper/22
801199170,14cyclictest15942-21sendmail-mta2
8007991715,1cyclictest0-21swapper/11
8007991713,2cyclictest8184-21aten2_r9power_e1
8007991713,2cyclictest31241-21apt-get1
8007991712,3cyclictest662-21runrttasks1
8007991712,3cyclictest634-21snmpd1
8007991712,3cyclictest634-21snmpd1
8007991712,3cyclictest30297-21sed1
800399177,9cyclictest31270-21aten2.4-expect0
8003991714,2cyclictest25687-21/usr/sbin/munin0
8003991712,3cyclictest9577-21seq0
8003991712,3cyclictest7771-21sendmail-mta0
8003991712,3cyclictest662-21runrttasks0
8003991712,3cyclictest634-21snmpd0
8003991712,3cyclictest2426-21expr0
8003991712,3cyclictest11466-21processes0
8011991612,2cyclictest15590-21mailstats2
8011991610,4cyclictest7670-21cut2
800799163,8cyclictest28263-21apt-get1
8007991612,2cyclictest662-21runrttasks1
800399160,1cyclictest0-21swapper/00
800399160,15cyclictest0-21swapper/00
800799153,7cyclictest4096-21apt-get1
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional