You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-14 - 20:36
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6.osadl.org (updated Sat Mar 14, 2026 12:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
21762949910491,10cyclictest266-21systemd-journal09:40:001
2176294999488,4cyclictest2203004-21latency_hist08:30:001
2176294999387,4cyclictest2269751-21kworker/u8:0+flush-179:012:00:011
2176294999385,5cyclictest2184819-21kworker/u8:0+flush-179:007:45:011
2176294999182,6cyclictest2240118-21latency_hist10:25:011
2176292998974,8cyclictest2213313-21/usr/sbin/munin09:00:220
2176292998883,3cyclictest2184819-21kworker/u8:0+flush-179:007:40:000
2176292998171,7cyclictest2222611-21latency_hist09:30:010
2176292997871,5cyclictest2222647-21kworker/u8:0+flush-179:009:35:240
2176292997869,7cyclictest266-21systemd-journal08:40:010
2176292997869,7cyclictest2173137-21kworker/u8:2+flush-179:007:30:010
2176294997462,9cyclictest2224199-21latency_hist09:35:011
2176292997266,5cyclictest2269751-21kworker/u8:0+flush-179:012:05:010
2176292997060,8cyclictest2190219-21apt-get07:50:110
2176294996856,9cyclictest266-21systemd-journal09:15:011
2176294996762,3cyclictest714-21Xorg12:16:001
2176294996662,3cyclictest2173137-21kworker/u8:2+events_unbound09:00:371
2176294996658,6cyclictest2238535-21latency_hist10:20:011
2176292996558,5cyclictest2243274-21kworker/u8:1+flush-179:010:40:140
2176292996258,2cyclictest0-21swapper/008:17:590
2176294996155,4cyclictest2206458-21latency_hist08:40:011
2176294996151,8cyclictest2253363-21apt-get11:05:121
2176292996055,3cyclictest2211504-21kworker/u8:3+events_unbound09:10:240
2176292996050,8cyclictest2264507-21apt-get11:40:120
2176292995948,9cyclictest2209626-21latency_hist08:50:010
4577091560,12ptp4l441ktimers/307:09:553
2176294995650,2cyclictest714-21Xorg08:18:001
2176294995648,6cyclictest2227629-21/usr/sbin/munin09:45:161
2176296995552,2cyclictest0-21swapper/212:15:592
2176294995547,6cyclictest2281997-21latency_hist12:35:011
2176292995550,4cyclictest2235384-21kworker/u8:3+events_unbound10:55:000
2176299995452,1cyclictest0-21swapper/312:16:003
2176294995445,6cyclictest2179549-21latency_hist07:20:001
2176292995451,2cyclictest0-21swapper/011:49:000
2176292995446,6cyclictest2222647-21kworker/u8:0+events_unbound10:05:000
2176294995346,6cyclictest2162073-21kworker/u8:1+flush-179:007:30:191
2176292995348,3cyclictest2257935-21kworker/u8:1+flush-179:011:25:260
2176294995242,8cyclictest266-21systemd-journal11:40:011
2176294995242,8cyclictest266-21systemd-journal11:40:011
2176294995242,8cyclictest2191562-21apt-get07:54:201
2176294995241,9cyclictest2176911-21diskstats07:10:141
2176294995142,7cyclictest2196896-21apt-get08:10:111
2176292995144,5cyclictest2214918-21apt-get09:05:120
2176292995142,7cyclictest2211504-21kworker/u8:3+flush-179:009:30:160
2176292995040,8cyclictest266-21systemd-journal12:09:590
2176294994844,2cyclictest2201457-21systemd-run08:25:011
2176294994840,6cyclictest2191841-21/usr/sbin/munin07:55:181
2176294994840,6cyclictest2191841-21/usr/sbin/munin07:55:171
2176292994840,6cyclictest2226060-21apt-get09:40:110
2176294994740,5cyclictest266-21systemd-journal10:05:421
2176294994738,7cyclictest510-21rs:main1
2176292994740,5cyclictest2195052-21apt-get08:05:120
2176292994641,3cyclictest2201547-21latency_hist08:25:020
2176292994640,3cyclictest2202999-21cron08:29:590
2176292994637,7cyclictest2193197-21latency_hist08:00:010
2176292994637,7cyclictest2193197-21latency_hist08:00:010
2176294994529,8cyclictest2256515-21/usr/sbin/munin11:15:211
217629499451,42cyclictest714-21Xorg11:43:591
2176292994541,3cyclictest2173137-21kworker/u8:2+flush-179:008:40:260
217629299451,34cyclictest0-21swapper/007:10:130
2176299994440,2cyclictest0-21swapper/308:17:593
2176294994439,3cyclictest2280448-21systemd-run12:30:011
2176294994439,3cyclictest2280448-21systemd-run12:30:001
2176294994339,3cyclictest2173137-21kworker/u8:2+events_unbound08:05:051
2176294994338,4cyclictest2269751-21kworker/u8:0+events_unbound12:05:071
2176292994337,5cyclictest2235384-21kworker/u8:3+flush-179:010:49:560
2176296994239,2cyclictest0-21swapper/208:17:592
217629499421,39cyclictest714-21Xorg07:49:591
2176292994238,3cyclictest2219474-21systemd-run09:20:000
2176292994237,4cyclictest0-21swapper/011:51:580
217629299420,40cyclictest1-21systemd07:50:010
231999410,3rtkit-daemon2318-21rtkit-daemon10:32:511
217629299417,5cyclictest266-21systemd-journal07:20:020
2176292994131,5cyclictest2209633-21apt-get08:50:030
217629999400,38cyclictest2257876-21turbostat11:20:003
2176296994037,2cyclictest0-21swapper/211:43:582
2176294994035,4cyclictest2254701-21turbostat11:14:561
2176294994033,5cyclictest2258125-21/usr/sbin/munin11:20:171
217629499400,39cyclictest714-21Xorg12:22:581
2176292994037,2cyclictest0-21swapper/012:24:560
2176292994035,3cyclictest2264265-21apt11:40:000
2176292994035,3cyclictest2264265-21apt11:40:000
231999390,3rtkit-daemon2318-21rtkit-daemon08:13:260
2176299993937,1cyclictest0-21swapper/311:43:593
2176299993933,4cyclictest2217842-21turbostat09:15:013
2176299993933,4cyclictest2179554-21turbostat07:20:003
2176294993934,3cyclictest714-21Xorg11:48:591
2176292993934,3cyclictest714-21Xorg10:13:590
2176292993933,4cyclictest2229062-21latency_hist09:50:010
2176292993933,3cyclictest2186523-21apt-get07:40:020
2176292993931,6cyclictest2251525-21latency_hist11:00:010
2176292993928,9cyclictest266-21systemd-journal09:00:010
217629999380,37cyclictest0-21swapper/311:29:593
217629999380,37cyclictest0-21swapper/309:29:553
217629999380,29cyclictest0-21swapper/307:24:543
2176296993834,2cyclictest0-21swapper/209:54:552
217629699380,35cyclictest0-21swapper/209:29:552
217629699380,35cyclictest0-21swapper/208:07:002
2176294993834,3cyclictest2222647-21kworker/u8:0+events_unbound09:40:591
2176294993834,2cyclictest714-21Xorg11:51:591
2176294993832,5cyclictest2246484-21latency_hist10:45:011
2176294993830,6cyclictest510-21rs:main1
217629499380,37cyclictest0-21swapper/109:25:581
217629499380,37cyclictest0-21swapper/109:23:591
217629499380,36cyclictest714-21Xorg08:44:591
217629299380,2cyclictest0-21swapper/010:05:590
2176299993734,2cyclictest0-21swapper/310:17:593
2176299993734,2cyclictest0-21swapper/309:19:593
217629999370,36cyclictest0-21swapper/312:07:593
217629999370,36cyclictest0-21swapper/308:23:003
2176296993734,2cyclictest0-21swapper/211:01:592
2176296993734,2cyclictest0-21swapper/210:17:592
2176296993733,2cyclictest0-21swapper/208:31:592
2176296993732,1cyclictest0-21swapper/209:15:012
217629699370,35cyclictest0-21swapper/212:07:592
217629699370,35cyclictest0-21swapper/211:29:582
217629699370,1cyclictest0-21swapper/210:33:582
2176294993731,4cyclictest2261730-21gltestperf11:30:141
2176294993731,4cyclictest2241703-21latency_hist10:30:011
2176294993731,4cyclictest0-21swapper/110:54:591
2176294993726,10cyclictest0-21swapper/109:05:141
217629299375,30cyclictest714-21Xorg10:16:590
2176292993733,3cyclictest2283730-21latency_hist12:40:010
2176292993732,4cyclictest2253146-21systemd11:05:000
2176292993732,3cyclictest714-21Xorg07:19:580
2176292993731,4cyclictest484-21dbus-daemon11:15:010
2176292993729,6cyclictest2219488-21kworker/u8:2+flush-179:009:25:000
217629299370,36cyclictest0-21swapper/012:19:000
2176299993634,1cyclictest0-21swapper/311:01:583
2176299993634,1cyclictest0-21swapper/309:54:553
2176296993634,1cyclictest0-21swapper/209:19:592
2176296993633,2cyclictest0-21swapper/208:02:592
2176296993631,2cyclictest0-21swapper/209:45:592
2176296993631,2cyclictest0-21swapper/207:49:592
217629699360,1cyclictest0-21swapper/207:24:552
2176294993633,2cyclictest0-21swapper/107:22:001
2176294993629,4cyclictest0-21swapper/108:47:591
2176299993533,1cyclictest0-21swapper/308:03:003
2176299993532,2cyclictest0-21swapper/308:31:593
2176299993531,1cyclictest0-21swapper/307:50:003
217629999350,1cyclictest0-21swapper/310:33:593
2176296993533,1cyclictest0-21swapper/207:20:002
2176294993530,3cyclictest2183254-21munin-plugin-st07:30:011
2176294993529,4cyclictest2283605-21ls12:39:591
2176294993527,7cyclictest2232724-21fschecks_count10:00:151
217629299355,28cyclictest714-21Xorg08:01:590
2176292993532,2cyclictest2176384-21date07:10:020
2176292993530,3cyclictest714-21Xorg09:58:590
2176292993530,3cyclictest0-21swapper/012:15:000
2176299993431,2cyclictest0-21swapper/310:44:593
2176299993431,2cyclictest0-21swapper/309:45:593
2176299993430,2cyclictest0-21swapper/309:02:593
2176296993431,2cyclictest0-21swapper/209:03:002
2176296993430,2cyclictest0-21swapper/212:22:582
2176294993425,7cyclictest2270869-21apt-get12:00:121
217629499341,31cyclictest714-21Xorg10:37:001
2176292993430,2cyclictest714-21Xorg09:54:590
2176292993430,2cyclictest0-21swapper/010:40:000
2176292993430,2cyclictest0-21swapper/007:35:010
2176292993426,6cyclictest2243306-21awk10:35:000
2176299993330,2cyclictest0-21swapper/310:20:593
2176299993329,2cyclictest0-21swapper/311:22:583
2176296993331,1cyclictest0-21swapper/210:44:592
2176296993330,2cyclictest0-21swapper/211:57:582
2176296993330,2cyclictest0-21swapper/210:20:592
2176296993329,2cyclictest0-21swapper/211:22:592
2176296993329,2cyclictest0-21swapper/209:23:592
2176296993329,2cyclictest0-21swapper/208:24:592
217629699330,31cyclictest0-21swapper/211:11:592
217629499333,2cyclictest271rcuc/108:55:121
2176294993328,3cyclictest0-21swapper/107:40:001
217629499332,29cyclictest2235596-21apt-get10:10:111
217629499331,4cyclictest29-21ksoftirqd/108:50:041
2176294993314,18cyclictest2254684-21kworker/u8:0+events_unbound11:30:011
217629499330,31cyclictest2274300-21apt-get12:10:131
2176292993328,4cyclictest2262308-21switchtime11:30:230
2176292993324,6cyclictest2270612-21latency_hist12:00:020
2176292993323,8cyclictest2235384-21kworker/u8:3+events_unbound10:29:590
2176292993321,7cyclictest2304-21lightdm-gtk-gre11:19:000
2176299993230,1cyclictest0-21swapper/312:22:593
2176299993230,1cyclictest0-21swapper/311:57:583
2176296993228,2cyclictest0-21swapper/211:32:002
217629699320,30cyclictest0-21swapper/209:58:592
2176294993228,3cyclictest2216227-21kworker/u8:0+events_unbound09:15:291
2176294993227,4cyclictest2194460-21switchtime08:00:221
2176294993225,6cyclictest2252644-21proc_pri11:00:241
2176294993225,5cyclictest2229231-21apt-get09:50:101
217629299326,7cyclictest2279661-21sed12:25:180
217629299326,7cyclictest2279661-21sed12:25:180
2176292993220,7cyclictest2304-21lightdm-gtk-gre12:34:590
2176299993129,1cyclictest0-21swapper/308:44:593
2176299993128,2cyclictest0-21swapper/311:46:003
2176299993128,2cyclictest0-21swapper/311:32:003
2176299993127,3cyclictest0-21swapper/312:03:003
217629999310,30cyclictest0-21swapper/311:11:593
2176296993129,1cyclictest0-21swapper/208:44:592
2176296993128,2cyclictest0-21swapper/211:46:002
217629699310,29cyclictest0-21swapper/210:25:132
231999300,2rtkit-daemon0-21swapper/109:56:521
2176299993028,1cyclictest0-21swapper/309:23:593
2176299993023,5cyclictest2203013-21turbostat08:29:593
217629999300,28cyclictest0-21swapper/308:05:133
217629999300,27cyclictest0-21swapper/310:10:113
2176296993027,2cyclictest0-21swapper/207:10:122
2176296993026,2cyclictest0-21swapper/212:02:592
217629699300,2cyclictest0-21swapper/207:40:012
217629699300,28cyclictest0-21swapper/210:10:112
217629699300,28cyclictest0-21swapper/208:55:122
2176294993021,7cyclictest266-21systemd-journal10:45:201
2176292993025,4cyclictest0-21swapper/011:21:590
2176292993025,3cyclictest2254633-21unixbench_singl11:05:260
217629999290,2cyclictest0-21swapper/308:55:133
217629999290,2cyclictest0-21swapper/307:10:133
217629999290,28cyclictest0-21swapper/310:25:123
217629999290,28cyclictest0-21swapper/309:35:153
217629999290,27cyclictest0-21swapper/307:25:133
217629999290,1cyclictest0-21swapper/309:58:593
217629999290,1cyclictest0-21swapper/307:40:013
2176296992927,1cyclictest0-21swapper/207:25:132
217629699290,2cyclictest0-21swapper/211:51:592
217629699290,2cyclictest0-21swapper/208:50:022
217629699290,27cyclictest0-21swapper/212:10:132
217629699290,27cyclictest0-21swapper/209:35:152
2176292992925,3cyclictest0-21swapper/010:20:220
2176292992922,5cyclictest2195700-21kworker/u8:0+events_unbound08:30:010
4577091280,7ptp4l441ktimers/311:55:003
2176299992824,2cyclictest0-21swapper/308:50:023
217629999280,27cyclictest0-21swapper/312:10:123
217629699280,2cyclictest0-21swapper/212:32:592
217629699280,2cyclictest0-21swapper/210:05:592
217629699280,25cyclictest0-21swapper/207:31:582
4577091270,6ptp4l61490irq/134-eno1-TxRx-010:40:013
4577091270,6ptp4l441ktimers/310:55:003
2176299992725,1cyclictest0-21swapper/307:32:593
217629999270,26cyclictest0-21swapper/312:28:593
217629999270,26cyclictest0-21swapper/312:28:593
217629999270,1cyclictest0-21swapper/310:05:593
2176296992724,2cyclictest0-21swapper/210:37:002
217629699270,25cyclictest0-21swapper/212:29:002
217629699270,25cyclictest0-21swapper/212:29:002
4577091260,6ptp4l441ktimers/308:50:003
4577091260,5ptp4l441ktimers/311:40:023
4577091260,5ptp4l441ktimers/311:40:013
4577091260,5ptp4l441ktimers/309:35:013
2176299992623,2cyclictest0-21swapper/311:07:003
2176299992622,2cyclictest0-21swapper/307:55:593
2176299992622,2cyclictest0-21swapper/307:55:593
2176296992621,2cyclictest0-21swapper/209:31:592
217629699260,2cyclictest0-21swapper/208:35:592
2176294992619,4cyclictest0-21swapper/107:10:031
4577091250,6ptp4l61490irq/134-eno1-TxRx-008:15:003
4577091250,6ptp4l61490irq/134-eno1-TxRx-007:39:593
4577091250,5ptp4l441ktimers/310:04:563
4577091250,4ptp4l441ktimers/311:00:003
4577091250,4ptp4l441ktimers/310:50:003
4577091250,3ptp4l441ktimers/312:34:573
2176296992523,1cyclictest0-21swapper/209:09:592
2176296992522,2cyclictest0-21swapper/210:50:132
2176296992522,2cyclictest0-21swapper/207:56:002
2176296992522,2cyclictest0-21swapper/207:55:592
4577091240,5ptp4l61490irq/134-eno1-TxRx-009:45:013
2176299992422,1cyclictest0-21swapper/309:09:593
2176296992422,1cyclictest0-21swapper/211:07:002
2176296992422,1cyclictest0-21swapper/208:30:002
2176296992421,2cyclictest0-21swapper/210:46:592
2176296992421,2cyclictest0-21swapper/208:11:002
217629699240,1cyclictest0-21swapper/208:49:592
4577091230,3ptp4l61490irq/134-eno1-TxRx-008:40:013
2176299992320,2cyclictest0-21swapper/312:35:153
2176296992320,2cyclictest0-21swapper/212:35:152
4577091220,3ptp4l61490irq/134-eno1-TxRx-007:54:563
2176296992118,2cyclictest0-21swapper/210:03:592
2176296991916,2cyclictest0-21swapper/207:51:002
2176296991816,1cyclictest0-21swapper/211:40:012
2176296991816,1cyclictest0-21swapper/211:40:012
2176296991714,2cyclictest0-21swapper/211:15:592
2176296991714,2cyclictest0-21swapper/210:58:592
21762969996,2cyclictest0-21swapper/207:38:002
21762969990,8cyclictest0-21swapper/209:42:592
21762969960,2cyclictest0-21swapper/207:10:022
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional