You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-04 - 16:53
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot6.osadl.org (updated Sun Jan 04, 2026 12:44:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2066794999080,7cyclictest2163337-21latency_hist12:10:001
2066794998378,4cyclictest2106502-21kworker/u8:0+flush-179:010:40:001
2066794998275,5cyclictest2061884-21kworker/u8:2+flush-179:008:20:001
2066794998069,8cyclictest2166770-21/usr/sbin/munin12:20:231
2066791997971,6cyclictest2156967-21latency_hist11:50:010
2066794997873,3cyclictest2168656-21kworker/u8:3+flush-179:012:30:261
2066794997467,5cyclictest2072160-21kworker/u8:0+flush-179:007:35:001
2066794997362,7cyclictest2116635-21kworker/u8:2+flush-179:009:50:191
2066791996857,8cyclictest2140999-21apt-get11:00:130
2066794996757,7cyclictest2164923-21latency_hist12:15:001
2066791996656,8cyclictest2099320-21/usr/sbin/munin08:50:240
2066791996547,16cyclictest2165466-21diskstats12:15:190
2066791996338,14cyclictest2066670-21latency_hist07:10:020
2066794996154,5cyclictest2132754-21kworker/u8:3+flush-179:010:45:231
2066794996153,6cyclictest2097237-21latency_hist08:45:001
2066791996158,2cyclictest0-21swapper/007:19:590
2066794996057,2cyclictest0-21swapper/110:55:591
2066791996033,17cyclictest2107041-21turbostat09:19:550
2066794995955,2cyclictest714-21Xorg11:34:581
2066794995952,5cyclictest2061884-21kworker/u8:2+events_unbound08:35:231
2066794995952,5cyclictest2061884-21kworker/u8:2+events_unbound08:35:231
2066794995951,6cyclictest2145483-21kworker/u8:0+flush-179:011:20:231
2066794995850,6cyclictest2172892-21latency_hist12:40:021
2066794995847,8cyclictest2121387-21latency_hist10:00:021
2066794995748,7cyclictest2081281-21/usr/sbin/munin07:55:291
2066791995750,6cyclictest2092173-21kworker/u8:1+flush-179:008:35:000
2066791995747,8cyclictest2089279-21apt-get08:20:130
2066795995653,2cyclictest0-21swapper/207:11:002
2066794995650,4cyclictest2097273-21kworker/u8:3+flush-179:008:55:251
2066794995649,5cyclictest2106502-21kworker/u8:0+flush-179:009:20:221
2066791995650,4cyclictest2158590-21kworker/u8:3+events_unbound12:00:170
2066791995650,4cyclictest2086849-21kworker/u8:0+flush-179:008:15:260
2066794995550,4cyclictest2106502-21kworker/u8:0+flush-179:010:25:231
2066794995543,11cyclictest2107069-21kworker/u8:2+flush-179:009:20:001
2066791995539,14cyclictest2106502-21kworker/u8:0+flush-179:010:15:260
2066791995445,7cyclictest2154000-21apt-get11:40:120
2066794995344,6cyclictest2098822-21latency_hist08:50:011
2066800995249,2cyclictest0-21swapper/308:44:593
2066795995249,2cyclictest0-21swapper/211:30:592
2066794995146,4cyclictest2061884-21kworker/u8:2+flush-179:007:10:241
206679199512,47cyclictest2129348-21turbostat10:29:560
2066794995045,4cyclictest2106502-21kworker/u8:0+events_unbound09:40:001
2066794995042,5cyclictest2136500-21kworker/u8:2+flush-179:010:50:221
2066794995041,7cyclictest2097273-21kworker/u8:3+events_unbound09:09:591
2066794994942,5cyclictest2077872-21latency_hist07:45:011
2066791994939,8cyclictest2123224-21apt-get10:05:120
2066794994837,8cyclictest2128004-21apt-get10:20:131
4577091470,13ptp4l441ktimers/307:10:013
2066794994741,5cyclictest2061884-21kworker/u8:2+flush-179:007:20:001
2066794994741,4cyclictest2061884-21kworker/u8:2+events_unbound07:20:261
2066794994710,33cyclictest2089279-21apt-get08:20:141
2066791994739,6cyclictest2090847-21/usr/sbin/munin08:25:170
2066791994737,8cyclictest2115272-21apt-get09:40:120
2066791994732,13cyclictest0-21swapper/011:15:580
206679199471,44cyclictest2110247-21awk09:25:000
2066791994639,6cyclictest2128929-21kworker/u8:2+flush-179:010:20:250
2066791994638,6cyclictest2103866-21latency_hist09:05:010
2066794994537,6cyclictest2061884-21kworker/u8:2+events_unbound08:10:171
2066794994535,7cyclictest2116635-21kworker/u8:2+events_unbound09:45:231
2066794994432,9cyclictest2123004-21kworker/u8:3+flush-179:010:10:001
2066791994437,5cyclictest2071480-21latency_hist07:25:010
2066791994436,6cyclictest2082906-21apt-get08:00:110
2066791994435,7cyclictest2078109-21/usr/sbin/munin07:45:240
2066791994435,6cyclictest2136500-21kworker/u8:2+flush-179:010:50:180
2066791994430,13cyclictest0-21swapper/009:35:590
2066791994429,13cyclictest2110876-21fschecks_time09:25:190
2066791994428,14cyclictest714-21Xorg07:59:590
2066794994337,4cyclictest1-21systemd07:50:011
2066794994333,7cyclictest2119807-21kworker/u8:1+flush-179:010:00:151
2066794994333,7cyclictest2119807-21kworker/u8:1+flush-179:010:00:141
2066794994333,6cyclictest0-21swapper/111:14:591
2066791994325,15cyclictest2097494-21apt-get08:45:150
206679199431,2cyclictest714-21Xorg10:31:000
2066794994236,5cyclictest2128929-21kworker/u8:2+flush-179:010:30:191
2066794994235,5cyclictest2092173-21kworker/u8:1+flush-179:008:35:001
2066794994234,6cyclictest2142334-21latency_hist11:05:011
2066794994234,5cyclictest2154278-21kworker/u8:2+flush-179:011:45:141
2066794994230,10cyclictest2113407-21latency_hist09:35:011
2066794994136,4cyclictest2103548-21kworker/u8:1+flush-179:009:40:171
2066794994136,3cyclictest266-21systemd-journal08:10:001
2066794994135,4cyclictest2072160-21kworker/u8:0+flush-179:007:25:231
2066791994132,7cyclictest2160150-21latency_hist12:00:010
2066791994127,13cyclictest2169794-21latency_hist12:30:000
206679199410,38cyclictest714-21Xorg12:11:590
206680099400,4cyclictest2085834-21turbostat08:14:553
206680099400,39cyclictest2172893-21turbostat12:40:003
2066794994035,4cyclictest2161788-21kworker/u8:2+events_unbound12:15:191
2066791994037,2cyclictest2126147-21cron10:15:000
2066791994036,3cyclictest2118196-21turbostat09:54:550
2066791994035,4cyclictest714-21Xorg12:31:580
2066791994034,5cyclictest2119781-21turbostat09:59:550
2066791994023,16cyclictest0-21swapper/012:05:140
206679199401,38cyclictest2135973-21perf10:45:000
2066800993934,4cyclictest2169719-21turbostat12:29:593
206680099390,37cyclictest2098838-21turbostat08:50:003
206679599390,37cyclictest0-21swapper/209:36:582
2066794993931,6cyclictest2158555-21latency_hist11:55:011
2066794993931,6cyclictest2152116-21kworker/u8:1+events_unbound11:35:251
2066791993933,4cyclictest266-21systemd-journal11:39:590
2066791993930,7cyclictest2061884-21kworker/u8:2+flush-179:007:10:220
206679199391,35cyclictest2095385-21apt-get08:40:030
206679199391,2cyclictest714-21Xorg09:11:580
206679199390,3cyclictest2113412-21munin-plugin-st09:35:000
206679199390,38cyclictest2168134-21awk12:25:010
206679199390,38cyclictest2122973-21cron10:05:000
206679199390,38cyclictest2122973-21cron10:04:590
2066800993832,5cyclictest2082637-21turbostat08:00:003
206680099380,35cyclictest0-21swapper/312:15:583
206679599380,35cyclictest0-21swapper/212:19:552
2066794993830,6cyclictest2158792-21/usr/sbin/munin11:55:201
2066794993828,5cyclictest0-21swapper/112:26:591
2066791993832,4cyclictest2168656-21kworker/u8:3+flush-179:012:35:250
2066795993734,2cyclictest0-21swapper/212:06:592
2066795993734,2cyclictest0-21swapper/209:51:592
206679599370,35cyclictest0-21swapper/209:28:592
2066794993732,4cyclictest2158590-21kworker/u8:3+flush-179:012:05:001
2066794993731,4cyclictest2061884-21kworker/u8:2+flush-179:007:36:001
2066794993727,6cyclictest0-21swapper/109:00:591
206679199370,36cyclictest0-21swapper/008:09:550
206680099360,35cyclictest0-21swapper/311:17:583
206680099360,35cyclictest0-21swapper/307:27:003
206680099360,1cyclictest0-21swapper/311:31:593
206680099360,1cyclictest0-21swapper/310:16:593
206679599360,1cyclictest0-21swapper/208:25:592
2066794993627,5cyclictest0-21swapper/110:10:591
2066791993632,3cyclictest2150348-21munin-run11:30:010
2066791993628,6cyclictest2081044-21latency_hist07:55:000
2066791993623,12cyclictest2071735-21apt-get07:25:110
2066800993532,2cyclictest0-21swapper/312:34:593
206680099350,1cyclictest0-21swapper/311:52:593
206680099350,1cyclictest0-21swapper/311:37:593
2066795993532,2cyclictest0-21swapper/211:22:592
2066795993532,2cyclictest0-21swapper/207:57:592
206679599350,1cyclictest0-21swapper/212:02:582
206679599350,1cyclictest0-21swapper/210:45:002
2066794993531,2cyclictest2107073-21systemd-run09:15:001
2066791993522,12cyclictest0-21swapper/011:10:230
4577091340,12ptp4l441ktimers/308:40:013
4577091340,12ptp4l441ktimers/308:40:013
2066800993432,1cyclictest0-21swapper/310:07:583
2066800993429,4cyclictest2077879-21turbostat07:45:003
2066795993431,2cyclictest0-21swapper/211:13:002
2066794993425,6cyclictest2106502-21kworker/u8:0+events_unbound10:40:191
206679199348,25cyclictest2105301-21unixbench-2d09:05:270
2066791993428,4cyclictest685-21snmpd07:35:000
2066791993418,12cyclictest0-21swapper/011:20:120
2066800993329,3cyclictest2163359-21turbostat12:10:013
2066795993331,1cyclictest0-21swapper/208:44:592
2066795993330,2cyclictest0-21swapper/212:39:592
2066795993330,2cyclictest0-21swapper/212:34:592
2066795993330,2cyclictest0-21swapper/208:34:552
2066794993330,2cyclictest714-21Xorg11:10:001
2066794993328,4cyclictest714-21Xorg08:50:591
2066794993328,4cyclictest2146604-21phc2sys-jitter11:15:231
2066791993326,5cyclictest266-21systemd-journal11:53:390
206679199331,30cyclictest0-21swapper/008:55:130
2066795993230,1cyclictest0-21swapper/209:45:002
206679599320,30cyclictest0-21swapper/210:33:582
206679599320,30cyclictest0-21swapper/207:48:592
2066794993227,4cyclictest2061884-21kworker/u8:2+flush-179:007:55:001
206679499321,29cyclictest0-21swapper/111:40:141
2066791993229,2cyclictest0-21swapper/011:10:000
2066791993228,3cyclictest2095593-21latency_hist08:40:010
2066791993228,3cyclictest2095593-21latency_hist08:40:010
206680099310,1cyclictest0-21swapper/309:06:593
2066795993128,2cyclictest0-21swapper/211:19:562
2066795993128,2cyclictest0-21swapper/209:46:002
2066791993125,4cyclictest0-21swapper/010:45:140
206679199311,28cyclictest0-21swapper/011:32:580
206679199310,5cyclictest714-21Xorg07:43:590
206679199310,30cyclictest0-21swapper/010:57:590
2066800993028,1cyclictest0-21swapper/307:17:593
2066800993027,2cyclictest0-21swapper/311:29:003
2066795993027,2cyclictest0-21swapper/211:35:592
2066795993027,2cyclictest0-21swapper/207:50:122
206679599300,28cyclictest0-21swapper/211:29:592
2066794993026,2cyclictest714-21Xorg08:27:591
2066794993024,4cyclictest2140788-21kworker/u8:2+flush-179:011:30:001
206679499300,5cyclictest714-21Xorg09:25:591
206679199306,22cyclictest2117326-21cat09:45:180
2066791993024,4cyclictest0-21swapper/007:39:590
4577091290,7ptp4l441ktimers/310:55:003
4577091290,7ptp4l441ktimers/310:35:003
4577091290,7ptp4l441ktimers/307:40:003
4577091290,6ptp4l441ktimers/308:10:003
2066800992927,1cyclictest0-21swapper/307:50:113
2066800992925,2cyclictest0-21swapper/311:55:153
206680099290,28cyclictest0-21swapper/307:20:143
206680099290,27cyclictest0-21swapper/311:00:143
2066795992926,2cyclictest0-21swapper/212:28:592
2066795992926,2cyclictest0-21swapper/212:11:002
2066795992926,2cyclictest0-21swapper/208:14:552
206679599290,27cyclictest0-21swapper/208:50:012
206679599290,27cyclictest0-21swapper/207:20:142
206679599290,1cyclictest0-21swapper/209:20:132
2066794992927,1cyclictest0-21swapper/108:04:581
2066791992910,16cyclictest2086080-21apt-get08:10:110
206679199290,28cyclictest0-21swapper/010:36:590
4577091280,7ptp4l61490irq/134-eno1-TxRx-009:35:003
4577091280,6ptp4l441ktimers/311:50:013
4577091280,6ptp4l441ktimers/310:05:003
4577091280,6ptp4l441ktimers/310:05:003
4577091280,6ptp4l441ktimers/309:00:013
2066800992826,1cyclictest0-21swapper/310:55:123
2066800992826,1cyclictest0-21swapper/307:30:113
2066800992825,2cyclictest0-21swapper/309:41:593
2066800992825,2cyclictest0-21swapper/309:25:153
2066800992825,2cyclictest0-21swapper/308:15:153
206680099280,27cyclictest0-21swapper/311:20:133
206680099280,27cyclictest0-21swapper/310:25:133
206680099280,27cyclictest0-21swapper/309:20:133
206680099280,26cyclictest0-21swapper/308:50:023
2066795992826,1cyclictest0-21swapper/210:50:142
2066795992826,1cyclictest0-21swapper/210:14:592
2066795992825,2cyclictest0-21swapper/212:21:592
2066795992825,2cyclictest0-21swapper/210:55:132
2066795992825,2cyclictest0-21swapper/209:58:592
2066795992825,2cyclictest0-21swapper/208:15:152
206679599280,2cyclictest0-21swapper/210:16:592
206679599280,27cyclictest0-21swapper/211:00:152
206679599280,26cyclictest0-21swapper/211:45:142
206679599280,26cyclictest0-21swapper/210:25:112
206679599280,26cyclictest0-21swapper/207:40:132
4577091270,6ptp4l61490irq/134-eno1-TxRx-009:20:003
4577091270,6ptp4l61490irq/134-eno1-TxRx-009:15:003
4577091270,6ptp4l441ktimers/311:45:003
4577091270,6ptp4l441ktimers/309:40:003
4577091270,5ptp4l441ktimers/308:35:013
2066800992725,1cyclictest0-21swapper/307:47:003
2066800992724,2cyclictest0-21swapper/310:38:593
206680099270,1cyclictest0-21swapper/309:48:593
4577091260,6ptp4l61490irq/134-eno1-TxRx-009:59:563
4577091260,5ptp4l61490irq/134-eno1-TxRx-012:25:013
4577091260,5ptp4l61490irq/134-eno1-TxRx-012:04:573
4577091260,5ptp4l441ktimers/308:25:003
2066800992624,1cyclictest0-21swapper/311:12:003
2066800992624,1cyclictest0-21swapper/310:48:593
2066800992621,4cyclictest2084245-21turbostat08:05:003
206680099260,3cyclictest2119781-21turbostat09:54:593
2066795992623,2cyclictest0-21swapper/211:44:582
2066795992623,2cyclictest0-21swapper/210:38:592
2066795992623,2cyclictest0-21swapper/208:59:552
2066795992623,2cyclictest0-21swapper/207:15:232
2066795992622,2cyclictest0-21swapper/208:21:592
206679599260,2cyclictest0-21swapper/210:06:592
206679599260,24cyclictest0-21swapper/208:35:592
206679599260,24cyclictest0-21swapper/208:35:592
206679599260,24cyclictest0-21swapper/208:05:352
206679599260,24cyclictest0-21swapper/208:02:132
206679599260,24cyclictest0-21swapper/207:38:462
206679599260,24cyclictest0-21swapper/207:25:182
2066794992620,4cyclictest0-21swapper/107:10:011
206679499260,25cyclictest0-21swapper/110:18:581
4577091250,5ptp4l441ktimers/307:14:553
4577091250,4ptp4l441ktimers/311:09:563
206680099250,24cyclictest0-21swapper/310:42:593
2066795992523,1cyclictest0-21swapper/210:04:592
2066795992523,1cyclictest0-21swapper/210:04:592
2066795992522,2cyclictest0-21swapper/211:53:002
2066795992522,2cyclictest0-21swapper/209:00:492
2066795992522,2cyclictest0-21swapper/207:30:172
4577091240,4ptp4l441ktimers/310:24:553
4577091240,4ptp4l441ktimers/308:29:553
2066795992421,2cyclictest0-21swapper/209:16:072
2066795992421,2cyclictest0-21swapper/208:49:142
2066795992118,2cyclictest0-21swapper/211:59:582
2066795992017,2cyclictest0-21swapper/209:14:552
2066795992017,2cyclictest0-21swapper/209:06:592
2066800991715,1cyclictest0-21swapper/310:14:553
2066800991715,1cyclictest0-21swapper/309:02:283
4577091150,3ptp4l441ktimers/312:12:563
2066795991412,1cyclictest0-21swapper/210:47:582
20667959990,7cyclictest0-21swapper/209:30:192
20667959985,2cyclictest0-21swapper/210:20:332
20667959965,1cyclictest0-21swapper/211:08:592
20667959930,2cyclictest0-21swapper/207:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional