You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-07 - 16:02

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #4

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot4s.osadl.org (updated Mon Sep 07, 2026 12:44:06)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1174682994037,2cyclictest1212029-21kworker/u8:3+events_unbound07:55:181
1174682994036,3cyclictest1388587-21apt-get10:35:111
1174685993936,2cyclictest1388339-21kworker/u8:2+flush-259:010:40:212
1174694993834,3cyclictest1331231-21kworker/u8:3+flush-259:009:55:213
1174682993832,4cyclictest1180781-21apt-get07:15:121
1174685993730,5cyclictest1243066-21kworker/u8:3+flush-259:009:25:002
1174682993733,3cyclictest1367920-21apt-get10:15:111
1174680993730,5cyclictest1356441-21ntpq10:00:220
1174680993730,5cyclictest1315924-21diskstats09:25:140
1174685993629,5cyclictest335557-21systemd-journal09:41:172
1174680993630,4cyclictest1465971-21latency_hist11:50:010
1174685993531,3cyclictest1243066-21kworker/u8:3+flush-259:008:45:202
1174682993530,3cyclictest1248809-21kworker/u8:2+events_unbound09:10:181
1174694993429,4cyclictest1263947-21/usr/sbin/munin08:35:143
1174694993429,4cyclictest1263947-21/usr/sbin/munin08:35:143
1174685993431,2cyclictest1248809-21kworker/u8:2+events_unbound09:10:242
1174685993429,3cyclictest1424546-21kworker/u8:2+flush-259:011:50:202
1174682993329,3cyclictest1315521-21kworker/u8:2+flush-259:009:25:241
1174694993226,5cyclictest1336371-21cat09:45:013
1174680993221,9cyclictest1607760-21fwupd09:41:210
1174694993127,3cyclictest1248809-21kworker/u8:2+flush-259:008:40:243
1174685993127,3cyclictest1482170-21kworker/u8:3+flush-259:012:20:212
1174682993127,3cyclictest1429930-21kworker/u8:0+flush-259:011:55:251
1174680993124,5cyclictest1475850-21ntpq11:55:210
1174682993027,2cyclictest1243066-21kworker/u8:3+flush-259:009:20:261
1174685992922,5cyclictest335557-21systemd-journal08:35:002
1174682992925,3cyclictest1305409-21kworker/u8:1+events_unbound10:05:241
1174694992824,3cyclictest1248462-21/usr/sbin/munin08:20:153
1174685992824,3cyclictest1455617-21kworker/u8:1+flush-259:011:45:172
1174685992824,3cyclictest1403879-21kworker/u8:1+events_unbound11:05:242
1174685992824,3cyclictest1174212-21kworker/u8:2+events_unbound07:45:212
1174685992822,4cyclictest1206422-21latency_hist07:40:012
1174682992825,2cyclictest1429930-21kworker/u8:0+flush-259:011:15:251
1174685992723,3cyclictest1362736-21kworker/u8:4+flush-259:010:15:242
1174685992723,3cyclictest1212029-21kworker/u8:3+flush-259:008:05:002
1174685992723,3cyclictest1196119-21kworker/u8:1+flush-259:008:15:192
1174682992722,4cyclictest335557-21systemd-journal09:35:171
1174680992721,4cyclictest1232699-21latency_hist08:05:000
1174680992714,12cyclictest1383169-21sh10:30:000
1174694992622,2cyclictest1397619-21kworker/u8:3+flush-259:010:45:163
1174694992620,4cyclictest1217184-21latency_hist07:50:003
1174694992620,4cyclictest1211109-21ntpq07:40:203
1174685992623,2cyclictest1279259-21kworker/u8:0+flush-259:009:15:212
1174685992623,2cyclictest1248809-21kworker/u8:2+events_unbound08:25:002
1174685992622,3cyclictest1424546-21kworker/u8:2+flush-259:012:00:212
1174685992622,3cyclictest1388339-21kworker/u8:2+events_unbound10:49:192
1174685992622,3cyclictest1305409-21kworker/u8:1+events_unbound10:05:182
1174685992622,2cyclictest500-21systemd-logind11:15:002
1174685992621,4cyclictest1305409-21kworker/u8:1+events_unbound09:59:192
1174685992621,3cyclictest1403879-21kworker/u8:1+flush-259:011:05:002
1174680992619,5cyclictest1346154-21ntpq09:50:230
1174685992522,2cyclictest1331231-21kworker/u8:3+flush-259:010:30:172
1174685992521,3cyclictest1424546-21kworker/u8:2+events_unbound11:41:172
1174694992421,2cyclictest1388339-21kworker/u8:2+flush-259:010:40:253
1174694992418,4cyclictest1179217-21ntpq07:10:223
1174685992420,3cyclictest1424546-21kworker/u8:2+flush-259:012:15:112
1174682992420,3cyclictest1232931-21kworker/u8:0+flush-259:008:05:201
1174682992419,4cyclictest1409228-21/usr/sbin/munin10:55:131
1174680992418,4cyclictest335557-21systemd-journal07:55:000
1174680992418,4cyclictest1237875-21latency_hist08:10:000
1174694992320,2cyclictest1315521-21kworker/u8:2+events_unbound09:25:213
1174694992320,2cyclictest1227560-21kworker/u8:2+flush-259:008:00:183
1174694992319,3cyclictest335557-21systemd-journal10:35:003
1174694992319,3cyclictest1482170-21kworker/u8:3+flush-259:012:30:163
1174685992320,2cyclictest1175129-21kworker/u8:4+flush-259:007:30:192
1174685992319,3cyclictest1362736-21kworker/u8:4+events_unbound10:12:182
1174685992319,3cyclictest1248809-21kworker/u8:2+events_unbound09:05:132
1174682992319,3cyclictest1403879-21kworker/u8:1+events_unbound11:05:221
1174682992319,3cyclictest1243313-21apt-get08:15:121
1174682992319,3cyclictest1212280-21apt-get07:45:111
1174694992219,2cyclictest1482170-21kworker/u8:3+flush-259:012:20:213
1174694992218,3cyclictest1424546-21kworker/u8:2+flush-259:011:45:003
1174685992218,3cyclictest1175129-21kworker/u8:4+flush-259:007:25:002
1174682992218,3cyclictest1175129-21kworker/u8:4+events_unbound07:20:241
1174680992217,4cyclictest1409254-21apt-get10:55:100
1174680992217,4cyclictest1131435-21kworker/u8:1+flush-259:007:15:010
117468099221,18cyclictest1190915-21latency_hist07:25:010
1174680992210,10cyclictest1362837-21cpuspeed_turbos10:10:140
117468099220,2cyclictest1326351-21fschecks_time09:35:150
1174694992118,2cyclictest1424546-21kworker/u8:2+flush-259:012:25:223
1174694992118,2cyclictest1357322-21kworker/u8:2+flush-259:010:10:273
1174694992118,2cyclictest1196119-21kworker/u8:1+events_unbound08:10:153
1174694992118,2cyclictest1196119-21kworker/u8:1+events_unbound07:50:193
1174694992117,3cyclictest1331231-21kworker/u8:3+flush-259:010:25:203
1174694992116,4cyclictest1340871-21ntpq09:45:213
1174694992115,4cyclictest1279247-21latency_hist08:50:013
1174685992118,2cyclictest1372590-21kworker/u8:0+events_unbound10:25:322
1174685992118,2cyclictest1243066-21kworker/u8:3+events_unbound08:40:192
1174685992117,3cyclictest1482170-21kworker/u8:3+flush-259:012:31:212
1174685992117,3cyclictest1403879-21kworker/u8:1+flush-259:010:55:202
1174685992117,3cyclictest1174212-21kworker/u8:2+flush-259:007:20:012
1174685992113,6cyclictest1357303-21latency_hist10:05:012
1174682992118,2cyclictest1279259-21kworker/u8:0+flush-259:009:00:221
1174682992117,3cyclictest1372590-21kworker/u8:0+events_unbound10:50:241
1174682992117,3cyclictest1372590-21kworker/u8:0+events_unbound10:50:231
1174682992117,2cyclictest1-21systemd08:15:001
1174680992113,5cyclictest335557-21systemd-journal07:45:170
117468099210,5cyclictest1321219-21fschecks_time09:30:140
117468099210,18cyclictest1460895-21cat11:45:010
1174694992017,2cyclictest1471850-21apt-get11:55:123
1174694992017,2cyclictest1315521-21kworker/u8:2+events_unbound09:35:153
1174694992016,3cyclictest1429930-21kworker/u8:0+events_unbound11:15:233
1174685992017,2cyclictest1424546-21kworker/u8:2+flush-259:012:25:232
1174685992017,2cyclictest1372590-21kworker/u8:0+flush-259:010:50:202
1174685992017,2cyclictest1372590-21kworker/u8:0+flush-259:010:50:202
1174685992017,2cyclictest1243066-21kworker/u8:3+flush-259:008:25:252
1174685992016,3cyclictest1482170-21kworker/u8:3+events_unbound12:14:202
1174685992016,3cyclictest1372590-21kworker/u8:0+events_unbound10:35:162
1174685992016,3cyclictest1331231-21kworker/u8:3+flush-259:009:50:162
1174685992016,3cyclictest1279259-21kworker/u8:0+events_unbound09:02:182
1174682992017,2cyclictest1440080-21kworker/u8:1+flush-259:011:25:151
1174682992017,2cyclictest1279259-21kworker/u8:0+flush-259:008:55:151
1174682992016,3cyclictest1372590-21kworker/u8:0+events_unbound10:20:151
1174682992016,3cyclictest1336347-21gpgv09:45:011
1174682992016,3cyclictest1258817-21apt-get08:30:111
1174682992015,3cyclictest335557-21systemd-journal07:29:171
1174682992014,4cyclictest1383406-21/usr/sbin/munin10:30:201
117468099205,13cyclictest1449603-21nvmesmart_nvme011:30:210
117468099201,2cyclictest1242214-21ntpq08:10:220
1174680992010,9cyclictest1174676-21cyclictest10:35:190
117468099200,6cyclictest1518496-21awk12:40:000
117468099200,5cyclictest1512567-21/usr/sbin/munin12:30:220
117468099200,2cyclictest0-21swapper/012:25:200
117468099200,19cyclictest1370427-21grep10:15:170
1174694991917,1cyclictest1352864-21irqcore10:00:183
1174685991916,2cyclictest1284446-21idleruntime-cro08:55:002
1174685991915,3cyclictest1372590-21kworker/u8:0+events_unbound10:22:182
1174685991915,3cyclictest1175129-21kworker/u8:4+events_unbound07:12:202
1174682991916,2cyclictest1331231-21kworker/u8:3+flush-259:010:00:251
117468099192,15cyclictest1-21systemd11:55:010
117468099191,5cyclictest1404279-21/usr/sbin/munin10:50:190
117468099191,5cyclictest1404279-21/usr/sbin/munin10:50:180
117468099191,5cyclictest1196508-21cut07:30:120
117468099191,3cyclictest1491300-21ntpq12:10:200
117468099191,2cyclictest1402988-21ntpq10:45:210
117468099191,2cyclictest1377155-21ntpq10:20:220
117468099191,2cyclictest1278356-21ntpq08:45:200
117468099191,2cyclictest1273229-21ntpq08:40:230
117468099191,2cyclictest1252483-21ntpq08:20:200
117468099191,2cyclictest1247341-21ntpq08:15:210
117468099191,1cyclictest1314592-21ntpq09:20:210
117468099191,14cyclictest1295091-21apt-get09:05:120
117468099190,5cyclictest1225527-21grep07:55:180
117468099190,4cyclictest1348701-21tr09:55:160
117468099190,16cyclictest1305312-21latency_hist09:15:010
1174694991815,2cyclictest1388339-21kworker/u8:2+events_unbound10:39:183
1174694991814,3cyclictest1372590-21kworker/u8:0+events_unbound10:50:203
1174694991814,3cyclictest1372590-21kworker/u8:0+events_unbound10:50:193
1174694991813,3cyclictest1445258-21latency_hist11:30:003
1174685991815,2cyclictest1305409-21kworker/u8:1+flush-259:009:35:222
1174685991814,3cyclictest1429930-21kworker/u8:0+events_unbound11:20:192
1174685991814,3cyclictest1424546-21kworker/u8:2+flush-259:012:05:222
1174685991814,3cyclictest1305409-21kworker/u8:1+flush-259:009:35:002
1174685991814,3cyclictest1279260-21kworker/u8:4+events_unbound08:57:172
1174685991814,3cyclictest1196119-21kworker/u8:1+events_unbound08:05:092
1174682991815,2cyclictest1243066-21kworker/u8:3+flush-259:008:25:151
1174682991815,2cyclictest1175129-21kworker/u8:4+flush-259:007:10:231
1174682991812,4cyclictest1217428-21/usr/sbin/munin07:50:201
1174682991811,5cyclictest1497393-21awk12:20:001
117468099185,12cyclictest1492559-21cpuspeed_turbos12:15:120
117468099182,12cyclictest1429965-21apt-get11:15:130
117468099181,5cyclictest1482511-21/usr/sbin/munin12:05:170
117468099181,5cyclictest1264230-21/usr/sbin/munin08:35:140
117468099181,5cyclictest1264230-21/usr/sbin/munin08:35:140
117468099181,5cyclictest1207360-21/usr/sbin/munin07:40:140
117468099181,3cyclictest1206717-21wc07:40:010
117468099181,2cyclictest1481019-21ntpq12:00:200
117468099181,2cyclictest1283582-21ntpq08:50:230
117468099181,15cyclictest1428880-21ntpq11:10:240
117468099181,15cyclictest1195176-21ntpq07:25:210
117468099181,14cyclictest1450790-21cpuspeed_turbos11:35:120
117468099180,5cyclictest1424074-21/usr/sbin/munin11:05:250
117468099180,5cyclictest1336980-21cut09:45:120
117468099180,5cyclictest1294906-21ls09:05:010
117468099180,5cyclictest1258971-21df_inode08:30:130
117468099180,5cyclictest1185843-21latency_hist07:20:000
117468099180,4cyclictest1500375-21ps12:20:190
117468099180,4cyclictest1442163-21kthreadcore11:25:180
117468099180,4cyclictest1383654-21fschecks_time10:30:130
117468099180,4cyclictest1289640-21munin-run09:00:000
117468099180,16cyclictest1257783-21pluginstate08:25:220
1174694991714,2cyclictest1466428-21latency_hist11:50:023
1174694991714,2cyclictest1175129-21kworker/u8:4+flush-259:007:25:013
1174694991713,3cyclictest335557-21systemd-journal12:20:023
1174694991713,3cyclictest1279260-21kworker/u8:4+events_unbound08:58:243
1174694991712,4cyclictest1424546-21kworker/u8:2+events_unbound12:05:233
1174694991712,4cyclictest1325828-21latency_hist09:35:013
1174682991714,2cyclictest1429930-21kworker/u8:0+flush-259:011:20:201
1174682991714,2cyclictest1399334-21irqcore10:45:161
1174682991713,3cyclictest1424546-21kworker/u8:2+flush-259:012:05:001
1174682991711,4cyclictest1487057-21latency_hist12:10:011
117468099170,5cyclictest1357936-21ethtool10:05:150
117468099170,5cyclictest1305510-21tr09:15:120
117468099170,4cyclictest1435548-21ps11:20:150
117468099170,14cyclictest1414458-21chrt11:00:120
117468099170,14cyclictest1393854-21tr10:40:140
1174694991613,2cyclictest1243066-21kworker/u8:3+flush-259:008:30:163
1174694991611,4cyclictest1294826-21latency_hist09:05:013
1174694991610,4cyclictest335557-21systemd-journal11:35:013
1174694991610,4cyclictest1466635-21/usr/sbin/munin11:50:193
1174694991610,4cyclictest1361621-21ntpq10:05:213
1174685991613,2cyclictest1340862-21ntp_kernel_pll_09:45:212
1174685991613,2cyclictest1175129-21kworker/u8:4+events_unbound07:27:192
1174685991612,3cyclictest1429930-21kworker/u8:0+events_unbound11:55:492
1174685991612,3cyclictest1305409-21kworker/u8:1+events_unbound09:26:192
1174685991612,3cyclictest1196119-21kworker/u8:1+events_unbound07:54:202
1174682991613,2cyclictest1382245-21ntp_kernel_err10:25:201
1174682991613,2cyclictest1331231-21kworker/u8:3+flush-259:009:45:241
1174682991613,2cyclictest1227560-21kworker/u8:2+events_unbound08:00:131
1174682991612,3cyclictest335557-21systemd-journal12:25:571
1174682991612,3cyclictest1305409-21kworker/u8:1+events_unbound09:55:011
1174682991612,3cyclictest1248809-21kworker/u8:2+events_unbound08:20:181
1174682991612,2cyclictest0-21swapper/107:45:001
1174694991513,1cyclictest503-21tpm2-abrmd07:40:003
1174694991512,2cyclictest1372590-21kworker/u8:0+events_unbound10:20:193
1174694991512,2cyclictest1362736-21kworker/u8:4+flush-259:010:15:203
1174694991512,2cyclictest1279934-21irqcore08:50:183
1174694991512,2cyclictest1243066-21kworker/u8:3+flush-259:009:20:173
1174694991512,2cyclictest1243066-21kworker/u8:3+flush-259:008:30:003
1174685991512,2cyclictest1429930-21kworker/u8:0+events_unbound11:15:142
1174685991512,2cyclictest1424546-21kworker/u8:2+flush-259:011:30:192
1174685991511,3cyclictest1196119-21kworker/u8:1+events_unbound08:37:202
1174685991511,3cyclictest1196119-21kworker/u8:1+events_unbound08:37:202
1174682991512,2cyclictest1424546-21kworker/u8:2+events_unbound12:35:241
1174682991511,3cyclictest1174212-21kworker/u8:2+events_unbound07:38:181
1174682991510,3cyclictest1487323-21apt-get12:10:121
1174694991411,2cyclictest1482170-21kworker/u8:3+events_unbound12:35:173
1174694991411,2cyclictest1232931-21kworker/u8:0+events_unbound08:05:153
1174694991411,2cyclictest1174212-21kworker/u8:2+flush-259:007:25:253
1174694991411,1cyclictest0-21swapper/311:40:003
1174685991410,3cyclictest1196119-21kworker/u8:1+events_unbound07:44:192
1174685991410,3cyclictest1174443-21latency_hist07:10:002
1174682991412,1cyclictest0-21swapper/111:00:191
1174682991411,2cyclictest1461437-21irqcore11:45:181
1174682991411,2cyclictest1325828-21sh09:35:001
1174682991411,2cyclictest1196119-21kworker/u8:1+flush-259:008:45:211
117469499139,3cyclictest1403879-21kworker/u8:1+flush-259:010:56:073
117469499139,2cyclictest1403879-21kworker/u8:1+events_unbound11:05:193
1174694991311,2cyclictest1248809-21kworker/u8:2+flush-259:009:05:243
1174682991311,1cyclictest0-21swapper/110:45:001
1174682991310,2cyclictest1498148-21cpuspeed_turbos12:20:141
1174682991310,2cyclictest1455140-21unixbench_multi11:35:231
1174682991310,2cyclictest1425813-21kthreadcore11:10:181
117469499129,2cyclictest1481463-21unixbench_multi12:00:273
117469499129,2cyclictest1403879-21kworker/u8:1+flush-259:011:10:203
1174694991210,1cyclictest1248240-21turbostat08:20:003
117468599129,2cyclictest1429930-21kworker/u8:0+events_unbound11:28:172
117468599128,3cyclictest1446035-21kworker/u8:3+events_unbound11:38:402
117468299129,2cyclictest1357322-21kworker/u8:2+events_unbound10:10:221
117469499118,2cyclictest1300315-21cpuspeed_turbos09:10:133
117469499117,3cyclictest1403879-21kworker/u8:1+flush-259:011:00:193
117469499117,3cyclictest1175129-21kworker/u8:4+events_unbound07:15:213
117468599118,2cyclictest1513615-21cpuspeed_turbos12:35:122
117468599118,2cyclictest1196119-21kworker/u8:1+flush-259:008:10:452
117468299118,2cyclictest1508485-21cpuspeed_turbos12:30:121
117468299118,2cyclictest1175129-21kworker/u8:4+events_unbound07:30:211
117468299117,3cyclictest1196119-21kworker/u8:1+flush-259:008:41:021
117469499108,1cyclictest0-21swapper/309:50:233
117468299105,3cyclictest490-21dbus-daemon08:40:001
117468299105,3cyclictest490-21dbus-daemon08:40:001
11746829997,1cyclictest0-21swapper/111:30:171
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional