You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-16 - 03:45

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Tue Jun 16, 2026 00:43:30)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1284955995948,7cyclictest1427483-21cups-browsed00:15:302
1284954995243,6cyclictest1427483-21cups-browsed00:07:471
1284955994843,2cyclictest0-21swapper/221:15:262
1284953994828,13cyclictest151ktimers/020:50:300
1284953994635,5cyclictest0-21swapper/022:50:260
128495399452,38cyclictest1331454-21ssh21:25:280
1284955994436,5cyclictest439-21systemd-logind20:20:012
1284955994316,25cyclictest351ktimers/221:40:342
128495499434,5cyclictest171rcu_preempt22:30:291
1284955994234,5cyclictest265-21systemd-journal21:05:012
1284954994235,4cyclictest1001-21mta-sts-daemon19:55:331
1284954994234,5cyclictest1389847-21cron23:00:011
1284954994234,5cyclictest1364828-21cron22:20:001
1284953994228,12cyclictest1320937-21diskmemload21:30:330
1284953994218,16cyclictest151ktimers/019:15:280
1284955994133,5cyclictest1364884-21systemd-run22:20:012
1284955994131,7cyclictest1346108-21ssh21:50:012
1284954994133,5cyclictest421-21dbus-daemon00:00:031
1284953994131,5cyclictest151ktimers/023:45:330
1284953994130,6cyclictest151ktimers/023:00:280
128495399412,33cyclictest3759903-21cups-browsed21:00:250
1284955994027,6cyclictest1002-21mta-sts-daemon22:10:282
1284954994032,4cyclictest0-21swapper/123:30:321
1284953994031,4cyclictest1365294-21aten_r2power_po22:20:170
1284953994021,14cyclictest12650irq/32-eth023:05:290
1284955993930,5cyclictest1411755-21systemd-run23:35:012
1284954993928,7cyclictest1001-21mta-sts-daemon21:55:251
1284953993933,3cyclictest0-21swapper/022:45:330
1284953993932,5cyclictest1427387-21unin-run00:00:020
1284953993931,4cyclictest0-21swapper/022:55:270
128495599383,31cyclictest1387765-21ssh22:55:292
1284954993831,4cyclictest1367966-21cron22:25:001
1284954993831,4cyclictest1324086-21cron21:15:011
1284954993831,4cyclictest1287858-21unixbench_singl19:15:381
1284954993830,5cyclictest1316428-21debian-sa120:55:011
1284954993829,5cyclictest1305937-21munin-plugin-st20:20:011
1284953993832,3cyclictest0-21swapper/021:55:240
1284953993830,5cyclictest1372285-21proc_pri22:30:330
1284953993829,6cyclictest1409721-21ssh23:30:320
128495599374,28cyclictest1419053-21ssh23:45:322
128495599373,30cyclictest1378384-21ssh22:40:292
1284955993729,5cyclictest265-21systemd-journal19:15:012
1284955993729,5cyclictest1322565-21unixbench_singl21:10:382
1284955993729,5cyclictest1317913-21cron21:00:012
1284955993728,5cyclictest1-21systemd00:40:022
1284955993727,8cyclictest1315737-21needreboot20:50:232
128495499373,25cyclictest1340984-21ssh21:40:371
1284954993725,9cyclictest1450813-21unixbench_multi00:35:421
128495499372,28cyclictest1359650-21ssh22:10:281
1284953993728,3cyclictest151ktimers/020:20:250
1284955993629,3cyclictest0-21swapper/223:35:282
1284955993627,6cyclictest420-21avahi-daemon23:01:312
1284955993627,6cyclictest1396102-21grep23:10:012
1284955993625,7cyclictest3759900-21cupsd22:35:162
1284955993625,7cyclictest1353254-21needreboot22:00:212
128495499363,25cyclictest1444111-21ssh00:25:311
1284954993629,4cyclictest1424200-21cron23:55:011
1284954993628,5cyclictest420-21avahi-daemon23:13:381
1284954993628,5cyclictest1400824-21unixbench_singl23:15:381
128495499361,25cyclictest1331491-21ssh21:25:301
1284953993625,8cyclictest3759900-21cupsd20:15:260
1284953993618,11cyclictest151ktimers/019:30:240
1284955993528,4cyclictest421-21dbus-daemon20:05:012
1284955993527,5cyclictest1425769-21tail23:55:372
1284955993527,5cyclictest1405601-21latency_hist23:25:022
128495599352,24cyclictest1347136-21ssh21:50:292
1284955993514,17cyclictest351ktimers/222:20:292
1284954993528,4cyclictest1347656-21tail21:50:381
1284954993523,9cyclictest1438158-21timerandwakeup00:15:411
128495399353,24cyclictest665-21snmpd19:55:260
128495599343,25cyclictest1356547-21ssh22:05:302
128495599343,25cyclictest1356547-21ssh22:05:302
1284955993426,5cyclictest1399222-21munin-plugin-st23:15:012
1284955993426,5cyclictest1292442-21munin-plugin-st19:35:002
1284955993425,4cyclictest0-21swapper/200:20:282
1284954993426,5cyclictest1393096-21date23:05:021
1284953993428,4cyclictest1416421-21unixbench_multi23:40:360
1284953993426,5cyclictest1338360-21unixbench_singl21:35:390
1284953993424,6cyclictest1364875-21kworker/u8:10+nfsiod22:35:250
128495599333,6cyclictest171rcu_preempt22:30:292
128495599333,24cyclictest1337889-21sh21:35:332
1284955993326,4cyclictest1328826-21unixbench_multi21:20:382
1284955993325,5cyclictest1303468-21fschecks_time20:10:252
1284955993325,5cyclictest1289458-21ls19:25:012
1284955993322,8cyclictest1334629-21ntp_offset21:30:292
128495499332,5cyclictest171rcu_preempt21:30:241
1284954993325,5cyclictest265-21systemd-journal22:40:011
1284954993325,5cyclictest1285465-21fschecks_time19:10:191
1284954993324,6cyclictest3759903-21cups-browsed22:54:111
128495499332,22cyclictest1381495-21ssh22:45:281
128495499331,23cyclictest1353407-21ssh22:00:271
1284953993327,3cyclictest0-21swapper/022:20:010
128495399332,25cyclictest1400404-21ssh23:15:330
1284953993317,12cyclictest12650irq/32-eth020:35:270
128495399331,28cyclictest0-21swapper/000:25:260
1284955993225,4cyclictest1422125-21ntp_kernel_pll_23:50:272
1284955993225,4cyclictest1369164-21proc_pri22:25:332
1284955993224,5cyclictest1385179-21unixbench_multi22:50:372
1284955993222,7cyclictest1314573-21sshd20:45:342
1284955993222,5cyclictest0-21swapper/200:30:262
1284954993226,3cyclictest1371123-21systemd-run22:30:011
1284954993224,3cyclictest0-21swapper/123:35:181
128495499321,7cyclictest171rcu_preempt23:45:301
1284953993226,4cyclictest1424200-21cron23:55:010
1284953993226,4cyclictest1412583-21missed_timers23:35:230
1284953993226,4cyclictest1000-21mta-sts-daemon21:17:410
1284953993224,3cyclictest0-21swapper/022:00:260
1284953993222,7cyclictest1450114-21missed_timers00:35:270
1284953993219,2cyclictest0-21swapper/023:20:160
1284953993214,5cyclictest485-21in:imuxsock19:40:340
1284955993124,4cyclictest1431649-21ssh00:05:332
1284955993124,4cyclictest1332012-21grep21:25:392
1284955993124,4cyclictest1302094-21kernelversion20:05:242
1284955993123,5cyclictest1400846-21sshd23:15:382
1284955993121,8cyclictest1296823-21tail19:45:372
1284954993124,4cyclictest1352585-21kworker/u8:4-rpciod22:05:371
1284954993124,4cyclictest1352585-21kworker/u8:4-rpciod22:05:371
1284954993124,4cyclictest1002-21mta-sts-daemon23:25:021
1284954993124,3cyclictest0-21swapper/123:40:361
1284954993123,5cyclictest421-21dbus-daemon20:45:011
1284954993121,7cyclictest1449374-21latency_hist00:35:031
1284953993124,4cyclictest1361707-21cron22:15:000
1284953993124,3cyclictest0-21swapper/021:20:360
1284953993123,6cyclictest1378304-21needreboot22:40:260
1284955993024,3cyclictest0-21swapper/219:40:012
1284955993024,3cyclictest0-21swapper/219:25:332
1284955993024,3cyclictest0-21swapper/219:25:332
1284955993024,3cyclictest0-21swapper/219:20:012
1284955993020,7cyclictest1428741-21switchtime00:00:382
1284955993020,7cyclictest1428741-21switchtime00:00:382
128495499302,5cyclictest171rcu_preempt19:35:261
1284954993024,3cyclictest0-21swapper/122:43:381
128495499302,22cyclictest1440969-21ssh00:20:311
1284954993021,7cyclictest1325015-21needreboot21:15:241
128495399308,17cyclictest427-21polkitd21:10:310
1284953993025,3cyclictest1341413-21timerwakeupswit21:40:490
1284953993023,4cyclictest0-21swapper/000:30:140
1284953993014,11cyclictest12650irq/32-eth022:05:330
1284953993014,11cyclictest12650irq/32-eth022:05:330
128495599293,21cyclictest1416529-21sshd23:40:382
128495599293,19cyclictest1434621-21ssh00:10:262
1284955992924,2cyclictest0-21swapper/220:00:012
1284955992923,3cyclictest0-21swapper/219:55:012
1284955992921,5cyclictest1309879-21ntp_offset20:30:282
1284955992921,3cyclictest0-21swapper/222:50:012
128495499294,14cyclictest1428389-21ssh00:00:281
128495499294,14cyclictest1428389-21ssh00:00:281
1284954992922,3cyclictest0-21swapper/121:40:021
128495499292,20cyclictest1394118-21ssh23:05:331
1284954992921,5cyclictest1003-21mta-sts-daemon19:45:211
1284954992920,6cyclictest443-21gpm20:30:361
1284954992920,6cyclictest265-21systemd-journal20:10:011
1284954992920,3cyclictest1000-21mta-sts-daemon20:10:321
128495399295,15cyclictest428-21mta-sts-daemon22:25:250
1284953992923,4cyclictest1300461-21fschecks_count20:00:190
1284953992921,6cyclictest1343933-21ntp_kernel_err21:45:270
1284953992921,6cyclictest1285459-21fschecks_count19:10:190
128495599282,21cyclictest1444042-21ssh00:25:272
1284954992821,4cyclictest1317967-21systemd21:00:021
1284954992820,5cyclictest1319367-21unixbench_singl21:00:371
1284954992816,9cyclictest1328548-21sh21:20:351
128495399285,14cyclictest428-21mta-sts-daemon20:30:250
1284953992822,3cyclictest0-21swapper/000:05:200
1284953992821,5cyclictest1346711-21/usr/sbin/munin21:50:200
1284953992820,6cyclictest1441440-21sh00:20:390
1284953992818,8cyclictest0-21swapper/023:15:010
1284953992818,6cyclictest12650irq/32-eth000:15:370
1284953992814,10cyclictest12650irq/32-eth023:25:260
128495699274,6cyclictest0-21swapper/319:15:253
128495599274,16cyclictest428-21mta-sts-daemon19:40:312
128495499279,15cyclictest1307209-21sed20:20:371
128495499274,16cyclictest1406531-21ssh23:25:281
1284954992720,4cyclictest1435170-21unixbench-2d00:10:391
1284954992720,4cyclictest1297266-21aten_r2power_fr19:50:151
1284954992720,4cyclictest1295381-21unixbench_singl19:40:411
1284954992719,5cyclictest420-21avahi-daemon19:22:011
1284954992719,3cyclictest0-21swapper/121:45:231
1284954992715,5cyclictest1308937-21latency_hist20:30:021
1284954992715,5cyclictest1308937-21latency_hist20:30:021
1284953992722,3cyclictest151ktimers/020:25:250
1284953992722,3cyclictest151ktimers/020:25:250
1284953992722,2cyclictest0-21swapper/019:50:010
128495399271,21cyclictest1434713-21ntpq00:10:300
1284955992620,3cyclictest0-21swapper/221:55:372
1284955992619,4cyclictest1003-21mta-sts-daemon21:06:402
1284955992619,3cyclictest0-21swapper/223:25:292
128495599261,6cyclictest171rcu_preempt20:35:262
1284954992621,2cyclictest0-21swapper/120:40:001
1284954992617,6cyclictest1290519-21cat19:25:331
1284954992617,6cyclictest1290519-21cat19:25:331
1284953992620,4cyclictest1313375-21sed20:40:400
1284953992618,6cyclictest1320135-21latency21:05:210
1284953992617,6cyclictest0-21swapper/019:40:020
1284953992617,5cyclictest0-21swapper/020:10:010
128495399261,21cyclictest665-21snmpd19:50:290
128495699253,6cyclictest0-21swapper/322:45:293
1284955992520,2cyclictest0-21swapper/219:10:012
1284955992518,4cyclictest1307472-21systemd-run20:25:012
1284954992520,2cyclictest0-21swapper/119:35:001
1284954992519,3cyclictest1269522-21kworker/u8:8-xprtiod21:05:381
1284953992515,7cyclictest12650irq/32-eth019:25:280
1284953992515,7cyclictest12650irq/32-eth019:25:280
128495699243,3cyclictest0-21swapper/322:35:253
128495699242,8cyclictest0-21swapper/323:20:013
1284955992417,4cyclictest1312470-21fschecks_time20:40:192
1284954992415,7cyclictest1284910-21cut19:10:021
1284953992416,6cyclictest1289293-21unixbench-2d19:20:370
1284953992413,9cyclictest0-21swapper/000:00:380
1284953992413,9cyclictest0-21swapper/000:00:380
128495699233,5cyclictest0-21swapper/321:15:273
128495699231,6cyclictest0-21swapper/300:15:243
128495699231,10cyclictest0-21swapper/322:40:303
128495699221,8cyclictest0-21swapper/323:35:213
128495599222,15cyclictest1308373-21ntpq20:25:292
128495599222,15cyclictest1308373-21ntpq20:25:292
1284954992213,6cyclictest1301438-21cron20:05:011
128495399221,16cyclictest1314366-21ntpq20:45:270
128495399220,9cyclictest1303448-21fschecks_count20:10:240
128495699212,5cyclictest0-21swapper/323:10:273
128495699212,5cyclictest0-21swapper/321:35:333
1284953992116,3cyclictest1316947-21cut20:55:200
128495699203,6cyclictest0-21swapper/321:50:243
128495699202,7cyclictest0-21swapper/300:25:143
128495699202,5cyclictest0-21swapper/322:10:023
128495699202,5cyclictest0-21swapper/322:10:023
1284954992011,6cyclictest1314804-21grep20:45:361
128495399208,8cyclictest421-21dbus-daemon19:10:010
128495699192,9cyclictest0-21swapper/321:33:463
128495699192,7cyclictest0-21swapper/322:55:273
128495699182,8cyclictest0-21swapper/322:25:263
128495699173,8cyclictest0-21swapper/321:25:393
128495699163,7cyclictest0-21swapper/300:05:323
128495699162,8cyclictest0-21swapper/322:20:283
128495699162,8cyclictest0-21swapper/321:40:333
128495699162,7cyclictest0-21swapper/319:30:233
128495699162,6cyclictest0-21swapper/320:30:243
128495699161,9cyclictest0-21swapper/323:45:343
128495699161,8cyclictest0-21swapper/322:30:253
128495699152,8cyclictest0-21swapper/323:30:293
128495699152,8cyclictest0-21swapper/322:15:373
128495699151,8cyclictest0-21swapper/300:35:323
128495699151,8cyclictest0-21swapper/300:20:263
128495699151,8cyclictest0-21swapper/300:00:283
128495699151,8cyclictest0-21swapper/300:00:283
128495699144,7cyclictest0-21swapper/300:10:263
128495699143,7cyclictest0-21swapper/321:55:233
128495699143,6cyclictest0-21swapper/320:25:313
128495699143,6cyclictest0-21swapper/320:25:313
128495699141,9cyclictest0-21swapper/321:20:193
128495699141,8cyclictest0-21swapper/323:55:203
128495699141,8cyclictest0-21swapper/323:00:213
128495699141,7cyclictest0-21swapper/323:40:203
128495699141,6cyclictest0-21swapper/320:00:253
128495699132,7cyclictest0-21swapper/323:25:303
128495699132,7cyclictest0-21swapper/320:05:323
128495699132,6cyclictest0-21swapper/320:15:263
128495699132,5cyclictest0-21swapper/319:35:253
128495699131,7cyclictest0-21swapper/323:20:253
128495699131,7cyclictest0-21swapper/321:05:253
128495699131,6cyclictest0-21swapper/319:40:243
128495699131,6cyclictest0-21swapper/319:10:273
128495699124,5cyclictest0-21swapper/321:10:263
128495699122,7cyclictest0-21swapper/323:50:143
128495699122,6cyclictest0-21swapper/321:45:193
128495699121,7cyclictest0-21swapper/322:10:173
128495699114,5cyclictest0-21swapper/323:05:333
128495699114,5cyclictest0-21swapper/322:50:153
128495699113,6cyclictest0-21swapper/322:00:183
128495699111,5cyclictest0-21swapper/320:10:183
128495699103,3cyclictest0-21swapper/319:20:303
128495699102,6cyclictest0-21swapper/300:30:183
128495699101,5cyclictest0-21swapper/320:50:033
128495699101,5cyclictest0-21swapper/320:20:163
128495699101,5cyclictest0-21swapper/320:00:033
12849569993,4cyclictest0-21swapper/319:50:153
12849569992,6cyclictest0-21swapper/321:00:253
12849569992,5cyclictest0-21swapper/320:55:263
12849569992,5cyclictest0-21swapper/320:35:263
12849569992,5cyclictest0-21swapper/319:25:193
12849569992,5cyclictest0-21swapper/319:25:193
12849569992,4cyclictest0-21swapper/319:45:153
12849569991,7cyclictest0-21swapper/320:50:263
12849569991,6cyclictest0-21swapper/319:10:013
12849569981,5cyclictest0-21swapper/320:40:253
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional