You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-16 - 10:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Tue Dec 16, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
15732321314,4sleep00-21swapper/019:08:350
13882321306,5sleep10-21swapper/119:06:121
16222317303,4sleep20-21swapper/219:09:132
1951993160,315cyclictest8494-21kworker/u16:0+efi_rts_wq19:10:111
15862316309,5sleep30-21swapper/319:08:453
1951993130,312cyclictest8494-21kworker/u16:0+efi_rts_wq19:20:081
1953993120,311cyclictest8129-21kworker/u16:3+efi_rts_wq22:25:103
1950993110,310cyclictest8496-21kworker/u16:4+efi_rts_wq19:49:570
1950993090,308cyclictest18365-21kworker/u16:1+efi_rts_wq00:30:490
1953993080,307cyclictest25195-21kworker/u16:0+efi_rts_wq20:05:103
1951993080,307cyclictest8494-21kworker/u16:0+efi_rts_wq19:15:111
1951993080,307cyclictest3687-21kworker/u16:0+efi_rts_wq23:40:111
1950993080,307cyclictest8129-21kworker/u16:3+efi_rts_wq22:55:120
1950993080,307cyclictest30651-21kworker/u16:2+efi_rts_wq00:00:120
1951993060,305cyclictest31788-21kworker/u16:2+efi_rts_wq21:05:101
1951993030,302cyclictest18365-21kworker/u16:1+efi_rts_wq00:25:111
1953993020,301cyclictest3467-21kworker/u16:0+efi_rts_wq00:15:103
1952993000,299cyclictest13630-21kworker/u16:0+efi_rts_wq21:40:112
1952992980,297cyclictest7628-21kworker/u16:3+efi_rts_wq20:55:102
1950992980,297cyclictest4036-21kworker/u16:2+efi_rts_wq22:15:250
1953992970,296cyclictest13630-21kworker/u16:0+efi_rts_wq20:55:113
1950992970,296cyclictest8129-21kworker/u16:3+efi_rts_wq22:40:300
1950992960,295cyclictest4036-21kworker/u16:2+efi_rts_wq21:55:100
1953992950,294cyclictest25195-21kworker/u16:0+efi_rts_wq20:30:043
1952992940,293cyclictest25195-21kworker/u16:0+efi_rts_wq20:45:102
1951992940,293cyclictest30651-21kworker/u16:2+efi_rts_wq00:35:501
1951992930,292cyclictest791-21kworker/u16:1+efi_rts_wq23:00:101
1951992930,292cyclictest31788-21kworker/u16:2+efi_rts_wq21:30:101
1953992920,291cyclictest8496-21kworker/u16:4+efi_rts_wq19:24:523
1953992920,291cyclictest8129-21kworker/u16:3+efi_rts_wq22:40:103
1952992920,291cyclictest7628-21kworker/u16:3+efi_rts_wq20:40:102
1951992920,291cyclictest8496-21kworker/u16:4+efi_rts_wq20:20:101
1950992920,291cyclictest16711-21kworker/u16:1+efi_rts_wq21:35:080
1953992910,290cyclictest19743-21kworker/u16:2+efi_rts_wq19:45:103
1951992910,290cyclictest3687-21kworker/u16:0+efi_rts_wq23:55:111
1951992910,288cyclictest8129-21kworker/u16:3+efi_rts_wq22:15:101
1952992900,289cyclictest8129-21kworker/u16:3+efi_rts_wq22:10:122
1953992890,288cyclictest13630-21kworker/u16:0+efi_rts_wq21:45:203
1952992890,288cyclictest13630-21kworker/u16:0+efi_rts_wq21:00:112
1951992880,287cyclictest19743-21kworker/u16:2+efi_rts_wq19:55:101
1952992870,286cyclictest31788-21kworker/u16:2+efi_rts_wq21:05:122
1950992870,286cyclictest25195-21kworker/u16:0+efi_rts_wq20:10:110
1951992860,285cyclictest13630-21kworker/u16:0+efi_rts_wq20:55:101
1953992850,284cyclictest8129-21kworker/u16:3+efi_rts_wq22:15:103
1952992830,282cyclictest16711-21kworker/u16:1+efi_rts_wq21:25:112
1951992830,282cyclictest25195-21kworker/u16:0+efi_rts_wq20:25:031
1952992810,280cyclictest17028-21kworker/u16:1+efi_rts_wq20:15:102
1953992800,279cyclictest14797-21kworker/u16:1+efi_rts_wq22:30:113
1953992800,276cyclictest3687-21kworker/u16:0+efi_rts_wq23:40:413
1952992790,278cyclictest18365-21kworker/u16:1+efi_rts_wq00:30:082
1951992790,278cyclictest8129-21kworker/u16:3+efi_rts_wq23:10:091
1950992780,277cyclictest8129-21kworker/u16:3+efi_rts_wq00:05:450
1950992780,277cyclictest31788-21kworker/u16:2+efi_rts_wq21:20:120
1953992770,276cyclictest19743-21kworker/u16:2+efi_rts_wq19:30:113
1953992760,275cyclictest16711-21kworker/u16:1+efi_rts_wq21:35:093
1953992750,274cyclictest30651-21kworker/u16:2+efi_rts_wq23:50:423
1953992690,268cyclictest8129-21kworker/u16:3+efi_rts_wq22:20:103
1953992690,268cyclictest30651-21kworker/u16:2+efi_rts_wq00:35:103
1953992690,268cyclictest1555-21kworker/u16:1+efi_rts_wq20:25:113
1951992680,267cyclictest18365-21kworker/u16:1+efi_rts_wq00:20:471
1953992660,265cyclictest25195-21kworker/u16:0+efi_rts_wq20:35:113
1953992640,263cyclictest3687-21kworker/u16:0+efi_rts_wq23:45:103
1950992640,263cyclictest19743-21kworker/u16:2+efi_rts_wq19:54:570
1953992620,261cyclictest1670-21kworker/u16:1+efi_rts_wq19:15:013
1952992610,260cyclictest19743-21kworker/u16:2+efi_rts_wq19:34:542
1951992590,258cyclictest18365-21kworker/u16:1+efi_rts_wq00:10:101
1951992590,258cyclictest18365-21kworker/u16:1+efi_rts_wq00:10:101
1950992580,257cyclictest791-21kworker/u16:1+efi_rts_wq23:20:100
1951992570,254cyclictest16711-21kworker/u16:1+efi_rts_wq22:00:101
1950992570,255cyclictest3687-21kworker/u16:0+efi_rts_wq23:15:120
1952992560,253cyclictest19743-21kworker/u16:2+efi_rts_wq20:00:102
1951992560,255cyclictest16711-21kworker/u16:1+efi_rts_wq21:50:111
1950992550,254cyclictest3687-21kworker/u16:0+efi_rts_wq23:30:100
1951992540,253cyclictest19743-21kworker/u16:2+efi_rts_wq19:35:101
1950992530,252cyclictest3687-21kworker/u16:0+efi_rts_wq23:35:110
1951992520,251cyclictest31788-21kworker/u16:2+efi_rts_wq21:00:111
1951992520,251cyclictest25195-21kworker/u16:0+efi_rts_wq20:10:001
1950992510,250cyclictest8494-21kworker/u16:0+efi_rts_wq19:39:550
1953992500,249cyclictest31788-21kworker/u16:2+efi_rts_wq21:15:133
1952992480,247cyclictest30651-21kworker/u16:2+efi_rts_wq00:20:122
1953992460,245cyclictest8129-21kworker/u16:3+efi_rts_wq22:55:113
1952992460,245cyclictest19743-21kworker/u16:2+efi_rts_wq19:55:102
1953992420,240cyclictest30651-21kworker/u16:2+efi_rts_wq23:05:353
1950992400,239cyclictest4036-21kworker/u16:2+efi_rts_wq21:50:210
1952992380,235cyclictest19743-21kworker/u16:2+efi_rts_wq19:40:102
1950992380,237cyclictest16711-21kworker/u16:1+efi_rts_wq22:00:230
1950992380,237cyclictest13630-21kworker/u16:0+efi_rts_wq21:25:160
1953992370,236cyclictest31788-21kworker/u16:2+efi_rts_wq21:20:123
1952992330,232cyclictest11238-21kworker/u16:1+efi_rts_wq20:50:092
1951992320,231cyclictest30651-21kworker/u16:2+efi_rts_wq23:25:111
1953992300,229cyclictest13630-21kworker/u16:0+efi_rts_wq21:10:123
1951992280,227cyclictest8129-21kworker/u16:3+efi_rts_wq00:05:111
1953992270,226cyclictest28117-21kworker/u16:0+efi_rts_wq22:50:103
1950992270,226cyclictest1555-21kworker/u16:1+efi_rts_wq20:25:110
1952992260,225cyclictest791-21kworker/u16:1+efi_rts_wq23:20:382
1953992250,224cyclictest19743-21kworker/u16:2+efi_rts_wq19:40:103
1951992240,223cyclictest8129-21kworker/u16:3+efi_rts_wq22:40:101
1950992220,221cyclictest8129-21kworker/u16:3+efi_rts_wq22:25:100
1952992180,217cyclictest8129-21kworker/u16:3+efi_rts_wq23:10:102
1951992160,215cyclictest8496-21kworker/u16:4+efi_rts_wq19:50:121
1951992150,214cyclictest11238-21kworker/u16:1+efi_rts_wq20:50:101
1952992140,212cyclictest23140-21kworker/u16:0+efi_rts_wq22:35:102
1950992130,212cyclictest8494-21kworker/u16:0+efi_rts_wq19:25:110
1951992120,211cyclictest23140-21kworker/u16:0+efi_rts_wq22:35:101
1953992110,210cyclictest30651-21kworker/u16:2+efi_rts_wq00:20:123
1953992100,209cyclictest19743-21kworker/u16:2+efi_rts_wq20:00:103
1952992100,208cyclictest8129-21kworker/u16:3+efi_rts_wq23:05:102
1952992090,208cyclictest25195-21kworker/u16:0+efi_rts_wq20:35:112
1950992090,208cyclictest13630-21kworker/u16:0+efi_rts_wq22:10:120
1951992080,207cyclictest3687-21kworker/u16:0+efi_rts_wq23:30:111
1951992070,206cyclictest14797-21kworker/u16:1+efi_rts_wq22:45:111
1952991950,194cyclictest8129-21kworker/u16:3+efi_rts_wq22:40:102
1953991930,192cyclictest23140-21kworker/u16:0+efi_rts_wq22:35:293
1951991930,192cyclictest31788-21kworker/u16:2+efi_rts_wq21:20:151
1952991920,191cyclictest1555-21kworker/u16:1+efi_rts_wq20:25:112
1953991910,190cyclictest4036-21kworker/u16:2+efi_rts_wq22:05:113
1951991890,188cyclictest17028-21kworker/u16:1+efi_rts_wq20:15:011
1950991880,187cyclictest1555-21kworker/u16:1+efi_rts_wq20:35:050
1950991840,183cyclictest4036-21kworker/u16:2+efi_rts_wq22:20:260
1953991820,181cyclictest16711-21kworker/u16:1+efi_rts_wq21:50:113
1951991810,180cyclictest8494-21kworker/u16:0+efi_rts_wq19:25:111
1950991780,176cyclictest30651-21kworker/u16:2+efi_rts_wq23:50:110
1951991770,176cyclictest18365-21kworker/u16:1+efi_rts_wq23:45:411
1951991760,175cyclictest8129-21kworker/u16:3+efi_rts_wq23:05:111
1953991720,171cyclictest8496-21kworker/u16:4+efi_rts_wq19:29:533
1952991720,171cyclictest8496-21kworker/u16:4+efi_rts_wq20:20:022
1952991710,170cyclictest3687-21kworker/u16:0+efi_rts_wq23:55:102
1951991680,167cyclictest14797-21kworker/u16:1+efi_rts_wq22:30:281
1952991670,166cyclictest14797-21kworker/u16:1+efi_rts_wq22:45:112
1953991650,164cyclictest25195-21kworker/u16:0+efi_rts_wq20:45:073
1950991640,163cyclictest18365-21kworker/u16:1+efi_rts_wq00:10:460
1950991640,163cyclictest18365-21kworker/u16:1+efi_rts_wq00:10:460
1953991630,162cyclictest8129-21kworker/u16:3+efi_rts_wq00:05:103
1953991630,161cyclictest30651-21kworker/u16:2+efi_rts_wq00:00:133
1952991560,155cyclictest30651-21kworker/u16:2+efi_rts_wq00:35:102
1950991550,154cyclictest19743-21kworker/u16:2+efi_rts_wq19:30:090
1951991540,153cyclictest3687-21kworker/u16:0+efi_rts_wq23:35:401
1952991530,152cyclictest18365-21kworker/u16:1+efi_rts_wq00:25:102
1953991520,151cyclictest8494-21kworker/u16:0+efi_rts_wq19:14:503
1953991520,151cyclictest4036-21kworker/u16:2+efi_rts_wq21:55:113
1950991520,151cyclictest791-21kworker/u16:1+efi_rts_wq23:00:100
1950991510,150cyclictest25195-21kworker/u16:0+efi_rts_wq20:40:060
1953991470,146cyclictest7628-21kworker/u16:3+efi_rts_wq20:40:113
1953991460,145cyclictest14797-21kworker/u16:1+efi_rts_wq22:45:313
1950991460,145cyclictest30651-21kworker/u16:2+efi_rts_wq00:20:120
1950991450,144cyclictest32560-21kworker/u16:3+efi_rts_wq21:45:090
1953991430,142cyclictest13630-21kworker/u16:0+efi_rts_wq22:10:123
1953991410,139cyclictest791-21kworker/u16:1+efi_rts_wq23:20:103
1953991330,132cyclictest30651-21kworker/u16:2+efi_rts_wq23:55:433
1950991310,130cyclictest3467-21kworker/u16:0+efi_rts_wq00:15:100
1952991300,129cyclictest13630-21kworker/u16:0+efi_rts_wq21:15:142
1953991280,127cyclictest8129-21kworker/u16:3+efi_rts_wq23:15:373
1953991280,127cyclictest17028-21kworker/u16:1+efi_rts_wq20:15:103
1950991280,127cyclictest3687-21kworker/u16:0+efi_rts_wq23:25:380
1951991220,121cyclictest30651-21kworker/u16:2+efi_rts_wq22:55:331
1950991200,119cyclictest4036-21kworker/u16:2+efi_rts_wq22:05:100
1950991180,117cyclictest13630-21kworker/u16:0+efi_rts_wq21:10:120
1951991170,116cyclictest18365-21kworker/u16:1+efi_rts_wq00:30:081
1951991140,113cyclictest16711-21kworker/u16:1+efi_rts_wq21:55:221
1953993229,2cyclictest818-21snmpd21:07:223
1952993230,2cyclictest818-21snmpd23:33:112
1951993230,2cyclictest818-21snmpd22:12:151
1951993230,2cyclictest818-21snmpd20:45:421
1951993229,2cyclictest818-21snmpd20:09:141
1950993230,2cyclictest818-21snmpd23:06:470
1950993230,2cyclictest818-21snmpd19:18:430
1953993129,1cyclictest818-21snmpd00:33:553
1952993130,1cyclictest818-21snmpd19:15:552
1952993129,2cyclictest818-21snmpd23:54:002
1952993129,2cyclictest818-21snmpd23:48:212
1952993129,2cyclictest818-21snmpd00:03:422
1952993128,2cyclictest818-21snmpd21:14:222
1951993130,1cyclictest818-21snmpd23:53:331
1951993129,2cyclictest818-21snmpd00:04:481
1951993128,2cyclictest818-21snmpd21:35:081
1950993130,1cyclictest818-21snmpd23:45:390
1950993128,2cyclictest818-21snmpd20:18:420
1953993029,1cyclictest818-21snmpd23:25:533
1953993029,1cyclictest818-21snmpd19:55:143
1953993028,2cyclictest818-21snmpd23:31:503
1953993027,2cyclictest818-21snmpd21:03:363
1952993029,1cyclictest818-21snmpd23:16:492
1952993029,1cyclictest818-21snmpd23:00:102
1952993029,1cyclictest818-21snmpd22:03:152
1952993029,1cyclictest818-21snmpd21:20:462
1952993028,2cyclictest818-21snmpd22:56:042
1952993028,2cyclictest818-21snmpd22:21:362
1952993028,2cyclictest17974-21cat19:45:112
1952993027,2cyclictest818-21snmpd21:39:412
1951993029,1cyclictest818-21snmpd22:28:421
1951993029,1cyclictest818-21snmpd21:25:051
1951993028,2cyclictest818-21snmpd00:18:251
1950993030,0cyclictest8129-21kworker/u16:3+atlantic22:37:170
1950993029,1cyclictest818-21snmpd21:34:500
1950993029,1cyclictest818-21snmpd20:58:160
1950993028,2cyclictest4534-21cat20:30:130
1953992929,0cyclictest8130-21kworker/3:1+events23:11:013
1953992928,1cyclictest818-21snmpd23:36:173
1953992928,1cyclictest818-21snmpd20:24:273
1953992928,1cyclictest3736-21kworker/3:0+events23:00:233
1953992926,2cyclictest818-21snmpd00:27:133
1952992929,0cyclictest818-21snmpd19:54:442
1952992928,1cyclictest818-21snmpd22:16:152
1952992928,1cyclictest818-21snmpd21:53:482
1952992927,2cyclictest818-21snmpd19:39:412
1951992928,1cyclictest818-21snmpd22:20:181
1951992928,1cyclictest818-21snmpd21:47:141
1951992928,1cyclictest818-21snmpd20:04:401
1951992928,1cyclictest31843-21cat22:50:121
1951992927,2cyclictest818-21snmpd19:33:321
1950992928,1cyclictest818-21snmpd22:48:220
1950992928,1cyclictest818-21snmpd19:22:490
1950992927,2cyclictest818-21snmpd22:33:310
1953992828,0cyclictest29429-21kworker/3:2+events00:14:413
1953992828,0cyclictest29429-21kworker/3:2+events00:14:403
1953992827,1cyclictest818-21snmpd20:12:273
1953992825,2cyclictest818-21snmpd19:50:263
1952992828,0cyclictest818-21snmpd22:32:162
1952992827,1cyclictest818-21snmpd00:06:122
1951992826,2cyclictest818-21snmpd21:16:521
1950992827,1cyclictest818-21snmpd22:52:070
1950992827,1cyclictest818-21snmpd21:16:310
1950992827,1cyclictest818-21snmpd19:12:550
1950992827,1cyclictest818-21snmpd00:28:100
1380222828,0sleep33871-21kworker/3:1+events20:52:373
1953992726,1cyclictest818-21snmpd21:28:473
1952992727,0cyclictest818-21snmpd20:31:232
1952992727,0cyclictest818-21snmpd19:26:372
1952992726,1cyclictest818-21snmpd23:26:012
1952992726,1cyclictest818-21snmpd21:55:212
1952992726,1cyclictest818-21snmpd21:30:022
1951992726,1cyclictest818-21snmpd20:44:151
1951992725,2cyclictest818-21snmpd20:34:001
1950992726,1cyclictest818-21snmpd23:58:060
1952992625,1cyclictest818-21snmpd22:54:462
1952992624,2cyclictest818-21snmpd20:13:452
1951992626,0cyclictest818-21snmpd23:15:591
1951992626,0cyclictest13630-21kworker/u16:0+atlantic21:41:051
1951992625,1cyclictest818-21snmpd23:22:501
1951992625,1cyclictest818-21snmpd21:11:101
1951992624,2cyclictest818-21snmpd20:36:301
1953992524,1cyclictest818-21snmpd19:37:353
1952992524,1cyclictest818-21snmpd19:14:222
1952992524,1cyclictest75550irq/131-enp1s023:36:082
1952992523,2cyclictest818-21snmpd00:11:272
1952992523,2cyclictest818-21snmpd00:11:272
1950992524,1cyclictest818-21snmpd23:11:560
1953992421,2cyclictest818-21snmpd22:00:063
1951992423,1cyclictest818-21snmpd19:43:081
1952992322,1cyclictest818-21snmpd21:45:412
1950992322,1cyclictest818-21snmpd21:42:020
1950992322,1cyclictest818-21snmpd20:50:370
1950992322,1cyclictest818-21snmpd19:41:250
1950992321,2cyclictest818-21snmpd20:00:050
1953992221,1cyclictest818-21snmpd21:40:233
1952992221,1cyclictest818-21snmpd23:41:442
1952992221,1cyclictest818-21snmpd20:05:022
1951992221,1cyclictest818-21snmpd19:49:501
1950992222,0cyclictest3687-21kworker/u16:0+atlantic23:40:330
1950992221,1cyclictest818-21snmpd21:02:070
1952992120,1cyclictest818-21snmpd22:25:062
1950992019,1cyclictest818-21snmpd19:57:140
1950991918,1cyclictest818-21snmpd20:06:560
1952991817,1cyclictest818-21snmpd00:18:162
1952991616,0cyclictest818-21snmpd22:05:212
1951991514,1cyclictest818-21snmpd22:05:031
1953991111,0cyclictest27594-21kworker/3:0+events21:30:013
195299108,2cyclictest821-21ntpd19:24:262
19509965,1cyclictest413-21sed20:20:130
19509965,1cyclictest19746-21grep21:05:170
19509965,1cyclictest14320-21grep00:35:080
19509965,1cyclictest11924-21cron20:50:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional