You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-15 - 15:18

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Mon Dec 15, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
192262325303,5sleep00-21swapper/007:05:500
19927993160,315cyclictest19472-21kworker/u16:1+efi_rts_wq11:10:110
194882316309,5sleep10-21swapper/107:09:111
195042315309,4sleep20-21swapper/207:09:232
192862315308,5sleep30-21swapper/307:06:363
19931993130,312cyclictest7731-21kworker/u16:1+efi_rts_wq09:25:093
19931993120,311cyclictest19067-21kworker/u16:3+efi_rts_wq08:37:503
19931993090,308cyclictest4304-21kworker/u16:1+efi_rts_wq12:30:103
19931993070,306cyclictest19067-21kworker/u16:3+efi_rts_wq09:35:103
19930993070,306cyclictest19067-21kworker/u16:3+efi_rts_wq08:10:092
19928993060,305cyclictest7731-21kworker/u16:1+efi_rts_wq10:00:091
19931993040,303cyclictest19067-21kworker/u16:3+efi_rts_wq10:38:143
19927993040,303cyclictest7731-21kworker/u16:1+efi_rts_wq07:15:120
19927993040,302cyclictest8892-21kworker/u16:0+efi_rts_wq11:48:250
19930993030,302cyclictest7731-21kworker/u16:1+efi_rts_wq08:40:112
19928993020,301cyclictest19067-21kworker/u16:3+efi_rts_wq10:45:111
19931993000,299cyclictest26603-21kworker/u16:2+efi_rts_wq11:45:113
19927993000,299cyclictest19067-21kworker/u16:3+efi_rts_wq07:32:360
19931992980,295cyclictest29451-21kworker/u16:0+efi_rts_wq11:20:103
19928992980,297cyclictest7731-21kworker/u16:1+efi_rts_wq08:27:461
19931992960,295cyclictest19067-21kworker/u16:3+efi_rts_wq08:30:103
19930992960,295cyclictest7731-21kworker/u16:1+efi_rts_wq08:32:492
19930992960,295cyclictest7731-21kworker/u16:1+efi_rts_wq07:45:092
19930992960,295cyclictest7731-21kworker/u16:1+efi_rts_wq07:45:082
19928992960,295cyclictest26603-21kworker/u16:2+efi_rts_wq11:38:241
19927992960,295cyclictest8892-21kworker/u16:0+efi_rts_wq11:50:110
19927992960,295cyclictest19067-21kworker/u16:3+efi_rts_wq09:58:060
19930992950,294cyclictest7731-21kworker/u16:1+efi_rts_wq10:10:102
19927992950,294cyclictest19067-21kworker/u16:3+efi_rts_wq09:35:110
19930992940,293cyclictest4304-21kworker/u16:1+efi_rts_wq12:35:112
19930992940,293cyclictest19067-21kworker/u16:3+efi_rts_wq10:08:082
19930992930,292cyclictest7731-21kworker/u16:1+efi_rts_wq07:10:072
19927992930,292cyclictest19067-21kworker/u16:3+efi_rts_wq09:30:090
19931992920,291cyclictest7731-21kworker/u16:1+efi_rts_wq08:47:513
19927992920,291cyclictest19067-21kworker/u16:3+efi_rts_wq10:30:110
19930992910,290cyclictest11775-21kworker/u16:4+efi_rts_wq10:48:162
19930992890,288cyclictest19067-21kworker/u16:3+efi_rts_wq08:50:102
19931992880,287cyclictest19067-21kworker/u16:3+efi_rts_wq10:55:123
19928992880,287cyclictest7731-21kworker/u16:1+efi_rts_wq07:25:111
19928992880,287cyclictest19067-21kworker/u16:3+efi_rts_wq07:20:091
19927992880,287cyclictest7731-21kworker/u16:1+efi_rts_wq07:47:400
19927992880,287cyclictest7731-21kworker/u16:1+efi_rts_wq07:47:390
19930992870,286cyclictest7731-21kworker/u16:1+efi_rts_wq08:05:112
19927992870,285cyclictest26603-21kworker/u16:2+efi_rts_wq11:30:090
19931992860,285cyclictest19067-21kworker/u16:3+efi_rts_wq08:52:533
19931992850,284cyclictest19067-21kworker/u16:3+efi_rts_wq10:45:113
19931992840,281cyclictest8892-21kworker/u16:0+efi_rts_wq12:20:083
19928992840,282cyclictest26603-21kworker/u16:2+efi_rts_wq11:40:101
19931992820,281cyclictest19067-21kworker/u16:3+efi_rts_wq10:15:103
19930992820,281cyclictest7731-21kworker/u16:1+efi_rts_wq07:17:352
19930992820,281cyclictest19067-21kworker/u16:3+efi_rts_wq08:20:102
19927992820,281cyclictest19067-21kworker/u16:3+efi_rts_wq10:05:100
19927992800,279cyclictest7731-21kworker/u16:1+efi_rts_wq07:27:370
19930992790,278cyclictest7731-21kworker/u16:1+efi_rts_wq09:50:092
19931992780,277cyclictest19472-21kworker/u16:1+efi_rts_wq11:05:103
19930992780,277cyclictest19067-21kworker/u16:3+efi_rts_wq08:00:122
19927992770,276cyclictest4304-21kworker/u16:1+efi_rts_wq12:35:100
19927992770,276cyclictest29451-21kworker/u16:0+efi_rts_wq11:20:110
19931992760,275cyclictest19067-21kworker/u16:3+efi_rts_wq10:40:113
19927992760,275cyclictest7731-21kworker/u16:1+efi_rts_wq08:07:430
19927992760,275cyclictest19067-21kworker/u16:3+efi_rts_wq09:00:110
19930992740,273cyclictest7731-21kworker/u16:1+efi_rts_wq09:15:092
19928992740,273cyclictest19067-21kworker/u16:3+efi_rts_wq08:20:111
19928992740,273cyclictest19067-21kworker/u16:3+efi_rts_wq07:50:101
19928992730,272cyclictest19067-21kworker/u16:3+efi_rts_wq10:55:121
19927992730,272cyclictest19067-21kworker/u16:3+efi_rts_wq07:52:410
19927992720,270cyclictest7731-21kworker/u16:1+efi_rts_wq08:55:110
19931992710,270cyclictest8892-21kworker/u16:0+efi_rts_wq11:50:093
19927992710,270cyclictest4304-21kworker/u16:1+efi_rts_wq12:25:090
19927992690,268cyclictest19067-21kworker/u16:3+efi_rts_wq08:50:100
19931992680,267cyclictest19067-21kworker/u16:3+efi_rts_wq07:42:393
19928992680,267cyclictest19067-21kworker/u16:3+efi_rts_wq09:23:001
19928992670,266cyclictest7731-21kworker/u16:1+efi_rts_wq09:53:041
19931992660,265cyclictest19067-21kworker/u16:3+efi_rts_wq07:30:103
19928992650,264cyclictest19067-21kworker/u16:3+efi_rts_wq10:43:141
19928992650,263cyclictest8892-21kworker/u16:0+efi_rts_wq12:05:101
19928992630,262cyclictest7731-21kworker/u16:1+efi_rts_wq09:40:091
19927992630,262cyclictest7731-21kworker/u16:1+efi_rts_wq08:15:090
19931992620,261cyclictest19472-21kworker/u16:1+efi_rts_wq11:15:113
19928992610,260cyclictest8892-21kworker/u16:0+efi_rts_wq12:23:321
19931992590,258cyclictest7731-21kworker/u16:1+efi_rts_wq07:55:113
19931992590,258cyclictest7731-21kworker/u16:1+efi_rts_wq07:37:373
19928992580,257cyclictest19067-21kworker/u16:3+efi_rts_wq08:50:101
19928992570,256cyclictest4304-21kworker/u16:1+efi_rts_wq12:10:111
19927992560,255cyclictest8892-21kworker/u16:0+efi_rts_wq11:58:270
19927992560,255cyclictest19067-21kworker/u16:3+efi_rts_wq10:15:100
19928992550,254cyclictest7731-21kworker/u16:1+efi_rts_wq08:05:111
19930992540,253cyclictest8892-21kworker/u16:0+efi_rts_wq12:00:102
19927992490,248cyclictest8892-21kworker/u16:0+efi_rts_wq12:18:300
19931992470,246cyclictest7731-21kworker/u16:1+efi_rts_wq09:07:553
19928992470,246cyclictest7731-21kworker/u16:1+efi_rts_wq10:10:101
19930992450,244cyclictest19472-21kworker/u16:1+efi_rts_wq11:15:112
19927992430,242cyclictest7731-21kworker/u16:1+efi_rts_wq09:43:030
19931992410,240cyclictest7731-21kworker/u16:1+efi_rts_wq10:25:113
19928992410,240cyclictest19067-21kworker/u16:3+efi_rts_wq10:50:121
19930992390,238cyclictest19067-21kworker/u16:3+efi_rts_wq09:10:102
19930992370,235cyclictest19472-21kworker/u16:1+efi_rts_wq11:00:092
19927992360,235cyclictest19067-21kworker/u16:3+efi_rts_wq09:45:090
19928992350,233cyclictest19472-21kworker/u16:1+efi_rts_wq11:05:101
19928992320,231cyclictest19067-21kworker/u16:3+efi_rts_wq09:30:091
19931992300,229cyclictest7731-21kworker/u16:1+efi_rts_wq08:55:103
19928992300,229cyclictest4304-21kworker/u16:1+efi_rts_wq11:55:111
19927992300,229cyclictest19067-21kworker/u16:3+efi_rts_wq08:02:430
19931992280,227cyclictest19067-21kworker/u16:3+efi_rts_wq09:20:103
19927992270,226cyclictest8892-21kworker/u16:0+efi_rts_wq12:33:340
19931992260,225cyclictest26603-21kworker/u16:2+efi_rts_wq11:25:083
19930992250,224cyclictest26603-21kworker/u16:2+efi_rts_wq11:28:232
19928992250,224cyclictest19067-21kworker/u16:3+efi_rts_wq10:20:091
19931992240,223cyclictest26603-21kworker/u16:2+efi_rts_wq11:35:113
19930992240,223cyclictest8892-21kworker/u16:0+efi_rts_wq12:15:112
19927992230,222cyclictest7731-21kworker/u16:1+efi_rts_wq10:25:110
19931992220,219cyclictest19067-21kworker/u16:3+efi_rts_wq09:55:093
19931992210,220cyclictest7731-21kworker/u16:1+efi_rts_wq08:40:113
19931992210,220cyclictest19067-21kworker/u16:3+efi_rts_wq09:45:093
19928992210,219cyclictest19067-21kworker/u16:3+efi_rts_wq09:48:051
19927992210,220cyclictest4304-21kworker/u16:1+efi_rts_wq12:13:310
19931992200,219cyclictest7731-21kworker/u16:1+efi_rts_wq10:10:113
19928992200,219cyclictest19067-21kworker/u16:3+efi_rts_wq07:35:121
19931992170,216cyclictest4304-21kworker/u16:1+efi_rts_wq11:55:123
19931992170,216cyclictest19067-21kworker/u16:3+efi_rts_wq08:22:473
19930992160,215cyclictest19067-21kworker/u16:3+efi_rts_wq09:20:102
19927992150,214cyclictest19067-21kworker/u16:3+efi_rts_wq09:10:090
19931992130,212cyclictest19067-21kworker/u16:3+efi_rts_wq07:22:363
19927992120,211cyclictest19067-21kworker/u16:3+efi_rts_wq10:20:090
19927992120,211cyclictest19067-21kworker/u16:3+efi_rts_wq07:40:090
19930992100,209cyclictest19067-21kworker/u16:3+efi_rts_wq09:00:122
19928992080,207cyclictest7731-21kworker/u16:1+efi_rts_wq08:42:511
19930992070,206cyclictest7731-21kworker/u16:1+efi_rts_wq09:40:092
19931992060,205cyclictest8892-21kworker/u16:0+efi_rts_wq12:05:113
19930992030,202cyclictest19067-21kworker/u16:3+efi_rts_wq09:55:102
19928992030,202cyclictest4304-21kworker/u16:1+efi_rts_wq12:28:321
19927992020,201cyclictest26603-21kworker/u16:2+efi_rts_wq11:18:220
19927992020,200cyclictest19067-21kworker/u16:3+efi_rts_wq10:40:100
19928992010,200cyclictest26603-21kworker/u16:2+efi_rts_wq11:45:121
19927992000,199cyclictest19067-21kworker/u16:3+efi_rts_wq08:45:120
19928991980,197cyclictest19472-21kworker/u16:1+efi_rts_wq11:00:091
19931991970,196cyclictest26603-21kworker/u16:2+efi_rts_wq11:40:093
19928991970,196cyclictest8892-21kworker/u16:0+efi_rts_wq12:15:111
19931991950,194cyclictest8892-21kworker/u16:0+efi_rts_wq12:00:093
19928991930,192cyclictest26603-21kworker/u16:2+efi_rts_wq11:25:081
19927991920,191cyclictest19067-21kworker/u16:3+efi_rts_wq07:20:080
19928991910,190cyclictest4304-21kworker/u16:1+efi_rts_wq11:33:231
19927991900,189cyclictest4304-21kworker/u16:1+efi_rts_wq12:03:290
19927991890,188cyclictest7731-21kworker/u16:1+efi_rts_wq09:15:100
19930991880,187cyclictest26603-21kworker/u16:2+efi_rts_wq11:35:112
19928991790,178cyclictest7731-21kworker/u16:1+efi_rts_wq07:57:411
19928991760,175cyclictest7731-21kworker/u16:1+efi_rts_wq09:28:011
19931991740,173cyclictest7731-21kworker/u16:1+efi_rts_wq10:33:133
19928991740,173cyclictest7731-21kworker/u16:1+efi_rts_wq07:15:011
19928991730,172cyclictest7731-21kworker/u16:1+efi_rts_wq08:15:091
19927991720,171cyclictest7731-21kworker/u16:1+efi_rts_wq09:25:100
19930991680,167cyclictest7731-21kworker/u16:1+efi_rts_wq10:00:112
19927991660,165cyclictest7731-21kworker/u16:1+efi_rts_wq09:05:110
19928991650,164cyclictest19472-21kworker/u16:1+efi_rts_wq11:13:191
19927991650,164cyclictest7731-21kworker/u16:1+efi_rts_wq10:13:080
19927991520,151cyclictest19067-21kworker/u16:3+efi_rts_wq08:10:100
19931991420,141cyclictest7731-21kworker/u16:1+efi_rts_wq07:12:343
19931991420,141cyclictest19067-21kworker/u16:3+efi_rts_wq08:12:443
19931991350,134cyclictest19067-21kworker/u16:3+efi_rts_wq10:50:133
19931991350,134cyclictest19067-21kworker/u16:3+efi_rts_wq08:00:123
19930991290,128cyclictest7731-21kworker/u16:1+efi_rts_wq09:05:112
19928991250,125cyclictest7731-21kworker/u16:1+efi_rts_wq08:57:531
19927991210,120cyclictest7731-21kworker/u16:1+efi_rts_wq07:10:060
19928993429,5cyclictest11877-21kworker/1:0+events11:16:231
19931993330,2cyclictest818-21snmpd10:21:573
19930993229,2cyclictest818-21snmpd09:49:022
19930993229,2cyclictest818-21snmpd08:28:282
19930993229,2cyclictest818-21snmpd07:41:222
19928993230,2cyclictest9301-21kworker/1:4+events10:35:111
19931993130,1cyclictest5537-21cat11:30:103
19931993129,2cyclictest818-21snmpd12:35:283
19931993128,2cyclictest818-21snmpd07:46:583
19931993128,2cyclictest818-21snmpd07:46:573
19930993129,2cyclictest818-21snmpd11:45:092
19930993129,2cyclictest818-21snmpd10:44:212
19930993129,2cyclictest818-21snmpd07:22:002
19928993129,2cyclictest9345-21cat09:15:121
19928993129,2cyclictest818-21snmpd12:38:181
19928993129,2cyclictest818-21snmpd09:01:031
19927993130,1cyclictest818-21snmpd11:03:190
19927993130,1cyclictest818-21snmpd08:23:470
19927993129,2cyclictest818-21snmpd08:38:320
19931993029,1cyclictest818-21snmpd09:51:023
19931993029,1cyclictest818-21snmpd07:28:263
19931993028,2cyclictest818-21snmpd07:52:163
19930993029,1cyclictest818-21snmpd10:56:582
19930993029,1cyclictest818-21snmpd08:48:142
19930993029,1cyclictest4304-21kworker/u16:1+atlantic11:55:052
19930993028,2cyclictest818-21snmpd11:07:522
19930993028,2cyclictest818-21snmpd09:32:252
19930993027,2cyclictest818-21snmpd09:38:502
19928993029,1cyclictest32045-21kworker/1:2+events11:20:101
19928993029,1cyclictest11991-21kworker/1:2+events11:51:551
19927993029,1cyclictest818-21snmpd11:42:420
19927993029,1cyclictest818-21snmpd10:58:220
19931992928,1cyclictest818-21snmpd09:17:303
19931992927,2cyclictest818-21snmpd10:03:383
19931992926,2cyclictest818-21snmpd12:15:313
19930992928,1cyclictest818-21snmpd07:51:582
19930992928,1cyclictest818-21snmpd07:30:542
19930992927,2cyclictest818-21snmpd08:58:322
19928992929,0cyclictest9299-21kworker/1:2+events10:32:301
19928992929,0cyclictest29224-21kworker/1:0+events12:31:551
19928992929,0cyclictest21169-21kworker/1:2+events08:45:341
19928992928,1cyclictest818-21snmpd09:06:041
19928992928,1cyclictest818-21snmpd08:32:361
19928992928,1cyclictest18361-21kworker/1:0+events12:00:511
19928992927,2cyclictest818-21snmpd10:28:151
19927992929,0cyclictest19067-21kworker/u16:3+atlantic10:39:410
19927992928,1cyclictest818-21snmpd08:42:030
19927992926,2cyclictest818-21snmpd10:02:040
19927992926,2cyclictest818-21snmpd08:25:340
19931992827,1cyclictest818-21snmpd12:11:213
19931992827,1cyclictest818-21snmpd10:06:233
19930992827,1cyclictest818-21snmpd10:54:542
19930992827,1cyclictest818-21snmpd10:33:112
19930992826,2cyclictest818-21snmpd11:40:472
19930992826,2cyclictest818-21snmpd11:12:132
19930992826,2cyclictest24294-21cat08:35:112
19930992825,2cyclictest818-21snmpd10:18:092
19930992825,2cyclictest818-21snmpd07:26:272
19928992828,0cyclictest8303-21kworker/1:0+events09:58:191
19928992828,0cyclictest818-21snmpd09:12:041
19928992828,0cyclictest19363-21kworker/1:0+events07:46:391
19928992828,0cyclictest19363-21kworker/1:0+events07:46:381
19928992827,1cyclictest8303-21kworker/1:0+events10:15:111
19928992827,1cyclictest818-21snmpd08:14:381
19928992827,1cyclictest818-21snmpd08:03:321
19928992827,1cyclictest19363-21kworker/1:0+events07:44:421
19927992827,1cyclictest818-21snmpd11:38:440
19927992827,1cyclictest818-21snmpd07:58:450
19931992726,1cyclictest818-21snmpd08:27:293
19931992724,2cyclictest818-21snmpd12:27:193
19930992727,0cyclictest75550irq/131-enp1s011:23:322
19930992725,2cyclictest818-21snmpd12:08:272
19928992727,0cyclictest8303-21kworker/1:0+events10:07:551
19928992727,0cyclictest13402-21kworker/1:2+events07:30:121
19928992726,1cyclictest818-21snmpd08:35:231
19927992726,1cyclictest818-21snmpd11:05:250
19931992626,0cyclictest75650irq/132-enp1s011:01:543
19931992625,1cyclictest818-21snmpd09:01:063
19928992625,1cyclictest12879-21kworker/1:1+events09:35:111
19928992624,2cyclictest818-21snmpd07:10:021
19927992626,0cyclictest75550irq/131-enp1s010:49:550
19927992625,1cyclictest818-21snmpd12:22:460
19927992625,1cyclictest818-21snmpd08:32:180
19931992525,0cyclictest818-21snmpd11:12:463
19931992524,1cyclictest818-21snmpd09:41:533
19931992522,2cyclictest818-21snmpd09:12:373
19930992524,1cyclictest818-21snmpd11:31:492
19930992523,2cyclictest818-21snmpd08:17:492
19927992524,1cyclictest818-21snmpd10:53:060
19927992524,1cyclictest818-21snmpd07:39:400
19931992422,2cyclictest818-21snmpd08:17:083
19931992422,2cyclictest818-21snmpd07:18:293
19930992423,1cyclictest818-21snmpd10:39:242
19927992423,1cyclictest818-21snmpd09:52:400
19927992422,2cyclictest11432-21cat09:20:110
19930992120,1cyclictest818-21snmpd11:51:172
19927992120,1cyclictest818-21snmpd11:25:050
19930992018,2cyclictest818-21snmpd07:56:542
19927991917,2cyclictest818-21snmpd12:05:110
19930991615,1cyclictest818-21snmpd10:29:482
19930991615,1cyclictest818-21snmpd10:21:022
19930991615,1cyclictest30188-21cat12:25:122
19930991614,2cyclictest28158-21cat12:20:112
19930991514,1cyclictest818-21snmpd09:27:582
19930991513,2cyclictest818-21snmpd12:30:162
1993099109,1cyclictest818-21snmpd07:36:012
199319965,1cyclictest11767-21fw_packets08:05:133
199319954,1cyclictest15527-21if_eno209:30:123
199309954,1cyclictest23193-21cmp12:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional