You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-03 - 14:17

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Wed Dec 03, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
200282335310,23sleep20-21swapper/219:07:172
200092317303,5sleep30-21swapper/319:07:033
199592317309,5sleep00-21swapper/019:06:230
198982314307,5sleep10-21swapper/119:05:361
20504993000,299cyclictest30879-21kworker/u16:3+efi_rts_wq21:20:152
20505992990,296cyclictest21799-21kworker/u16:0+efi_rts_wq22:25:123
20504992960,295cyclictest17973-21kworker/u16:2+efi_rts_wq19:15:002
20505992950,294cyclictest21799-21kworker/u16:0+efi_rts_wq20:35:153
20504992950,294cyclictest30879-21kworker/u16:3+efi_rts_wq21:00:142
20503992950,294cyclictest21799-21kworker/u16:0+efi_rts_wq19:40:151
20505992930,292cyclictest21799-21kworker/u16:0+efi_rts_wq20:25:143
20503992930,292cyclictest21799-21kworker/u16:0+efi_rts_wq20:05:131
20503992920,291cyclictest30879-21kworker/u16:3+efi_rts_wq22:45:131
20505992910,290cyclictest21799-21kworker/u16:0+efi_rts_wq21:30:133
20502992910,290cyclictest30879-21kworker/u16:3+efi_rts_wq21:50:140
20503992890,288cyclictest30879-21kworker/u16:3+efi_rts_wq20:50:141
20502992890,288cyclictest21799-21kworker/u16:0+efi_rts_wq23:46:170
20505992880,287cyclictest21799-21kworker/u16:0+efi_rts_wq00:15:143
20504992870,286cyclictest21799-21kworker/u16:0+efi_rts_wq20:05:132
20503992870,286cyclictest17973-21kworker/u16:2+efi_rts_wq19:10:141
20502992860,285cyclictest21799-21kworker/u16:0+efi_rts_wq19:25:260
20503992840,283cyclictest21799-21kworker/u16:0+efi_rts_wq22:55:141
20502992830,282cyclictest17973-21kworker/u16:2+efi_rts_wq19:10:230
20502992820,281cyclictest21799-21kworker/u16:0+efi_rts_wq23:15:120
20504992810,280cyclictest21799-21kworker/u16:0+efi_rts_wq20:40:122
20503992810,280cyclictest21799-21kworker/u16:0+efi_rts_wq22:35:161
20502992810,280cyclictest21799-21kworker/u16:0+efi_rts_wq20:20:140
20503992800,278cyclictest21799-21kworker/u16:0+efi_rts_wq00:01:191
20504992760,275cyclictest21799-21kworker/u16:0+efi_rts_wq19:55:132
20504992740,273cyclictest21799-21kworker/u16:0+efi_rts_wq23:11:102
20503992740,273cyclictest30879-21kworker/u16:3+efi_rts_wq19:35:281
20503992730,272cyclictest30879-21kworker/u16:3+efi_rts_wq23:00:141
20503992720,270cyclictest21799-21kworker/u16:0+efi_rts_wq23:35:151
20504992710,270cyclictest21799-21kworker/u16:0+efi_rts_wq23:26:122
20504992710,270cyclictest21799-21kworker/u16:0+efi_rts_wq23:26:122
20503992710,270cyclictest21799-21kworker/u16:0+efi_rts_wq22:15:151
20505992700,269cyclictest30879-21kworker/u16:3+efi_rts_wq22:45:123
20505992700,269cyclictest30879-21kworker/u16:3+efi_rts_wq20:10:363
20505992700,269cyclictest21799-21kworker/u16:0+efi_rts_wq21:25:503
20504992700,269cyclictest21799-21kworker/u16:0+efi_rts_wq23:35:142
20503992700,269cyclictest21799-21kworker/u16:0+efi_rts_wq20:30:401
20504992690,268cyclictest30879-21kworker/u16:3+efi_rts_wq21:35:132
20502992660,265cyclictest21799-21kworker/u16:0+efi_rts_wq00:10:110
20503992650,264cyclictest21799-21kworker/u16:0+efi_rts_wq00:11:211
20504992640,263cyclictest21799-21kworker/u16:0+efi_rts_wq19:45:122
20504992640,263cyclictest17737-21kworker/u16:1+efi_rts_wq00:20:122
20505992630,262cyclictest30879-21kworker/u16:3+efi_rts_wq23:30:143
20503992630,262cyclictest30879-21kworker/u16:3+efi_rts_wq21:45:121
20503992630,262cyclictest21799-21kworker/u16:0+efi_rts_wq00:15:131
20503992620,261cyclictest30879-21kworker/u16:3+efi_rts_wq23:06:091
20502992620,261cyclictest30879-21kworker/u16:3+efi_rts_wq20:30:130
20502992620,261cyclictest21799-21kworker/u16:0+efi_rts_wq21:25:140
20502992610,260cyclictest21799-21kworker/u16:0+efi_rts_wq21:15:120
20502992590,258cyclictest21799-21kworker/u16:0+efi_rts_wq20:40:120
20504992580,257cyclictest30879-21kworker/u16:3+efi_rts_wq21:10:132
20503992580,257cyclictest30879-21kworker/u16:3+efi_rts_wq22:10:581
20505992570,256cyclictest30879-21kworker/u16:3+efi_rts_wq22:40:133
20502992570,256cyclictest30879-21kworker/u16:3+efi_rts_wq21:30:520
20502992570,256cyclictest21799-21kworker/u16:0+efi_rts_wq20:15:150
20505992550,254cyclictest30879-21kworker/u16:3+efi_rts_wq23:01:083
20505992540,253cyclictest30879-21kworker/u16:3+efi_rts_wq22:31:033
20505992530,252cyclictest30879-21kworker/u16:3+efi_rts_wq22:00:133
20505992530,252cyclictest21799-21kworker/u16:0+efi_rts_wq23:55:133
20504992530,252cyclictest30879-21kworker/u16:3+efi_rts_wq23:45:132
20504992520,251cyclictest30879-21kworker/u16:3+efi_rts_wq20:00:332
20502992520,251cyclictest21799-21kworker/u16:0+efi_rts_wq20:35:140
20505992510,250cyclictest30879-21kworker/u16:3+efi_rts_wq23:45:123
20505992510,249cyclictest17737-21kworker/u16:1+efi_rts_wq00:20:133
20504992510,248cyclictest21799-21kworker/u16:0+efi_rts_wq00:00:132
20502992490,248cyclictest21799-21kworker/u16:0+efi_rts_wq00:16:220
20503992480,247cyclictest21799-21kworker/u16:0+efi_rts_wq20:20:141
20505992470,246cyclictest21799-21kworker/u16:0+efi_rts_wq20:55:133
20504992460,245cyclictest21799-21kworker/u16:0+efi_rts_wq21:55:122
20504992450,244cyclictest21799-21kworker/u16:0+efi_rts_wq21:25:142
20505992440,243cyclictest30879-21kworker/u16:3+efi_rts_wq22:50:133
20504992420,241cyclictest21799-21kworker/u16:0+efi_rts_wq19:40:152
20503992420,241cyclictest17737-21kworker/u16:1+efi_rts_wq00:25:141
20502992420,241cyclictest21799-21kworker/u16:0+efi_rts_wq21:05:130
20503992410,240cyclictest21799-21kworker/u16:0+efi_rts_wq21:55:121
20503992410,240cyclictest21799-21kworker/u16:0+efi_rts_wq20:35:421
20502992410,240cyclictest21799-21kworker/u16:0+efi_rts_wq23:50:150
20503992400,239cyclictest21799-21kworker/u16:0+efi_rts_wq19:45:121
20505992390,238cyclictest21799-21kworker/u16:0+efi_rts_wq00:06:213
20505992380,235cyclictest30879-21kworker/u16:3+efi_rts_wq20:45:163
20504992380,237cyclictest30879-21kworker/u16:3+efi_rts_wq23:05:152
20502992380,237cyclictest21799-21kworker/u16:0+efi_rts_wq19:50:150
20505992370,236cyclictest21799-21kworker/u16:0+efi_rts_wq21:20:503
20504992360,234cyclictest21799-21kworker/u16:0+efi_rts_wq22:36:032
20505992350,234cyclictest21799-21kworker/u16:0+efi_rts_wq21:05:133
20503992350,234cyclictest21799-21kworker/u16:0+efi_rts_wq00:05:151
20505992320,231cyclictest21799-21kworker/u16:0+efi_rts_wq21:40:153
20502992320,231cyclictest21799-21kworker/u16:0+efi_rts_wq23:25:120
20502992320,231cyclictest21799-21kworker/u16:0+efi_rts_wq23:25:110
20502992320,231cyclictest21799-21kworker/u16:0+efi_rts_wq22:51:060
20504992310,228cyclictest30879-21kworker/u16:3+efi_rts_wq22:30:122
20505992300,229cyclictest17737-21kworker/u16:1+efi_rts_wq00:35:143
20503992300,229cyclictest21799-21kworker/u16:0+efi_rts_wq23:50:151
20505992280,227cyclictest30879-21kworker/u16:3+efi_rts_wq20:00:143
20504992280,227cyclictest17737-21kworker/u16:1+efi_rts_wq00:35:132
20505992260,225cyclictest17737-21kworker/u16:1+efi_rts_wq00:26:243
20504992230,222cyclictest17737-21kworker/u16:1+efi_rts_wq00:30:122
20504992200,219cyclictest30879-21kworker/u16:3+efi_rts_wq23:30:142
20502992200,219cyclictest21799-21kworker/u16:0+efi_rts_wq19:20:160
20504992150,214cyclictest30879-21kworker/u16:3+efi_rts_wq22:10:132
20502992150,214cyclictest30879-21kworker/u16:3+efi_rts_wq20:00:130
20504992130,212cyclictest21799-21kworker/u16:0+efi_rts_wq19:25:142
20502992110,210cyclictest30879-21kworker/u16:3+efi_rts_wq22:46:060
20505992090,206cyclictest21799-21kworker/u16:0+efi_rts_wq22:05:123
20505992080,207cyclictest30879-21kworker/u16:3+efi_rts_wq22:10:143
20504992030,201cyclictest21799-21kworker/u16:0+efi_rts_wq22:55:142
20503992030,202cyclictest30879-21kworker/u16:3+efi_rts_wq21:35:531
20503992030,202cyclictest21799-21kworker/u16:0+efi_rts_wq20:10:141
20503992010,200cyclictest17737-21kworker/u16:1+efi_rts_wq00:36:251
20503992000,199cyclictest30879-21kworker/u16:3+efi_rts_wq21:05:471
20502992000,199cyclictest21799-21kworker/u16:0+efi_rts_wq20:55:120
20502992000,197cyclictest21799-21kworker/u16:0+efi_rts_wq22:35:160
20504991990,198cyclictest21799-21kworker/u16:0+efi_rts_wq19:30:142
20503991970,196cyclictest30879-21kworker/u16:3+efi_rts_wq21:20:151
20502991970,196cyclictest30879-21kworker/u16:3+efi_rts_wq19:35:150
20503991960,195cyclictest21799-21kworker/u16:0+efi_rts_wq23:20:121
20505991940,193cyclictest21799-21kworker/u16:0+efi_rts_wq23:25:123
20505991940,193cyclictest21799-21kworker/u16:0+efi_rts_wq23:25:113
20502991940,193cyclictest21799-21kworker/u16:0+efi_rts_wq22:20:130
20504991900,189cyclictest21799-21kworker/u16:0+efi_rts_wq22:05:582
20503991900,189cyclictest30879-21kworker/u16:3+efi_rts_wq22:40:131
20505991890,188cyclictest30879-21kworker/u16:3+efi_rts_wq20:30:133
20504991870,186cyclictest21799-21kworker/u16:0+efi_rts_wq19:20:262
20502991860,183cyclictest21799-21kworker/u16:0+efi_rts_wq22:05:130
20505991850,184cyclictest21799-21kworker/u16:0+efi_rts_wq23:20:123
20502991840,183cyclictest30879-21kworker/u16:3+efi_rts_wq23:40:130
20502991830,182cyclictest21799-21kworker/u16:0+efi_rts_wq23:10:130
20503991820,181cyclictest21799-21kworker/u16:0+efi_rts_wq23:41:151
20503991720,171cyclictest21799-21kworker/u16:0+efi_rts_wq19:20:161
20503991720,171cyclictest21799-21kworker/u16:0+efi_rts_wq19:15:231
20503991680,167cyclictest30879-21kworker/u16:3+efi_rts_wq21:00:141
20503991670,166cyclictest21799-21kworker/u16:0+efi_rts_wq23:55:141
20502991660,165cyclictest30879-21kworker/u16:3+efi_rts_wq21:40:540
20504991630,162cyclictest21799-21kworker/u16:0+efi_rts_wq00:05:152
20503991610,160cyclictest21799-21kworker/u16:0+efi_rts_wq23:10:131
20505991590,158cyclictest21799-21kworker/u16:0+efi_rts_wq22:20:133
20503991590,158cyclictest30879-21kworker/u16:3+efi_rts_wq22:00:121
20502991590,158cyclictest30879-21kworker/u16:3+efi_rts_wq23:00:140
20505991560,155cyclictest30879-21kworker/u16:3+efi_rts_wq20:20:383
20505991530,152cyclictest30879-21kworker/u16:3+efi_rts_wq21:50:573
20502991510,150cyclictest21799-21kworker/u16:0+efi_rts_wq22:55:130
20503991470,146cyclictest21799-21kworker/u16:0+efi_rts_wq19:50:311
20502991440,143cyclictest21799-21kworker/u16:0+efi_rts_wq23:55:130
20504991430,143cyclictest30879-21kworker/u16:3+efi_rts_wq23:16:122
20505991420,141cyclictest30879-21kworker/u16:3+efi_rts_wq22:56:083
20502991420,141cyclictest21799-21kworker/u16:0+efi_rts_wq19:30:130
20503991380,137cyclictest21799-21kworker/u16:0+efi_rts_wq20:40:121
20503991330,132cyclictest21799-21kworker/u16:0+efi_rts_wq19:55:131
20502991330,132cyclictest30879-21kworker/u16:3+efi_rts_wq19:55:320
20503991320,131cyclictest21799-21kworker/u16:0+efi_rts_wq20:55:451
20502991320,131cyclictest21799-21kworker/u16:0+efi_rts_wq22:25:130
20503991270,126cyclictest21799-21kworker/u16:0+efi_rts_wq21:10:491
20505991230,121cyclictest21799-21kworker/u16:0+efi_rts_wq22:35:153
20505991210,120cyclictest21799-21kworker/u16:0+efi_rts_wq23:15:133
20503991210,120cyclictest17737-21kworker/u16:1+efi_rts_wq00:31:241
20503991180,117cyclictest30879-21kworker/u16:3+efi_rts_wq21:50:141
20504991170,116cyclictest21799-21kworker/u16:0+efi_rts_wq22:21:002
20505991100,110cyclictest21799-21kworker/u16:0+efi_rts_wq19:30:273
20504991100,109cyclictest21799-21kworker/u16:0+efi_rts_wq23:20:122
20505991090,108cyclictest30879-21kworker/u16:3+efi_rts_wq23:40:123
20505991050,104cyclictest21799-21kworker/u16:0+efi_rts_wq19:40:303
20504991050,104cyclictest30879-21kworker/u16:3+efi_rts_wq21:45:132
20503991050,104cyclictest21799-21kworker/u16:0+efi_rts_wq19:30:141
20505991040,103cyclictest21799-21kworker/u16:0+efi_rts_wq19:25:143
20505993229,2cyclictest795-21snmpd21:03:193
20504993230,2cyclictest795-21snmpd23:57:222
20504993230,2cyclictest795-21snmpd20:22:152
20503993230,2cyclictest795-21snmpd22:27:261
20503993230,2cyclictest795-21snmpd22:06:511
20502993230,2cyclictest795-21snmpd23:39:340
20502993230,2cyclictest795-21snmpd00:06:070
20502993229,2cyclictest795-21snmpd00:30:300
20505993129,2cyclictest795-21snmpd19:15:083
20504993130,1cyclictest795-21snmpd20:55:582
20504993129,2cyclictest795-21snmpd21:52:342
20504993128,2cyclictest795-21snmpd22:01:302
20504993128,2cyclictest795-21snmpd20:45:052
20503993130,1cyclictest795-21snmpd23:19:231
20503993129,2cyclictest795-21snmpd22:24:461
20503993129,2cyclictest795-21snmpd20:19:461
20502993130,1cyclictest795-21snmpd22:17:400
20502993129,2cyclictest795-21snmpd21:55:330
20502993129,2cyclictest795-21snmpd21:36:110
20502993129,2cyclictest795-21snmpd20:25:010
20502993129,2cyclictest795-21snmpd00:25:250
20502993129,2cyclictest795-21snmpd00:24:460
20502993129,2cyclictest7228-21cat21:10:160
20505993029,1cyclictest795-21snmpd21:12:313
20505993029,1cyclictest795-21snmpd20:51:103
20505993029,1cyclictest795-21snmpd19:12:413
20505993028,2cyclictest795-21snmpd23:07:093
20505993028,2cyclictest795-21snmpd19:39:323
20505993028,2cyclictest795-21snmpd00:32:263
20505993028,2cyclictest795-21snmpd00:03:463
20504993029,1cyclictest795-21snmpd23:54:242
20504993029,1cyclictest795-21snmpd23:00:322
20504993029,1cyclictest795-21snmpd21:30:272
20504993029,1cyclictest795-21snmpd00:27:082
20504993029,1cyclictest795-21snmpd00:19:112
20504993028,2cyclictest795-21snmpd22:27:462
20503993029,1cyclictest795-21snmpd22:52:221
20503993029,1cyclictest795-21snmpd21:32:481
20503993029,1cyclictest795-21snmpd20:26:041
20503993028,2cyclictest795-21snmpd21:15:221
20503993027,2cyclictest795-21snmpd00:22:071
20502993029,1cyclictest795-21snmpd22:33:580
20502993029,1cyclictest795-21snmpd21:20:150
20502993029,1cyclictest795-21snmpd21:02:440
20502993029,1cyclictest795-21snmpd20:14:510
20505992928,1cyclictest795-21snmpd23:54:063
20505992928,1cyclictest795-21snmpd22:15:183
20505992928,1cyclictest795-21snmpd19:52:403
20505992927,2cyclictest795-21snmpd00:11:553
20504992928,1cyclictest795-21snmpd21:07:072
20504992928,1cyclictest30879-21kworker/u16:3+atlantic22:53:312
20504992927,2cyclictest795-21snmpd23:41:302
20504992927,2cyclictest795-21snmpd21:40:272
20504992927,2cyclictest795-21snmpd20:35:162
20503992928,1cyclictest795-21snmpd23:49:521
20503992928,1cyclictest795-21snmpd23:26:181
20503992928,1cyclictest795-21snmpd23:26:171
20503992928,1cyclictest795-21snmpd22:34:461
20503992928,1cyclictest19662-21cat21:40:171
20503992927,2cyclictest795-21snmpd23:32:421
20502992929,0cyclictest795-21snmpd22:44:160
20502992929,0cyclictest26555-21kworker/0:1+events00:35:370
20502992929,0cyclictest26555-21kworker/0:1+events00:02:290
20502992929,0cyclictest2627-21kworker/0:0+events22:11:130
20502992929,0cyclictest2627-21kworker/0:0+events22:01:100
20502992929,0cyclictest2627-21kworker/0:0+events21:45:020
20502992929,0cyclictest2627-21kworker/0:0+events20:50:140
20502992929,0cyclictest2627-21kworker/0:0+events20:45:100
20502992929,0cyclictest2627-21kworker/0:0+events20:06:230
20502992929,0cyclictest21461-21kworker/0:4+events19:45:060
20502992929,0cyclictest21461-21kworker/0:4+events19:15:020
20502992928,1cyclictest18837-21kworker/0:0+events23:05:430
20502992927,2cyclictest795-21snmpd23:22:300
20505992827,1cyclictest795-21snmpd21:18:053
20505992826,2cyclictest16572-21cat20:15:163
20504992826,2cyclictest795-21snmpd22:49:142
20503992827,1cyclictest795-21snmpd21:27:561
20502992828,0cyclictest26555-21kworker/0:1+events23:33:170
20502992828,0cyclictest21461-21kworker/0:4+events19:40:100
20505992624,2cyclictest795-21snmpd23:36:453
20504992624,2cyclictest795-21snmpd19:37:082
20503992625,1cyclictest807-21lldpd20:47:531
20505992524,1cyclictest795-21snmpd19:47:053
20504992423,1cyclictest795-21snmpd20:15:092
20505992323,0cyclictest21799-21kworker/u16:0+atlantic23:13:273
20504992323,0cyclictest21799-21kworker/u16:0+atlantic22:15:512
20504992322,1cyclictest795-21snmpd22:44:552
20504992322,1cyclictest795-21snmpd20:29:092
20504992222,0cyclictest30879-21kworker/u16:3+atlantic20:14:162
20505992120,1cyclictest795-21snmpd21:56:123
20505992120,1cyclictest795-21snmpd20:42:583
20505992120,1cyclictest795-21snmpd20:07:003
20505992119,2cyclictest795-21snmpd21:47:113
20504992120,1cyclictest795-21snmpd20:30:182
20504992120,1cyclictest795-21snmpd19:10:532
20503992119,2cyclictest795-21snmpd20:04:181
20504991919,0cyclictest21799-21kworker/u16:0+atlantic20:51:552
20504991818,0cyclictest21799-21kworker/u16:0+atlantic21:18:162
20504991818,0cyclictest17737-21kworker/u16:1+atlantic00:13:112
20505991514,1cyclictest795-21snmpd19:55:123
20504991515,0cyclictest21799-21kworker/u16:0+atlantic19:53:392
205059977,0cyclictest21799-21kworker/u16:0+atlantic19:20:563
205059954,1cyclictest18485-21taskset21:36:073
205039954,1cyclictest28699-21tail19:25:211
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional