You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-23 - 08:31

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Mon Mar 23, 2026 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
304002334312,5sleep30-21swapper/319:09:453
300972320313,5sleep20-21swapper/219:05:512
302932318310,5sleep10-21swapper/119:08:231
303272316308,5sleep00-21swapper/019:08:510
30685993150,314cyclictest18390-21kworker/u16:3+efi_rts_wq23:30:130
30688993110,310cyclictest13255-21kworker/u16:2+efi_rts_wq20:50:133
30688993100,309cyclictest30260-21kworker/u16:3+efi_rts_wq20:55:133
30685993100,309cyclictest18390-21kworker/u16:3+efi_rts_wq23:20:020
30687993090,308cyclictest13255-21kworker/u16:2+efi_rts_wq21:05:142
30685993090,308cyclictest30260-21kworker/u16:3+efi_rts_wq21:00:130
30685993090,308cyclictest30260-21kworker/u16:3+efi_rts_wq20:45:120
30687993080,306cyclictest7074-21kworker/u16:1+efi_rts_wq23:00:132
30685993080,307cyclictest30260-21kworker/u16:3+efi_rts_wq20:35:120
30688993070,306cyclictest18390-21kworker/u16:3+efi_rts_wq23:35:123
30685993060,305cyclictest30260-21kworker/u16:3+efi_rts_wq20:15:130
30688993050,304cyclictest30260-21kworker/u16:3+efi_rts_wq19:15:143
30688993050,304cyclictest30260-21kworker/u16:3+efi_rts_wq19:15:133
30687993030,302cyclictest30260-21kworker/u16:3+efi_rts_wq20:35:132
30686993010,300cyclictest30260-21kworker/u16:3+efi_rts_wq21:10:121
30685993010,300cyclictest13255-21kworker/u16:2+efi_rts_wq22:05:120
30687993000,299cyclictest15353-21kworker/u16:1+efi_rts_wq00:35:152
30686993000,299cyclictest13255-21kworker/u16:2+efi_rts_wq19:40:131
30686993000,298cyclictest15353-21kworker/u16:1+efi_rts_wq23:15:111
30685993000,299cyclictest15353-21kworker/u16:1+efi_rts_wq23:35:130
30688992990,298cyclictest13255-21kworker/u16:2+efi_rts_wq21:40:143
30687992990,298cyclictest13255-21kworker/u16:2+efi_rts_wq22:35:112
30685992990,298cyclictest30260-21kworker/u16:3+efi_rts_wq21:25:120
30685992990,298cyclictest13255-21kworker/u16:2+efi_rts_wq22:50:120
30688992980,297cyclictest30260-21kworker/u16:3+efi_rts_wq22:15:123
30687992980,296cyclictest13255-21kworker/u16:2+efi_rts_wq22:40:142
30685992970,296cyclictest30260-21kworker/u16:3+efi_rts_wq19:30:130
30685992970,296cyclictest18390-21kworker/u16:3+efi_rts_wq23:40:120
30685992950,294cyclictest13255-21kworker/u16:2+efi_rts_wq22:10:140
30688992940,292cyclictest30260-21kworker/u16:3+efi_rts_wq21:35:113
30687992940,293cyclictest30260-21kworker/u16:3+efi_rts_wq21:30:142
30686992931,291cyclictest30260-21kworker/u16:3+efi_rts_wq22:30:121
30686992930,292cyclictest30260-21kworker/u16:3+efi_rts_wq21:49:481
30688992910,290cyclictest15353-21kworker/u16:1+efi_rts_wq00:05:103
30686992910,290cyclictest13255-21kworker/u16:2+efi_rts_wq21:05:141
30686992900,289cyclictest30260-21kworker/u16:3+efi_rts_wq20:30:141
30686992890,288cyclictest4252-21kworker/u16:0+efi_rts_wq22:55:101
30685992890,288cyclictest30260-21kworker/u16:3+efi_rts_wq21:45:130
30685992870,286cyclictest9856-21kworker/u16:2+efi_rts_wq23:05:130
30686992860,285cyclictest15353-21kworker/u16:1+efi_rts_wq23:10:021
30687992850,284cyclictest13255-21kworker/u16:2+efi_rts_wq19:50:132
30686992850,284cyclictest30260-21kworker/u16:3+efi_rts_wq20:55:121
30688992840,283cyclictest30260-21kworker/u16:3+efi_rts_wq22:00:133
30688992840,283cyclictest30260-21kworker/u16:3+efi_rts_wq21:50:143
30688992840,282cyclictest18390-21kworker/u16:3+efi_rts_wq00:01:153
30686992840,283cyclictest30260-21kworker/u16:3+efi_rts_wq20:15:131
30685992820,281cyclictest18390-21kworker/u16:3+efi_rts_wq00:21:180
30688992810,280cyclictest13255-21kworker/u16:2+efi_rts_wq20:25:153
30685992810,280cyclictest13255-21kworker/u16:2+efi_rts_wq19:20:150
30686992800,279cyclictest30260-21kworker/u16:3+efi_rts_wq22:09:511
30688992750,274cyclictest18390-21kworker/u16:3+efi_rts_wq00:16:173
30688992740,273cyclictest13255-21kworker/u16:2+efi_rts_wq20:20:123
30685992740,271cyclictest30260-21kworker/u16:3+efi_rts_wq19:10:150
30688992730,272cyclictest13255-21kworker/u16:2+efi_rts_wq21:55:143
30685992730,272cyclictest30260-21kworker/u16:3+efi_rts_wq21:24:450
30685992730,272cyclictest30260-21kworker/u16:3+efi_rts_wq21:19:430
30688992710,270cyclictest18390-21kworker/u16:3+efi_rts_wq00:20:133
30687992710,270cyclictest13255-21kworker/u16:2+efi_rts_wq22:34:562
30686992700,269cyclictest30260-21kworker/u16:3+efi_rts_wq19:55:121
30685992700,269cyclictest15353-21kworker/u16:1+efi_rts_wq23:55:140
30687992690,267cyclictest13255-21kworker/u16:2+efi_rts_wq22:45:122
30685992690,268cyclictest13255-21kworker/u16:2+efi_rts_wq22:49:580
30686992660,265cyclictest15353-21kworker/u16:1+efi_rts_wq00:30:121
30688992640,263cyclictest13255-21kworker/u16:2+efi_rts_wq19:35:143
30687992640,263cyclictest15353-21kworker/u16:1+efi_rts_wq23:45:132
30686992640,263cyclictest30260-21kworker/u16:3+efi_rts_wq21:15:111
30686992640,263cyclictest30260-21kworker/u16:3+efi_rts_wq20:49:381
30686992640,263cyclictest18390-21kworker/u16:3+efi_rts_wq00:36:221
30685992640,263cyclictest13255-21kworker/u16:2+efi_rts_wq19:40:130
30685992630,262cyclictest13255-21kworker/u16:2+efi_rts_wq20:00:140
30686992620,261cyclictest13255-21kworker/u16:2+efi_rts_wq20:10:131
30686992610,260cyclictest13255-21kworker/u16:2+efi_rts_wq22:40:141
30688992590,256cyclictest15353-21kworker/u16:1+efi_rts_wq00:35:143
30687992590,258cyclictest18390-21kworker/u16:3+efi_rts_wq00:15:112
30687992590,258cyclictest13255-21kworker/u16:2+efi_rts_wq20:25:142
30686992590,258cyclictest30260-21kworker/u16:3+efi_rts_wq21:30:141
30688992550,254cyclictest30260-21kworker/u16:3+efi_rts_wq19:45:143
30688992540,253cyclictest9856-21kworker/u16:2+efi_rts_wq23:05:133
30686992520,251cyclictest13255-21kworker/u16:2+efi_rts_wq22:39:551
30685992520,251cyclictest30260-21kworker/u16:3+efi_rts_wq19:59:280
30688992470,246cyclictest15353-21kworker/u16:1+efi_rts_wq00:10:123
30688992460,245cyclictest13255-21kworker/u16:2+efi_rts_wq22:20:133
30687992420,241cyclictest18390-21kworker/u16:3+efi_rts_wq23:50:132
30686992420,241cyclictest30260-21kworker/u16:3+efi_rts_wq20:40:131
30688992410,240cyclictest30260-21kworker/u16:3+efi_rts_wq21:45:143
30687992410,240cyclictest13255-21kworker/u16:2+efi_rts_wq22:19:532
30687992400,239cyclictest30260-21kworker/u16:3+efi_rts_wq20:34:372
30685992370,236cyclictest15353-21kworker/u16:1+efi_rts_wq00:26:200
30686992360,235cyclictest30260-21kworker/u16:3+efi_rts_wq20:05:131
30686992350,234cyclictest13255-21kworker/u16:2+efi_rts_wq22:24:541
30685992300,229cyclictest18390-21kworker/u16:3+efi_rts_wq00:00:130
30688992290,228cyclictest15353-21kworker/u16:1+efi_rts_wq23:10:123
30688992290,228cyclictest13255-21kworker/u16:2+efi_rts_wq20:00:133
30686992290,228cyclictest30260-21kworker/u16:3+efi_rts_wq19:19:231
30686992290,228cyclictest30260-21kworker/u16:3+efi_rts_wq19:19:221
30685992260,225cyclictest15353-21kworker/u16:1+efi_rts_wq00:30:120
30688992250,224cyclictest30260-21kworker/u16:3+efi_rts_wq20:44:373
30688992240,223cyclictest18390-21kworker/u16:3+efi_rts_wq23:20:133
30685992240,223cyclictest4252-21kworker/u16:0+efi_rts_wq22:55:100
30688992220,220cyclictest15353-21kworker/u16:1+efi_rts_wq23:55:133
30685992220,221cyclictest13255-21kworker/u16:2+efi_rts_wq21:55:130
30685992210,220cyclictest30260-21kworker/u16:3+efi_rts_wq20:24:350
30688992190,218cyclictest13255-21kworker/u16:2+efi_rts_wq22:25:133
30688992170,216cyclictest15353-21kworker/u16:1+efi_rts_wq23:40:083
30687992170,214cyclictest30260-21kworker/u16:3+efi_rts_wq20:05:142
30685992160,215cyclictest13255-21kworker/u16:2+efi_rts_wq22:04:520
30685992140,213cyclictest30260-21kworker/u16:3+efi_rts_wq19:25:130
30687992130,212cyclictest30260-21kworker/u16:3+efi_rts_wq19:24:232
30687992100,209cyclictest13255-21kworker/u16:2+efi_rts_wq20:19:342
30686992090,208cyclictest15353-21kworker/u16:1+efi_rts_wq23:51:131
30687992080,207cyclictest13255-21kworker/u16:2+efi_rts_wq21:20:142
30687992070,206cyclictest15353-21kworker/u16:1+efi_rts_wq00:05:112
30685992070,205cyclictest13255-21kworker/u16:2+efi_rts_wq22:35:120
30686992040,203cyclictest30260-21kworker/u16:3+efi_rts_wq21:50:141
30686992000,199cyclictest18390-21kworker/u16:3+efi_rts_wq00:25:151
30688991980,197cyclictest13255-21kworker/u16:2+efi_rts_wq21:20:143
30686991950,194cyclictest13255-21kworker/u16:2+efi_rts_wq20:50:141
30688991940,193cyclictest30260-21kworker/u16:3+efi_rts_wq20:45:133
30685991930,192cyclictest30260-21kworker/u16:3+efi_rts_wq21:44:490
30688991910,188cyclictest18390-21kworker/u16:3+efi_rts_wq00:25:143
30685991910,190cyclictest18390-21kworker/u16:3+efi_rts_wq23:25:140
30686991900,189cyclictest18390-21kworker/u16:3+efi_rts_wq00:11:161
30686991880,187cyclictest13255-21kworker/u16:2+efi_rts_wq19:54:281
30686991850,184cyclictest13255-21kworker/u16:2+efi_rts_wq19:14:211
30688991840,183cyclictest7074-21kworker/u16:1+efi_rts_wq23:00:133
30686991840,183cyclictest30260-21kworker/u16:3+efi_rts_wq20:04:301
30686991840,183cyclictest15353-21kworker/u16:1+efi_rts_wq23:25:041
30685991840,183cyclictest15353-21kworker/u16:1+efi_rts_wq23:50:120
30685991820,181cyclictest30260-21kworker/u16:3+efi_rts_wq20:30:140
30685991770,174cyclictest18390-21kworker/u16:3+efi_rts_wq00:15:120
30687991760,175cyclictest30260-21kworker/u16:3+efi_rts_wq22:00:132
30687991760,174cyclictest9856-21kworker/u16:2+efi_rts_wq23:05:122
30686991740,173cyclictest30260-21kworker/u16:3+efi_rts_wq21:25:111
30685991730,172cyclictest30260-21kworker/u16:3+efi_rts_wq20:09:310
30685991720,171cyclictest30260-21kworker/u16:3+efi_rts_wq22:44:560
30686991700,169cyclictest18390-21kworker/u16:3+efi_rts_wq00:06:161
30688991690,168cyclictest15353-21kworker/u16:1+efi_rts_wq23:45:133
30686991670,166cyclictest30260-21kworker/u16:3+efi_rts_wq19:39:251
30686991650,164cyclictest30260-21kworker/u16:3+efi_rts_wq19:25:141
30686991640,163cyclictest15353-21kworker/u16:1+efi_rts_wq23:46:121
30688991610,160cyclictest30260-21kworker/u16:3+efi_rts_wq20:14:323
30688991600,159cyclictest13255-21kworker/u16:2+efi_rts_wq22:10:143
30688991510,151cyclictest7074-21kworker/u16:1+efi_rts_wq22:59:593
30688991510,150cyclictest30260-21kworker/u16:3+efi_rts_wq19:25:143
30687991480,145cyclictest30260-21kworker/u16:3+efi_rts_wq19:15:012
30687991480,145cyclictest30260-21kworker/u16:3+efi_rts_wq19:15:002
30686991460,145cyclictest13255-21kworker/u16:2+efi_rts_wq19:45:121
30685991440,143cyclictest13255-21kworker/u16:2+efi_rts_wq22:20:130
30686991420,141cyclictest18390-21kworker/u16:3+efi_rts_wq23:20:131
30686991400,139cyclictest18390-21kworker/u16:3+efi_rts_wq23:30:141
30687991340,133cyclictest13255-21kworker/u16:2+efi_rts_wq21:54:502
30686991330,132cyclictest13255-21kworker/u16:2+efi_rts_wq21:04:411
30687991300,129cyclictest30260-21kworker/u16:3+efi_rts_wq21:15:112
30687991300,129cyclictest30260-21kworker/u16:3+efi_rts_wq19:45:142
30687991250,124cyclictest13255-21kworker/u16:2+efi_rts_wq19:29:242
30688991240,123cyclictest15353-21kworker/u16:1+efi_rts_wq23:15:103
3255221120,0sleep332553-21/usr/sbin/munin22:40:143
1823121120,0sleep018229-21rm23:12:260
30685993330,2cyclictest818-21snmpd20:29:330
30688993230,2cyclictest818-21snmpd22:52:013
30687993229,2cyclictest818-21snmpd21:12:202
30687993229,2cyclictest818-21snmpd20:45:422
30687993229,2cyclictest23979-21cat00:30:152
30686993230,2cyclictest11406-21cat23:00:161
30686993229,2cyclictest818-21snmpd22:18:591
30685993230,2cyclictest818-21snmpd19:17:130
30685993230,2cyclictest818-21snmpd19:17:120
30685993229,2cyclictest818-21snmpd20:40:520
30688993129,2cyclictest818-21snmpd19:40:253
30688993129,2cyclictest818-21snmpd19:23:573
30687993130,1cyclictest818-21snmpd19:43:102
30687993129,2cyclictest818-21snmpd22:23:072
30687993129,2cyclictest818-21snmpd00:13:222
30687993128,2cyclictest818-21snmpd20:40:102
30686993129,2cyclictest818-21snmpd21:56:591
30685993130,1cyclictest818-21snmpd19:53:380
30685993129,2cyclictest818-21snmpd23:18:230
30688993029,1cyclictest818-21snmpd21:27:113
30688993029,1cyclictest818-21snmpd20:18:453
30688993029,1cyclictest818-21snmpd19:30:313
30688993028,2cyclictest818-21snmpd00:34:103
30687993030,0cyclictest818-21snmpd22:59:342
30687993029,1cyclictest818-21snmpd23:25:192
30687993029,1cyclictest818-21snmpd23:20:202
30687993029,1cyclictest818-21snmpd23:17:192
30687993029,1cyclictest818-21snmpd21:49:502
30687993029,1cyclictest818-21snmpd21:35:522
30687993029,1cyclictest818-21snmpd00:20:342
30687993029,1cyclictest818-21snmpd00:01:452
30687993028,2cyclictest818-21snmpd20:13:422
30686993029,1cyclictest818-21snmpd23:59:001
30686993029,1cyclictest818-21snmpd21:44:031
30686993029,1cyclictest818-21snmpd21:37:311
30686993029,1cyclictest818-21snmpd20:36:391
30686993029,1cyclictest818-21snmpd20:22:481
30686993029,1cyclictest818-21snmpd19:32:141
30686993029,1cyclictest818-21snmpd00:00:541
30686993029,1cyclictest4609-21kworker/1:2+events22:52:121
30686993028,2cyclictest818-21snmpd23:07:531
30685993029,1cyclictest818-21snmpd20:50:490
30685993028,2cyclictest818-21snmpd22:26:280
30685993028,2cyclictest818-21snmpd22:15:140
30688992928,1cyclictest818-21snmpd21:30:133
30688992928,1cyclictest818-21snmpd21:01:223
30688992928,1cyclictest818-21snmpd20:06:153
30687992928,1cyclictest818-21snmpd23:55:592
30687992928,1cyclictest818-21snmpd23:41:482
30687992928,1cyclictest818-21snmpd23:30:322
30687992928,1cyclictest818-21snmpd22:06:052
30687992928,1cyclictest818-21snmpd20:24:032
30687992928,1cyclictest818-21snmpd19:39:172
30687992927,2cyclictest818-21snmpd20:56:302
30686992928,1cyclictest818-21snmpd21:22:471
30685992928,1cyclictest818-21snmpd21:11:500
30685992926,2cyclictest818-21snmpd21:52:270
30688992827,1cyclictest818-21snmpd22:32:463
30688992827,1cyclictest818-21snmpd21:05:593
30688992827,1cyclictest818-21snmpd19:56:483
30688992827,1cyclictest27252-21cat23:30:163
30688992826,2cyclictest818-21snmpd23:25:373
30688992826,2cyclictest818-21snmpd20:38:343
30687992827,1cyclictest818-21snmpd22:25:512
30687992827,1cyclictest818-21snmpd21:29:342
30686992827,1cyclictest818-21snmpd22:47:151
30686992827,1cyclictest818-21snmpd22:04:271
30686992826,2cyclictest818-21snmpd00:24:391
30685992826,2cyclictest818-21snmpd19:39:070
30687992725,2cyclictest818-21snmpd22:52:372
30687992725,2cyclictest818-21snmpd19:10:222
30686992727,0cyclictest691-21kworker/1:0+events00:16:401
30686992727,0cyclictest28229-21kworker/1:1+events23:38:171
30685992726,1cyclictest818-21snmpd23:48:540
30685992726,1cyclictest818-21snmpd23:00:130
30685992726,1cyclictest818-21snmpd22:32:190
30685992726,1cyclictest818-21snmpd20:14:300
30685992726,1cyclictest15987-21cat20:55:140
30688992626,0cyclictest818-21snmpd22:09:083
30688992625,1cyclictest818-21snmpd20:32:273
30686992625,1cyclictest818-21snmpd22:26:151
30688992524,1cyclictest818-21snmpd22:46:453
30687992524,1cyclictest818-21snmpd22:12:422
30687992524,1cyclictest818-21snmpd00:27:062
30686992524,1cyclictest32308-21cat23:40:151
30685992524,1cyclictest818-21snmpd21:05:220
30685992523,2cyclictest818-21snmpd00:39:230
30688992424,0cyclictest818-21snmpd23:51:573
30685992423,1cyclictest818-21snmpd21:39:460
30687992323,0cyclictest75550irq/131-enp1s023:12:022
30687992322,1cyclictest818-21snmpd21:03:532
30686992322,1cyclictest4273-21kworker/1:0+events19:21:131
30687992221,1cyclictest818-21snmpd23:39:022
30686992221,1cyclictest818-21snmpd20:25:171
30688992120,1cyclictest818-21snmpd19:52:313
30687992120,1cyclictest818-21snmpd19:58:332
30688992019,1cyclictest818-21snmpd21:15:113
30688992019,1cyclictest818-21snmpd21:10:523
30688992018,2cyclictest31584-21cat19:10:183
30686991918,1cyclictest24070-21kworker/1:0+events22:10:141
30685991917,2cyclictest818-21snmpd00:15:000
30688991816,2cyclictest30300-21cat22:35:133
30685991717,0cyclictest15353-21kworker/u16:1+atlantic00:05:580
30685991717,0cyclictest13255-21kworker/u16:2+atlantic21:30:580
30687991615,1cyclictest825-21lldpd21:43:472
30687991412,2cyclictest818-21snmpd19:30:462
30687991313,0cyclictest13255-21kworker/u16:2+atlantic20:54:422
306879965,1cyclictest22234-21expr20:00:122
306879965,1cyclictest12348-21taskset21:59:492
306859965,1cyclictest16219-21netstat19:45:170
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional