You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-27 - 11:57

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Thu Nov 27, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
64562320307,5sleep20-21swapper/219:08:572
64592317302,5sleep00-21swapper/019:08:590
63852317303,5sleep10-21swapper/119:08:041
64222316309,4sleep30-21swapper/319:08:343
6804993010,299cyclictest29178-21kworker/u16:0+efi_rts_wq00:31:231
6805993000,298cyclictest1740-21kworker/u16:2+efi_rts_wq19:10:122
6804993000,299cyclictest1740-21kworker/u16:2+efi_rts_wq20:50:121
6804992990,297cyclictest2655-21kworker/u16:3+efi_rts_wq23:15:121
6806992970,295cyclictest17693-21kworker/u16:1+efi_rts_wq22:20:133
6804992970,296cyclictest2655-21kworker/u16:3+efi_rts_wq23:30:131
6803992970,296cyclictest17693-21kworker/u16:1+efi_rts_wq21:25:110
6805992960,295cyclictest26884-21kworker/u16:2+efi_rts_wq00:25:142
6805992960,295cyclictest1740-21kworker/u16:2+efi_rts_wq22:04:152
6804992960,295cyclictest26884-21kworker/u16:2+efi_rts_wq00:06:201
6803992960,295cyclictest26884-21kworker/u16:2+efi_rts_wq00:36:240
6804992950,294cyclictest17693-21kworker/u16:1+efi_rts_wq20:23:581
6803992950,294cyclictest1740-21kworker/u16:2+efi_rts_wq19:13:460
6805992940,293cyclictest17693-21kworker/u16:1+efi_rts_wq22:24:192
6803992940,293cyclictest1740-21kworker/u16:2+efi_rts_wq21:30:120
6806992930,292cyclictest17693-21kworker/u16:1+efi_rts_wq22:09:163
6806992930,292cyclictest17693-21kworker/u16:1+efi_rts_wq20:00:153
6806992930,291cyclictest1740-21kworker/u16:2+efi_rts_wq22:35:143
6806992930,291cyclictest1740-21kworker/u16:2+efi_rts_wq22:35:143
6806992920,291cyclictest1740-21kworker/u16:2+efi_rts_wq19:55:153
6804992920,290cyclictest27438-21kworker/u16:0+efi_rts_wq22:54:231
6803992920,291cyclictest23168-21kworker/u16:3+efi_rts_wq22:40:110
6804992910,290cyclictest1740-21kworker/u16:2+efi_rts_wq20:28:591
6803992910,290cyclictest1740-21kworker/u16:2+efi_rts_wq21:00:120
6804992900,289cyclictest27438-21kworker/u16:0+efi_rts_wq22:55:131
6803992890,288cyclictest17693-21kworker/u16:1+efi_rts_wq21:55:120
6805992880,287cyclictest17693-21kworker/u16:1+efi_rts_wq22:05:132
6806992840,283cyclictest1740-21kworker/u16:2+efi_rts_wq22:25:133
6804992840,283cyclictest26884-21kworker/u16:2+efi_rts_wq00:15:131
6803992840,279cyclictest29178-21kworker/u16:0+efi_rts_wq00:00:130
6804992830,281cyclictest27438-21kworker/u16:0+efi_rts_wq22:45:141
6803992830,282cyclictest17693-21kworker/u16:1+efi_rts_wq20:00:150
6806992820,281cyclictest26884-21kworker/u16:2+efi_rts_wq00:10:123
6805992810,280cyclictest27438-21kworker/u16:0+efi_rts_wq23:05:122
6806992800,279cyclictest2655-21kworker/u16:3+efi_rts_wq23:15:123
6806992800,279cyclictest17693-21kworker/u16:1+efi_rts_wq20:15:143
6804992800,279cyclictest2655-21kworker/u16:3+efi_rts_wq23:25:151
6806992790,278cyclictest1740-21kworker/u16:2+efi_rts_wq19:50:133
6804992780,276cyclictest27438-21kworker/u16:0+efi_rts_wq23:00:131
6805992770,276cyclictest27438-21kworker/u16:0+efi_rts_wq23:20:122
6806992750,274cyclictest1740-21kworker/u16:2+efi_rts_wq21:04:053
6804992750,274cyclictest17693-21kworker/u16:1+efi_rts_wq20:15:151
6804992750,274cyclictest15225-21kworker/u16:1+efi_rts_wq23:35:121
6803992740,273cyclictest1740-21kworker/u16:2+efi_rts_wq21:49:130
6806992730,272cyclictest1740-21kworker/u16:2+efi_rts_wq19:15:123
6804992730,271cyclictest1740-21kworker/u16:2+efi_rts_wq19:40:121
6806992720,271cyclictest1740-21kworker/u16:2+efi_rts_wq21:45:123
6804992720,271cyclictest15225-21kworker/u16:1+efi_rts_wq23:45:121
6806992710,270cyclictest17693-21kworker/u16:1+efi_rts_wq20:45:133
6805992710,270cyclictest15225-21kworker/u16:1+efi_rts_wq23:35:122
6804992710,269cyclictest2655-21kworker/u16:3+efi_rts_wq23:40:101
6805992690,268cyclictest17693-21kworker/u16:1+efi_rts_wq19:48:532
6804992680,267cyclictest1740-21kworker/u16:2+efi_rts_wq19:15:011
6803992680,267cyclictest1740-21kworker/u16:2+efi_rts_wq21:14:070
6804992670,266cyclictest17693-21kworker/u16:1+efi_rts_wq20:55:121
6805992660,265cyclictest29178-21kworker/u16:0+efi_rts_wq23:50:162
6804992660,265cyclictest1740-21kworker/u16:2+efi_rts_wq22:35:131
6804992660,265cyclictest1740-21kworker/u16:2+efi_rts_wq22:35:131
6804992650,264cyclictest1740-21kworker/u16:2+efi_rts_wq21:45:121
6806992600,259cyclictest1740-21kworker/u16:2+efi_rts_wq20:13:563
6806992600,259cyclictest1740-21kworker/u16:2+efi_rts_wq19:25:123
6804992600,259cyclictest17693-21kworker/u16:1+efi_rts_wq19:35:131
6804992590,258cyclictest17693-21kworker/u16:1+efi_rts_wq20:05:121
6806992580,257cyclictest1740-21kworker/u16:2+efi_rts_wq19:43:523
6805992580,257cyclictest17693-21kworker/u16:1+efi_rts_wq21:05:132
6806992560,255cyclictest1740-21kworker/u16:2+efi_rts_wq19:10:133
6806992560,254cyclictest1740-21kworker/u16:2+efi_rts_wq21:15:123
6804992540,253cyclictest1740-21kworker/u16:2+efi_rts_wq21:24:091
6806992530,252cyclictest27438-21kworker/u16:0+efi_rts_wq23:10:123
6806992500,249cyclictest17693-21kworker/u16:1+efi_rts_wq20:05:133
6803992500,249cyclictest17693-21kworker/u16:1+efi_rts_wq20:59:040
6803992490,248cyclictest17693-21kworker/u16:1+efi_rts_wq19:30:130
6805992480,247cyclictest17693-21kworker/u16:1+efi_rts_wq20:30:082
6805992480,246cyclictest27438-21kworker/u16:0+efi_rts_wq22:50:142
6806992470,244cyclictest27438-21kworker/u16:0+efi_rts_wq23:20:123
6805992460,244cyclictest2655-21kworker/u16:3+efi_rts_wq23:40:112
6803992430,242cyclictest17693-21kworker/u16:1+efi_rts_wq21:20:120
6806992410,240cyclictest17693-21kworker/u16:1+efi_rts_wq20:39:013
6803992400,238cyclictest1740-21kworker/u16:2+efi_rts_wq21:35:120
6806992380,237cyclictest29178-21kworker/u16:0+efi_rts_wq23:50:163
6806992380,237cyclictest15225-21kworker/u16:1+efi_rts_wq23:29:293
6806992370,236cyclictest1740-21kworker/u16:2+efi_rts_wq20:40:093
6804992360,235cyclictest17693-21kworker/u16:1+efi_rts_wq22:15:121
6804992350,234cyclictest17693-21kworker/u16:1+efi_rts_wq20:34:001
6804992350,234cyclictest1740-21kworker/u16:2+efi_rts_wq21:19:081
6806992340,233cyclictest1740-21kworker/u16:2+efi_rts_wq21:10:123
6804992340,233cyclictest1740-21kworker/u16:2+efi_rts_wq21:35:121
6806992330,232cyclictest1740-21kworker/u16:2+efi_rts_wq21:39:113
6805992330,232cyclictest27438-21kworker/u16:0+efi_rts_wq23:00:122
6804992310,230cyclictest17693-21kworker/u16:1+efi_rts_wq19:45:111
6803992280,227cyclictest1740-21kworker/u16:2+efi_rts_wq19:20:150
6806992260,225cyclictest17693-21kworker/u16:1+efi_rts_wq22:30:163
6806992260,225cyclictest1740-21kworker/u16:2+efi_rts_wq20:54:033
6806992250,224cyclictest17693-21kworker/u16:1+efi_rts_wq20:20:113
6805992240,223cyclictest1740-21kworker/u16:2+efi_rts_wq21:50:122
6806992230,222cyclictest26884-21kworker/u16:2+efi_rts_wq00:35:143
6803992230,222cyclictest26884-21kworker/u16:2+efi_rts_wq00:25:140
6803992220,221cyclictest1740-21kworker/u16:2+efi_rts_wq19:25:120
6806992200,219cyclictest26884-21kworker/u16:2+efi_rts_wq23:55:123
6806992190,218cyclictest1740-21kworker/u16:2+efi_rts_wq22:00:143
6806992180,217cyclictest29178-21kworker/u16:0+efi_rts_wq00:05:123
6803992180,217cyclictest1740-21kworker/u16:2+efi_rts_wq19:55:150
6806992160,215cyclictest17693-21kworker/u16:1+efi_rts_wq21:20:113
6805992160,214cyclictest29178-21kworker/u16:0+efi_rts_wq00:20:132
6805992150,214cyclictest29178-21kworker/u16:0+efi_rts_wq00:30:122
6806992120,211cyclictest17693-21kworker/u16:1+efi_rts_wq21:34:103
6803992120,211cyclictest17693-21kworker/u16:1+efi_rts_wq22:30:160
6803992100,209cyclictest1740-21kworker/u16:2+efi_rts_wq20:18:570
6803992090,208cyclictest1740-21kworker/u16:2+efi_rts_wq20:44:010
6806992070,206cyclictest1740-21kworker/u16:2+efi_rts_wq19:20:153
6806992060,205cyclictest17693-21kworker/u16:1+efi_rts_wq21:44:123
6806992050,204cyclictest17693-21kworker/u16:1+efi_rts_wq19:30:133
6806992030,202cyclictest1740-21kworker/u16:2+efi_rts_wq22:10:143
6805992030,202cyclictest17693-21kworker/u16:1+efi_rts_wq19:35:142
6804992030,202cyclictest1740-21kworker/u16:2+efi_rts_wq21:00:121
6804991990,198cyclictest17693-21kworker/u16:1+efi_rts_wq21:05:121
6804991970,196cyclictest1740-21kworker/u16:2+efi_rts_wq21:50:121
6803991950,194cyclictest26884-21kworker/u16:2+efi_rts_wq00:11:200
6806991930,192cyclictest15225-21kworker/u16:1+efi_rts_wq23:34:303
6804991930,192cyclictest29178-21kworker/u16:0+efi_rts_wq00:20:131
6805991920,191cyclictest2655-21kworker/u16:3+efi_rts_wq23:25:152
6804991900,188cyclictest23168-21kworker/u16:3+efi_rts_wq22:40:111
6803991840,183cyclictest27438-21kworker/u16:0+efi_rts_wq22:55:130
6806991830,182cyclictest27438-21kworker/u16:0+efi_rts_wq22:45:143
6805991810,180cyclictest17693-21kworker/u16:1+efi_rts_wq20:08:552
6806991800,179cyclictest15225-21kworker/u16:1+efi_rts_wq23:35:123
6805991790,178cyclictest2655-21kworker/u16:3+efi_rts_wq23:30:132
6803991740,173cyclictest17693-21kworker/u16:1+efi_rts_wq20:30:080
6805991700,168cyclictest1740-21kworker/u16:2+efi_rts_wq19:50:132
6804991690,168cyclictest1740-21kworker/u16:2+efi_rts_wq19:25:121
6803991690,168cyclictest29178-21kworker/u16:0+efi_rts_wq23:51:190
6805991660,166cyclictest17693-21kworker/u16:1+efi_rts_wq20:49:022
6805991640,163cyclictest1740-21kworker/u16:2+efi_rts_wq21:30:122
6805991630,162cyclictest1740-21kworker/u16:2+efi_rts_wq20:10:142
6804991630,162cyclictest1740-21kworker/u16:2+efi_rts_wq22:10:141
6804991600,158cyclictest1740-21kworker/u16:2+efi_rts_wq23:09:251
6803991570,154cyclictest1740-21kworker/u16:2+efi_rts_wq19:15:010
6805991510,150cyclictest26884-21kworker/u16:2+efi_rts_wq23:56:192
6803991510,150cyclictest1740-21kworker/u16:2+efi_rts_wq22:25:130
6805991470,146cyclictest29178-21kworker/u16:0+efi_rts_wq00:00:132
6803991470,146cyclictest17693-21kworker/u16:1+efi_rts_wq21:40:120
6806991450,144cyclictest29178-21kworker/u16:0+efi_rts_wq00:30:123
6803991420,141cyclictest2655-21kworker/u16:3+efi_rts_wq23:25:150
6803991360,136cyclictest29178-21kworker/u16:0+efi_rts_wq00:21:210
6804991330,132cyclictest1740-21kworker/u16:2+efi_rts_wq23:14:261
6805991320,131cyclictest17693-21kworker/u16:1+efi_rts_wq21:59:142
6806991290,128cyclictest17693-21kworker/u16:1+efi_rts_wq22:15:113
6805991270,127cyclictest1740-21kworker/u16:2+efi_rts_wq22:29:202
6806991210,120cyclictest29178-21kworker/u16:0+efi_rts_wq00:01:193
6806991210,120cyclictest2655-21kworker/u16:3+efi_rts_wq23:46:183
6805991160,115cyclictest1740-21kworker/u16:2+efi_rts_wq19:55:142
6804991140,113cyclictest2655-21kworker/u16:3+efi_rts_wq23:24:281
6803991140,111cyclictest27438-21kworker/u16:0+efi_rts_wq23:10:120
6806991110,109cyclictest17693-21kworker/u16:1+efi_rts_wq19:45:123
6805991110,111cyclictest2655-21kworker/u16:3+efi_rts_wq23:19:272
6803991100,109cyclictest15225-21kworker/u16:1+efi_rts_wq23:44:320
6806991080,107cyclictest27438-21kworker/u16:0+efi_rts_wq23:05:123
6804991030,102cyclictest17693-21kworker/u16:1+efi_rts_wq22:20:121
6804993429,2cyclictest795-21snmpd20:44:051
6804993329,1cyclictest795-21snmpd23:53:351
6804993329,1cyclictest795-21snmpd21:33:511
6804993329,1cyclictest795-21snmpd19:55:511
6805993230,2cyclictest795-21snmpd22:30:412
6804993228,1cyclictest795-21snmpd21:41:431
6804993227,2cyclictest795-21snmpd00:26:481
6803993229,2cyclictest795-21snmpd00:19:080
6806993129,2cyclictest795-21snmpd21:09:483
6806993129,2cyclictest795-21snmpd19:35:483
6805993129,2cyclictest795-21snmpd22:49:152
6804993129,2cyclictest795-21snmpd20:48:591
6803993129,2cyclictest795-21snmpd19:45:300
6803993129,1cyclictest795-21snmpd23:21:010
6803993128,3cyclictest795-21snmpd23:15:090
6803993128,2cyclictest795-21snmpd19:51:120
6806993029,1cyclictest795-21snmpd23:02:093
6806993029,1cyclictest795-21snmpd21:50:553
6806993029,1cyclictest795-21snmpd21:26:423
6806993029,1cyclictest795-21snmpd00:25:303
6806993029,1cyclictest795-21snmpd00:20:443
6805993029,1cyclictest795-21snmpd21:46:222
6805993029,1cyclictest795-21snmpd19:23:112
6805993029,1cyclictest795-21snmpd00:13:562
6805993028,2cyclictest795-21snmpd22:57:302
6805993028,2cyclictest795-21snmpd19:17:502
6804993027,2cyclictest795-21snmpd20:36:561
6803993029,1cyclictest795-21snmpd23:45:400
6803993029,1cyclictest795-21snmpd22:10:380
6803993029,1cyclictest795-21snmpd22:08:110
6803993029,1cyclictest795-21snmpd20:54:320
6803993029,1cyclictest795-21snmpd20:12:430
6803993029,1cyclictest795-21snmpd19:40:570
6803993028,2cyclictest795-21snmpd22:53:570
6803993027,2cyclictest795-21snmpd21:06:480
6806992928,1cyclictest795-21snmpd21:56:283
6806992927,2cyclictest795-21snmpd22:52:003
6806992926,2cyclictest795-21snmpd20:27:553
6805992927,2cyclictest795-21snmpd19:44:152
6805992927,2cyclictest29013-21cat21:25:132
6804992929,0cyclictest13297-21kworker/1:0+events21:10:151
6804992928,1cyclictest795-21snmpd19:13:261
6804992928,1cyclictest795-21snmpd00:00:381
6804992927,2cyclictest795-21snmpd23:59:201
6804992927,2cyclictest795-21snmpd20:01:251
6803992928,1cyclictest795-21snmpd23:58:080
6803992928,1cyclictest795-21snmpd21:52:160
6803992928,1cyclictest795-21snmpd20:24:160
6803992927,2cyclictest795-21snmpd22:37:050
6803992927,2cyclictest795-21snmpd22:37:050
6803992927,2cyclictest795-21snmpd22:02:400
6805992827,1cyclictest795-21snmpd21:12:302
6805992827,1cyclictest795-21snmpd20:57:082
6805992827,1cyclictest795-21snmpd20:27:342
6805992827,1cyclictest795-21snmpd20:04:522
6805992826,2cyclictest14481-21cat20:50:132
6805992825,2cyclictest795-21snmpd00:15:082
6804992827,1cyclictest795-21snmpd00:39:571
6803992827,1cyclictest795-21snmpd23:03:570
6803992827,1cyclictest795-21snmpd22:17:350
6803992827,1cyclictest795-21snmpd00:05:530
6803992826,2cyclictest795-21snmpd23:09:120
6803992826,2cyclictest795-21snmpd20:36:020
6806992726,1cyclictest795-21snmpd23:42:283
6806992726,1cyclictest795-21snmpd20:58:113
6805992726,1cyclictest795-21snmpd20:35:532
6805992726,1cyclictest795-21snmpd19:34:182
6805992725,2cyclictest795-21snmpd21:36:372
6805992725,2cyclictest795-21snmpd19:27:532
6805992724,3cyclictest795-21snmpd23:10:032
6804992726,1cyclictest795-21snmpd19:22:531
6804992725,2cyclictest24626-21cat19:50:151
6803992727,0cyclictest795-21snmpd22:49:390
6803992726,1cyclictest795-21snmpd19:35:390
6803992725,2cyclictest795-21snmpd20:49:350
6803992724,2cyclictest795-21snmpd22:20:590
6806992625,1cyclictest795-21snmpd20:30:403
6806992624,2cyclictest795-21snmpd22:55:393
6805992625,1cyclictest795-21snmpd22:39:172
6805992625,1cyclictest795-21snmpd22:39:172
6805992625,1cyclictest17605-21cat22:15:132
6805992624,2cyclictest795-21snmpd23:47:252
6805992624,2cyclictest795-21snmpd00:36:542
6804992626,0cyclictest795-21snmpd22:32:531
6805992524,1cyclictest1740-21kworker/u16:2+atlantic22:42:292
6804992524,1cyclictest795-21snmpd22:09:471
6805992423,1cyclictest807-21lldpd00:07:472
6804992423,1cyclictest795-21snmpd22:00:041
6804992423,1cyclictest795-21snmpd19:31:181
6805992221,1cyclictest795-21snmpd21:42:552
6803992221,1cyclictest795-21snmpd20:25:040
6803992018,2cyclictest795-21snmpd23:32:280
6805991817,1cyclictest795-21snmpd20:42:202
6804991817,1cyclictest795-21snmpd22:29:591
6804991817,1cyclictest795-21snmpd00:14:321
6803991818,0cyclictest74150irq/134-enp1s023:37:270
6805991717,0cyclictest1740-21kworker/u16:2+atlantic22:13:192
6804991615,1cyclictest795-21snmpd21:59:311
6806991515,0cyclictest74050irq/133-enp1s022:42:183
6805991515,0cyclictest1740-21kworker/u16:2+atlantic21:00:472
6806991413,1cyclictest795-21snmpd00:16:233
6803991413,1cyclictest795-21snmpd21:19:180
680499109,1cyclictest795-21snmpd21:27:451
680399108,2cyclictest14779-21cat00:30:140
68059970,7cyclictest0-21swapper/220:15:212
68059965,1cyclictest4669-21expr20:20:112
68059965,1cyclictest257652sleep221:16:292
68049965,1cyclictest880-21wc20:10:171
68059954,1cyclictest26292-21taskset21:20:082
68039954,1cyclictest31937-21uptime20:05:210
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional