You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-22 - 11:56

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Mon Dec 22, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
311752324309,5sleep30-21swapper/319:06:143
311172319304,5sleep20-21swapper/219:05:292
31732993160,315cyclictest10004-21kworker/u16:0+efi_rts_wq22:40:121
311362315309,4sleep10-21swapper/119:05:431
311302315307,5sleep00-21swapper/019:05:390
31731993100,307cyclictest9546-21kworker/u16:3+efi_rts_wq00:00:140
31734993090,308cyclictest10004-21kworker/u16:0+efi_rts_wq22:45:133
31734993090,308cyclictest10004-21kworker/u16:0+efi_rts_wq20:00:113
31732993080,307cyclictest22124-21kworker/u16:2+efi_rts_wq22:14:501
31731993060,305cyclictest15138-21kworker/u16:3+efi_rts_wq19:30:140
31734993040,303cyclictest10004-21kworker/u16:0+efi_rts_wq22:05:143
31734993030,302cyclictest10004-21kworker/u16:0+efi_rts_wq22:35:133
31732993030,302cyclictest28897-21kworker/u16:1+efi_rts_wq00:15:151
31732993030,302cyclictest22124-21kworker/u16:2+efi_rts_wq21:50:141
31731993030,302cyclictest28897-21kworker/u16:1+efi_rts_wq00:25:160
31734993020,300cyclictest10004-21kworker/u16:0+efi_rts_wq22:30:133
31733993020,301cyclictest10004-21kworker/u16:0+efi_rts_wq20:25:132
31732993020,301cyclictest22124-21kworker/u16:2+efi_rts_wq21:29:431
31732993020,301cyclictest22124-21kworker/u16:2+efi_rts_wq20:55:151
31734993010,300cyclictest28897-21kworker/u16:1+efi_rts_wq00:20:133
31734993000,299cyclictest22124-21kworker/u16:2+efi_rts_wq22:10:143
31732993000,299cyclictest15138-21kworker/u16:3+efi_rts_wq19:20:141
31734992990,297cyclictest22124-21kworker/u16:2+efi_rts_wq20:45:133
31733992990,298cyclictest22124-21kworker/u16:2+efi_rts_wq23:15:122
31732992990,298cyclictest22124-21kworker/u16:2+efi_rts_wq22:25:141
31732992970,296cyclictest15138-21kworker/u16:3+efi_rts_wq19:40:121
31732992970,296cyclictest10004-21kworker/u16:0+efi_rts_wq21:49:471
31733992950,294cyclictest28897-21kworker/u16:1+efi_rts_wq23:35:162
31734992940,293cyclictest10004-21kworker/u16:0+efi_rts_wq20:15:143
31733992940,293cyclictest28897-21kworker/u16:1+efi_rts_wq23:10:132
31733992940,293cyclictest22124-21kworker/u16:2+efi_rts_wq19:15:152
31732992940,293cyclictest28897-21kworker/u16:1+efi_rts_wq23:05:011
31731992920,291cyclictest32487-21kworker/u16:0+efi_rts_wq00:30:130
31732992900,289cyclictest9546-21kworker/u16:3+efi_rts_wq00:05:141
31731992900,289cyclictest20798-21kworker/u16:0+efi_rts_wq23:40:140
31733992890,288cyclictest22124-21kworker/u16:2+efi_rts_wq21:55:122
31731992870,286cyclictest22124-21kworker/u16:2+efi_rts_wq22:50:130
31732992860,285cyclictest22124-21kworker/u16:2+efi_rts_wq23:20:051
31731992860,284cyclictest22124-21kworker/u16:2+efi_rts_wq23:05:130
31732992850,284cyclictest10004-21kworker/u16:0+efi_rts_wq21:00:151
31733992840,283cyclictest10004-21kworker/u16:0+efi_rts_wq22:45:132
31731992840,283cyclictest9546-21kworker/u16:3+efi_rts_wq00:05:140
31731992830,282cyclictest10004-21kworker/u16:0+efi_rts_wq20:19:320
31733992820,281cyclictest9546-21kworker/u16:3+efi_rts_wq00:00:142
31731992820,281cyclictest10004-21kworker/u16:0+efi_rts_wq21:20:120
31734992800,279cyclictest28897-21kworker/u16:1+efi_rts_wq00:26:263
31734992800,277cyclictest28897-21kworker/u16:1+efi_rts_wq23:35:163
31733992800,279cyclictest10004-21kworker/u16:0+efi_rts_wq21:04:392
31733992790,278cyclictest28897-21kworker/u16:1+efi_rts_wq23:25:132
31734992780,277cyclictest22124-21kworker/u16:2+efi_rts_wq22:55:153
31734992780,277cyclictest22124-21kworker/u16:2+efi_rts_wq22:55:153
31733992780,277cyclictest28897-21kworker/u16:1+efi_rts_wq23:51:192
31732992780,277cyclictest10004-21kworker/u16:0+efi_rts_wq20:50:141
31734992770,276cyclictest22124-21kworker/u16:2+efi_rts_wq21:05:143
31734992770,276cyclictest10004-21kworker/u16:0+efi_rts_wq22:15:163
31734992760,275cyclictest28897-21kworker/u16:1+efi_rts_wq23:25:133
31732992760,274cyclictest9546-21kworker/u16:3+efi_rts_wq23:55:131
31731992750,274cyclictest22124-21kworker/u16:2+efi_rts_wq21:40:140
31732992740,273cyclictest22124-21kworker/u16:2+efi_rts_wq21:09:391
31732992740,273cyclictest22124-21kworker/u16:2+efi_rts_wq20:30:121
31731992730,272cyclictest22124-21kworker/u16:2+efi_rts_wq21:54:470
31732992720,271cyclictest10004-21kworker/u16:0+efi_rts_wq21:59:491
31734992710,270cyclictest15138-21kworker/u16:3+efi_rts_wq19:14:203
31733992690,267cyclictest22124-21kworker/u16:2+efi_rts_wq19:45:132
31733992670,266cyclictest28897-21kworker/u16:1+efi_rts_wq00:35:142
31731992670,266cyclictest22124-21kworker/u16:2+efi_rts_wq21:05:150
31733992660,265cyclictest10004-21kworker/u16:0+efi_rts_wq21:10:142
31734992640,263cyclictest22124-21kworker/u16:2+efi_rts_wq21:25:143
31731992620,260cyclictest10004-21kworker/u16:0+efi_rts_wq22:40:130
31731992610,260cyclictest22124-21kworker/u16:2+efi_rts_wq19:35:140
31734992600,259cyclictest10004-21kworker/u16:0+efi_rts_wq19:50:133
31733992600,259cyclictest10004-21kworker/u16:0+efi_rts_wq21:35:172
31734992590,258cyclictest10004-21kworker/u16:0+efi_rts_wq21:20:123
31733992550,254cyclictest9546-21kworker/u16:3+efi_rts_wq00:10:142
31734992520,251cyclictest10004-21kworker/u16:0+efi_rts_wq21:45:133
31733992480,247cyclictest22124-21kworker/u16:2+efi_rts_wq20:30:122
31732992480,247cyclictest22124-21kworker/u16:2+efi_rts_wq20:14:311
31733992470,246cyclictest28897-21kworker/u16:1+efi_rts_wq00:15:152
31734992450,244cyclictest10004-21kworker/u16:0+efi_rts_wq20:50:143
31731992410,240cyclictest22124-21kworker/u16:2+efi_rts_wq22:00:110
31734992400,239cyclictest10004-21kworker/u16:0+efi_rts_wq20:29:333
31731992400,238cyclictest22124-21kworker/u16:2+efi_rts_wq22:10:140
31731992390,238cyclictest28897-21kworker/u16:1+efi_rts_wq00:36:280
31733992340,233cyclictest22124-21kworker/u16:2+efi_rts_wq19:55:142
31731992340,233cyclictest28897-21kworker/u16:1+efi_rts_wq23:20:120
31732992310,230cyclictest9546-21kworker/u16:3+efi_rts_wq00:10:151
31732992300,229cyclictest28897-21kworker/u16:1+efi_rts_wq00:21:241
31734992270,226cyclictest22124-21kworker/u16:2+efi_rts_wq22:20:143
31732992250,224cyclictest22124-21kworker/u16:2+efi_rts_wq21:15:141
31733992230,222cyclictest22124-21kworker/u16:2+efi_rts_wq20:10:182
31732992200,219cyclictest22124-21kworker/u16:2+efi_rts_wq19:15:131
31732992190,218cyclictest22124-21kworker/u16:2+efi_rts_wq21:34:441
31731992190,218cyclictest23170-21kworker/u16:2+efi_rts_wq23:45:160
31733992180,215cyclictest9546-21kworker/u16:3+efi_rts_wq23:55:132
31732992170,216cyclictest22124-21kworker/u16:2+efi_rts_wq23:00:001
31732992170,216cyclictest22124-21kworker/u16:2+efi_rts_wq23:00:001
31732992170,216cyclictest22124-21kworker/u16:2+efi_rts_wq19:45:141
31732992160,215cyclictest22124-21kworker/u16:2+efi_rts_wq19:35:131
31733992150,214cyclictest9546-21kworker/u16:3+efi_rts_wq00:05:142
31734992140,213cyclictest15138-21kworker/u16:3+efi_rts_wq19:40:123
31732992140,213cyclictest15138-21kworker/u16:3+efi_rts_wq19:25:141
31734992120,209cyclictest10004-21kworker/u16:0+efi_rts_wq21:00:143
31731992120,211cyclictest22124-21kworker/u16:2+efi_rts_wq19:19:210
31733992100,209cyclictest10004-21kworker/u16:0+efi_rts_wq20:40:142
31732992100,209cyclictest10004-21kworker/u16:0+efi_rts_wq20:40:151
31734992090,208cyclictest28897-21kworker/u16:1+efi_rts_wq23:20:113
31733992090,206cyclictest22124-21kworker/u16:2+efi_rts_wq20:20:132
31733992070,206cyclictest10004-21kworker/u16:0+efi_rts_wq21:30:142
31731992070,206cyclictest22124-21kworker/u16:2+efi_rts_wq20:10:170
31734992060,205cyclictest28897-21kworker/u16:1+efi_rts_wq23:30:123
31734992050,204cyclictest22124-21kworker/u16:2+efi_rts_wq20:35:143
31733992040,203cyclictest28897-21kworker/u16:1+efi_rts_wq00:25:152
31731992000,199cyclictest22124-21kworker/u16:2+efi_rts_wq20:45:140
31732991980,196cyclictest28897-21kworker/u16:1+efi_rts_wq23:10:141
31731991950,194cyclictest28897-21kworker/u16:1+efi_rts_wq00:16:230
31731991950,194cyclictest22124-21kworker/u16:2+efi_rts_wq19:49:260
31734991920,191cyclictest28897-21kworker/u16:1+efi_rts_wq23:50:143
31733991900,189cyclictest15138-21kworker/u16:3+efi_rts_wq19:20:142
31733991890,188cyclictest23170-21kworker/u16:2+efi_rts_wq23:45:162
31732991870,186cyclictest22124-21kworker/u16:2+efi_rts_wq20:39:361
31734991830,182cyclictest28897-21kworker/u16:1+efi_rts_wq23:15:043
31732991830,182cyclictest22124-21kworker/u16:2+efi_rts_wq20:05:121
31731991830,182cyclictest10004-21kworker/u16:0+efi_rts_wq20:00:110
31731991820,181cyclictest22124-21kworker/u16:2+efi_rts_wq22:29:540
31733991810,180cyclictest28897-21kworker/u16:1+efi_rts_wq23:00:132
31733991810,180cyclictest28897-21kworker/u16:1+efi_rts_wq23:00:122
31732991800,179cyclictest10004-21kworker/u16:0+efi_rts_wq21:10:141
31734991780,177cyclictest22124-21kworker/u16:2+efi_rts_wq21:44:463
31733991780,177cyclictest22124-21kworker/u16:2+efi_rts_wq22:50:132
31733991780,177cyclictest15138-21kworker/u16:3+efi_rts_wq19:44:252
31731991760,175cyclictest10004-21kworker/u16:0+efi_rts_wq22:09:500
31731991750,174cyclictest10004-21kworker/u16:0+efi_rts_wq22:45:130
31732991740,173cyclictest28897-21kworker/u16:1+efi_rts_wq23:50:151
31734991730,172cyclictest28897-21kworker/u16:1+efi_rts_wq00:35:133
31734991670,166cyclictest22124-21kworker/u16:2+efi_rts_wq20:09:293
31733991670,166cyclictest15138-21kworker/u16:3+efi_rts_wq19:25:152
31731991660,165cyclictest10004-21kworker/u16:0+efi_rts_wq22:34:550
31731991640,163cyclictest15138-21kworker/u16:3+efi_rts_wq19:10:130
31732991610,160cyclictest10004-21kworker/u16:0+efi_rts_wq21:35:161
31731991580,157cyclictest22124-21kworker/u16:2+efi_rts_wq19:24:220
31734991540,153cyclictest22124-21kworker/u16:2+efi_rts_wq19:59:283
31733991530,152cyclictest22124-21kworker/u16:2+efi_rts_wq20:35:152
31732991500,149cyclictest28897-21kworker/u16:1+efi_rts_wq23:30:071
31732991490,148cyclictest28897-21kworker/u16:1+efi_rts_wq00:25:151
31732991490,148cyclictest10004-21kworker/u16:0+efi_rts_wq22:15:161
31733991470,145cyclictest28897-21kworker/u16:1+efi_rts_wq23:30:122
31731991450,144cyclictest22124-21kworker/u16:2+efi_rts_wq19:55:140
31732991410,140cyclictest28897-21kworker/u16:1+efi_rts_wq23:40:091
31734991400,139cyclictest9546-21kworker/u16:3+efi_rts_wq00:01:203
31733991380,137cyclictest22124-21kworker/u16:2+efi_rts_wq22:04:502
31734991370,136cyclictest32487-21kworker/u16:0+efi_rts_wq00:30:133
31731991320,131cyclictest10004-21kworker/u16:0+efi_rts_wq19:50:130
31734991310,130cyclictest10004-21kworker/u16:0+efi_rts_wq20:34:353
31731991290,128cyclictest28897-21kworker/u16:1+efi_rts_wq23:25:130
31731991290,128cyclictest22124-21kworker/u16:2+efi_rts_wq21:19:410
31734991260,125cyclictest22124-21kworker/u16:2+efi_rts_wq21:15:133
31733991250,124cyclictest10004-21kworker/u16:0+efi_rts_wq22:30:132
31731991240,123cyclictest10004-21kworker/u16:0+efi_rts_wq21:39:450
31733991220,121cyclictest22124-21kworker/u16:2+efi_rts_wq20:59:392
31732991120,112cyclictest22124-21kworker/u16:2+efi_rts_wq19:34:231
31734993429,2cyclictest24501-21cat23:45:183
31734993229,3cyclictest818-21snmpd22:43:543
31734993228,1cyclictest818-21snmpd20:58:203
31733993230,2cyclictest818-21snmpd21:53:522
31732993230,2cyclictest818-21snmpd00:34:241
31731993230,2cyclictest818-21snmpd19:25:400
31734993128,2cyclictest818-21snmpd00:11:143
31733993130,1cyclictest818-21snmpd23:21:512
31733993130,1cyclictest818-21snmpd20:16:042
31733993129,2cyclictest818-21snmpd22:37:412
31733993129,2cyclictest818-21snmpd22:21:202
31733993129,2cyclictest818-21snmpd22:11:532
31733993129,2cyclictest818-21snmpd20:03:522
31733993129,1cyclictest818-21snmpd23:42:262
31733993128,2cyclictest818-21snmpd22:26:232
31732993129,2cyclictest818-21snmpd22:06:011
31731993129,2cyclictest818-21snmpd19:40:370
31731993129,2cyclictest818-21snmpd00:11:450
31734993029,1cyclictest818-21snmpd21:54:193
31734993029,1cyclictest818-21snmpd21:37:223
31734993029,1cyclictest818-21snmpd21:11:033
31734993029,1cyclictest818-21snmpd20:21:203
31734993029,1cyclictest818-21snmpd00:17:453
31734993029,1cyclictest4134-21kworker/3:3+events23:14:583
31734993029,1cyclictest4134-21kworker/3:3+events23:03:083
31734993029,1cyclictest4134-21kworker/3:3+events23:03:083
31733993029,1cyclictest818-21snmpd20:06:422
31733993028,2cyclictest818-21snmpd21:07:092
31732993029,1cyclictest818-21snmpd22:34:431
31732993029,1cyclictest818-21snmpd21:21:181
31732993029,1cyclictest818-21snmpd20:20:531
31732993029,1cyclictest818-21snmpd00:36:481
31732993028,2cyclictest818-21snmpd22:50:111
31732993028,2cyclictest818-21snmpd19:53:551
31731993029,1cyclictest818-21snmpd22:56:390
31731993029,1cyclictest818-21snmpd22:56:390
31731993029,1cyclictest818-21snmpd20:43:530
31731993029,1cyclictest818-21snmpd20:34:590
31731993029,1cyclictest818-21snmpd20:28:500
31731993029,1cyclictest818-21snmpd00:21:000
31731993028,2cyclictest818-21snmpd21:56:040
31734992928,1cyclictest6672-21kworker/3:0+events23:07:543
31734992926,2cyclictest818-21snmpd22:27:503
31733992928,1cyclictest818-21snmpd00:24:392
31732992929,0cyclictest818-21snmpd23:18:311
31732992929,0cyclictest75550irq/131-enp1s023:25:401
31732992928,1cyclictest818-21snmpd20:04:161
31731992928,1cyclictest818-21snmpd23:15:070
31731992928,1cyclictest818-21snmpd23:02:360
31731992928,1cyclictest818-21snmpd23:02:360
31731992928,1cyclictest818-21snmpd20:59:180
31731992928,1cyclictest818-21snmpd20:20:050
31731992928,1cyclictest22628-21cat22:35:150
31731992927,2cyclictest818-21snmpd21:31:480
31734992827,1cyclictest818-21snmpd23:55:203
31734992827,1cyclictest818-21snmpd23:41:103
31734992827,1cyclictest818-21snmpd21:55:433
31734992827,1cyclictest818-21snmpd19:33:433
31733992827,1cyclictest818-21snmpd22:59:182
31733992827,1cyclictest818-21snmpd22:59:172
31733992827,1cyclictest818-21snmpd22:40:482
31733992827,1cyclictest818-21snmpd20:48:092
31733992826,2cyclictest818-21snmpd20:52:032
31731992827,1cyclictest818-21snmpd23:31:400
31731992827,1cyclictest818-21snmpd21:49:130
31733992726,1cyclictest818-21snmpd22:05:522
31733992726,1cyclictest818-21snmpd21:41:192
31733992726,1cyclictest818-21snmpd19:38:152
31733992726,1cyclictest818-21snmpd00:33:062
31733992725,2cyclictest818-21snmpd19:30:402
31732992727,0cyclictest15138-21kworker/u16:3+atlantic19:12:061
31732992726,1cyclictest818-21snmpd22:49:421
31732992726,1cyclictest31627-21cat00:00:161
31732992725,2cyclictest818-21snmpd20:18:381
31731992726,1cyclictest818-21snmpd22:22:020
31731992726,1cyclictest19933-21cat23:35:180
31734992625,1cyclictest818-21snmpd20:14:203
31734992625,1cyclictest818-21snmpd00:07:353
31734992625,1cyclictest2620-21cat19:15:163
31732992625,1cyclictest818-21snmpd19:56:161
31731992625,1cyclictest818-21snmpd23:56:050
31731992625,1cyclictest818-21snmpd21:10:120
31731992625,1cyclictest818-21snmpd20:50:420
31734992524,1cyclictest818-21snmpd20:42:203
31734992524,1cyclictest818-21snmpd19:49:193
31734992522,2cyclictest818-21snmpd19:24:373
31733992524,1cyclictest818-21snmpd22:19:562
31733992524,1cyclictest818-21snmpd21:45:402
31733992524,1cyclictest818-21snmpd21:29:372
31733992524,1cyclictest818-21snmpd19:53:492
31732992523,2cyclictest818-21snmpd23:36:401
31732992523,2cyclictest818-21snmpd21:43:221
31732992523,2cyclictest818-21snmpd20:47:031
31731992523,2cyclictest818-21snmpd23:14:460
31734992423,1cyclictest818-21snmpd19:35:163
31734992422,2cyclictest818-21snmpd21:30:343
31732992424,0cyclictest75550irq/131-enp1s023:47:581
31732992321,2cyclictest818-21snmpd23:01:571
31732992321,2cyclictest818-21snmpd23:01:571
31733992221,1cyclictest818-21snmpd21:16:242
31732992220,2cyclictest821-21ntpd22:04:171
31731992222,0cyclictest818-21snmpd22:15:560
31734992120,1cyclictest818-21snmpd19:26:463
31734992120,1cyclictest31165-21kworker/3:1+events22:50:023
31734992019,1cyclictest818-21snmpd22:00:013
31733992019,1cyclictest818-21snmpd23:06:362
31732992018,2cyclictest818-21snmpd22:35:381
31732992018,2cyclictest818-21snmpd20:27:441
31733991918,1cyclictest818-21snmpd19:13:152
31733991816,2cyclictest818-21snmpd21:20:122
31731991717,0cyclictest75650irq/132-enp1s023:51:020
31731991716,1cyclictest818-21snmpd21:03:030
31732991412,2cyclictest821-21ntpd22:24:161
31731991211,1cyclictest818-21snmpd20:38:200
31731991211,1cyclictest818-21snmpd20:06:500
317319965,1cyclictest25040-21expr21:25:140
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional