You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 11:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Mon Dec 29, 2025 00:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
23852319304,5sleep10-21swapper/119:09:551
21332318304,5sleep20-21swapper/219:06:402
2657993160,314cyclictest21665-21kworker/u16:0+efi_rts_wq23:45:172
20402315307,5sleep30-21swapper/319:05:283
22972314306,5sleep00-21swapper/019:08:460
2657993130,312cyclictest5646-21kworker/u16:2+efi_rts_wq19:25:152
2656993100,309cyclictest14897-21kworker/u16:1+efi_rts_wq20:30:121
2658993080,307cyclictest28758-21kworker/u16:2+efi_rts_wq22:45:563
2658993080,307cyclictest14897-21kworker/u16:1+efi_rts_wq21:20:133
2655993080,307cyclictest31151-21kworker/u16:2+efi_rts_wq00:11:150
2658993060,305cyclictest14897-21kworker/u16:1+efi_rts_wq21:55:133
2658993060,305cyclictest14897-21kworker/u16:1+efi_rts_wq20:55:153
2658993050,304cyclictest31151-21kworker/u16:2+efi_rts_wq00:25:133
2655993050,302cyclictest19374-21kworker/u16:3+efi_rts_wq23:45:160
2658993030,302cyclictest14897-21kworker/u16:1+efi_rts_wq19:55:143
2655993030,302cyclictest5646-21kworker/u16:2+efi_rts_wq19:40:150
2658993020,301cyclictest28758-21kworker/u16:2+efi_rts_wq23:10:143
2658993020,301cyclictest14728-21kworker/u16:0+efi_rts_wq21:45:163
2656993020,301cyclictest5646-21kworker/u16:2+efi_rts_wq19:35:111
2655993020,301cyclictest19374-21kworker/u16:3+efi_rts_wq00:05:130
2655993020,301cyclictest14897-21kworker/u16:1+efi_rts_wq21:15:140
2658993000,299cyclictest5646-21kworker/u16:2+efi_rts_wq19:30:143
2658992990,298cyclictest14897-21kworker/u16:1+efi_rts_wq20:15:173
2656992990,298cyclictest5646-21kworker/u16:2+efi_rts_wq19:55:221
2655992990,298cyclictest14897-21kworker/u16:1+efi_rts_wq20:50:120
2656992980,297cyclictest5646-21kworker/u16:2+efi_rts_wq20:20:161
2656992980,297cyclictest4995-21kworker/u16:1+efi_rts_wq00:15:131
2657992970,295cyclictest12998-21kworker/u16:1+efi_rts_wq23:30:162
2656992970,296cyclictest14897-21kworker/u16:1+efi_rts_wq22:15:151
2655992970,296cyclictest12998-21kworker/u16:1+efi_rts_wq23:26:040
2657992960,295cyclictest5646-21kworker/u16:2+efi_rts_wq20:50:312
2657992960,295cyclictest5646-21kworker/u16:2+efi_rts_wq19:15:132
2655992960,295cyclictest5646-21kworker/u16:2+efi_rts_wq19:55:140
2655992960,295cyclictest28758-21kworker/u16:2+efi_rts_wq23:11:000
2656992950,294cyclictest14897-21kworker/u16:1+efi_rts_wq22:05:141
2658992940,293cyclictest14728-21kworker/u16:0+efi_rts_wq21:50:443
2656992930,292cyclictest14897-21kworker/u16:1+efi_rts_wq20:10:231
2658992920,291cyclictest14897-21kworker/u16:1+efi_rts_wq20:10:143
2657992920,290cyclictest28758-21kworker/u16:2+efi_rts_wq23:15:142
2656992920,291cyclictest28758-21kworker/u16:2+efi_rts_wq23:06:001
2655992920,291cyclictest12998-21kworker/u16:1+efi_rts_wq23:20:140
2658992900,289cyclictest21665-21kworker/u16:0+efi_rts_wq23:40:133
2657992900,289cyclictest14728-21kworker/u16:0+efi_rts_wq21:35:142
2656992900,289cyclictest14728-21kworker/u16:0+efi_rts_wq22:25:141
2657992890,288cyclictest21665-21kworker/u16:0+efi_rts_wq23:35:132
2656992890,288cyclictest14897-21kworker/u16:1+efi_rts_wq22:10:151
2655992890,288cyclictest14728-21kworker/u16:0+efi_rts_wq22:25:140
2655992880,287cyclictest14897-21kworker/u16:1+efi_rts_wq20:55:140
2657992870,286cyclictest5646-21kworker/u16:2+efi_rts_wq20:40:132
2657992870,286cyclictest5646-21kworker/u16:2+efi_rts_wq19:10:142
2658992860,285cyclictest5646-21kworker/u16:2+efi_rts_wq20:45:313
2657992860,285cyclictest14897-21kworker/u16:1+efi_rts_wq20:00:142
2657992860,284cyclictest19374-21kworker/u16:3+efi_rts_wq00:00:122
2656992860,283cyclictest14897-21kworker/u16:1+efi_rts_wq21:15:141
2655992860,285cyclictest19374-21kworker/u16:3+efi_rts_wq23:31:040
2655992860,285cyclictest14897-21kworker/u16:1+efi_rts_wq21:30:130
2655992850,284cyclictest14897-21kworker/u16:1+efi_rts_wq19:10:130
2656992840,283cyclictest14897-21kworker/u16:1+efi_rts_wq22:40:541
2655992840,283cyclictest14897-21kworker/u16:1+efi_rts_wq22:00:460
2658992830,282cyclictest14897-21kworker/u16:1+efi_rts_wq21:30:393
2658992830,281cyclictest5646-21kworker/u16:2+efi_rts_wq20:20:163
2656992830,282cyclictest28758-21kworker/u16:2+efi_rts_wq23:25:141
2656992830,282cyclictest14728-21kworker/u16:0+efi_rts_wq21:05:351
2658992800,279cyclictest4995-21kworker/u16:1+efi_rts_wq00:31:193
2658992790,278cyclictest5646-21kworker/u16:2+efi_rts_wq19:20:133
2658992790,278cyclictest14897-21kworker/u16:1+efi_rts_wq22:00:133
2656992790,278cyclictest5646-21kworker/u16:2+efi_rts_wq20:25:141
2656992790,278cyclictest14897-21kworker/u16:1+efi_rts_wq22:45:151
2655992790,278cyclictest5646-21kworker/u16:2+efi_rts_wq20:40:120
2657992780,277cyclictest14897-21kworker/u16:1+efi_rts_wq22:15:512
2656992780,277cyclictest5646-21kworker/u16:2+efi_rts_wq19:40:161
2658992770,276cyclictest31656-21kworker/u16:3+efi_rts_wq22:55:183
2655992770,276cyclictest31151-21kworker/u16:2+efi_rts_wq00:21:170
2657992750,274cyclictest14897-21kworker/u16:1+efi_rts_wq21:50:142
2655992730,272cyclictest14897-21kworker/u16:1+efi_rts_wq22:35:130
2658992690,268cyclictest14897-21kworker/u16:1+efi_rts_wq20:05:143
2658992690,268cyclictest14897-21kworker/u16:1+efi_rts_wq20:05:133
2658992680,267cyclictest5646-21kworker/u16:2+efi_rts_wq20:35:153
2658992670,266cyclictest5646-21kworker/u16:2+efi_rts_wq20:40:293
2657992660,265cyclictest14897-21kworker/u16:1+efi_rts_wq21:30:132
2657992660,264cyclictest28758-21kworker/u16:2+efi_rts_wq23:00:172
2655992650,264cyclictest14897-21kworker/u16:1+efi_rts_wq20:45:140
2655992630,262cyclictest31656-21kworker/u16:3+efi_rts_wq23:05:140
2658992610,260cyclictest14897-21kworker/u16:1+efi_rts_wq21:05:173
2655992610,260cyclictest5646-21kworker/u16:2+efi_rts_wq20:00:220
2656992600,259cyclictest14728-21kworker/u16:0+efi_rts_wq21:10:141
2658992590,258cyclictest28758-21kworker/u16:2+efi_rts_wq23:15:133
2655992590,258cyclictest14897-21kworker/u16:1+efi_rts_wq22:40:120
2655992550,254cyclictest14897-21kworker/u16:1+efi_rts_wq21:40:120
2658992540,252cyclictest19374-21kworker/u16:3+efi_rts_wq23:45:153
2655992540,253cyclictest14728-21kworker/u16:0+efi_rts_wq21:20:370
2658992530,252cyclictest5646-21kworker/u16:2+efi_rts_wq19:45:143
2656992500,249cyclictest14897-21kworker/u16:1+efi_rts_wq20:00:141
2655992470,246cyclictest31151-21kworker/u16:2+efi_rts_wq00:35:170
2657992450,244cyclictest31151-21kworker/u16:2+efi_rts_wq00:25:142
2655992450,244cyclictest14897-21kworker/u16:1+efi_rts_wq20:20:250
2656992440,243cyclictest14897-21kworker/u16:1+efi_rts_wq21:45:431
2658992430,242cyclictest19374-21kworker/u16:3+efi_rts_wq23:51:113
2655992430,242cyclictest28758-21kworker/u16:2+efi_rts_wq22:50:560
2656992390,237cyclictest31656-21kworker/u16:3+efi_rts_wq22:50:101
2656992380,237cyclictest14897-21kworker/u16:1+efi_rts_wq21:55:461
2656992370,236cyclictest19374-21kworker/u16:3+efi_rts_wq23:36:061
2658992330,232cyclictest31656-21kworker/u16:3+efi_rts_wq22:50:103
2657992300,229cyclictest14897-21kworker/u16:1+efi_rts_wq22:35:142
2658992280,224cyclictest28758-21kworker/u16:2+efi_rts_wq23:05:133
2657992280,227cyclictest21665-21kworker/u16:0+efi_rts_wq23:55:142
2656992280,227cyclictest14728-21kworker/u16:0+efi_rts_wq21:25:391
2657992260,225cyclictest14897-21kworker/u16:1+efi_rts_wq22:20:122
2656992260,225cyclictest14728-21kworker/u16:0+efi_rts_wq21:00:331
2655992250,224cyclictest28758-21kworker/u16:2+efi_rts_wq23:00:580
2658992240,223cyclictest31151-21kworker/u16:2+efi_rts_wq00:10:143
2656992240,223cyclictest5646-21kworker/u16:2+efi_rts_wq19:15:131
2658992230,222cyclictest14897-21kworker/u16:1+efi_rts_wq22:25:133
2657992220,221cyclictest14728-21kworker/u16:0+efi_rts_wq21:40:412
2656992210,220cyclictest14897-21kworker/u16:1+efi_rts_wq22:30:521
2657992190,218cyclictest28758-21kworker/u16:2+efi_rts_wq22:55:582
2655992190,218cyclictest14728-21kworker/u16:0+efi_rts_wq21:45:160
2658992110,210cyclictest14897-21kworker/u16:1+efi_rts_wq21:25:153
2657992110,210cyclictest19374-21kworker/u16:3+efi_rts_wq00:05:132
2658992090,208cyclictest5646-21kworker/u16:2+efi_rts_wq20:50:113
2655992090,208cyclictest19374-21kworker/u16:3+efi_rts_wq00:00:120
2658992060,205cyclictest14897-21kworker/u16:1+efi_rts_wq19:50:143
2658992060,205cyclictest12998-21kworker/u16:1+efi_rts_wq23:20:143
2656992040,203cyclictest28758-21kworker/u16:2+efi_rts_wq23:15:141
2655992040,203cyclictest5646-21kworker/u16:2+efi_rts_wq19:50:200
2658992010,200cyclictest14728-21kworker/u16:0+efi_rts_wq22:05:473
2657991960,195cyclictest4995-21kworker/u16:1+efi_rts_wq00:20:142
2655991960,195cyclictest14897-21kworker/u16:1+efi_rts_wq22:20:510
2655991920,191cyclictest21665-21kworker/u16:0+efi_rts_wq23:55:140
2657991910,189cyclictest14897-21kworker/u16:1+efi_rts_wq22:40:132
2655991900,189cyclictest19374-21kworker/u16:3+efi_rts_wq23:50:150
2658991890,188cyclictest14728-21kworker/u16:0+efi_rts_wq21:35:403
2655991880,187cyclictest14728-21kworker/u16:0+efi_rts_wq21:10:350
2656991870,186cyclictest14728-21kworker/u16:0+efi_rts_wq20:55:331
2655991870,186cyclictest14897-21kworker/u16:1+efi_rts_wq19:25:130
2658991840,183cyclictest31151-21kworker/u16:2+efi_rts_wq00:36:203
2657991840,183cyclictest5646-21kworker/u16:2+efi_rts_wq19:35:122
2656991780,177cyclictest21665-21kworker/u16:0+efi_rts_wq00:00:121
2657991770,176cyclictest5646-21kworker/u16:2+efi_rts_wq20:30:272
2656991720,171cyclictest19374-21kworker/u16:3+efi_rts_wq23:50:151
2657991710,170cyclictest4995-21kworker/u16:1+efi_rts_wq00:15:132
2656991660,165cyclictest5646-21kworker/u16:2+efi_rts_wq19:20:151
2656991660,165cyclictest31151-21kworker/u16:2+efi_rts_wq00:26:191
2658991630,162cyclictest14897-21kworker/u16:1+efi_rts_wq22:30:123
2656991630,162cyclictest5646-21kworker/u16:2+efi_rts_wq19:45:201
2656991630,162cyclictest14897-21kworker/u16:1+efi_rts_wq22:00:131
2658991620,161cyclictest14897-21kworker/u16:1+efi_rts_wq22:35:143
2657991610,160cyclictest14897-21kworker/u16:1+efi_rts_wq20:15:162
2655991600,159cyclictest14897-21kworker/u16:1+efi_rts_wq19:30:170
2657991590,158cyclictest14897-21kworker/u16:1+efi_rts_wq21:20:132
2657991570,156cyclictest14728-21kworker/u16:0+efi_rts_wq22:30:122
2658991550,154cyclictest14728-21kworker/u16:0+efi_rts_wq21:10:153
2656991550,155cyclictest21665-21kworker/u16:0+efi_rts_wq23:41:061
2655991540,153cyclictest14728-21kworker/u16:0+efi_rts_wq21:00:150
2655991490,148cyclictest5646-21kworker/u16:2+efi_rts_wq19:35:180
2655991470,146cyclictest5646-21kworker/u16:2+efi_rts_wq20:25:130
2655991460,145cyclictest14897-21kworker/u16:1+efi_rts_wq21:55:140
2656991440,144cyclictest14897-21kworker/u16:1+efi_rts_wq21:40:121
2658991430,142cyclictest14728-21kworker/u16:0+efi_rts_wq21:00:153
2657991410,140cyclictest14897-21kworker/u16:1+efi_rts_wq19:40:162
2657991400,139cyclictest5646-21kworker/u16:2+efi_rts_wq19:45:132
2658991380,137cyclictest14897-21kworker/u16:1+efi_rts_wq22:20:123
2655991300,129cyclictest14897-21kworker/u16:1+efi_rts_wq21:05:160
2656991290,129cyclictest5646-21kworker/u16:2+efi_rts_wq20:35:291
2655991240,123cyclictest14897-21kworker/u16:1+efi_rts_wq20:30:120
2655991230,122cyclictest28758-21kworker/u16:2+efi_rts_wq23:16:020
2656991180,117cyclictest14728-21kworker/u16:0+efi_rts_wq22:35:541
2658993430,4cyclictest818-21snmpd23:56:143
2657993330,3cyclictest818-21snmpd23:43:102
2657993330,2cyclictest818-21snmpd20:25:592
2657993328,4cyclictest818-21snmpd21:45:112
2658993229,3cyclictest818-21snmpd19:40:043
2657993229,3cyclictest818-21snmpd19:23:332
2657993229,2cyclictest818-21snmpd22:02:312
2655993229,2cyclictest818-21snmpd19:20:440
2658993129,2cyclictest818-21snmpd23:36:403
2658993129,2cyclictest818-21snmpd00:16:143
2658993129,2cyclictest5990-21cat19:15:153
2658993129,1cyclictest818-21snmpd20:04:173
2658993128,2cyclictest818-21snmpd21:17:243
2658993128,2cyclictest818-21snmpd19:27:323
2657993129,2cyclictest818-21snmpd20:39:422
2657993128,3cyclictest818-21snmpd20:24:462
2657993128,3cyclictest818-21snmpd20:13:312
2657993128,2cyclictest818-21snmpd22:53:512
2657993127,3cyclictest818-21snmpd22:05:532
2656993129,2cyclictest818-21snmpd22:21:411
2656993129,2cyclictest818-21snmpd19:54:041
2655993130,1cyclictest818-21snmpd22:12:200
2655993130,1cyclictest818-21snmpd20:17:100
2655993130,1cyclictest818-21snmpd20:10:580
2655993129,2cyclictest818-21snmpd22:56:370
2655993129,2cyclictest818-21snmpd21:54:340
2655993129,2cyclictest818-21snmpd19:48:180
2658993030,0cyclictest25079-21kworker/3:2+events22:11:483
2658993029,1cyclictest818-21snmpd23:30:343
2658993029,1cyclictest818-21snmpd23:25:313
2658993029,1cyclictest818-21snmpd20:26:563
2658993029,1cyclictest818-21snmpd00:05:533
2658993029,1cyclictest818-21snmpd00:02:023
2657993029,1cyclictest818-21snmpd23:25:562
2657993029,1cyclictest818-21snmpd21:05:302
2657993029,1cyclictest818-21snmpd20:46:422
2657993029,1cyclictest818-21snmpd20:09:562
2657993029,1cyclictest818-21snmpd20:09:552
2657993025,4cyclictest818-21snmpd00:13:472
2656993029,1cyclictest818-21snmpd23:30:491
2656993029,1cyclictest818-21snmpd21:34:391
2656993029,1cyclictest818-21snmpd19:13:331
2656993029,1cyclictest818-21snmpd00:21:051
2655993029,1cyclictest818-21snmpd22:06:410
2655993029,1cyclictest818-21snmpd20:38:280
2655993028,2cyclictest818-21snmpd00:28:510
2658992929,0cyclictest3107-21kworker/3:2+events19:38:563
2658992929,0cyclictest24951-21kworker/3:1+events20:34:163
2658992928,1cyclictest818-21snmpd23:00:273
2658992928,1cyclictest818-21snmpd19:12:033
2657992928,1cyclictest818-21snmpd23:54:172
2657992928,1cyclictest818-21snmpd23:09:222
2657992928,1cyclictest818-21snmpd19:50:402
2657992927,2cyclictest11474-21cat23:10:162
2657992926,2cyclictest818-21snmpd19:55:062
2656992929,0cyclictest818-21snmpd23:03:481
2656992928,1cyclictest818-21snmpd20:44:411
2656992928,1cyclictest818-21snmpd00:33:241
2656992928,1cyclictest818-21snmpd00:14:321
2656992927,2cyclictest818-21snmpd19:26:501
2655992927,2cyclictest818-21snmpd00:16:330
2658992828,0cyclictest28758-21kworker/u16:2+atlantic22:40:563
2658992828,0cyclictest26282-21kworker/3:1+events00:20:123
2658992825,2cyclictest818-21snmpd22:15:203
2657992828,0cyclictest14728-21kworker/u16:0+atlantic22:25:472
2657992827,1cyclictest818-21snmpd22:10:442
2657992827,1cyclictest818-21snmpd21:13:482
2657992827,1cyclictest818-21snmpd21:04:562
2657992826,2cyclictest818-21snmpd21:28:462
2657992825,3cyclictest818-21snmpd21:18:552
2657992825,2cyclictest818-21snmpd23:22:042
2656992828,0cyclictest31656-21kworker/u16:3+atlantic23:11:161
2655992827,1cyclictest818-21snmpd22:15:150
2656992727,0cyclictest21665-21kworker/u16:0+atlantic23:56:071
2656992726,1cyclictest818-21snmpd20:54:201
2656992726,1cyclictest818-21snmpd20:09:401
2656992726,1cyclictest818-21snmpd20:09:401
2656992725,2cyclictest818-21snmpd21:50:191
2655992726,1cyclictest818-21snmpd19:18:020
2655992725,2cyclictest818-21snmpd22:47:390
2657992623,2cyclictest818-21snmpd21:55:022
2656992626,0cyclictest818-21snmpd22:55:581
2656992625,1cyclictest818-21snmpd21:21:481
2656992625,1cyclictest818-21snmpd00:35:311
2655992626,0cyclictest75850irq/134-enp1s023:43:040
2656992525,0cyclictest75550irq/131-enp1s023:21:141
2656992524,1cyclictest818-21snmpd21:37:201
2656992524,1cyclictest818-21snmpd19:30:151
2655992524,1cyclictest818-21snmpd20:05:400
2655992524,1cyclictest818-21snmpd20:05:400
2656992322,1cyclictest818-21snmpd23:47:591
2655992322,1cyclictest818-21snmpd21:35:250
2657992219,3cyclictest818-21snmpd22:48:462
2657992219,2cyclictest818-21snmpd20:56:242
2656992220,2cyclictest818-21snmpd20:17:501
2655992221,1cyclictest818-21snmpd00:30:350
2655992220,2cyclictest818-21snmpd21:26:460
2655992120,1cyclictest818-21snmpd22:34:350
2658992019,1cyclictest818-21snmpd21:43:253
2656992019,1cyclictest818-21snmpd00:08:241
2655992019,1cyclictest818-21snmpd23:38:530
2657991615,1cyclictest818-21snmpd19:33:462
2656991614,2cyclictest11835-21cat20:45:171
2657991412,2cyclictest14767-21cat00:30:162
26579954,1cyclictest16692-21tune2fs00:35:172
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional