You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-28 - 20:07

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Fri Nov 28, 2025 12:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
83932318304,5sleep30-21swapper/307:06:173
86522317304,10sleep10-21swapper/107:09:361
84642314308,4sleep00-21swapper/007:07:110
83252314306,5sleep20-21swapper/207:05:242
8951993000,299cyclictest23533-21kworker/u16:3+efi_rts_wq11:55:113
8950992990,297cyclictest28427-21kworker/u16:2+efi_rts_wq09:35:132
8951992980,297cyclictest32299-21kworker/u16:1+efi_rts_wq11:05:123
8951992980,297cyclictest10558-21kworker/u16:0+efi_rts_wq08:10:113
8949992980,297cyclictest10558-21kworker/u16:0+efi_rts_wq10:00:131
8951992970,295cyclictest32299-21kworker/u16:1+efi_rts_wq11:02:393
8949992970,296cyclictest28427-21kworker/u16:2+efi_rts_wq07:50:141
8949992960,295cyclictest28427-21kworker/u16:2+efi_rts_wq07:21:581
8951992950,294cyclictest28427-21kworker/u16:2+efi_rts_wq08:50:133
8948992950,294cyclictest28427-21kworker/u16:2+efi_rts_wq10:25:140
8948992940,292cyclictest32299-21kworker/u16:1+efi_rts_wq10:45:140
8951992930,292cyclictest28427-21kworker/u16:2+efi_rts_wq07:10:133
8948992930,292cyclictest10558-21kworker/u16:0+efi_rts_wq10:30:130
8950992920,291cyclictest10558-21kworker/u16:0+efi_rts_wq10:10:142
8949992920,291cyclictest28427-21kworker/u16:2+efi_rts_wq10:05:131
8950992900,289cyclictest15342-21kworker/u16:1+efi_rts_wq07:15:112
8948992890,288cyclictest10558-21kworker/u16:0+efi_rts_wq10:10:140
8950992880,287cyclictest23533-21kworker/u16:3+efi_rts_wq12:12:522
8949992880,287cyclictest32299-21kworker/u16:1+efi_rts_wq11:45:161
8949992880,287cyclictest32299-21kworker/u16:1+efi_rts_wq11:05:131
8951992870,286cyclictest10558-21kworker/u16:0+efi_rts_wq08:30:123
8950992850,284cyclictest32299-21kworker/u16:1+efi_rts_wq12:35:152
8950992850,282cyclictest28427-21kworker/u16:2+efi_rts_wq09:15:142
8951992830,282cyclictest32299-21kworker/u16:1+efi_rts_wq12:22:543
8949992830,282cyclictest28427-21kworker/u16:2+efi_rts_wq08:55:121
8951992820,281cyclictest28427-21kworker/u16:2+efi_rts_wq09:57:263
8951992820,281cyclictest28427-21kworker/u16:2+efi_rts_wq07:42:023
8951992820,281cyclictest10558-21kworker/u16:0+efi_rts_wq08:45:123
8950992820,281cyclictest28427-21kworker/u16:2+efi_rts_wq10:05:132
8949992810,280cyclictest32299-21kworker/u16:1+efi_rts_wq12:07:511
8949992790,278cyclictest10558-21kworker/u16:0+efi_rts_wq08:00:131
8948992790,278cyclictest10558-21kworker/u16:0+efi_rts_wq08:30:120
8951992780,277cyclictest32299-21kworker/u16:1+efi_rts_wq11:35:123
8949992770,276cyclictest10558-21kworker/u16:0+efi_rts_wq08:35:101
8949992770,275cyclictest10558-21kworker/u16:0+efi_rts_wq09:00:131
8949992760,275cyclictest28427-21kworker/u16:2+efi_rts_wq10:15:121
8949992760,274cyclictest10558-21kworker/u16:0+efi_rts_wq07:55:111
8949992750,274cyclictest5246-21kworker/u16:0+efi_rts_wq11:10:131
8949992750,274cyclictest28427-21kworker/u16:2+efi_rts_wq09:05:151
8949992740,273cyclictest32299-21kworker/u16:1+efi_rts_wq11:35:131
8948992730,272cyclictest28722-21kworker/u16:3+efi_rts_wq10:35:110
8948992730,272cyclictest10558-21kworker/u16:0+efi_rts_wq07:55:110
8951992720,270cyclictest5246-21kworker/u16:0+efi_rts_wq11:20:123
8950992720,271cyclictest5246-21kworker/u16:0+efi_rts_wq10:50:142
8950992720,271cyclictest28427-21kworker/u16:2+efi_rts_wq07:50:142
8949992720,271cyclictest28427-21kworker/u16:2+efi_rts_wq09:10:111
8949992720,271cyclictest10558-21kworker/u16:0+efi_rts_wq08:12:071
8948992720,271cyclictest28427-21kworker/u16:2+efi_rts_wq08:40:130
8950992710,269cyclictest28427-21kworker/u16:2+efi_rts_wq09:45:132
8950992710,269cyclictest10558-21kworker/u16:0+efi_rts_wq08:20:142
8949992710,270cyclictest32299-21kworker/u16:1+efi_rts_wq10:45:141
8949992710,270cyclictest10558-21kworker/u16:0+efi_rts_wq09:17:191
8950992680,267cyclictest28427-21kworker/u16:2+efi_rts_wq08:25:112
8951992670,266cyclictest32299-21kworker/u16:1+efi_rts_wq12:02:503
8948992670,266cyclictest32299-21kworker/u16:1+efi_rts_wq12:00:130
8951992650,264cyclictest28427-21kworker/u16:2+efi_rts_wq09:15:143
8951992650,264cyclictest23533-21kworker/u16:3+efi_rts_wq11:40:143
8951992640,263cyclictest10558-21kworker/u16:0+efi_rts_wq08:00:133
8950992640,263cyclictest28427-21kworker/u16:2+efi_rts_wq07:20:142
8948992640,262cyclictest23533-21kworker/u16:3+efi_rts_wq11:42:460
8950992630,262cyclictest23533-21kworker/u16:3+efi_rts_wq12:25:102
8951992610,260cyclictest32299-21kworker/u16:1+efi_rts_wq12:05:133
8948992610,260cyclictest32299-21kworker/u16:1+efi_rts_wq12:05:150
8948992610,260cyclictest23533-21kworker/u16:3+efi_rts_wq12:20:130
8948992610,260cyclictest10558-21kworker/u16:0+efi_rts_wq07:45:140
8951992600,259cyclictest32299-21kworker/u16:1+efi_rts_wq12:17:523
8951992580,257cyclictest28427-21kworker/u16:2+efi_rts_wq10:05:123
8951992560,254cyclictest28427-21kworker/u16:2+efi_rts_wq08:05:123
8950992550,254cyclictest23533-21kworker/u16:3+efi_rts_wq11:55:122
8951992540,252cyclictest32299-21kworker/u16:1+efi_rts_wq11:30:133
8949992540,253cyclictest28722-21kworker/u16:3+efi_rts_wq10:32:331
8950992530,252cyclictest28427-21kworker/u16:2+efi_rts_wq09:55:142
8949992530,252cyclictest10558-21kworker/u16:0+efi_rts_wq09:40:121
8951992500,249cyclictest28427-21kworker/u16:2+efi_rts_wq07:35:123
8949992490,248cyclictest23533-21kworker/u16:3+efi_rts_wq11:50:131
8948992490,248cyclictest10558-21kworker/u16:0+efi_rts_wq09:20:130
8949992480,247cyclictest28427-21kworker/u16:2+efi_rts_wq09:47:251
8950992470,244cyclictest32299-21kworker/u16:1+efi_rts_wq11:25:152
8949992470,246cyclictest5246-21kworker/u16:0+efi_rts_wq11:20:121
8949992460,245cyclictest10558-21kworker/u16:0+efi_rts_wq07:25:121
8949992450,244cyclictest10558-21kworker/u16:0+efi_rts_wq08:45:131
8948992430,242cyclictest5246-21kworker/u16:0+efi_rts_wq10:50:130
8948992420,241cyclictest32299-21kworker/u16:1+efi_rts_wq12:15:120
8951992410,239cyclictest5246-21kworker/u16:0+efi_rts_wq11:17:403
8950992410,240cyclictest5246-21kworker/u16:0+efi_rts_wq10:57:382
8949992400,239cyclictest28427-21kworker/u16:2+efi_rts_wq09:32:221
8950992380,237cyclictest32299-21kworker/u16:1+efi_rts_wq10:45:142
8949992380,237cyclictest23533-21kworker/u16:3+efi_rts_wq12:20:131
8948992370,236cyclictest32299-21kworker/u16:1+efi_rts_wq11:15:120
8948992370,236cyclictest28427-21kworker/u16:2+efi_rts_wq09:25:120
8950992360,235cyclictest28427-21kworker/u16:2+efi_rts_wq08:02:052
8951992350,233cyclictest10558-21kworker/u16:0+efi_rts_wq08:15:113
8950992350,234cyclictest10558-21kworker/u16:0+efi_rts_wq07:25:112
8949992340,233cyclictest28427-21kworker/u16:2+efi_rts_wq09:37:231
8949992330,232cyclictest10558-21kworker/u16:0+efi_rts_wq09:20:131
8948992330,232cyclictest28427-21kworker/u16:2+efi_rts_wq07:10:130
8950992310,230cyclictest10558-21kworker/u16:0+efi_rts_wq10:20:102
8948992310,230cyclictest10558-21kworker/u16:0+efi_rts_wq09:50:140
8950992290,228cyclictest10558-21kworker/u16:0+efi_rts_wq09:50:142
8949992260,225cyclictest23533-21kworker/u16:3+efi_rts_wq11:57:491
8948992260,225cyclictest10558-21kworker/u16:0+efi_rts_wq09:00:130
8949992230,222cyclictest28427-21kworker/u16:2+efi_rts_wq08:27:091
8951992220,221cyclictest28427-21kworker/u16:2+efi_rts_wq09:10:113
8951992200,219cyclictest28427-21kworker/u16:2+efi_rts_wq07:20:143
8950992200,219cyclictest28427-21kworker/u16:2+efi_rts_wq07:35:122
8950992190,216cyclictest28427-21kworker/u16:2+efi_rts_wq08:55:122
8949992180,217cyclictest10558-21kworker/u16:0+efi_rts_wq10:22:321
8948992180,217cyclictest23533-21kworker/u16:3+efi_rts_wq11:47:470
8948992170,216cyclictest28427-21kworker/u16:2+efi_rts_wq07:40:150
8950992150,214cyclictest28427-21kworker/u16:2+efi_rts_wq10:15:122
8950992140,212cyclictest23533-21kworker/u16:3+efi_rts_wq11:40:142
8948992090,208cyclictest28427-21kworker/u16:2+efi_rts_wq08:07:060
8950992080,207cyclictest23533-21kworker/u16:3+efi_rts_wq11:50:132
8950992030,201cyclictest32299-21kworker/u16:1+efi_rts_wq11:35:132
8949992010,200cyclictest28427-21kworker/u16:2+efi_rts_wq08:50:131
8949992000,199cyclictest10558-21kworker/u16:0+efi_rts_wq07:37:011
8949991960,195cyclictest32299-21kworker/u16:1+efi_rts_wq10:55:121
8951991940,192cyclictest32299-21kworker/u16:1+efi_rts_wq11:12:413
8950991940,193cyclictest10558-21kworker/u16:0+efi_rts_wq07:57:042
8948991940,193cyclictest10558-21kworker/u16:0+efi_rts_wq07:30:120
8951991930,192cyclictest10558-21kworker/u16:0+efi_rts_wq09:22:203
8948991910,190cyclictest32299-21kworker/u16:1+efi_rts_wq11:52:470
8950991870,186cyclictest28427-21kworker/u16:2+efi_rts_wq09:05:142
8949991850,184cyclictest32299-21kworker/u16:1+efi_rts_wq12:00:131
8949991850,184cyclictest28427-21kworker/u16:2+efi_rts_wq08:40:131
8950991840,183cyclictest10558-21kworker/u16:0+efi_rts_wq07:30:122
8949991840,183cyclictest23533-21kworker/u16:3+efi_rts_wq12:10:121
8950991810,180cyclictest10558-21kworker/u16:0+efi_rts_wq08:15:112
8950991750,174cyclictest28427-21kworker/u16:2+efi_rts_wq09:27:202
8951991730,172cyclictest10558-21kworker/u16:0+efi_rts_wq07:45:123
8951991720,171cyclictest15342-21kworker/u16:1+efi_rts_wq07:15:113
8949991720,171cyclictest10558-21kworker/u16:0+efi_rts_wq07:47:031
8948991710,170cyclictest10558-21kworker/u16:0+efi_rts_wq10:40:110
8949991660,164cyclictest10558-21kworker/u16:0+efi_rts_wq10:40:121
8951991640,163cyclictest32299-21kworker/u16:1+efi_rts_wq12:30:163
8951991640,163cyclictest32299-21kworker/u16:1+efi_rts_wq12:30:153
8949991630,162cyclictest32299-21kworker/u16:1+efi_rts_wq11:00:151
8951991590,157cyclictest10558-21kworker/u16:0+efi_rts_wq10:37:333
8948991580,157cyclictest15342-21kworker/u16:1+efi_rts_wq07:15:120
8951991570,157cyclictest10558-21kworker/u16:0+efi_rts_wq10:02:283
8950991570,156cyclictest28427-21kworker/u16:2+efi_rts_wq10:42:352
8950991540,153cyclictest32299-21kworker/u16:1+efi_rts_wq11:30:132
8949991530,152cyclictest10558-21kworker/u16:0+efi_rts_wq07:32:001
8949991520,151cyclictest10558-21kworker/u16:0+efi_rts_wq09:52:261
8950991510,150cyclictest32299-21kworker/u16:1+efi_rts_wq12:30:162
8950991510,150cyclictest32299-21kworker/u16:1+efi_rts_wq12:30:152
8951991480,148cyclictest10558-21kworker/u16:0+efi_rts_wq08:37:103
8949991480,147cyclictest32299-21kworker/u16:1+efi_rts_wq11:15:121
8948991440,143cyclictest10558-21kworker/u16:0+efi_rts_wq08:45:120
8949991420,141cyclictest28427-21kworker/u16:2+efi_rts_wq10:25:141
8951991390,139cyclictest28427-21kworker/u16:2+efi_rts_wq08:42:123
8949991350,134cyclictest15342-21kworker/u16:1+efi_rts_wq07:16:571
8948991320,131cyclictest28427-21kworker/u16:2+efi_rts_wq10:17:310
8950991310,130cyclictest5246-21kworker/u16:0+efi_rts_wq11:10:132
8948991310,130cyclictest10558-21kworker/u16:0+efi_rts_wq08:15:120
8950991220,120cyclictest32299-21kworker/u16:1+efi_rts_wq11:45:162
8951991150,114cyclictest28427-21kworker/u16:2+efi_rts_wq08:55:113
1308521150,0sleep213084-21rm11:04:092
8949991110,110cyclictest32299-21kworker/u16:1+efi_rts_wq11:27:431
8949991100,109cyclictest32299-21kworker/u16:1+efi_rts_wq12:37:561
8949991100,109cyclictest23533-21kworker/u16:3+efi_rts_wq12:27:551
8949991060,105cyclictest32299-21kworker/u16:1+efi_rts_wq10:52:371
8948993229,2cyclictest795-21snmpd09:55:450
8951993129,2cyclictest795-21snmpd12:25:103
8951993129,2cyclictest795-21snmpd11:26:533
8951993129,2cyclictest795-21snmpd10:50:203
8951993129,2cyclictest795-21snmpd09:31:473
8951993128,3cyclictest795-21snmpd11:51:373
8950993130,1cyclictest795-21snmpd09:04:432
8950993129,2cyclictest795-21snmpd08:47:082
8950993129,2cyclictest795-21snmpd08:40:422
8950993128,2cyclictest795-21snmpd09:22:052
8949993129,2cyclictest795-21snmpd10:39:131
8949993129,2cyclictest795-21snmpd09:25:441
8948993130,1cyclictest795-21snmpd11:00:550
8948993129,2cyclictest795-21snmpd11:21:570
8948993129,2cyclictest795-21snmpd09:13:250
8948993129,2cyclictest3055-21cat08:10:120
8951993029,1cyclictest795-21snmpd12:13:493
8951993029,1cyclictest795-21snmpd10:55:313
8951993029,1cyclictest795-21snmpd10:45:403
8951993029,1cyclictest795-21snmpd10:27:573
8951993029,1cyclictest795-21snmpd07:25:153
8951993028,2cyclictest795-21snmpd09:43:383
8951993028,2cyclictest795-21snmpd08:25:263
8950993029,1cyclictest795-21snmpd10:04:542
8950993029,1cyclictest795-21snmpd08:53:372
8950993029,1cyclictest795-21snmpd08:30:122
8950993029,1cyclictest795-21snmpd08:11:272
8950993029,1cyclictest795-21snmpd07:14:042
8950993028,2cyclictest795-21snmpd11:06:382
8950993027,2cyclictest795-21snmpd07:40:592
8949993028,2cyclictest1025-21cat08:05:141
8948993030,0cyclictest21905-21kworker/0:2+events08:54:140
8948993029,1cyclictest795-21snmpd12:26:590
8948993029,1cyclictest795-21snmpd09:44:200
8948993029,1cyclictest795-21snmpd09:06:190
8948993029,1cyclictest795-21snmpd08:25:300
8948993028,2cyclictest795-21snmpd10:56:200
8951992929,0cyclictest28722-21kworker/u16:3+atlantic10:30:563
8951992929,0cyclictest23533-21kworker/u16:3+atlantic11:49:513
8951992928,1cyclictest795-21snmpd09:00:553
8951992928,1cyclictest795-21snmpd07:54:443
8951992927,2cyclictest795-21snmpd09:51:213
8951992927,2cyclictest795-21snmpd09:45:403
8950992928,1cyclictest795-21snmpd10:29:342
8950992927,2cyclictest795-21snmpd10:33:342
8950992927,2cyclictest795-21snmpd08:35:202
8950992927,2cyclictest795-21snmpd08:06:402
8950992927,1cyclictest795-21snmpd11:24:452
8949992926,2cyclictest795-21snmpd10:11:541
8949992926,2cyclictest795-21snmpd08:19:301
8948992929,0cyclictest2813-21kworker/0:0+events11:32:260
8948992929,0cyclictest2813-21kworker/0:0+events11:26:480
8948992929,0cyclictest2813-21kworker/0:0+events11:06:400
8948992929,0cyclictest27859-21kworker/0:1+events11:35:500
8948992929,0cyclictest21905-21kworker/0:2+events09:47:340
8948992929,0cyclictest21905-21kworker/0:2+events09:39:020
8948992929,0cyclictest21905-21kworker/0:2+events08:58:300
8948992929,0cyclictest21905-21kworker/0:2+events07:50:220
8948992928,1cyclictest795-21snmpd11:55:460
8948992928,1cyclictest795-21snmpd09:31:500
8948992928,1cyclictest795-21snmpd08:20:120
8948992928,1cyclictest795-21snmpd07:22:310
8948992927,2cyclictest795-21snmpd12:11:220
8948992927,2cyclictest795-21snmpd11:11:320
8951992828,0cyclictest795-21snmpd07:33:073
8951992827,1cyclictest795-21snmpd10:10:483
8951992826,2cyclictest795-21snmpd09:25:373
8950992827,1cyclictest795-21snmpd12:23:262
8950992827,1cyclictest795-21snmpd12:18:052
8950992827,1cyclictest795-21snmpd11:18:152
8949992826,2cyclictest795-21snmpd12:19:561
8949992826,2cyclictest795-21snmpd11:34:361
8948992828,0cyclictest21905-21kworker/0:2+events08:37:100
8948992827,1cyclictest795-21snmpd12:39:200
8951992726,1cyclictest795-21snmpd08:23:483
8951992725,2cyclictest795-21snmpd12:36:083
8950992726,1cyclictest807-21lldpd12:07:482
8948992726,1cyclictest9057-21kworker/0:0+events12:31:360
8948992726,1cyclictest9057-21kworker/0:0+events12:31:360
8948992726,1cyclictest795-21snmpd08:04:440
8948992725,2cyclictest795-21snmpd07:37:290
8951992626,0cyclictest74150irq/134-enp1s010:42:563
8951992625,1cyclictest795-21snmpd07:56:463
8950992626,0cyclictest74050irq/133-enp1s010:37:542
8950992625,1cyclictest795-21snmpd09:10:102
8950992623,2cyclictest795-21snmpd12:03:162
8948992626,0cyclictest21905-21kworker/0:2+events10:23:060
8948992625,1cyclictest807-21lldpd10:07:490
8950992523,2cyclictest795-21snmpd09:30:262
8949992524,1cyclictest795-21snmpd07:10:281
8948992524,1cyclictest795-21snmpd10:03:150
8951992424,0cyclictest28427-21kworker/u16:2+atlantic10:24:323
8951992323,0cyclictest10558-21kworker/u16:0+events_unbound09:38:053
8951992222,0cyclictest28427-21kworker/u16:2+atlantic09:07:013
8951992222,0cyclictest10558-21kworker/u16:0+atlantic10:19:333
8948992221,1cyclictest21905-21kworker/0:2+events09:15:280
8948992221,1cyclictest11953-21kworker/0:1+events07:26:320
8950992119,2cyclictest795-21snmpd09:40:532
8949992120,1cyclictest795-21snmpd11:44:281
8950992019,1cyclictest795-21snmpd07:48:192
8949992020,0cyclictest795-21snmpd08:20:061
8949991919,0cyclictest32299-21kworker/u16:1+atlantic12:33:141
8949991919,0cyclictest32299-21kworker/u16:1+atlantic12:33:141
8949991614,2cyclictest14808-21cat09:55:161
89499999,0cyclictest28427-21kworker/u16:2+atlantic08:32:521
89499988,0cyclictest28427-21kworker/u16:2+atlantic07:40:581
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional