You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-21 - 21:09

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Fri Nov 21, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
72372336314,5sleep20-21swapper/207:09:562
71982321313,5sleep30-21swapper/307:09:253
71582318308,8sleep00-21swapper/007:08:540
54002314306,5sleep10-21swapper/107:05:021
7508993000,299cyclictest30684-21kworker/u16:1+efi_rts_wq11:50:122
7507992960,295cyclictest3819-21kworker/u16:1+efi_rts_wq07:55:121
7508992950,294cyclictest30684-21kworker/u16:1+efi_rts_wq10:45:132
7509992940,293cyclictest2535-21kworker/u16:0+efi_rts_wq09:30:123
7507992930,292cyclictest2535-21kworker/u16:0+efi_rts_wq09:20:121
7507992930,292cyclictest14646-21kworker/u16:2+efi_rts_wq10:20:131
7508992920,291cyclictest3819-21kworker/u16:1+efi_rts_wq07:10:142
7509992910,290cyclictest30684-21kworker/u16:1+efi_rts_wq12:13:073
7507992910,290cyclictest3819-21kworker/u16:1+efi_rts_wq10:05:151
7507992910,290cyclictest3819-21kworker/u16:1+efi_rts_wq08:27:281
7508992900,289cyclictest3819-21kworker/u16:1+efi_rts_wq09:42:422
7508992900,289cyclictest2535-21kworker/u16:0+efi_rts_wq08:05:102
7507992900,287cyclictest30684-21kworker/u16:1+efi_rts_wq12:20:141
7509992880,287cyclictest2535-21kworker/u16:0+efi_rts_wq08:20:143
7509992880,286cyclictest30684-21kworker/u16:1+efi_rts_wq12:00:133
7507992870,286cyclictest2535-21kworker/u16:0+efi_rts_wq09:12:361
7509992850,284cyclictest2535-21kworker/u16:0+efi_rts_wq10:10:123
7508992850,284cyclictest2535-21kworker/u16:0+efi_rts_wq08:45:142
7508992840,282cyclictest14646-21kworker/u16:2+efi_rts_wq10:55:132
7507992840,283cyclictest30684-21kworker/u16:1+efi_rts_wq11:33:021
7508992830,282cyclictest3819-21kworker/u16:1+efi_rts_wq09:57:452
7508992830,282cyclictest3819-21kworker/u16:1+efi_rts_wq09:57:452
7508992820,281cyclictest3819-21kworker/u16:1+efi_rts_wq08:40:132
7508992820,281cyclictest14646-21kworker/u16:2+efi_rts_wq10:42:522
7506992810,280cyclictest3819-21kworker/u16:1+efi_rts_wq08:00:140
7509992800,279cyclictest26302-21kworker/u16:3+efi_rts_wq11:55:113
7506992800,279cyclictest2535-21kworker/u16:0+efi_rts_wq10:12:470
7508992790,278cyclictest3819-21kworker/u16:1+efi_rts_wq07:35:142
7507992790,278cyclictest2535-21kworker/u16:0+efi_rts_wq07:50:141
7506992790,278cyclictest30684-21kworker/u16:1+efi_rts_wq11:15:120
7509992780,277cyclictest3819-21kworker/u16:1+efi_rts_wq09:50:123
7506992780,277cyclictest30684-21kworker/u16:1+efi_rts_wq10:40:150
7507992770,276cyclictest2535-21kworker/u16:0+efi_rts_wq09:45:121
7507992750,274cyclictest30684-21kworker/u16:1+efi_rts_wq12:10:131
7508992720,269cyclictest30684-21kworker/u16:1+efi_rts_wq11:25:132
7507992710,270cyclictest3819-21kworker/u16:1+efi_rts_wq08:42:301
7507992710,268cyclictest30684-21kworker/u16:1+efi_rts_wq11:10:111
7506992710,270cyclictest3819-21kworker/u16:1+efi_rts_wq09:25:120
7509992700,269cyclictest2535-21kworker/u16:0+efi_rts_wq07:45:113
7506992700,269cyclictest3819-21kworker/u16:1+efi_rts_wq08:15:140
7507992680,267cyclictest26302-21kworker/u16:3+efi_rts_wq12:05:151
7508992670,266cyclictest3819-21kworker/u16:1+efi_rts_wq09:05:162
7508992670,266cyclictest2535-21kworker/u16:0+efi_rts_wq07:20:112
7506992670,266cyclictest2535-21kworker/u16:0+efi_rts_wq09:20:120
7509992660,265cyclictest3819-21kworker/u16:1+efi_rts_wq07:37:173
7509992650,264cyclictest3819-21kworker/u16:1+efi_rts_wq07:15:133
7508992640,263cyclictest2535-21kworker/u16:0+efi_rts_wq09:00:122
7507992640,263cyclictest14646-21kworker/u16:2+efi_rts_wq10:25:121
7509992630,262cyclictest3819-21kworker/u16:1+efi_rts_wq08:02:223
7508992630,262cyclictest3819-21kworker/u16:1+efi_rts_wq08:10:112
7507992620,260cyclictest30684-21kworker/u16:1+efi_rts_wq10:50:141
7509992610,260cyclictest3819-21kworker/u16:1+efi_rts_wq09:40:143
7506992610,260cyclictest14646-21kworker/u16:2+efi_rts_wq10:20:130
7506992610,258cyclictest26302-21kworker/u16:3+efi_rts_wq11:48:030
7509992590,258cyclictest26302-21kworker/u16:3+efi_rts_wq12:35:123
7507992590,258cyclictest2535-21kworker/u16:0+efi_rts_wq08:47:311
7508992570,256cyclictest2535-21kworker/u16:0+efi_rts_wq09:32:402
7508992560,255cyclictest27786-21kworker/u16:3+efi_rts_wq10:35:132
7507992560,255cyclictest2535-21kworker/u16:0+efi_rts_wq10:15:121
7507992540,253cyclictest14646-21kworker/u16:2+efi_rts_wq10:55:131
7506992540,253cyclictest26302-21kworker/u16:3+efi_rts_wq12:15:130
7509992530,252cyclictest2535-21kworker/u16:0+efi_rts_wq09:10:113
7508992530,250cyclictest3819-21kworker/u16:1+efi_rts_wq08:25:132
7506992530,252cyclictest26302-21kworker/u16:3+efi_rts_wq11:40:130
7506992530,252cyclictest2535-21kworker/u16:0+efi_rts_wq07:40:160
7509992520,251cyclictest3819-21kworker/u16:1+efi_rts_wq09:55:123
7509992520,251cyclictest3819-21kworker/u16:1+efi_rts_wq09:55:123
7509992510,248cyclictest14646-21kworker/u16:2+efi_rts_wq11:05:133
7506992510,250cyclictest30684-21kworker/u16:1+efi_rts_wq12:00:140
7509992500,247cyclictest2535-21kworker/u16:0+efi_rts_wq07:30:123
7508992470,246cyclictest3819-21kworker/u16:1+efi_rts_wq08:15:142
7506992470,246cyclictest3819-21kworker/u16:1+efi_rts_wq09:55:120
7506992470,246cyclictest3819-21kworker/u16:1+efi_rts_wq09:55:120
7506992460,245cyclictest14646-21kworker/u16:2+efi_rts_wq11:05:130
7508992440,243cyclictest3819-21kworker/u16:1+efi_rts_wq08:57:332
7508992440,243cyclictest2535-21kworker/u16:0+efi_rts_wq07:45:112
7509992430,242cyclictest30684-21kworker/u16:1+efi_rts_wq11:00:153
7506992430,242cyclictest30684-21kworker/u16:1+efi_rts_wq12:20:140
7506992420,241cyclictest2535-21kworker/u16:0+efi_rts_wq09:35:130
7509992380,237cyclictest3819-21kworker/u16:1+efi_rts_wq07:42:183
7509992370,236cyclictest2535-21kworker/u16:0+efi_rts_wq10:15:133
7509992360,235cyclictest26302-21kworker/u16:3+efi_rts_wq12:30:143
7508992360,235cyclictest3819-21kworker/u16:1+efi_rts_wq07:25:112
7507992350,234cyclictest2535-21kworker/u16:0+efi_rts_wq09:37:411
7509992330,232cyclictest2535-21kworker/u16:0+efi_rts_wq07:20:113
7506992330,232cyclictest30684-21kworker/u16:1+efi_rts_wq11:58:040
7508992290,228cyclictest26302-21kworker/u16:3+efi_rts_wq12:33:122
7509992280,227cyclictest26302-21kworker/u16:3+efi_rts_wq11:35:133
7508992270,225cyclictest2535-21kworker/u16:0+efi_rts_wq08:30:142
7508992260,225cyclictest2535-21kworker/u16:0+efi_rts_wq07:52:202
7506992250,223cyclictest30684-21kworker/u16:1+efi_rts_wq10:50:140
7509992230,222cyclictest3819-21kworker/u16:1+efi_rts_wq09:17:363
7506992220,221cyclictest30684-21kworker/u16:1+efi_rts_wq12:25:120
7508992210,220cyclictest26302-21kworker/u16:3+efi_rts_wq11:35:132
7507992200,219cyclictest3819-21kworker/u16:1+efi_rts_wq09:40:141
7507992180,217cyclictest2535-21kworker/u16:0+efi_rts_wq09:02:341
7509992170,215cyclictest26302-21kworker/u16:3+efi_rts_wq12:15:133
7508992170,216cyclictest3819-21kworker/u16:1+efi_rts_wq10:07:462
7508992150,214cyclictest21384-21kworker/u16:2+efi_rts_wq11:30:122
7506992150,214cyclictest3819-21kworker/u16:1+efi_rts_wq09:52:440
7506992140,213cyclictest2535-21kworker/u16:0+efi_rts_wq08:05:100
7509992120,211cyclictest26302-21kworker/u16:3+efi_rts_wq12:08:063
7509992120,211cyclictest2535-21kworker/u16:0+efi_rts_wq08:35:133
7507992090,208cyclictest26302-21kworker/u16:3+efi_rts_wq12:38:131
7506992090,208cyclictest3819-21kworker/u16:1+efi_rts_wq07:10:140
7508992080,207cyclictest3819-21kworker/u16:1+efi_rts_wq09:27:392
7506992050,204cyclictest30684-21kworker/u16:1+efi_rts_wq11:10:120
7507992040,202cyclictest3819-21kworker/u16:1+efi_rts_wq09:05:171
7507992030,202cyclictest3819-21kworker/u16:1+efi_rts_wq08:12:241
7507992030,202cyclictest3819-21kworker/u16:1+efi_rts_wq07:27:151
7506992030,202cyclictest3819-21kworker/u16:1+efi_rts_wq07:15:010
7507992000,199cyclictest2535-21kworker/u16:0+efi_rts_wq08:37:301
7506992000,199cyclictest3819-21kworker/u16:1+efi_rts_wq08:55:130
7507991980,197cyclictest12140-21kworker/u16:3+efi_rts_wq11:20:141
7509991970,195cyclictest2535-21kworker/u16:0+efi_rts_wq09:45:123
7507991970,196cyclictest3819-21kworker/u16:1+efi_rts_wq08:00:131
7509991960,195cyclictest2535-21kworker/u16:0+efi_rts_wq10:02:453
7509991960,195cyclictest2535-21kworker/u16:0+efi_rts_wq10:02:453
7508991930,192cyclictest2535-21kworker/u16:0+efi_rts_wq08:22:262
7506991910,190cyclictest2535-21kworker/u16:0+efi_rts_wq07:32:160
7509991870,186cyclictest2535-21kworker/u16:0+efi_rts_wq09:20:113
7507991840,183cyclictest3819-21kworker/u16:1+efi_rts_wq09:50:121
7507991830,182cyclictest30684-21kworker/u16:1+efi_rts_wq12:25:111
7506991830,182cyclictest2535-21kworker/u16:0+efi_rts_wq10:17:480
7509991820,181cyclictest3819-21kworker/u16:1+efi_rts_wq08:52:323
7508991780,177cyclictest26302-21kworker/u16:3+efi_rts_wq11:40:132
7509991750,174cyclictest3819-21kworker/u16:1+efi_rts_wq09:25:123
7507991750,174cyclictest14646-21kworker/u16:2+efi_rts_wq10:37:511
7509991740,173cyclictest14646-21kworker/u16:2+efi_rts_wq10:30:153
7508991710,170cyclictest30684-21kworker/u16:1+efi_rts_wq11:15:122
7506991690,168cyclictest3819-21kworker/u16:1+efi_rts_wq07:35:130
7509991670,166cyclictest14646-21kworker/u16:2+efi_rts_wq10:35:133
7508991670,166cyclictest2535-21kworker/u16:0+efi_rts_wq10:32:512
7509991650,164cyclictest2535-21kworker/u16:0+efi_rts_wq08:07:233
7508991590,158cyclictest26302-21kworker/u16:3+efi_rts_wq11:45:142
7508991590,158cyclictest2535-21kworker/u16:0+efi_rts_wq10:00:112
7508991590,158cyclictest2535-21kworker/u16:0+efi_rts_wq10:00:112
7506991590,158cyclictest3819-21kworker/u16:1+efi_rts_wq08:50:130
7506991550,154cyclictest21384-21kworker/u16:2+efi_rts_wq11:30:120
7508991530,152cyclictest14646-21kworker/u16:2+efi_rts_wq11:05:132
7509991520,151cyclictest2535-21kworker/u16:0+efi_rts_wq08:30:143
7508991520,151cyclictest12140-21kworker/u16:3+efi_rts_wq11:12:582
7507991520,151cyclictest30684-21kworker/u16:1+efi_rts_wq11:02:561
7508991510,150cyclictest12140-21kworker/u16:3+efi_rts_wq11:23:002
7506991480,146cyclictest12140-21kworker/u16:3+efi_rts_wq11:20:140
7506991450,145cyclictest30684-21kworker/u16:1+efi_rts_wq11:28:010
7507991410,140cyclictest3819-21kworker/u16:1+efi_rts_wq07:15:011
7509991380,137cyclictest2535-21kworker/u16:0+efi_rts_wq09:35:133
7507991350,133cyclictest14646-21kworker/u16:2+efi_rts_wq11:07:571
7509991330,132cyclictest3819-21kworker/u16:1+efi_rts_wq07:55:123
7506991320,131cyclictest30684-21kworker/u16:1+efi_rts_wq11:50:120
7506991320,130cyclictest3819-21kworker/u16:1+efi_rts_wq09:15:120
7509991310,130cyclictest3819-21kworker/u16:1+efi_rts_wq07:12:123
7509991290,128cyclictest3819-21kworker/u16:1+efi_rts_wq08:17:253
7509991260,125cyclictest3819-21kworker/u16:1+efi_rts_wq08:25:133
7509991210,120cyclictest14646-21kworker/u16:2+efi_rts_wq10:57:563
7508991180,117cyclictest30684-21kworker/u16:1+efi_rts_wq12:10:132
7506991170,116cyclictest2535-21kworker/u16:0+efi_rts_wq09:47:430
7507991160,115cyclictest26302-21kworker/u16:3+efi_rts_wq11:55:111
7506991160,115cyclictest3819-21kworker/u16:1+efi_rts_wq07:55:120
7508991140,113cyclictest3819-21kworker/u16:1+efi_rts_wq07:17:132
7509991130,112cyclictest30684-21kworker/u16:1+efi_rts_wq11:25:123
7506991120,110cyclictest30684-21kworker/u16:1+efi_rts_wq10:45:130
7507991100,109cyclictest2535-21kworker/u16:0+efi_rts_wq08:20:141
7509991080,107cyclictest14646-21kworker/u16:2+efi_rts_wq10:22:493
7508991050,104cyclictest2535-21kworker/u16:0+efi_rts_wq07:30:112
7508991050,104cyclictest14646-21kworker/u16:2+efi_rts_wq10:27:502
7506993330,2cyclictest795-21snmpd08:24:330
7509993229,2cyclictest795-21snmpd12:28:443
7507993230,2cyclictest795-21snmpd11:35:191
7507993230,2cyclictest795-21snmpd09:29:511
7507993229,2cyclictest795-21snmpd10:04:281
7507993229,2cyclictest795-21snmpd10:04:281
7508993129,2cyclictest795-21snmpd12:23:352
7508993129,2cyclictest795-21snmpd08:02:542
7506993130,1cyclictest795-21snmpd09:05:260
7506993129,2cyclictest795-21snmpd09:31:390
7506993129,2cyclictest795-21snmpd08:42:250
7506993129,1cyclictest795-21snmpd08:30:000
7509993029,1cyclictest795-21snmpd11:40:523
7509993029,1cyclictest795-21snmpd10:09:133
7509993029,1cyclictest795-21snmpd08:14:543
7509993028,2cyclictest795-21snmpd11:52:433
7509993028,2cyclictest795-21snmpd07:25:193
7509993028,2cyclictest5915-21cat10:50:163
7508993029,1cyclictest795-21snmpd12:35:092
7508993029,1cyclictest795-21snmpd11:02:032
7508993029,1cyclictest795-21snmpd08:54:042
7508993027,2cyclictest795-21snmpd12:07:262
7507993029,1cyclictest795-21snmpd10:14:581
7507993029,1cyclictest795-21snmpd07:42:291
7507993029,1cyclictest795-21snmpd07:13:551
7507993028,2cyclictest795-21snmpd09:58:031
7507993028,2cyclictest795-21snmpd09:58:031
7506993029,1cyclictest795-21snmpd09:03:320
7506993029,1cyclictest795-21snmpd08:49:550
7506993029,1cyclictest795-21snmpd08:39:340
7506993029,1cyclictest795-21snmpd08:26:540
7506993029,1cyclictest795-21snmpd08:13:210
7506993028,2cyclictest8366-21cat10:55:150
7506993028,2cyclictest795-21snmpd11:02:360
7506993027,2cyclictest795-21snmpd09:10:500
7506993027,2cyclictest26080-21cat10:25:140
7509992928,1cyclictest795-21snmpd11:30:453
7509992928,1cyclictest795-21snmpd11:13:363
7509992928,1cyclictest795-21snmpd07:51:203
7509992927,2cyclictest795-21snmpd11:46:553
7508992927,2cyclictest795-21snmpd11:56:072
7507992929,0cyclictest795-21snmpd11:26:421
7507992928,1cyclictest795-21snmpd09:19:441
7507992928,1cyclictest795-21snmpd07:48:061
7507992927,2cyclictest795-21snmpd12:16:321
7506992929,0cyclictest17017-21kworker/0:1+events10:35:010
7506992928,1cyclictest795-21snmpd12:31:460
7506992928,1cyclictest795-21snmpd07:45:560
7506992928,1cyclictest29391-21kworker/0:2+events10:32:050
7509992828,0cyclictest807-21lldpd08:57:423
7509992827,1cyclictest795-21snmpd08:48:553
7508992826,2cyclictest795-21snmpd07:41:112
7508992826,2cyclictest26809-21cat09:10:132
7507992828,0cyclictest3819-21kworker/u16:1+atlantic08:08:121
7507992827,1cyclictest795-21snmpd10:47:561
7507992827,1cyclictest795-21snmpd09:34:241
7507992827,1cyclictest795-21snmpd08:34:071
7507992827,1cyclictest795-21snmpd07:24:461
7507992826,2cyclictest795-21snmpd12:01:491
7506992827,1cyclictest795-21snmpd12:38:450
7506992827,1cyclictest795-21snmpd09:41:090
7506992827,1cyclictest795-21snmpd07:20:040
7509992725,2cyclictest795-21snmpd11:20:423
7509992725,2cyclictest795-21snmpd09:00:383
7508992725,2cyclictest795-21snmpd09:17:362
7508992724,2cyclictest795-21snmpd10:24:582
7507992726,1cyclictest795-21snmpd11:52:221
7507992725,2cyclictest795-21snmpd11:48:161
7506992727,0cyclictest23784-21kworker/0:2+events11:37:590
7506992726,1cyclictest795-21snmpd07:28:370
7509992624,2cyclictest795-21snmpd10:47:083
7509992624,2cyclictest1018-21cat10:40:173
7508992625,1cyclictest795-21snmpd09:20:232
7508992624,2cyclictest795-21snmpd12:25:532
7507992625,1cyclictest795-21snmpd11:15:241
7507992625,1cyclictest795-21snmpd10:43:591
7507992624,2cyclictest795-21snmpd08:56:371
7507992624,2cyclictest18228-21cat08:50:151
7507992623,2cyclictest795-21snmpd08:19:541
7506992626,0cyclictest17017-21kworker/0:1+events10:06:550
7508992524,1cyclictest795-21snmpd12:17:592
7508992524,1cyclictest795-21snmpd10:53:292
7508992524,1cyclictest795-21snmpd09:49:252
7506992525,0cyclictest3317-21kworker/0:1+events12:11:230
7506992525,0cyclictest3317-21kworker/0:1+events12:07:070
7506992525,0cyclictest17017-21kworker/0:1+events07:54:390
7509992423,1cyclictest795-21snmpd10:28:263
7509992422,2cyclictest15287-21cat12:20:163
7508992423,1cyclictest795-21snmpd10:14:252
7508992421,3cyclictest6827-21cat12:00:152
7507992424,0cyclictest30684-21kworker/u16:1+atlantic12:34:071
7507992423,1cyclictest795-21snmpd11:43:071
7509992322,1cyclictest795-21snmpd09:06:083
7507992322,1cyclictest795-21snmpd10:31:411
7508992220,2cyclictest795-21snmpd09:50:062
7508992121,0cyclictest3819-21kworker/u16:1+atlantic07:58:552
7508992120,1cyclictest795-21snmpd08:35:102
7506992120,1cyclictest795-21snmpd10:01:040
7506992120,1cyclictest795-21snmpd10:01:040
7509992019,1cyclictest795-21snmpd11:17:453
7508991717,0cyclictest2535-21kworker/u16:0+atlantic10:16:112
7509991513,2cyclictest14096-21cat08:40:153
75079965,1cyclictest19054-21basename07:35:151
75079965,1cyclictest16979-21idleruntime07:30:131
75089954,1cyclictest4730-21basename09:35:132
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional