You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-16 - 12:02

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Sun Nov 16, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
202882327305,5sleep30-21swapper/319:09:253
184952322307,5sleep20-21swapper/219:05:032
203112318303,5sleep10-21swapper/119:09:431
201132317303,5sleep00-21swapper/019:07:100
20602993050,302cyclictest16173-21kworker/u16:1+efi_rts_wq00:00:132
20602993030,301cyclictest27997-21kworker/u16:1+efi_rts_wq23:45:412
20603993000,299cyclictest16339-21kworker/u16:1+efi_rts_wq21:35:173
20603993000,299cyclictest10674-21kworker/u16:2+efi_rts_wq23:55:433
20600993000,298cyclictest13877-21kworker/u16:3+efi_rts_wq23:50:140
20600992990,298cyclictest10674-21kworker/u16:2+efi_rts_wq19:30:130
20602992970,296cyclictest10674-21kworker/u16:2+efi_rts_wq23:00:142
20601992970,296cyclictest16339-21kworker/u16:1+efi_rts_wq19:40:161
20600992970,294cyclictest16339-21kworker/u16:1+efi_rts_wq19:50:140
20601992960,295cyclictest10674-21kworker/u16:2+efi_rts_wq23:05:331
20600992960,295cyclictest10674-21kworker/u16:2+efi_rts_wq21:50:140
20603992950,293cyclictest27997-21kworker/u16:1+efi_rts_wq23:40:133
20602992930,292cyclictest10674-21kworker/u16:2+efi_rts_wq20:35:162
20602992930,291cyclictest10674-21kworker/u16:2+efi_rts_wq19:55:162
20603992920,291cyclictest16339-21kworker/u16:1+efi_rts_wq20:50:143
20603992900,289cyclictest16339-21kworker/u16:1+efi_rts_wq20:20:153
20603992900,289cyclictest16339-21kworker/u16:1+efi_rts_wq20:20:153
20602992900,289cyclictest16339-21kworker/u16:1+efi_rts_wq19:10:152
20602992900,289cyclictest10674-21kworker/u16:2+efi_rts_wq23:10:142
20603992890,288cyclictest16339-21kworker/u16:1+efi_rts_wq19:34:563
20603992890,288cyclictest10674-21kworker/u16:2+efi_rts_wq21:45:153
20602992890,286cyclictest27997-21kworker/u16:1+efi_rts_wq23:30:132
20600992890,288cyclictest28785-21kworker/u16:2+efi_rts_wq00:25:150
20601992860,284cyclictest10674-21kworker/u16:2+efi_rts_wq22:45:141
20603992850,284cyclictest16339-21kworker/u16:1+efi_rts_wq22:55:173
20601992840,283cyclictest10674-21kworker/u16:2+efi_rts_wq23:35:141
20602992830,282cyclictest16339-21kworker/u16:1+efi_rts_wq20:15:032
20600992800,279cyclictest10674-21kworker/u16:2+efi_rts_wq19:55:160
20603992790,278cyclictest16339-21kworker/u16:1+efi_rts_wq22:05:133
20603992770,276cyclictest10674-21kworker/u16:2+efi_rts_wq22:30:143
20600992770,276cyclictest16339-21kworker/u16:1+efi_rts_wq19:25:170
20602992760,275cyclictest18447-21kworker/u16:0+efi_rts_wq00:15:152
20600992750,274cyclictest27997-21kworker/u16:1+efi_rts_wq23:30:130
20603992740,273cyclictest22543-21kworker/u16:3+efi_rts_wq00:35:493
20600992730,271cyclictest10674-21kworker/u16:2+efi_rts_wq23:10:140
20603992720,271cyclictest16339-21kworker/u16:1+efi_rts_wq21:55:143
20600992720,270cyclictest10674-21kworker/u16:2+efi_rts_wq21:40:160
20603992710,270cyclictest10674-21kworker/u16:2+efi_rts_wq19:20:143
20601992710,270cyclictest10674-21kworker/u16:2+efi_rts_wq22:35:281
20601992690,268cyclictest16339-21kworker/u16:1+efi_rts_wq20:20:151
20601992690,268cyclictest16339-21kworker/u16:1+efi_rts_wq20:20:151
20603992680,267cyclictest27997-21kworker/u16:1+efi_rts_wq23:10:343
20602992660,265cyclictest27997-21kworker/u16:1+efi_rts_wq23:20:362
20602992640,263cyclictest16339-21kworker/u16:1+efi_rts_wq21:30:142
20602992630,262cyclictest10674-21kworker/u16:2+efi_rts_wq19:30:132
20601992610,260cyclictest16339-21kworker/u16:1+efi_rts_wq21:25:131
20600992610,259cyclictest10674-21kworker/u16:2+efi_rts_wq21:15:140
20602992600,259cyclictest16339-21kworker/u16:1+efi_rts_wq20:10:152
20601992600,259cyclictest18447-21kworker/u16:0+efi_rts_wq00:15:151
20600992600,257cyclictest16173-21kworker/u16:1+efi_rts_wq00:00:130
20603992580,257cyclictest16339-21kworker/u16:1+efi_rts_wq22:15:133
20600992580,257cyclictest10674-21kworker/u16:2+efi_rts_wq22:50:310
20601992570,256cyclictest18447-21kworker/u16:0+efi_rts_wq00:20:471
20601992560,255cyclictest10674-21kworker/u16:2+efi_rts_wq21:00:111
20603992550,254cyclictest10674-21kworker/u16:2+efi_rts_wq20:45:163
20603992530,252cyclictest27997-21kworker/u16:1+efi_rts_wq23:20:143
20603992520,251cyclictest10674-21kworker/u16:2+efi_rts_wq20:05:143
20601992510,248cyclictest16339-21kworker/u16:1+efi_rts_wq22:55:151
20600992510,250cyclictest10674-21kworker/u16:2+efi_rts_wq21:45:190
20602992500,249cyclictest16339-21kworker/u16:1+efi_rts_wq22:05:132
20603992480,247cyclictest18447-21kworker/u16:0+efi_rts_wq00:05:143
20600992480,245cyclictest10674-21kworker/u16:2+efi_rts_wq23:15:140
20601992470,246cyclictest16339-21kworker/u16:1+efi_rts_wq21:35:121
20603992460,244cyclictest10674-21kworker/u16:2+efi_rts_wq20:25:153
20601992460,244cyclictest10674-21kworker/u16:2+efi_rts_wq20:00:121
20602992420,241cyclictest10674-21kworker/u16:2+efi_rts_wq22:20:152
20603992400,239cyclictest10674-21kworker/u16:2+efi_rts_wq21:20:123
20601992400,239cyclictest10674-21kworker/u16:2+efi_rts_wq22:10:141
20600992400,239cyclictest16173-21kworker/u16:1+efi_rts_wq00:10:170
20602992360,235cyclictest16339-21kworker/u16:1+efi_rts_wq21:00:142
20602992360,234cyclictest16339-21kworker/u16:1+efi_rts_wq22:50:152
20600992350,234cyclictest10674-21kworker/u16:2+efi_rts_wq20:55:180
20603992340,233cyclictest10674-21kworker/u16:2+efi_rts_wq22:20:153
20601992340,233cyclictest10674-21kworker/u16:2+efi_rts_wq20:15:161
20600992330,232cyclictest16339-21kworker/u16:1+efi_rts_wq22:25:130
20600992330,231cyclictest10674-21kworker/u16:2+efi_rts_wq22:10:140
20600992320,231cyclictest10674-21kworker/u16:2+efi_rts_wq23:00:140
20600992300,229cyclictest10674-21kworker/u16:2+efi_rts_wq20:45:160
20602992280,227cyclictest10674-21kworker/u16:2+efi_rts_wq19:20:132
20603992270,226cyclictest16339-21kworker/u16:1+efi_rts_wq22:40:133
20600992270,225cyclictest10674-21kworker/u16:2+efi_rts_wq23:25:170
20600992260,225cyclictest10674-21kworker/u16:2+efi_rts_wq22:00:160
20603992250,224cyclictest10674-21kworker/u16:2+efi_rts_wq20:10:023
20601992250,224cyclictest10674-21kworker/u16:2+efi_rts_wq19:35:151
20601992250,223cyclictest16339-21kworker/u16:1+efi_rts_wq19:25:181
20603992240,223cyclictest10674-21kworker/u16:2+efi_rts_wq22:00:163
20602992240,223cyclictest16339-21kworker/u16:1+efi_rts_wq20:55:102
20602992240,223cyclictest16339-21kworker/u16:1+efi_rts_wq20:30:182
20603992230,221cyclictest10674-21kworker/u16:2+efi_rts_wq23:35:153
20603992210,220cyclictest16173-21kworker/u16:1+efi_rts_wq00:10:453
20601992200,219cyclictest18447-21kworker/u16:0+efi_rts_wq00:05:451
20600992170,214cyclictest10674-21kworker/u16:2+efi_rts_wq19:49:590
20601992140,213cyclictest10674-21kworker/u16:2+efi_rts_wq23:45:141
20602992130,212cyclictest16339-21kworker/u16:1+efi_rts_wq19:50:132
20602992130,212cyclictest16339-21kworker/u16:1+efi_rts_wq19:15:162
20601992120,211cyclictest16339-21kworker/u16:1+efi_rts_wq21:05:141
20600992110,210cyclictest13877-21kworker/u16:3+efi_rts_wq23:55:140
20602992100,209cyclictest16339-21kworker/u16:1+efi_rts_wq21:25:162
20603992090,208cyclictest16339-21kworker/u16:1+efi_rts_wq21:25:133
20602992090,208cyclictest22543-21kworker/u16:3+efi_rts_wq00:30:162
20600992090,208cyclictest16339-21kworker/u16:1+efi_rts_wq22:40:130
20601992070,206cyclictest28785-21kworker/u16:2+efi_rts_wq00:25:151
20603992030,202cyclictest16339-21kworker/u16:1+efi_rts_wq21:30:153
20602992030,202cyclictest10674-21kworker/u16:2+efi_rts_wq19:45:152
20603992020,201cyclictest16339-21kworker/u16:1+efi_rts_wq21:10:123
20600992000,199cyclictest18447-21kworker/u16:0+efi_rts_wq00:20:130
20603991970,196cyclictest10674-21kworker/u16:2+efi_rts_wq20:30:063
20601991970,196cyclictest16339-21kworker/u16:1+efi_rts_wq22:25:261
20602991960,195cyclictest10674-21kworker/u16:2+efi_rts_wq19:39:572
20602991930,190cyclictest16339-21kworker/u16:1+efi_rts_wq21:55:152
20600991900,188cyclictest10674-21kworker/u16:2+efi_rts_wq22:35:130
20602991890,188cyclictest16339-21kworker/u16:1+efi_rts_wq20:40:152
20601991890,188cyclictest10674-21kworker/u16:2+efi_rts_wq21:40:181
20603991880,187cyclictest18447-21kworker/u16:0+efi_rts_wq00:20:143
20600991870,186cyclictest16339-21kworker/u16:1+efi_rts_wq20:10:160
20603991840,182cyclictest10674-21kworker/u16:2+efi_rts_wq23:25:373
20602991830,182cyclictest10674-21kworker/u16:2+efi_rts_wq23:15:142
20600991830,182cyclictest16339-21kworker/u16:1+efi_rts_wq19:15:010
20603991820,181cyclictest10674-21kworker/u16:2+efi_rts_wq21:50:133
20600991820,181cyclictest10674-21kworker/u16:2+efi_rts_wq21:20:150
20602991810,180cyclictest10674-21kworker/u16:2+efi_rts_wq21:50:192
20603991800,179cyclictest10674-21kworker/u16:2+efi_rts_wq19:35:153
20602991800,179cyclictest10674-21kworker/u16:2+efi_rts_wq21:05:122
20601991780,177cyclictest30835-21kworker/u16:0+efi_rts_wq23:15:351
20601991740,173cyclictest11546-21kworker/u16:0+efi_rts_wq23:50:421
20601991700,169cyclictest13877-21kworker/u16:3+efi_rts_wq23:55:141
20603991690,166cyclictest10674-21kworker/u16:2+efi_rts_wq23:05:123
20603991680,167cyclictest10674-21kworker/u16:2+efi_rts_wq21:15:143
20600991670,166cyclictest16339-21kworker/u16:1+efi_rts_wq20:25:050
20603991660,165cyclictest22543-21kworker/u16:3+efi_rts_wq00:30:163
20603991620,161cyclictest10674-21kworker/u16:2+efi_rts_wq23:00:323
20602991620,161cyclictest16339-21kworker/u16:1+efi_rts_wq19:29:562
20602991570,156cyclictest16339-21kworker/u16:1+efi_rts_wq20:05:022
20602991560,155cyclictest16339-21kworker/u16:1+efi_rts_wq22:30:272
20602991550,154cyclictest16339-21kworker/u16:1+efi_rts_wq21:35:122
20603991440,143cyclictest10674-21kworker/u16:2+efi_rts_wq22:10:233
20602991430,142cyclictest16339-21kworker/u16:1+efi_rts_wq21:10:132
20603991420,141cyclictest16339-21kworker/u16:1+efi_rts_wq19:44:573
20600991380,137cyclictest27997-21kworker/u16:1+efi_rts_wq23:35:390
20601991350,134cyclictest16339-21kworker/u16:1+efi_rts_wq21:30:141
20601991330,132cyclictest16339-21kworker/u16:1+efi_rts_wq22:15:241
20601991330,132cyclictest10674-21kworker/u16:2+efi_rts_wq20:45:161
20603991270,124cyclictest10674-21kworker/u16:2+efi_rts_wq20:15:163
20600991270,126cyclictest16339-21kworker/u16:1+efi_rts_wq20:40:150
20602991230,122cyclictest16339-21kworker/u16:1+efi_rts_wq22:15:122
20602991220,121cyclictest10674-21kworker/u16:2+efi_rts_wq22:00:212
20602991220,120cyclictest10674-21kworker/u16:2+efi_rts_wq22:45:142
20603991200,119cyclictest10674-21kworker/u16:2+efi_rts_wq20:40:083
20600991140,113cyclictest10674-21kworker/u16:2+efi_rts_wq22:30:140
20601991100,109cyclictest10674-21kworker/u16:2+efi_rts_wq23:30:381
20600993329,4cyclictest795-21snmpd21:33:300
20603993229,2cyclictest795-21snmpd21:05:053
20602993230,2cyclictest795-21snmpd22:42:232
20602993230,2cyclictest795-21snmpd20:45:172
20601993230,2cyclictest795-21snmpd21:11:211
20600993230,2cyclictest795-21snmpd00:16:170
20603993129,2cyclictest795-21snmpd22:52:093
20603993128,2cyclictest795-21snmpd00:28:173
20602993129,2cyclictest795-21snmpd23:28:152
20602993129,2cyclictest795-21snmpd20:26:132
20602993128,2cyclictest795-21snmpd20:22:192
20602993128,2cyclictest795-21snmpd20:22:192
20601993129,2cyclictest795-21snmpd22:09:371
20601993129,2cyclictest795-21snmpd22:02:281
20601993129,2cyclictest795-21snmpd21:16:451
20600993129,2cyclictest795-21snmpd19:43:420
20603993029,1cyclictest795-21snmpd22:49:363
20603993029,1cyclictest795-21snmpd22:28:563
20603993029,1cyclictest795-21snmpd21:04:143
20603993029,1cyclictest795-21snmpd00:15:323
20603993029,1cyclictest795-21snmpd00:01:023
20603993027,2cyclictest795-21snmpd21:42:033
20603993027,2cyclictest795-21snmpd20:04:283
20602993030,0cyclictest20104-21kworker/2:3+events22:55:582
20602993029,1cyclictest795-21snmpd23:52:432
20602993029,1cyclictest795-21snmpd23:38:102
20602993029,1cyclictest795-21snmpd22:35:052
20602993029,1cyclictest795-21snmpd00:39:032
20602993029,1cyclictest795-21snmpd00:27:322
20602993029,1cyclictest20104-21kworker/2:3+events23:05:062
20601993029,1cyclictest795-21snmpd22:24:171
20601993029,1cyclictest795-21snmpd21:47:371
20601993029,1cyclictest795-21snmpd20:36:041
20601993029,1cyclictest795-21snmpd20:10:011
20601993029,1cyclictest795-21snmpd20:09:251
20601993029,1cyclictest795-21snmpd19:15:501
20601993028,2cyclictest795-21snmpd19:58:511
20601993027,2cyclictest795-21snmpd21:50:431
20600993029,1cyclictest795-21snmpd22:57:480
20600993029,1cyclictest795-21snmpd20:33:490
20600993028,2cyclictest795-21snmpd23:49:040
20600993028,2cyclictest795-21snmpd21:00:170
20603992928,1cyclictest795-21snmpd19:12:173
20602992929,0cyclictest2706-21kworker/2:0+events23:40:042
20602992929,0cyclictest18280-21kworker/2:1+events21:45:242
20602992928,1cyclictest795-21snmpd21:44:072
20602992928,1cyclictest795-21snmpd20:04:162
20602992928,1cyclictest14030-21kworker/2:0+events23:58:482
20602992927,2cyclictest795-21snmpd00:21:262
20602992926,2cyclictest795-21snmpd22:25:112
20601992928,1cyclictest795-21snmpd22:41:201
20601992928,1cyclictest795-21snmpd19:30:451
20601992927,2cyclictest795-21snmpd23:27:371
20600992928,1cyclictest795-21snmpd23:09:390
20600992928,1cyclictest795-21snmpd22:48:270
20600992928,1cyclictest795-21snmpd20:16:360
20600992927,2cyclictest795-21snmpd19:11:140
20600992926,2cyclictest795-21snmpd22:15:530
20600992926,2cyclictest795-21snmpd20:21:160
20600992926,2cyclictest795-21snmpd20:21:160
20603992827,1cyclictest795-21snmpd19:15:143
20603992826,2cyclictest795-21snmpd23:30:583
20602992826,2cyclictest795-21snmpd21:18:512
20602992826,2cyclictest795-21snmpd00:14:082
20601992828,0cyclictest73950irq/132-enp1s022:53:511
20601992827,1cyclictest795-21snmpd19:45:121
20601992826,2cyclictest795-21snmpd23:42:281
20600992827,1cyclictest795-21snmpd00:32:050
20600992826,1cyclictest795-21snmpd21:35:120
20602992726,1cyclictest761-21kworker/2:1+events21:25:002
20601992726,1cyclictest795-21snmpd00:34:561
20601992726,1cyclictest795-21snmpd00:11:351
20600992726,1cyclictest795-21snmpd23:22:420
20600992726,1cyclictest795-21snmpd20:05:340
20600992726,1cyclictest795-21snmpd19:23:320
20600992726,1cyclictest795-21snmpd00:09:320
20600992724,3cyclictest795-21snmpd22:23:230
20600992724,2cyclictest795-21snmpd20:39:010
20603992625,1cyclictest795-21snmpd20:59:143
20603992623,2cyclictest795-21snmpd23:15:063
20602992625,1cyclictest795-21snmpd22:10:162
20601992625,1cyclictest795-21snmpd21:56:401
20601992625,1cyclictest795-21snmpd19:50:091
20601992624,2cyclictest795-21snmpd19:14:141
20601992624,2cyclictest795-21snmpd00:00:501
20600992625,1cyclictest795-21snmpd23:42:130
20600992625,1cyclictest795-21snmpd21:06:170
20600992625,1cyclictest795-21snmpd20:50:230
20600992624,2cyclictest795-21snmpd20:05:010
20603992525,0cyclictest795-21snmpd22:39:263
20603992523,2cyclictest12691-21cat23:45:163
20601992524,1cyclictest795-21snmpd20:57:351
20601992524,1cyclictest795-21snmpd00:35:351
20601992523,2cyclictest795-21snmpd20:52:291
20603992422,2cyclictest795-21snmpd23:51:223
20603992422,2cyclictest795-21snmpd20:39:563
20601992424,0cyclictest795-21snmpd23:00:271
20601992423,1cyclictest795-21snmpd22:31:231
20600992423,1cyclictest795-21snmpd21:27:540
20602992323,0cyclictest14030-21kworker/2:0+events00:05:042
20601992322,1cyclictest795-21snmpd19:20:561
20601992321,2cyclictest795-21snmpd23:13:331
20601992321,2cyclictest795-21snmpd20:30:371
20600992321,2cyclictest795-21snmpd22:05:520
20602992222,0cyclictest30640-21kworker/2:0+events19:40:162
20602992221,1cyclictest30640-21kworker/2:0+events20:51:062
20601992220,2cyclictest795-21snmpd23:20:121
20600992019,1cyclictest795-21snmpd21:58:400
20603991918,1cyclictest795-21snmpd19:52:213
20601991918,1cyclictest795-21snmpd20:43:071
20600991918,1cyclictest795-21snmpd21:10:420
20603991716,1cyclictest795-21snmpd19:25:143
20600991514,1cyclictest795-21snmpd00:39:540
20601991312,1cyclictest795-21snmpd21:20:211
20603991210,2cyclictest4228-21cat19:45:173
206039965,1cyclictest8996-21sed19:55:233
206019965,1cyclictest20793-21cat20:25:161
206009965,1cyclictest9662sleep019:35:560
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional