You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-08-31 - 05:51

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Sun Aug 31, 2025 00:43:57)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
220092330302,25sleep00-21swapper/019:09:100
217372316309,5sleep20-21swapper/219:05:352
218232315308,4sleep30-21swapper/319:06:443
217662314306,5sleep10-21swapper/119:05:581
22342992990,296cyclictest23785-21kworker/u16:1+efi_rts_wq23:45:123
22339992960,295cyclictest22304-21kworker/u16:1+efi_rts_wq21:40:150
22340992930,292cyclictest19157-21kworker/u16:3+efi_rts_wq19:29:481
22340992920,291cyclictest9934-21kworker/u16:2+efi_rts_wq23:30:331
22340992920,291cyclictest31055-21kworker/u16:3+efi_rts_wq00:30:111
22339992910,290cyclictest22304-21kworker/u16:1+efi_rts_wq21:50:140
22339992910,290cyclictest19157-21kworker/u16:3+efi_rts_wq21:00:060
22341992890,288cyclictest23785-21kworker/u16:1+efi_rts_wq23:40:132
22341992890,288cyclictest22304-21kworker/u16:1+efi_rts_wq20:55:042
22340992880,287cyclictest22304-21kworker/u16:1+efi_rts_wq21:30:151
22342992860,285cyclictest31055-21kworker/u16:3+efi_rts_wq00:00:383
22342992860,285cyclictest22304-21kworker/u16:1+efi_rts_wq22:50:153
22342992860,285cyclictest19157-21kworker/u16:3+efi_rts_wq21:40:133
22341992860,284cyclictest9934-21kworker/u16:2+efi_rts_wq23:05:282
22339992860,285cyclictest25227-21kworker/u16:2+efi_rts_wq22:40:140
22342992850,284cyclictest23785-21kworker/u16:1+efi_rts_wq23:50:123
22342992840,283cyclictest22304-21kworker/u16:1+efi_rts_wq22:10:123
22339992840,283cyclictest31055-21kworker/u16:3+efi_rts_wq23:55:110
22341992830,281cyclictest22304-21kworker/u16:1+efi_rts_wq23:10:142
22341992810,280cyclictest22304-21kworker/u16:1+efi_rts_wq22:55:262
22340992800,279cyclictest22304-21kworker/u16:1+efi_rts_wq21:10:081
22340992800,278cyclictest31981-21kworker/u16:3+efi_rts_wq22:45:241
22341992790,278cyclictest31055-21kworker/u16:3+efi_rts_wq00:05:402
22341992790,278cyclictest22304-21kworker/u16:1+efi_rts_wq22:50:162
22341992790,278cyclictest22304-21kworker/u16:1+efi_rts_wq22:15:182
22340992790,278cyclictest19157-21kworker/u16:3+efi_rts_wq20:45:121
22339992790,278cyclictest22304-21kworker/u16:1+efi_rts_wq22:25:200
22339992760,275cyclictest22304-21kworker/u16:1+efi_rts_wq23:05:120
22339992750,274cyclictest22304-21kworker/u16:1+efi_rts_wq21:45:120
22340992740,273cyclictest22304-21kworker/u16:1+efi_rts_wq19:14:461
22339992730,272cyclictest19157-21kworker/u16:3+efi_rts_wq20:50:040
22339992710,270cyclictest22304-21kworker/u16:1+efi_rts_wq21:15:080
22342992700,267cyclictest31055-21kworker/u16:3+efi_rts_wq23:55:123
22342992690,268cyclictest22304-21kworker/u16:1+efi_rts_wq22:35:133
22339992690,268cyclictest19157-21kworker/u16:3+efi_rts_wq20:55:120
22341992670,266cyclictest22304-21kworker/u16:1+efi_rts_wq20:09:552
22341992670,265cyclictest12460-21kworker/u16:0+efi_rts_wq23:30:132
22340992650,264cyclictest19157-21kworker/u16:3+efi_rts_wq22:05:131
22340992640,263cyclictest19157-21kworker/u16:3+efi_rts_wq21:25:121
22339992640,263cyclictest23785-21kworker/u16:1+efi_rts_wq00:35:440
22340992600,259cyclictest22304-21kworker/u16:1+efi_rts_wq23:15:131
22339992570,256cyclictest19157-21kworker/u16:3+efi_rts_wq19:34:490
22340992560,255cyclictest22304-21kworker/u16:1+efi_rts_wq21:20:101
22341992530,251cyclictest31055-21kworker/u16:3+efi_rts_wq00:00:142
22340992530,252cyclictest22304-21kworker/u16:1+efi_rts_wq22:00:111
22340992520,251cyclictest31055-21kworker/u16:3+efi_rts_wq00:00:151
22341992510,249cyclictest22304-21kworker/u16:1+efi_rts_wq22:35:122
22340992500,249cyclictest31055-21kworker/u16:3+efi_rts_wq00:15:121
22342992470,246cyclictest22304-21kworker/u16:1+efi_rts_wq20:50:123
22341992470,245cyclictest22304-21kworker/u16:1+efi_rts_wq22:45:132
22340992440,243cyclictest19157-21kworker/u16:3+efi_rts_wq20:30:171
22341992400,239cyclictest9934-21kworker/u16:2+efi_rts_wq23:25:132
22341992400,239cyclictest23785-21kworker/u16:1+efi_rts_wq23:50:122
22341992400,239cyclictest22304-21kworker/u16:1+efi_rts_wq22:25:102
22342992360,235cyclictest22304-21kworker/u16:1+efi_rts_wq21:45:153
22340992350,234cyclictest9934-21kworker/u16:2+efi_rts_wq23:35:111
22340992330,232cyclictest23785-21kworker/u16:1+efi_rts_wq00:20:161
22340992330,232cyclictest22304-21kworker/u16:1+efi_rts_wq20:10:391
22341992320,231cyclictest22304-21kworker/u16:1+efi_rts_wq20:20:102
22342992310,230cyclictest22304-21kworker/u16:1+efi_rts_wq22:55:133
22341992310,230cyclictest9934-21kworker/u16:2+efi_rts_wq23:20:132
22341992300,229cyclictest19157-21kworker/u16:3+efi_rts_wq22:05:132
22340992290,228cyclictest19157-21kworker/u16:3+efi_rts_wq20:40:021
22339992290,228cyclictest25227-21kworker/u16:2+efi_rts_wq22:30:220
22339992280,227cyclictest19157-21kworker/u16:3+efi_rts_wq21:05:150
22340992260,225cyclictest22304-21kworker/u16:1+efi_rts_wq19:19:461
22339992260,225cyclictest22304-21kworker/u16:1+efi_rts_wq22:15:130
22339992260,225cyclictest12460-21kworker/u16:0+efi_rts_wq23:40:130
22339992240,222cyclictest23785-21kworker/u16:1+efi_rts_wq00:10:120
22342992180,217cyclictest19157-21kworker/u16:3+efi_rts_wq21:10:153
22342992170,216cyclictest19157-21kworker/u16:3+efi_rts_wq20:19:573
22340992170,216cyclictest25227-21kworker/u16:2+efi_rts_wq22:30:131
22341992160,215cyclictest22304-21kworker/u16:1+efi_rts_wq23:00:102
22341992150,214cyclictest19157-21kworker/u16:3+efi_rts_wq21:15:102
22340992150,213cyclictest22304-21kworker/u16:1+efi_rts_wq21:00:111
22341992130,211cyclictest22304-21kworker/u16:1+efi_rts_wq23:15:302
22340992130,212cyclictest22304-21kworker/u16:1+efi_rts_wq21:05:061
22342992110,209cyclictest22304-21kworker/u16:1+efi_rts_wq23:10:143
22341992110,210cyclictest19157-21kworker/u16:3+efi_rts_wq19:59:542
22341992110,210cyclictest19157-21kworker/u16:3+efi_rts_wq19:59:532
22339992100,209cyclictest19157-21kworker/u16:3+efi_rts_wq22:20:150
22342992090,207cyclictest9934-21kworker/u16:2+efi_rts_wq23:25:133
22340992090,208cyclictest23785-21kworker/u16:1+efi_rts_wq23:45:111
22341992060,205cyclictest19157-21kworker/u16:3+efi_rts_wq21:20:152
22339992050,204cyclictest22304-21kworker/u16:1+efi_rts_wq20:14:570
22339992050,204cyclictest19157-21kworker/u16:3+efi_rts_wq21:10:160
22340992030,202cyclictest19157-21kworker/u16:3+efi_rts_wq20:35:121
22341992010,200cyclictest23785-21kworker/u16:1+efi_rts_wq23:55:382
22341992000,199cyclictest19157-21kworker/u16:3+efi_rts_wq20:45:122
22339992000,199cyclictest9934-21kworker/u16:2+efi_rts_wq23:20:140
22339992000,199cyclictest31055-21kworker/u16:3+efi_rts_wq00:05:140
22339991970,196cyclictest19157-21kworker/u16:3+efi_rts_wq22:05:160
22339991970,196cyclictest19157-21kworker/u16:3+efi_rts_wq20:40:140
22339991960,195cyclictest22304-21kworker/u16:1+efi_rts_wq21:35:120
22339991930,192cyclictest22304-21kworker/u16:1+efi_rts_wq22:00:160
22340991900,189cyclictest22304-21kworker/u16:1+efi_rts_wq20:25:131
22339991900,189cyclictest19157-21kworker/u16:3+efi_rts_wq21:55:130
22342991890,188cyclictest19157-21kworker/u16:3+efi_rts_wq20:30:163
22339991890,188cyclictest19157-21kworker/u16:3+efi_rts_wq20:30:170
22341991880,187cyclictest31055-21kworker/u16:3+efi_rts_wq00:30:092
22341991870,186cyclictest19157-21kworker/u16:3+efi_rts_wq21:05:162
22340991870,186cyclictest22304-21kworker/u16:1+efi_rts_wq20:50:131
22342991850,184cyclictest19157-21kworker/u16:3+efi_rts_wq19:44:513
22340991840,183cyclictest22304-21kworker/u16:1+efi_rts_wq23:00:101
22339991830,182cyclictest22304-21kworker/u16:1+efi_rts_wq19:54:530
22339991830,182cyclictest22304-21kworker/u16:1+efi_rts_wq19:54:520
22339991810,179cyclictest22304-21kworker/u16:1+efi_rts_wq23:00:280
22339991800,179cyclictest22304-21kworker/u16:1+efi_rts_wq20:25:130
22341991790,178cyclictest19157-21kworker/u16:3+efi_rts_wq22:20:202
22340991760,172cyclictest19157-21kworker/u16:3+efi_rts_wq21:35:121
22342991750,174cyclictest19157-21kworker/u16:3+efi_rts_wq21:20:143
22340991730,171cyclictest22304-21kworker/u16:1+efi_rts_wq22:50:161
22340991720,171cyclictest22304-21kworker/u16:1+efi_rts_wq22:40:241
22342991680,167cyclictest19157-21kworker/u16:3+efi_rts_wq21:55:133
22341991670,166cyclictest19157-21kworker/u16:3+efi_rts_wq20:35:122
22340991660,165cyclictest19157-21kworker/u16:3+efi_rts_wq20:15:091
22339991660,165cyclictest23785-21kworker/u16:1+efi_rts_wq23:45:350
22339991620,161cyclictest23785-21kworker/u16:1+efi_rts_wq23:50:370
22341991610,160cyclictest22304-21kworker/u16:1+efi_rts_wq22:10:132
22341991600,159cyclictest19157-21kworker/u16:3+efi_rts_wq20:15:092
22342991580,157cyclictest12460-21kworker/u16:0+efi_rts_wq23:30:113
22342991570,156cyclictest31055-21kworker/u16:3+efi_rts_wq00:25:133
22339991530,152cyclictest22304-21kworker/u16:1+efi_rts_wq22:45:130
22339991510,150cyclictest9934-21kworker/u16:2+efi_rts_wq23:35:330
22341991490,148cyclictest22304-21kworker/u16:1+efi_rts_wq20:29:592
22342991470,146cyclictest22304-21kworker/u16:1+efi_rts_wq20:10:383
22342991470,146cyclictest19157-21kworker/u16:3+efi_rts_wq20:55:143
22340991460,145cyclictest19157-21kworker/u16:3+efi_rts_wq21:55:151
22341991450,144cyclictest31055-21kworker/u16:3+efi_rts_wq00:15:422
22339991450,144cyclictest31055-21kworker/u16:3+efi_rts_wq00:15:120
22340991370,136cyclictest23785-21kworker/u16:1+efi_rts_wq00:10:411
22341991350,134cyclictest25227-21kworker/u16:2+efi_rts_wq22:30:132
22341991350,134cyclictest22304-21kworker/u16:1+efi_rts_wq20:10:452
22339991300,129cyclictest22304-21kworker/u16:1+efi_rts_wq22:50:260
22342991280,127cyclictest22304-21kworker/u16:1+efi_rts_wq21:50:143
22342991260,125cyclictest22304-21kworker/u16:1+efi_rts_wq19:39:503
22341991250,124cyclictest19157-21kworker/u16:3+efi_rts_wq21:30:122
22340991200,119cyclictest22304-21kworker/u16:1+efi_rts_wq20:20:101
22339991180,117cyclictest22304-21kworker/u16:1+efi_rts_wq21:25:100
22341991170,116cyclictest22304-21kworker/u16:1+efi_rts_wq19:49:512
22342991160,115cyclictest22304-21kworker/u16:1+efi_rts_wq19:15:013
22340991160,115cyclictest31055-21kworker/u16:3+efi_rts_wq00:25:121
22339991150,114cyclictest19157-21kworker/u16:3+efi_rts_wq20:04:550
22340991120,111cyclictest19157-21kworker/u16:3+efi_rts_wq19:24:481
22339991100,109cyclictest25227-21kworker/u16:2+efi_rts_wq22:35:220
22341991080,107cyclictest22304-21kworker/u16:1+efi_rts_wq20:35:012
22339991060,105cyclictest19157-21kworker/u16:3+efi_rts_wq20:24:590
22341991040,103cyclictest22304-21kworker/u16:1+efi_rts_wq21:35:122
22339991030,102cyclictest22304-21kworker/u16:1+efi_rts_wq23:15:130
2234299970,96cyclictest12460-21kworker/u16:0+efi_rts_wq23:40:343
22342993330,2cyclictest799-21snmpd19:56:033
22342993330,2cyclictest799-21snmpd19:56:023
22340993230,2cyclictest799-21snmpd22:14:371
22342993129,2cyclictest799-21snmpd23:05:563
22342993129,2cyclictest799-21snmpd22:30:363
22342993129,2cyclictest799-21snmpd21:25:063
22342993129,2cyclictest799-21snmpd20:27:553
22342993128,2cyclictest30845-21cat22:40:143
22341993130,1cyclictest799-21snmpd00:27:382
22339993130,1cyclictest799-21snmpd20:47:100
22339993130,1cyclictest799-21snmpd00:30:140
22339993129,2cyclictest799-21snmpd19:36:440
22339993129,2cyclictest799-21snmpd19:17:140
22342993029,1cyclictest799-21snmpd23:37:213
22342993029,1cyclictest799-21snmpd22:21:093
22342993029,1cyclictest799-21snmpd22:05:343
22342993029,1cyclictest799-21snmpd20:43:463
22342993029,1cyclictest799-21snmpd19:30:023
22342993029,1cyclictest799-21snmpd19:24:293
22342993029,1cyclictest799-21snmpd00:37:113
22342993029,1cyclictest14836-21kworker/3:3+events23:16:113
22342993028,2cyclictest799-21snmpd23:03:433
22342993028,2cyclictest799-21snmpd19:52:333
22342993028,2cyclictest799-21snmpd19:52:323
22341993029,1cyclictest799-21snmpd23:35:442
22341993029,1cyclictest799-21snmpd21:42:032
22341993029,1cyclictest799-21snmpd21:15:002
22341993028,2cyclictest799-21snmpd19:54:002
22341993028,2cyclictest799-21snmpd19:53:592
22340993029,1cyclictest799-21snmpd21:40:151
22340993029,1cyclictest799-21snmpd19:48:561
22339993029,1cyclictest799-21snmpd23:27:590
22339993029,1cyclictest799-21snmpd19:28:230
22339993029,1cyclictest799-21snmpd00:25:460
22339993028,2cyclictest799-21snmpd22:13:280
22339993027,2cyclictest799-21snmpd21:20:090
22342992929,0cyclictest6044-21kworker/3:2+events00:20:583
22342992928,1cyclictest799-21snmpd20:48:263
22342992928,1cyclictest799-21snmpd20:38:473
22342992928,1cyclictest29241-21kworker/3:2+events22:48:033
22342992927,2cyclictest799-21snmpd21:16:063
22342992927,2cyclictest799-21snmpd21:04:583
22341992928,1cyclictest799-21snmpd21:55:122
22341992928,1cyclictest799-21snmpd21:47:452
22341992928,1cyclictest799-21snmpd00:22:582
22341992928,1cyclictest799-21snmpd00:12:242
22341992927,2cyclictest799-21snmpd20:42:412
22341992927,2cyclictest799-21snmpd19:22:202
22340992928,1cyclictest799-21snmpd23:55:541
22340992928,1cyclictest799-21snmpd22:56:401
22340992928,1cyclictest799-21snmpd22:35:341
22340992927,2cyclictest799-21snmpd23:25:411
22339992928,1cyclictest799-21snmpd22:57:010
22339992928,1cyclictest799-21snmpd20:16:360
22339992928,1cyclictest799-21snmpd19:21:160
22339992927,2cyclictest799-21snmpd19:42:180
22342992828,0cyclictest4659-21kworker/3:1+events23:21:023
22342992827,1cyclictest799-21snmpd22:17:223
22342992827,1cyclictest799-21snmpd21:09:473
22342992827,1cyclictest799-21snmpd19:25:403
22341992827,1cyclictest799-21snmpd22:41:532
22341992827,1cyclictest799-21snmpd19:11:082
22340992827,1cyclictest799-21snmpd23:43:121
22340992827,1cyclictest799-21snmpd21:52:301
22340992826,2cyclictest799-21snmpd20:03:211
22340992826,2cyclictest799-21snmpd00:39:341
22339992827,1cyclictest799-21snmpd23:33:060
22339992827,1cyclictest799-21snmpd20:07:000
22339992827,1cyclictest799-21snmpd19:55:090
22339992827,1cyclictest799-21snmpd19:55:080
22342992727,0cyclictest7754-21kworker/3:1+events20:02:073
22342992727,0cyclictest6044-21kworker/3:2+events00:31:303
22342992726,1cyclictest799-21snmpd21:36:033
22342992726,1cyclictest799-21snmpd20:06:363
22342992725,2cyclictest799-21snmpd00:13:453
22341992726,1cyclictest799-21snmpd22:01:102
22341992725,2cyclictest799-21snmpd21:26:512
22341992725,2cyclictest799-21snmpd00:36:232
22340992726,1cyclictest799-21snmpd23:10:211
22340992726,1cyclictest799-21snmpd22:25:331
22339992726,1cyclictest799-21snmpd21:30:240
22339992725,2cyclictest799-21snmpd23:14:180
22342992626,0cyclictest8781-21kworker/3:2+events22:27:553
22342992624,2cyclictest799-21snmpd22:03:183
22342992624,2cyclictest799-21snmpd19:13:593
22342992624,2cyclictest799-21snmpd00:16:553
22341992625,1cyclictest799-21snmpd21:51:302
22341992625,1cyclictest799-21snmpd19:41:392
22340992626,0cyclictest799-21snmpd22:15:391
22340992625,1cyclictest799-21snmpd20:05:451
22340992624,2cyclictest799-21snmpd23:53:101
22339992625,1cyclictest799-21snmpd19:49:540
22342992524,1cyclictest799-21snmpd20:20:553
22340992524,1cyclictest799-21snmpd23:07:141
22339992524,1cyclictest799-21snmpd00:02:130
22340992423,1cyclictest799-21snmpd21:46:381
22339992423,1cyclictest799-21snmpd00:22:020
22341992322,1cyclictest799-21snmpd23:45:302
22341992322,1cyclictest799-21snmpd19:17:552
22340992323,0cyclictest22304-21kworker/u16:1+atlantic19:35:061
22342992221,1cyclictest6044-21kworker/3:2+events00:06:493
22341992221,1cyclictest799-21snmpd21:02:442
22340992222,0cyclictest73850irq/136-enp1s023:21:351
22340992220,2cyclictest799-21snmpd20:57:551
22340992119,2cyclictest799-21snmpd19:51:451
22340992119,2cyclictest799-21snmpd19:51:441
22342992019,1cyclictest799-21snmpd21:31:143
22341992019,1cyclictest799-21snmpd19:28:522
22340991918,1cyclictest799-21snmpd19:44:331
22342991818,0cyclictest7754-21kworker/3:1+events19:47:183
22341991615,1cyclictest799-21snmpd20:52:442
22340991614,2cyclictest799-21snmpd22:20:041
22339991615,1cyclictest799-21snmpd19:14:370
22339991614,2cyclictest799-21snmpd20:39:580
22341991413,1cyclictest799-21snmpd20:04:572
223409999,0cyclictest19157-21kworker/u16:3+atlantic21:16:041
223409999,0cyclictest19157-21kworker/u16:3+atlantic19:56:271
223409999,0cyclictest19157-21kworker/u16:3+atlantic19:56:261
223419965,1cyclictest26305-21taskset19:39:332
223409965,1cyclictest6510-21taskset00:05:001
223409965,1cyclictest25494-21chrt19:31:491
223419954,1cyclictest25429-21taskset19:30:572
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional