You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-07 - 02:36

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Tue Jan 06, 2026 12:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
195812323317,4sleep20-21swapper/207:07:412
196072318311,5sleep30-21swapper/307:08:023
196942316308,5sleep10-21swapper/107:09:081
20028993130,312cyclictest9678-21kworker/u16:2+efi_rts_wq08:25:123
20028993130,312cyclictest9034-21kworker/u16:2+efi_rts_wq11:45:113
194102313306,5sleep00-21swapper/007:05:310
20025993110,310cyclictest1854-21kworker/u16:0+efi_rts_wq07:40:110
20027993100,308cyclictest14716-21kworker/u16:1+efi_rts_wq10:50:132
20028993090,308cyclictest14716-21kworker/u16:1+efi_rts_wq11:20:143
20027993080,307cyclictest11330-21kworker/u16:3+efi_rts_wq12:17:552
20026993070,306cyclictest14716-21kworker/u16:1+efi_rts_wq11:35:131
20026993070,306cyclictest11330-21kworker/u16:3+efi_rts_wq11:50:121
20025993070,306cyclictest9678-21kworker/u16:2+efi_rts_wq09:50:120
20026993050,304cyclictest1854-21kworker/u16:0+efi_rts_wq09:35:131
20027993020,301cyclictest12187-21kworker/u16:3+efi_rts_wq11:15:112
20026993020,301cyclictest11330-21kworker/u16:3+efi_rts_wq11:55:151
20026993020,301cyclictest11330-21kworker/u16:3+efi_rts_wq11:55:151
20027993010,300cyclictest9034-21kworker/u16:2+efi_rts_wq12:35:122
20028993000,299cyclictest9678-21kworker/u16:2+efi_rts_wq07:55:133
20028993000,299cyclictest1854-21kworker/u16:0+efi_rts_wq08:40:153
20028992980,297cyclictest1854-21kworker/u16:0+efi_rts_wq09:35:143
20026992980,297cyclictest1854-21kworker/u16:0+efi_rts_wq07:45:121
20027992970,296cyclictest9678-21kworker/u16:2+efi_rts_wq09:15:132
20028992960,295cyclictest1854-21kworker/u16:0+efi_rts_wq09:45:133
20028992960,295cyclictest11330-21kworker/u16:3+efi_rts_wq12:20:133
20028992950,294cyclictest9678-21kworker/u16:2+efi_rts_wq10:15:123
20027992950,294cyclictest9678-21kworker/u16:2+efi_rts_wq07:15:012
20027992950,294cyclictest30310-21kworker/u16:0+efi_rts_wq11:27:472
20025992940,293cyclictest9678-21kworker/u16:2+efi_rts_wq07:10:140
20027992930,292cyclictest11330-21kworker/u16:3+efi_rts_wq12:30:132
20025992930,292cyclictest9678-21kworker/u16:2+efi_rts_wq09:40:120
20025992920,291cyclictest12187-21kworker/u16:3+efi_rts_wq10:55:150
20028992910,290cyclictest9678-21kworker/u16:2+efi_rts_wq07:52:093
20028992910,290cyclictest1854-21kworker/u16:0+efi_rts_wq08:30:143
20026992910,290cyclictest9678-21kworker/u16:2+efi_rts_wq10:35:121
20025992910,290cyclictest30310-21kworker/u16:0+efi_rts_wq11:25:140
20028992900,289cyclictest1854-21kworker/u16:0+efi_rts_wq07:35:133
20026992900,289cyclictest9678-21kworker/u16:2+efi_rts_wq07:50:131
20028992890,288cyclictest1854-21kworker/u16:0+efi_rts_wq07:20:143
20025992890,288cyclictest11330-21kworker/u16:3+efi_rts_wq12:20:120
20028992880,287cyclictest12187-21kworker/u16:3+efi_rts_wq11:05:113
20026992880,287cyclictest1854-21kworker/u16:0+efi_rts_wq09:30:111
20026992880,287cyclictest1854-21kworker/u16:0+efi_rts_wq09:22:251
20025992880,287cyclictest9678-21kworker/u16:2+efi_rts_wq08:37:190
20026992870,286cyclictest9678-21kworker/u16:2+efi_rts_wq09:25:141
20028992850,284cyclictest9034-21kworker/u16:2+efi_rts_wq12:12:553
20027992850,284cyclictest1854-21kworker/u16:0+efi_rts_wq10:00:132
20028992840,283cyclictest9678-21kworker/u16:2+efi_rts_wq10:25:133
20028992840,283cyclictest1854-21kworker/u16:0+efi_rts_wq10:30:123
20027992830,282cyclictest9678-21kworker/u16:2+efi_rts_wq08:10:132
20027992830,282cyclictest14716-21kworker/u16:1+efi_rts_wq11:30:122
20026992800,279cyclictest1854-21kworker/u16:0+efi_rts_wq10:12:361
20026992800,279cyclictest1854-21kworker/u16:0+efi_rts_wq08:22:141
20025992800,279cyclictest9678-21kworker/u16:2+efi_rts_wq07:30:110
20025992800,279cyclictest1854-21kworker/u16:0+efi_rts_wq09:30:110
20025992800,279cyclictest1854-21kworker/u16:0+efi_rts_wq08:55:130
20026992780,277cyclictest1854-21kworker/u16:0+efi_rts_wq09:10:121
20025992780,277cyclictest1854-21kworker/u16:0+efi_rts_wq09:05:120
20027992770,276cyclictest9034-21kworker/u16:2+efi_rts_wq11:45:122
20027992770,276cyclictest1854-21kworker/u16:0+efi_rts_wq08:15:122
20026992770,276cyclictest12187-21kworker/u16:3+efi_rts_wq11:00:131
20028992760,275cyclictest9678-21kworker/u16:2+efi_rts_wq07:15:123
20027992760,275cyclictest9678-21kworker/u16:2+efi_rts_wq10:17:352
20027992760,274cyclictest14716-21kworker/u16:1+efi_rts_wq11:02:422
20026992750,274cyclictest9678-21kworker/u16:2+efi_rts_wq09:52:311
20026992750,274cyclictest1854-21kworker/u16:0+efi_rts_wq07:37:051
20028992740,273cyclictest9678-21kworker/u16:2+efi_rts_wq08:45:133
20025992720,271cyclictest12187-21kworker/u16:3+efi_rts_wq11:17:450
20025992710,270cyclictest9678-21kworker/u16:2+efi_rts_wq09:27:260
20028992660,265cyclictest9678-21kworker/u16:2+efi_rts_wq08:12:133
20028992660,265cyclictest1854-21kworker/u16:0+efi_rts_wq10:10:133
20027992650,264cyclictest9678-21kworker/u16:2+efi_rts_wq08:50:132
20025992650,264cyclictest9034-21kworker/u16:2+efi_rts_wq12:27:580
20028992640,262cyclictest12187-21kworker/u16:3+efi_rts_wq11:10:123
20027992590,258cyclictest1854-21kworker/u16:0+efi_rts_wq07:27:032
20026992580,255cyclictest9678-21kworker/u16:2+efi_rts_wq08:35:121
20028992570,256cyclictest9678-21kworker/u16:2+efi_rts_wq08:00:123
20028992570,256cyclictest11330-21kworker/u16:3+efi_rts_wq12:32:583
20028992560,254cyclictest12187-21kworker/u16:3+efi_rts_wq11:00:133
20027992550,254cyclictest9678-21kworker/u16:2+efi_rts_wq07:32:052
20028992520,251cyclictest1854-21kworker/u16:0+efi_rts_wq10:02:333
20025992520,251cyclictest9678-21kworker/u16:2+efi_rts_wq10:35:130
20025992520,251cyclictest1854-21kworker/u16:0+efi_rts_wq10:20:130
20025992510,250cyclictest9034-21kworker/u16:2+efi_rts_wq12:10:130
20025992510,250cyclictest11330-21kworker/u16:3+efi_rts_wq12:05:130
20025992500,249cyclictest1854-21kworker/u16:0+efi_rts_wq08:20:130
20027992490,248cyclictest14716-21kworker/u16:1+efi_rts_wq10:45:122
20026992490,248cyclictest9678-21kworker/u16:2+efi_rts_wq08:50:131
20025992490,248cyclictest1854-21kworker/u16:0+efi_rts_wq10:30:130
20026992480,247cyclictest9678-21kworker/u16:2+efi_rts_wq08:02:101
20026992480,247cyclictest1854-21kworker/u16:0+efi_rts_wq10:42:391
20026992450,244cyclictest9678-21kworker/u16:2+efi_rts_wq10:30:131
20025992440,243cyclictest1854-21kworker/u16:0+efi_rts_wq09:12:230
20025992420,241cyclictest9678-21kworker/u16:2+efi_rts_wq07:25:130
20025992420,241cyclictest14716-21kworker/u16:1+efi_rts_wq11:20:130
20025992410,240cyclictest9678-21kworker/u16:2+efi_rts_wq07:15:120
20028992400,239cyclictest9678-21kworker/u16:2+efi_rts_wq09:00:123
20028992400,239cyclictest14716-21kworker/u16:1+efi_rts_wq11:35:123
20028992390,236cyclictest30310-21kworker/u16:0+efi_rts_wq11:25:133
20026992380,237cyclictest9678-21kworker/u16:2+efi_rts_wq07:55:131
20027992370,236cyclictest9678-21kworker/u16:2+efi_rts_wq10:07:342
20026992360,235cyclictest1854-21kworker/u16:0+efi_rts_wq09:05:131
20025992360,235cyclictest11330-21kworker/u16:3+efi_rts_wq11:52:510
20026992340,233cyclictest9678-21kworker/u16:2+efi_rts_wq08:45:141
20026992340,233cyclictest1854-21kworker/u16:0+efi_rts_wq07:22:041
20025992330,232cyclictest9678-21kworker/u16:2+efi_rts_wq08:17:140
20026992320,231cyclictest9678-21kworker/u16:2+efi_rts_wq10:05:131
20026992310,230cyclictest14716-21kworker/u16:1+efi_rts_wq11:40:131
20025992310,230cyclictest12187-21kworker/u16:3+efi_rts_wq11:12:440
20026992300,229cyclictest1854-21kworker/u16:0+efi_rts_wq09:55:121
20027992280,225cyclictest1854-21kworker/u16:0+efi_rts_wq08:30:122
20025992280,227cyclictest1854-21kworker/u16:0+efi_rts_wq07:20:140
20028992250,224cyclictest1854-21kworker/u16:0+efi_rts_wq10:22:363
20025992250,224cyclictest9678-21kworker/u16:2+efi_rts_wq08:00:120
20028992230,221cyclictest14716-21kworker/u16:1+efi_rts_wq10:50:133
20028992220,221cyclictest1854-21kworker/u16:0+efi_rts_wq08:05:123
20028992210,220cyclictest14716-21kworker/u16:1+efi_rts_wq11:40:133
20028992190,218cyclictest12187-21kworker/u16:3+efi_rts_wq10:40:123
20028992180,217cyclictest9034-21kworker/u16:2+efi_rts_wq12:35:133
20025992170,216cyclictest9678-21kworker/u16:2+efi_rts_wq10:05:130
20025992170,214cyclictest11330-21kworker/u16:3+efi_rts_wq12:00:120
20027992150,214cyclictest1854-21kworker/u16:0+efi_rts_wq09:37:292
20025992140,213cyclictest1854-21kworker/u16:0+efi_rts_wq09:57:320
20026992120,211cyclictest1854-21kworker/u16:0+efi_rts_wq08:05:121
20027992110,210cyclictest9678-21kworker/u16:2+efi_rts_wq07:42:072
20025992110,209cyclictest12187-21kworker/u16:3+efi_rts_wq11:00:120
20027992050,204cyclictest1854-21kworker/u16:0+efi_rts_wq08:57:212
20026992040,203cyclictest14716-21kworker/u16:1+efi_rts_wq10:55:151
20026992030,202cyclictest11330-21kworker/u16:3+efi_rts_wq12:15:111
20026992010,200cyclictest12187-21kworker/u16:3+efi_rts_wq11:05:111
20025991990,198cyclictest12187-21kworker/u16:3+efi_rts_wq10:40:120
20028991930,192cyclictest1854-21kworker/u16:0+efi_rts_wq09:20:133
20025991930,192cyclictest1854-21kworker/u16:0+efi_rts_wq08:42:180
20028991770,177cyclictest9678-21kworker/u16:2+efi_rts_wq07:10:123
20027991710,170cyclictest9678-21kworker/u16:2+efi_rts_wq09:00:122
20026991700,169cyclictest9678-21kworker/u16:2+efi_rts_wq08:25:131
20026991700,169cyclictest1854-21kworker/u16:0+efi_rts_wq08:15:121
20028991680,167cyclictest9678-21kworker/u16:2+efi_rts_wq07:30:123
20026991670,166cyclictest9678-21kworker/u16:2+efi_rts_wq07:30:121
20026991660,165cyclictest14716-21kworker/u16:1+efi_rts_wq11:20:131
20026991650,164cyclictest11330-21kworker/u16:3+efi_rts_wq12:00:121
20027991640,163cyclictest1854-21kworker/u16:0+efi_rts_wq09:47:302
20025991630,162cyclictest12187-21kworker/u16:3+efi_rts_wq11:05:120
20028991610,160cyclictest9678-21kworker/u16:2+efi_rts_wq09:25:143
20027991590,158cyclictest12187-21kworker/u16:3+efi_rts_wq10:57:412
20027991590,158cyclictest11330-21kworker/u16:3+efi_rts_wq12:22:562
20027991570,156cyclictest9034-21kworker/u16:2+efi_rts_wq12:07:532
20026991570,156cyclictest1854-21kworker/u16:0+efi_rts_wq10:00:131
20026991560,156cyclictest9678-21kworker/u16:2+efi_rts_wq09:15:131
20025991560,156cyclictest9678-21kworker/u16:2+efi_rts_wq08:52:200
20027991510,150cyclictest9034-21kworker/u16:2+efi_rts_wq11:57:532
20027991510,150cyclictest9034-21kworker/u16:2+efi_rts_wq11:57:522
20025991500,150cyclictest14716-21kworker/u16:1+efi_rts_wq11:30:120
20026991440,143cyclictest1854-21kworker/u16:0+efi_rts_wq08:40:141
20026991410,141cyclictest11330-21kworker/u16:3+efi_rts_wq12:05:121
20028991370,136cyclictest11330-21kworker/u16:3+efi_rts_wq11:50:113
20025991340,133cyclictest9678-21kworker/u16:2+efi_rts_wq07:57:090
20026991250,125cyclictest1854-21kworker/u16:0+efi_rts_wq10:47:391
20027991210,120cyclictest9678-21kworker/u16:2+efi_rts_wq08:35:122
20027991210,120cyclictest9678-21kworker/u16:2+efi_rts_wq07:12:012
20025991190,118cyclictest9678-21kworker/u16:2+efi_rts_wq09:17:240
20027991160,115cyclictest9678-21kworker/u16:2+efi_rts_wq07:50:142
20027991130,112cyclictest30310-21kworker/u16:0+efi_rts_wq11:40:132
20026993330,3cyclictest818-21snmpd10:54:151
20028993230,2cyclictest818-21snmpd12:00:493
20027993230,2cyclictest818-21snmpd07:49:332
20028993130,1cyclictest818-21snmpd12:15:483
20028993130,1cyclictest818-21snmpd07:26:153
20028993130,1cyclictest31374-21cat11:15:133
20027993130,1cyclictest818-21snmpd11:54:022
20027993130,1cyclictest818-21snmpd10:37:212
20027993130,1cyclictest818-21snmpd10:20:472
20027993128,2cyclictest818-21snmpd08:43:382
20026993130,1cyclictest818-21snmpd11:25:091
20026993130,1cyclictest818-21snmpd08:33:321
20026993130,1cyclictest14716-21kworker/u16:1+atlantic11:34:331
20026993129,2cyclictest818-21snmpd12:33:371
20025993129,2cyclictest818-21snmpd12:36:080
20025993129,2cyclictest818-21snmpd12:16:220
20025993129,2cyclictest818-21snmpd11:58:540
20025993129,2cyclictest818-21snmpd11:58:540
20025993129,2cyclictest818-21snmpd10:46:030
20028993029,1cyclictest818-21snmpd09:59:453
20028993029,1cyclictest818-21snmpd09:41:523
20028993029,1cyclictest818-21snmpd09:34:103
20028993029,1cyclictest818-21snmpd09:16:243
20028993029,1cyclictest818-21snmpd09:11:513
20028993029,1cyclictest818-21snmpd07:40:463
20028993028,2cyclictest818-21snmpd10:59:283
20028993028,2cyclictest818-21snmpd08:51:273
20027993030,0cyclictest8027-21kworker/2:1+events09:31:472
20027993030,0cyclictest3878-21kworker/2:2+events09:22:192
20027993030,0cyclictest31818-21kworker/2:0+events09:11:512
20027993030,0cyclictest25585-21kworker/2:2+events08:47:552
20027993030,0cyclictest17995-21kworker/2:0+events12:25:272
20027993029,1cyclictest818-21snmpd08:00:372
20026993029,1cyclictest818-21snmpd07:25:481
20026993029,1cyclictest818-21snmpd07:14:311
20026993028,2cyclictest818-21snmpd07:19:541
20025993029,1cyclictest818-21snmpd11:45:440
20025993029,1cyclictest818-21snmpd09:24:280
20025993029,1cyclictest818-21snmpd08:10:100
20025993028,2cyclictest818-21snmpd12:33:010
20025993028,2cyclictest818-21snmpd10:50:330
20025993028,2cyclictest818-21snmpd10:19:260
20025993028,2cyclictest818-21snmpd09:37:520
20027992929,0cyclictest6913-21kworker/2:1+events11:38:192
20027992929,0cyclictest6589-21kworker/2:0+events07:55:032
20027992929,0cyclictest3878-21kworker/2:2+events09:25:402
20027992929,0cyclictest32715-21kworker/2:2+events08:20:312
20027992929,0cyclictest31818-21kworker/2:0+events09:05:522
20027992929,0cyclictest30282-21kworker/2:2+events11:20:052
20027992929,0cyclictest27705-21kworker/2:0+events11:10:292
20027992929,0cyclictest27023-21kworker/2:1+events10:33:062
20027992929,0cyclictest27023-21kworker/2:1+events10:26:032
20027992929,0cyclictest27023-21kworker/2:1+events10:11:272
20027992929,0cyclictest21647-21kworker/2:1+events07:35:072
20027992929,0cyclictest21647-21kworker/2:1+events07:20:122
20027992929,0cyclictest20379-21kworker/2:1+events12:02:002
20027992929,0cyclictest18709-21kworker/2:2+events09:55:472
20027992929,0cyclictest18709-21kworker/2:2+events09:50:552
20027992929,0cyclictest18709-21kworker/2:2+events09:40:312
20027992929,0cyclictest17995-21kworker/2:0+events12:10:392
20027992929,0cyclictest13125-21kworker/2:1+events08:25:352
20027992929,0cyclictest10219-21kworker/2:3+events10:42:222
20027992927,1cyclictest818-21snmpd08:05:522
20026992928,1cyclictest818-21snmpd12:20:391
20026992928,1cyclictest818-21snmpd11:46:301
20026992927,2cyclictest818-21snmpd11:19:491
20026992927,2cyclictest818-21snmpd10:24:571
20026992927,2cyclictest818-21snmpd09:45:281
20026992926,2cyclictest818-21snmpd09:44:401
20025992929,0cyclictest818-21snmpd11:35:570
20025992929,0cyclictest818-21snmpd08:26:300
20025992928,1cyclictest32263-21cat10:10:160
20025992927,2cyclictest818-21snmpd07:45:510
20028992826,2cyclictest818-21snmpd09:09:033
20027992828,0cyclictest12794-21kworker/2:1+events11:05:212
20026992827,1cyclictest818-21snmpd10:25:171
20025992828,0cyclictest9678-21kworker/u16:2+atlantic08:09:020
20028992726,1cyclictest818-21snmpd12:28:153
20028992726,1cyclictest818-21snmpd11:32:323
20026992727,0cyclictest75550irq/131-enp1s011:14:351
20026992726,1cyclictest818-21snmpd08:55:371
20026992726,1cyclictest818-21snmpd07:44:481
20026992725,2cyclictest818-21snmpd10:16:171
20026992725,2cyclictest818-21snmpd09:01:391
20025992725,2cyclictest818-21snmpd10:26:380
20028992626,0cyclictest818-21snmpd08:19:283
20028992626,0cyclictest1854-21kworker/u16:0+atlantic10:48:193
20026992624,2cyclictest818-21snmpd12:13:121
20025992624,2cyclictest818-21snmpd11:44:320
20028992525,0cyclictest11330-21kworker/u16:3+atlantic11:55:523
20028992525,0cyclictest11330-21kworker/u16:3+atlantic11:55:513
20025992523,2cyclictest818-21snmpd07:36:210
20028992323,0cyclictest75850irq/134-enp1s010:39:333
20026992323,0cyclictest9678-21kworker/u16:2+atlantic08:11:531
20026992323,0cyclictest9034-21kworker/u16:2+atlantic12:35:421
20025992322,1cyclictest818-21snmpd09:00:390
20025992221,1cyclictest818-21snmpd10:03:300
20025992121,0cyclictest818-21snmpd07:54:370
20028992018,2cyclictest818-21snmpd07:46:153
20028991919,0cyclictest9678-21kworker/u16:2+atlantic08:59:313
20028991919,0cyclictest1854-21kworker/u16:0+atlantic09:53:333
20025991919,0cyclictest1854-21kworker/u16:0+atlantic08:30:210
20025991818,0cyclictest1854-21kworker/u16:0+atlantic09:45:450
20025991716,1cyclictest818-21snmpd08:45:060
2002899129,2cyclictest818-21snmpd08:22:353
200289988,0cyclictest9678-21kworker/u16:2+atlantic10:05:403
200289965,1cyclictest22650-21taskset12:08:433
200289954,1cyclictest23990-21taskset08:35:113
200269954,1cyclictest29452-21expr12:25:121
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional