You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-12 - 10:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Sat Jul 12, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
96162317303,5sleep00-21swapper/019:08:270
96532316302,5sleep20-21swapper/219:08:572
95182315308,4sleep10-21swapper/119:07:121
94412315307,5sleep30-21swapper/319:06:143
10003992980,295cyclictest4653-21kworker/u16:1+efi_rts_wq23:35:232
10001992980,296cyclictest7140-21kworker/u16:2+efi_rts_wq23:00:120
10004992960,295cyclictest7140-21kworker/u16:2+efi_rts_wq23:20:133
10002992960,295cyclictest11698-21kworker/u16:3+efi_rts_wq20:35:141
10003992950,294cyclictest25574-21kworker/u16:1+efi_rts_wq22:15:162
10001992940,293cyclictest25574-21kworker/u16:1+efi_rts_wq21:35:150
10001992940,293cyclictest11698-21kworker/u16:3+efi_rts_wq19:15:150
10004992930,292cyclictest27150-21kworker/u16:0+efi_rts_wq19:25:143
10004992930,291cyclictest25574-21kworker/u16:1+efi_rts_wq22:30:093
10002992930,292cyclictest29493-21kworker/u16:3+efi_rts_wq00:00:141
10001992930,292cyclictest3183-21kworker/u16:2+efi_rts_wq20:50:130
10001992930,292cyclictest11698-21kworker/u16:3+efi_rts_wq19:20:110
10002992920,291cyclictest9026-21kworker/u16:1+efi_rts_wq00:05:121
10002992910,290cyclictest9026-21kworker/u16:1+efi_rts_wq00:20:121
10001992910,290cyclictest3183-21kworker/u16:2+efi_rts_wq21:05:130
10001992910,290cyclictest11698-21kworker/u16:3+efi_rts_wq20:35:140
10001992900,289cyclictest25574-21kworker/u16:1+efi_rts_wq22:10:140
10004992890,288cyclictest29493-21kworker/u16:3+efi_rts_wq00:00:143
10004992870,286cyclictest3291-21kworker/u16:3+efi_rts_wq21:40:133
10004992870,286cyclictest25574-21kworker/u16:1+efi_rts_wq22:25:133
10004992840,283cyclictest11698-21kworker/u16:3+efi_rts_wq19:24:343
10003992840,283cyclictest27150-21kworker/u16:0+efi_rts_wq19:45:162
10002992840,283cyclictest27150-21kworker/u16:0+efi_rts_wq19:35:131
10002992820,281cyclictest4193-21kworker/u16:2+efi_rts_wq23:55:131
10001992820,281cyclictest7140-21kworker/u16:2+efi_rts_wq23:20:130
10004992790,278cyclictest3183-21kworker/u16:2+efi_rts_wq20:24:463
10004992790,278cyclictest11698-21kworker/u16:3+efi_rts_wq20:04:413
10004992770,276cyclictest4653-21kworker/u16:1+efi_rts_wq23:46:263
10004992770,276cyclictest11698-21kworker/u16:3+efi_rts_wq19:50:143
10003992770,276cyclictest11698-21kworker/u16:3+efi_rts_wq20:05:152
10003992760,275cyclictest9728-21kworker/u16:0+efi_rts_wq22:30:132
10002992760,275cyclictest9728-21kworker/u16:0+efi_rts_wq21:45:131
10002992760,275cyclictest3183-21kworker/u16:2+efi_rts_wq21:10:131
10001992750,274cyclictest4653-21kworker/u16:1+efi_rts_wq23:35:180
10004992740,273cyclictest3183-21kworker/u16:2+efi_rts_wq21:10:133
10004992740,272cyclictest26306-21kworker/u16:3+efi_rts_wq23:15:143
10003992730,272cyclictest4653-21kworker/u16:1+efi_rts_wq23:30:222
10001992730,272cyclictest25574-21kworker/u16:1+efi_rts_wq22:00:040
10004992720,271cyclictest11698-21kworker/u16:3+efi_rts_wq20:15:123
10002992720,271cyclictest7140-21kworker/u16:2+efi_rts_wq23:10:171
10001992720,271cyclictest4193-21kworker/u16:2+efi_rts_wq00:21:330
10001992720,271cyclictest4193-21kworker/u16:2+efi_rts_wq00:16:320
10003992710,269cyclictest7140-21kworker/u16:2+efi_rts_wq22:55:132
10004992690,268cyclictest9728-21kworker/u16:0+efi_rts_wq22:45:133
10001992670,266cyclictest29493-21kworker/u16:3+efi_rts_wq00:00:140
10003992660,265cyclictest25574-21kworker/u16:1+efi_rts_wq22:25:122
10001992660,265cyclictest26306-21kworker/u16:3+efi_rts_wq22:50:140
10003992650,264cyclictest9728-21kworker/u16:0+efi_rts_wq22:00:152
10003992640,263cyclictest11698-21kworker/u16:3+efi_rts_wq20:25:132
10001992630,262cyclictest11698-21kworker/u16:3+efi_rts_wq20:30:120
10003992620,261cyclictest4193-21kworker/u16:2+efi_rts_wq00:30:142
10004992610,260cyclictest3183-21kworker/u16:2+efi_rts_wq20:40:153
10003992610,260cyclictest27150-21kworker/u16:0+efi_rts_wq19:10:122
10001992600,259cyclictest9728-21kworker/u16:0+efi_rts_wq22:35:100
10001992590,258cyclictest8103-21kworker/u16:0+efi_rts_wq20:55:130
10001992590,258cyclictest4193-21kworker/u16:2+efi_rts_wq00:10:140
10001992590,258cyclictest4193-21kworker/u16:2+efi_rts_wq00:10:140
10001992580,257cyclictest27150-21kworker/u16:0+efi_rts_wq19:55:160
10002992560,255cyclictest9728-21kworker/u16:0+efi_rts_wq22:50:151
10004992550,254cyclictest3183-21kworker/u16:2+efi_rts_wq21:05:133
10002992540,253cyclictest4193-21kworker/u16:2+efi_rts_wq00:30:141
10002992530,252cyclictest29493-21kworker/u16:3+efi_rts_wq23:40:121
10002992510,250cyclictest25574-21kworker/u16:1+efi_rts_wq22:15:161
10004992490,247cyclictest25574-21kworker/u16:1+efi_rts_wq22:20:133
10003992490,248cyclictest25574-21kworker/u16:1+efi_rts_wq21:25:152
10001992480,247cyclictest11698-21kworker/u16:3+efi_rts_wq20:29:460
10004992460,245cyclictest3183-21kworker/u16:2+efi_rts_wq20:09:423
10002992430,242cyclictest27150-21kworker/u16:0+efi_rts_wq19:30:141
10004992420,241cyclictest30448-21kworker/u16:2+efi_rts_wq22:35:143
10002992420,241cyclictest9728-21kworker/u16:0+efi_rts_wq22:00:151
10004992370,235cyclictest9728-21kworker/u16:0+efi_rts_wq23:25:123
10003992370,236cyclictest3183-21kworker/u16:2+efi_rts_wq20:59:522
10001992370,236cyclictest25574-21kworker/u16:1+efi_rts_wq21:55:170
10004992350,234cyclictest4193-21kworker/u16:2+efi_rts_wq00:35:133
10003992350,234cyclictest7140-21kworker/u16:2+efi_rts_wq23:00:122
10004992340,233cyclictest3183-21kworker/u16:2+efi_rts_wq21:00:143
10002992330,232cyclictest27150-21kworker/u16:0+efi_rts_wq19:55:161
10004992320,231cyclictest3183-21kworker/u16:2+efi_rts_wq21:20:173
10004992320,231cyclictest25574-21kworker/u16:1+efi_rts_wq21:55:173
10002992310,227cyclictest11698-21kworker/u16:3+efi_rts_wq20:05:151
10001992310,230cyclictest3183-21kworker/u16:2+efi_rts_wq21:00:150
10001992310,230cyclictest11698-21kworker/u16:3+efi_rts_wq20:45:140
10002992300,229cyclictest3183-21kworker/u16:2+efi_rts_wq21:15:151
10002992280,227cyclictest25574-21kworker/u16:1+efi_rts_wq21:30:131
10001992260,225cyclictest4653-21kworker/u16:1+efi_rts_wq23:50:150
10001992250,224cyclictest9728-21kworker/u16:0+efi_rts_wq23:05:160
10004992240,223cyclictest3183-21kworker/u16:2+efi_rts_wq20:49:503
10001992230,222cyclictest3183-21kworker/u16:2+efi_rts_wq21:15:140
10004992210,220cyclictest9728-21kworker/u16:0+efi_rts_wq22:05:133
10004992210,220cyclictest25574-21kworker/u16:1+efi_rts_wq21:30:133
10003992210,220cyclictest11698-21kworker/u16:3+efi_rts_wq19:40:172
10004992200,219cyclictest27150-21kworker/u16:0+efi_rts_wq19:55:163
10002992170,216cyclictest9026-21kworker/u16:1+efi_rts_wq00:15:141
10002992170,216cyclictest3183-21kworker/u16:2+efi_rts_wq21:20:171
10001992150,214cyclictest11698-21kworker/u16:3+efi_rts_wq20:10:130
10002992140,213cyclictest27150-21kworker/u16:0+efi_rts_wq19:14:321
10002992110,210cyclictest9728-21kworker/u16:0+efi_rts_wq22:40:161
10004992080,207cyclictest9026-21kworker/u16:1+efi_rts_wq00:20:123
10003992080,207cyclictest9026-21kworker/u16:1+efi_rts_wq00:15:142
10004992050,204cyclictest27150-21kworker/u16:0+efi_rts_wq19:35:133
10004992040,203cyclictest25574-21kworker/u16:1+efi_rts_wq22:10:063
10003992040,203cyclictest25574-21kworker/u16:1+efi_rts_wq21:50:162
10003992030,202cyclictest11698-21kworker/u16:3+efi_rts_wq19:54:392
10003992010,200cyclictest29493-21kworker/u16:3+efi_rts_wq23:56:292
10002992000,199cyclictest27150-21kworker/u16:0+efi_rts_wq19:45:161
10001991990,198cyclictest7140-21kworker/u16:2+efi_rts_wq22:55:140
10004991980,197cyclictest3183-21kworker/u16:2+efi_rts_wq20:34:473
10004991970,196cyclictest9026-21kworker/u16:1+efi_rts_wq00:05:123
10002991940,193cyclictest11698-21kworker/u16:3+efi_rts_wq19:50:141
10002991930,192cyclictest4193-21kworker/u16:2+efi_rts_wq00:26:341
10001991930,192cyclictest3183-21kworker/u16:2+efi_rts_wq20:40:150
10004991920,191cyclictest9026-21kworker/u16:1+efi_rts_wq00:11:333
10004991920,191cyclictest9026-21kworker/u16:1+efi_rts_wq00:11:323
10002991920,191cyclictest25574-21kworker/u16:1+efi_rts_wq21:35:151
10001991920,191cyclictest26306-21kworker/u16:3+efi_rts_wq22:45:120
10004991900,189cyclictest3183-21kworker/u16:2+efi_rts_wq20:14:433
10004991890,188cyclictest25574-21kworker/u16:1+efi_rts_wq21:19:563
10004991880,187cyclictest4193-21kworker/u16:2+efi_rts_wq00:25:143
10002991880,187cyclictest9728-21kworker/u16:0+efi_rts_wq22:20:071
10001991880,187cyclictest9728-21kworker/u16:0+efi_rts_wq23:25:120
10001991860,185cyclictest26306-21kworker/u16:3+efi_rts_wq23:15:190
10002991840,183cyclictest29493-21kworker/u16:3+efi_rts_wq23:51:281
10002991830,182cyclictest30448-21kworker/u16:2+efi_rts_wq22:35:141
10003991790,178cyclictest4193-21kworker/u16:2+efi_rts_wq00:35:132
10001991720,171cyclictest4653-21kworker/u16:1+efi_rts_wq23:45:120
10003991700,169cyclictest25574-21kworker/u16:1+efi_rts_wq22:20:132
10002991700,169cyclictest11698-21kworker/u16:3+efi_rts_wq20:45:141
10003991680,167cyclictest11698-21kworker/u16:3+efi_rts_wq19:15:012
10002991660,165cyclictest11698-21kworker/u16:3+efi_rts_wq19:15:141
10003991650,164cyclictest26306-21kworker/u16:3+efi_rts_wq23:05:122
10003991630,162cyclictest26306-21kworker/u16:3+efi_rts_wq23:15:142
10003991600,159cyclictest11698-21kworker/u16:3+efi_rts_wq20:15:132
10001991570,156cyclictest7140-21kworker/u16:2+efi_rts_wq23:10:160
10004991500,149cyclictest8103-21kworker/u16:0+efi_rts_wq20:54:513
10002991470,146cyclictest7140-21kworker/u16:2+efi_rts_wq22:55:141
10002991440,143cyclictest4193-21kworker/u16:2+efi_rts_wq00:35:131
10004991420,141cyclictest9728-21kworker/u16:0+efi_rts_wq21:50:023
10004991390,137cyclictest4653-21kworker/u16:1+efi_rts_wq23:50:143
10002991390,138cyclictest9728-21kworker/u16:0+efi_rts_wq23:20:211
10002991390,138cyclictest11698-21kworker/u16:3+efi_rts_wq19:29:351
10002991380,137cyclictest11698-21kworker/u16:3+efi_rts_wq20:30:121
10002991360,135cyclictest25574-21kworker/u16:1+efi_rts_wq21:40:001
10001991310,130cyclictest29493-21kworker/u16:3+efi_rts_wq23:40:110
10001991300,129cyclictest9728-21kworker/u16:0+efi_rts_wq22:05:050
10003991260,125cyclictest11698-21kworker/u16:3+efi_rts_wq19:34:352
10004991230,122cyclictest8103-21kworker/u16:0+efi_rts_wq20:55:133
10004991230,122cyclictest11698-21kworker/u16:3+efi_rts_wq20:25:123
10004991220,121cyclictest4653-21kworker/u16:1+efi_rts_wq23:30:133
10001991220,121cyclictest4193-21kworker/u16:2+efi_rts_wq00:31:350
10004991210,120cyclictest9728-21kworker/u16:0+efi_rts_wq22:40:163
10004991210,120cyclictest3291-21kworker/u16:3+efi_rts_wq21:29:583
10003991210,120cyclictest11698-21kworker/u16:3+efi_rts_wq19:20:112
10002991210,117cyclictest26306-21kworker/u16:3+efi_rts_wq23:05:121
10002991190,118cyclictest25574-21kworker/u16:1+efi_rts_wq21:50:161
10002991160,115cyclictest11698-21kworker/u16:3+efi_rts_wq19:40:171
10001991150,114cyclictest11698-21kworker/u16:3+efi_rts_wq19:44:370
10001991140,113cyclictest9728-21kworker/u16:0+efi_rts_wq22:40:120
10003991130,113cyclictest4653-21kworker/u16:1+efi_rts_wq23:40:242
10001991100,109cyclictest3291-21kworker/u16:3+efi_rts_wq21:40:130
10001991080,107cyclictest27150-21kworker/u16:0+efi_rts_wq19:30:130
10002991020,101cyclictest3183-21kworker/u16:2+efi_rts_wq20:50:131
1000199960,95cyclictest29493-21kworker/u16:3+efi_rts_wq23:55:140
10004993330,2cyclictest799-21snmpd19:31:093
10002993330,3cyclictest799-21snmpd22:31:211
10001993330,2cyclictest799-21snmpd19:10:580
10001993330,2cyclictest799-21snmpd00:09:120
10004993230,2cyclictest799-21snmpd21:47:203
10003993229,2cyclictest799-21snmpd21:20:342
10002993230,2cyclictest799-21snmpd23:03:041
10002993229,2cyclictest799-21snmpd20:22:471
10001993230,2cyclictest799-21snmpd20:19:260
10004993129,1cyclictest9632-21kworker/3:3+events23:07:233
10004993129,1cyclictest18082-21kworker/3:0+events23:43:233
10003993130,1cyclictest799-21snmpd20:48:272
10003993130,1cyclictest799-21snmpd19:56:042
10003993130,1cyclictest799-21snmpd00:21:192
10003993129,2cyclictest799-21snmpd22:05:482
10003993129,2cyclictest799-21snmpd20:42:032
10003993128,2cyclictest799-21snmpd20:50:422
10002993130,1cyclictest799-21snmpd21:56:141
10002993129,2cyclictest799-21snmpd23:31:321
10002993129,2cyclictest32281-21cat20:00:161
10001993130,1cyclictest799-21snmpd23:34:470
10001993129,2cyclictest799-21snmpd19:53:490
10001993129,2cyclictest799-21snmpd19:29:000
10004993030,0cyclictest5131-21kworker/3:2+events22:56:033
10004993030,0cyclictest18082-21kworker/3:0+events23:38:293
10004993029,1cyclictest9632-21kworker/3:3+events23:01:273
10004993029,1cyclictest799-21snmpd23:58:123
10004993029,1cyclictest799-21snmpd22:15:283
10004993029,1cyclictest799-21snmpd00:15:113
10004993029,1cyclictest7923-21kworker/3:0+events22:50:113
10004993029,1cyclictest18082-21kworker/3:0+events23:10:153
10003993029,1cyclictest799-21snmpd22:54:582
10003993029,1cyclictest799-21snmpd21:56:112
10003993028,2cyclictest14058-21cat00:10:162
10003993028,2cyclictest14058-21cat00:10:162
10003993027,2cyclictest799-21snmpd22:11:512
10002993029,1cyclictest799-21snmpd21:02:121
10001993029,1cyclictest799-21snmpd22:21:180
10001993029,1cyclictest799-21snmpd20:21:170
10001993028,2cyclictest799-21snmpd21:11:490
10001993028,2cyclictest799-21snmpd20:08:530
10004992929,0cyclictest18082-21kworker/3:0+events00:30:093
10004992929,0cyclictest16563-21kworker/3:1+events19:46:173
10004992929,0cyclictest16563-21kworker/3:1+events19:40:233
10004992929,0cyclictest13250-21kworker/3:2+events19:15:253
10004992929,0cyclictest13250-21kworker/3:2+events19:11:013
10004992929,0cyclictest11997-21kworker/3:0+events22:01:333
10004992929,0cyclictest11997-21kworker/3:0+events21:35:533
10003992929,0cyclictest9728-21kworker/u16:0+atlantic22:38:232
10003992928,1cyclictest799-21snmpd21:38:272
10003992927,2cyclictest799-21snmpd20:21:592
10002992928,1cyclictest2999-21cat23:45:141
10002992927,2cyclictest799-21snmpd23:16:381
10001992928,1cyclictest799-21snmpd21:45:140
10001992928,1cyclictest799-21snmpd00:37:100
10004992828,0cyclictest16563-21kworker/3:1+events20:35:373
10003992828,0cyclictest29493-21kworker/u16:3+atlantic23:45:552
10003992827,1cyclictest799-21snmpd21:06:192
10002992827,1cyclictest799-21snmpd22:07:211
10003992727,0cyclictest26306-21kworker/u16:3+atlantic22:44:472
10003992726,1cyclictest799-21snmpd23:22:322
10003992726,1cyclictest799-21snmpd21:40:262
10003992726,1cyclictest799-21snmpd21:17:492
10003992726,1cyclictest799-21snmpd00:27:072
10003992726,1cyclictest799-21snmpd00:01:062
10003992725,2cyclictest799-21snmpd22:47:222
10003992725,2cyclictest799-21snmpd21:01:572
10002992726,1cyclictest799-21snmpd23:36:231
10002992726,1cyclictest799-21snmpd21:26:051
10002992725,2cyclictest799-21snmpd22:46:191
10002992724,2cyclictest799-21snmpd20:42:481
10001992726,1cyclictest799-21snmpd20:02:220
10003992625,1cyclictest799-21snmpd20:13:292
10002992625,1cyclictest799-21snmpd23:26:261
10002992624,2cyclictest799-21snmpd22:25:421
10002992623,2cyclictest799-21snmpd00:11:251
10002992623,2cyclictest799-21snmpd00:11:251
10001992625,1cyclictest799-21snmpd21:20:190
10001992625,1cyclictest799-21snmpd00:25:100
10001992623,2cyclictest799-21snmpd22:17:150
10003992524,1cyclictest799-21snmpd23:13:112
10003992524,1cyclictest799-21snmpd20:33:262
10001992524,1cyclictest799-21snmpd19:45:550
10002992423,1cyclictest799-21snmpd19:24:191
10003992322,1cyclictest799-21snmpd20:37:062
10003992322,1cyclictest799-21snmpd19:25:062
10003992321,2cyclictest799-21snmpd20:04:452
10002992322,1cyclictest799-21snmpd21:05:461
10001992321,2cyclictest799-21snmpd21:30:130
10003992221,1cyclictest799-21snmpd23:53:462
10002992221,1cyclictest799-21snmpd20:11:231
10001992221,1cyclictest799-21snmpd22:32:060
10002992119,2cyclictest24148-21cat20:55:141
10001992119,2cyclictest799-21snmpd19:39:250
10001992019,1cyclictest799-21snmpd21:50:530
10002991916,2cyclictest799-21snmpd22:10:211
10003991818,0cyclictest74050irq/138-enp1s023:29:512
10003991716,1cyclictest799-21snmpd21:34:532
10001991716,1cyclictest799-21snmpd21:27:250
10003991412,2cyclictest799-21snmpd00:05:242
10003991311,2cyclictest12442-21cat21:45:152
10002991311,2cyclictest799-21snmpd20:25:201
100019986,2cyclictest28999-21cat22:25:140
100039965,1cyclictest31353-21chrt21:12:332
100029965,1cyclictest6498-21grep20:15:131
100039954,1cyclictest21411-21grep19:35:132
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional