You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-02 - 22:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Tue Dec 02, 2025 12:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
5342329321,5sleep20-21swapper/207:07:532
310962316309,4sleep30-21swapper/307:05:013
4132315308,4sleep00-21swapper/007:06:230
4012314306,5sleep10-21swapper/107:06:161
1016993010,300cyclictest31073-21kworker/u16:0+efi_rts_wq10:55:142
1017993000,299cyclictest20198-21kworker/u16:0+efi_rts_wq11:55:143
1017992990,298cyclictest23232-21kworker/u16:2+efi_rts_wq08:18:183
1017992980,297cyclictest31073-21kworker/u16:0+efi_rts_wq07:20:133
1017992980,297cyclictest23232-21kworker/u16:2+efi_rts_wq08:25:133
1014992970,295cyclictest20198-21kworker/u16:0+efi_rts_wq11:50:140
1017992960,295cyclictest31073-21kworker/u16:0+efi_rts_wq10:08:353
1017992950,294cyclictest23232-21kworker/u16:2+efi_rts_wq11:00:153
1014992950,294cyclictest31073-21kworker/u16:0+efi_rts_wq07:15:120
1014992940,293cyclictest23232-21kworker/u16:2+efi_rts_wq10:00:120
1014992940,293cyclictest20198-21kworker/u16:0+efi_rts_wq12:20:150
1017992930,292cyclictest13267-21kworker/u16:2+efi_rts_wq11:30:133
1017992930,291cyclictest23232-21kworker/u16:2+efi_rts_wq10:50:133
1015992930,292cyclictest31073-21kworker/u16:0+efi_rts_wq08:38:221
1017992920,291cyclictest23232-21kworker/u16:2+efi_rts_wq08:35:133
1017992920,291cyclictest23232-21kworker/u16:2+efi_rts_wq07:55:193
1014992920,291cyclictest31073-21kworker/u16:0+efi_rts_wq09:08:270
1014992910,290cyclictest23232-21kworker/u16:2+efi_rts_wq08:58:250
1016992900,289cyclictest23232-21kworker/u16:2+efi_rts_wq09:05:132
1015992900,289cyclictest23232-21kworker/u16:2+efi_rts_wq07:38:091
1015992890,288cyclictest20198-21kworker/u16:0+efi_rts_wq11:55:141
1016992880,287cyclictest23232-21kworker/u16:2+efi_rts_wq10:05:152
1016992880,287cyclictest23232-21kworker/u16:2+efi_rts_wq07:45:132
1016992870,286cyclictest31073-21kworker/u16:0+efi_rts_wq08:55:162
1014992870,286cyclictest31073-21kworker/u16:0+efi_rts_wq09:50:130
1014992870,286cyclictest23232-21kworker/u16:2+efi_rts_wq09:38:310
1015992860,285cyclictest23232-21kworker/u16:2+efi_rts_wq09:45:131
1016992840,282cyclictest5444-21kworker/u16:3+efi_rts_wq11:15:142
1014992840,281cyclictest31073-21kworker/u16:0+efi_rts_wq10:35:150
1016992830,282cyclictest31073-21kworker/u16:0+efi_rts_wq10:43:452
1015992820,281cyclictest23232-21kworker/u16:2+efi_rts_wq08:00:121
1017992810,280cyclictest31073-21kworker/u16:0+efi_rts_wq10:30:123
1014992810,280cyclictest31073-21kworker/u16:0+efi_rts_wq10:40:130
1016992800,279cyclictest31773-21kworker/u16:4+efi_rts_wq12:35:152
1017992790,278cyclictest23232-21kworker/u16:2+efi_rts_wq07:50:103
1016992780,277cyclictest23232-21kworker/u16:2+efi_rts_wq08:33:212
1017992760,275cyclictest31073-21kworker/u16:0+efi_rts_wq09:15:133
1017992760,275cyclictest20198-21kworker/u16:0+efi_rts_wq11:43:573
1015992760,275cyclictest31073-21kworker/u16:0+efi_rts_wq09:23:291
1015992760,275cyclictest23232-21kworker/u16:2+efi_rts_wq10:18:371
1014992760,275cyclictest31073-21kworker/u16:0+efi_rts_wq08:50:130
1015992750,274cyclictest5444-21kworker/u16:3+efi_rts_wq11:05:151
1014992740,273cyclictest5444-21kworker/u16:3+efi_rts_wq11:08:500
1017992720,271cyclictest31073-21kworker/u16:0+efi_rts_wq08:10:143
1016992720,271cyclictest23232-21kworker/u16:2+efi_rts_wq10:20:132
1016992720,271cyclictest23232-21kworker/u16:2+efi_rts_wq08:00:122
1016992710,270cyclictest31073-21kworker/u16:0+efi_rts_wq09:35:142
1016992710,270cyclictest31073-21kworker/u16:0+efi_rts_wq07:20:132
1014992710,270cyclictest23232-21kworker/u16:2+efi_rts_wq07:45:130
1014992700,269cyclictest31073-21kworker/u16:0+efi_rts_wq09:30:130
1017992690,268cyclictest23232-21kworker/u16:2+efi_rts_wq10:15:143
1017992680,267cyclictest31073-21kworker/u16:0+efi_rts_wq08:45:153
1016992680,267cyclictest23232-21kworker/u16:2+efi_rts_wq09:00:142
1016992670,266cyclictest7984-21kworker/u16:1+efi_rts_wq11:20:132
1015992670,266cyclictest15567-21kworker/u16:3+efi_rts_wq11:35:141
1016992660,265cyclictest31073-21kworker/u16:0+efi_rts_wq08:15:122
1015992650,264cyclictest31073-21kworker/u16:0+efi_rts_wq09:58:331
1014992650,264cyclictest31073-21kworker/u16:0+efi_rts_wq10:30:120
1016992610,260cyclictest23232-21kworker/u16:2+efi_rts_wq07:30:162
1014992610,260cyclictest23232-21kworker/u16:2+efi_rts_wq07:58:140
1017992600,259cyclictest23232-21kworker/u16:2+efi_rts_wq10:45:133
1016992600,259cyclictest31073-21kworker/u16:0+efi_rts_wq08:40:142
1015992590,258cyclictest15567-21kworker/u16:3+efi_rts_wq11:23:531
1014992590,258cyclictest31073-21kworker/u16:0+efi_rts_wq07:23:070
1015992580,257cyclictest31073-21kworker/u16:0+efi_rts_wq09:25:141
1014992580,257cyclictest31073-21kworker/u16:0+efi_rts_wq10:25:150
1014992570,256cyclictest31773-21kworker/u16:4+efi_rts_wq12:10:150
1017992560,255cyclictest7984-21kworker/u16:1+efi_rts_wq11:10:153
1016992560,255cyclictest23232-21kworker/u16:2+efi_rts_wq10:45:132
1016992560,255cyclictest20198-21kworker/u16:0+efi_rts_wq11:50:142
1017992540,252cyclictest23232-21kworker/u16:2+efi_rts_wq10:10:143
1017992520,251cyclictest23232-21kworker/u16:2+efi_rts_wq09:33:303
1016992520,251cyclictest15567-21kworker/u16:3+efi_rts_wq11:25:122
1015992520,251cyclictest23232-21kworker/u16:2+efi_rts_wq09:40:131
1015992510,250cyclictest20198-21kworker/u16:0+efi_rts_wq11:40:161
1014992500,249cyclictest23232-21kworker/u16:2+efi_rts_wq08:25:120
1014992480,247cyclictest20198-21kworker/u16:0+efi_rts_wq11:59:000
1015992440,243cyclictest23232-21kworker/u16:2+efi_rts_wq07:30:151
1015992390,238cyclictest31773-21kworker/u16:4+efi_rts_wq12:15:131
1015992390,238cyclictest23232-21kworker/u16:2+efi_rts_wq09:05:131
1016992360,235cyclictest31073-21kworker/u16:0+efi_rts_wq10:38:452
1015992350,234cyclictest31073-21kworker/u16:0+efi_rts_wq08:43:231
1015992350,234cyclictest23232-21kworker/u16:2+efi_rts_wq07:25:131
1016992340,233cyclictest7984-21kworker/u16:1+efi_rts_wq11:10:162
1015992330,232cyclictest31073-21kworker/u16:0+efi_rts_wq07:18:061
1016992310,230cyclictest20198-21kworker/u16:0+efi_rts_wq12:09:022
1015992300,229cyclictest15567-21kworker/u16:3+efi_rts_wq11:33:551
1015992280,227cyclictest20198-21kworker/u16:0+efi_rts_wq12:05:151
1016992260,225cyclictest13267-21kworker/u16:2+efi_rts_wq11:45:132
1016992240,223cyclictest31773-21kworker/u16:4+efi_rts_wq12:30:122
1015992200,219cyclictest20198-21kworker/u16:0+efi_rts_wq12:29:061
1015992190,218cyclictest23232-21kworker/u16:2+efi_rts_wq10:10:141
1014992170,216cyclictest31073-21kworker/u16:0+efi_rts_wq08:45:150
1015992160,215cyclictest31773-21kworker/u16:4+efi_rts_wq12:24:051
1015992160,215cyclictest31073-21kworker/u16:0+efi_rts_wq08:20:121
1015992150,214cyclictest31073-21kworker/u16:0+efi_rts_wq08:05:161
1017992140,213cyclictest7984-21kworker/u16:1+efi_rts_wq11:20:123
1017992140,213cyclictest31073-21kworker/u16:0+efi_rts_wq08:20:123
1016992130,211cyclictest20198-21kworker/u16:0+efi_rts_wq12:00:112
1014992130,212cyclictest23232-21kworker/u16:2+efi_rts_wq09:40:130
1014992110,210cyclictest31073-21kworker/u16:0+efi_rts_wq09:48:320
1017992100,209cyclictest31773-21kworker/u16:4+efi_rts_wq12:05:153
1015992090,208cyclictest31073-21kworker/u16:0+efi_rts_wq10:40:141
1017992070,206cyclictest31073-21kworker/u16:0+efi_rts_wq09:53:323
1014992060,205cyclictest23232-21kworker/u16:2+efi_rts_wq10:23:380
1017992040,203cyclictest31073-21kworker/u16:0+efi_rts_wq07:15:013
1017992040,203cyclictest23232-21kworker/u16:2+efi_rts_wq09:13:273
1015992010,200cyclictest31073-21kworker/u16:0+efi_rts_wq07:43:101
1016992000,199cyclictest31073-21kworker/u16:0+efi_rts_wq10:13:362
1015991970,196cyclictest31073-21kworker/u16:0+efi_rts_wq09:50:131
1016991950,194cyclictest31073-21kworker/u16:0+efi_rts_wq07:10:122
1014991950,194cyclictest23232-21kworker/u16:2+efi_rts_wq09:03:260
1017991940,193cyclictest13267-21kworker/u16:2+efi_rts_wq11:48:583
1016991920,191cyclictest13267-21kworker/u16:2+efi_rts_wq11:30:132
1015991880,187cyclictest31773-21kworker/u16:4+efi_rts_wq12:34:071
1014991880,187cyclictest23232-21kworker/u16:2+efi_rts_wq10:50:130
1017991830,182cyclictest31073-21kworker/u16:0+efi_rts_wq07:28:073
1015991810,178cyclictest31073-21kworker/u16:0+efi_rts_wq10:25:151
1017991790,178cyclictest23232-21kworker/u16:2+efi_rts_wq08:03:153
1016991790,178cyclictest31073-21kworker/u16:0+efi_rts_wq07:40:132
1016991770,176cyclictest5444-21kworker/u16:3+efi_rts_wq11:05:142
1014991750,174cyclictest15567-21kworker/u16:3+efi_rts_wq11:25:120
1017991730,172cyclictest31073-21kworker/u16:0+efi_rts_wq08:50:143
1015991720,171cyclictest31073-21kworker/u16:0+efi_rts_wq11:03:491
1014991670,167cyclictest23232-21kworker/u16:2+efi_rts_wq08:23:190
1017991650,164cyclictest13267-21kworker/u16:2+efi_rts_wq11:53:593
1015991650,164cyclictest5444-21kworker/u16:3+efi_rts_wq11:15:141
1014991650,164cyclictest31073-21kworker/u16:0+efi_rts_wq08:05:160
1014991650,163cyclictest23232-21kworker/u16:2+efi_rts_wq09:10:150
1017991610,159cyclictest23232-21kworker/u16:2+efi_rts_wq07:13:023
1015991590,158cyclictest31073-21kworker/u16:0+efi_rts_wq09:15:131
1017991550,154cyclictest31073-21kworker/u16:0+efi_rts_wq10:35:153
1016991550,154cyclictest31073-21kworker/u16:0+efi_rts_wq08:13:172
1015991530,152cyclictest20198-21kworker/u16:0+efi_rts_wq12:00:101
1016991490,148cyclictest31773-21kworker/u16:4+efi_rts_wq12:15:132
1017991480,147cyclictest5444-21kworker/u16:3+efi_rts_wq11:15:143
1016991470,146cyclictest23232-21kworker/u16:2+efi_rts_wq11:00:152
1014991440,142cyclictest20198-21kworker/u16:0+efi_rts_wq12:05:150
1014991420,141cyclictest23232-21kworker/u16:2+efi_rts_wq11:00:140
1016991390,138cyclictest23232-21kworker/u16:2+efi_rts_wq10:53:472
1016991380,137cyclictest23232-21kworker/u16:2+efi_rts_wq07:25:132
1014991370,136cyclictest31073-21kworker/u16:0+efi_rts_wq07:10:120
1016991300,129cyclictest31773-21kworker/u16:4+efi_rts_wq12:14:032
1015991200,119cyclictest23232-21kworker/u16:2+efi_rts_wq10:20:131
1014991200,119cyclictest23232-21kworker/u16:2+efi_rts_wq07:33:080
1017991170,116cyclictest31073-21kworker/u16:0+efi_rts_wq09:43:323
1015991150,114cyclictest31073-21kworker/u16:0+efi_rts_wq09:30:121
1017991090,108cyclictest31073-21kworker/u16:0+efi_rts_wq07:48:123
1016991070,106cyclictest23232-21kworker/u16:2+efi_rts_wq09:18:282
1014993530,4cyclictest795-21snmpd10:55:010
1016993330,2cyclictest795-21snmpd10:04:292
1016993330,2cyclictest795-21snmpd09:33:342
1014993329,3cyclictest795-21snmpd11:17:530
1017993229,2cyclictest795-21snmpd10:23:543
1015993230,2cyclictest795-21snmpd09:14:541
1015993229,2cyclictest795-21snmpd12:36:341
1014993230,2cyclictest804-21ntpd12:38:140
1014993230,2cyclictest804-21ntpd10:13:140
1014993230,2cyclictest795-21snmpd11:14:040
1014993229,3cyclictest795-21snmpd08:16:050
1014993229,3cyclictest795-21snmpd07:40:240
1017993129,2cyclictest795-21snmpd12:39:583
1017993129,2cyclictest795-21snmpd07:37:453
1017993128,2cyclictest795-21snmpd12:21:433
1016993130,1cyclictest795-21snmpd12:22:462
1016993130,1cyclictest795-21snmpd11:43:202
1016993130,1cyclictest795-21snmpd08:49:302
1016993130,1cyclictest795-21snmpd08:38:022
1016993129,2cyclictest795-21snmpd10:33:002
1016993129,2cyclictest795-21snmpd07:59:372
1015993130,1cyclictest795-21snmpd10:58:461
1015993129,2cyclictest795-21snmpd09:38:341
1014993129,2cyclictest795-21snmpd11:44:260
1014993128,3cyclictest795-21snmpd07:51:070
1017993030,0cyclictest26549-21kworker/3:0+events10:29:103
1017993030,0cyclictest26549-21kworker/3:0+events09:47:023
1017993030,0cyclictest26549-21kworker/3:0+events09:27:263
1017993030,0cyclictest26549-21kworker/3:0+events08:30:543
1017993030,0cyclictest17603-21kworker/3:0+events07:31:183
1017993029,1cyclictest795-21snmpd08:58:453
1017993028,2cyclictest795-21snmpd09:36:283
1016993029,1cyclictest795-21snmpd10:29:272
1016993029,1cyclictest795-21snmpd09:59:472
1016993029,1cyclictest795-21snmpd09:45:282
1016993028,2cyclictest795-21snmpd12:29:402
1016993028,2cyclictest1388-21cat08:25:142
1015993030,0cyclictest795-21snmpd11:53:391
1015993029,1cyclictest795-21snmpd11:46:241
1015993029,1cyclictest795-21snmpd08:51:421
1015993028,2cyclictest795-21snmpd11:27:081
1015993028,2cyclictest795-21snmpd08:59:571
1014993029,1cyclictest795-21snmpd09:18:150
1014993029,1cyclictest795-21snmpd08:40:260
1014993029,1cyclictest795-21snmpd08:37:350
1014993029,1cyclictest795-21snmpd08:02:040
1014993027,2cyclictest795-21snmpd10:18:110
1014993025,4cyclictest795-21snmpd12:31:550
1017992929,0cyclictest9587-21kworker/3:0+events12:30:163
1017992929,0cyclictest9587-21kworker/3:0+events12:26:303
1017992929,0cyclictest8603-21kworker/3:2+events11:25:203
1017992929,0cyclictest5361-21kworker/3:0+events11:07:523
1017992929,0cyclictest30295-21kworker/3:2+events10:55:063
1017992929,0cyclictest28741-21kworker/3:2+events12:10:383
1017992929,0cyclictest28741-21kworker/3:2+events12:04:303
1017992929,0cyclictest2710-21kworker/3:1+events08:05:063
1017992929,0cyclictest2710-21kworker/3:1+events07:40:103
1017992929,0cyclictest26549-21kworker/3:0+events10:00:543
1017992929,0cyclictest26549-21kworker/3:0+events09:55:303
1017992929,0cyclictest26549-21kworker/3:0+events09:20:263
1017992929,0cyclictest26549-21kworker/3:0+events09:05:263
1017992929,0cyclictest26549-21kworker/3:0+events09:00:023
1017992929,0cyclictest26549-21kworker/3:0+events08:41:183
1017992929,0cyclictest22240-21kworker/3:1+events10:43:483
1017992927,2cyclictest6361-21cat12:15:153
1016992928,1cyclictest795-21snmpd09:52:262
1016992928,1cyclictest795-21snmpd08:51:482
1016992928,1cyclictest795-21snmpd07:51:582
1016992926,2cyclictest795-21snmpd08:20:082
1015992928,1cyclictest795-21snmpd10:45:391
1015992928,1cyclictest795-21snmpd10:31:541
1015992928,1cyclictest795-21snmpd10:08:561
1015992928,1cyclictest795-21snmpd07:13:271
1015992927,2cyclictest795-21snmpd08:28:051
1015992927,2cyclictest795-21snmpd07:45:491
1015992926,2cyclictest795-21snmpd07:59:071
1014992928,1cyclictest795-21snmpd10:49:160
1014992928,1cyclictest795-21snmpd08:11:550
1014992927,2cyclictest795-21snmpd11:20:470
1015992827,1cyclictest795-21snmpd08:48:321
1014992827,1cyclictest795-21snmpd12:29:250
1014992827,1cyclictest795-21snmpd11:45:330
1014992827,1cyclictest795-21snmpd11:30:050
1014992826,2cyclictest795-21snmpd10:09:470
1014992826,2cyclictest795-21snmpd07:27:390
1014992825,2cyclictest795-21snmpd08:31:530
1017992726,1cyclictest17439-21kworker/3:0+events11:38:103
1016992726,1cyclictest795-21snmpd10:19:172
1016992726,1cyclictest795-21snmpd07:38:392
1015992725,2cyclictest795-21snmpd08:34:321
1014992726,1cyclictest795-21snmpd12:03:540
1014992725,2cyclictest795-21snmpd09:57:440
1016992625,1cyclictest795-21snmpd09:21:132
1016992625,1cyclictest795-21snmpd09:14:032
1015992524,1cyclictest795-21snmpd11:13:431
1015992524,1cyclictest795-21snmpd08:19:351
1014992524,1cyclictest795-21snmpd09:28:430
1016992422,2cyclictest795-21snmpd09:25:192
1015992423,1cyclictest795-21snmpd07:21:511
1015992422,2cyclictest795-21snmpd10:35:061
1014992423,1cyclictest795-21snmpd09:24:100
1015992321,2cyclictest795-21snmpd10:52:131
1014992322,1cyclictest795-21snmpd07:39:540
1016992220,2cyclictest21123-21cat11:35:162
1015992220,2cyclictest795-21snmpd08:13:431
1014992218,4cyclictest795-21snmpd11:39:080
1014991917,2cyclictest795-21snmpd12:15:070
1016991817,1cyclictest795-21snmpd11:58:242
1015991615,1cyclictest795-21snmpd10:03:591
1016991211,1cyclictest9148-21kworker/2:2+events_freezable_pwr_efficient08:07:242
1015991211,1cyclictest795-21snmpd09:04:571
10169997,2cyclictest32763-21cat09:40:152
10169970,7cyclictest0-21swapper/207:15:102
10159965,1cyclictest3828-21expr12:10:141
10159954,1cyclictest19565-21ntpq07:50:151
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional