You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-04 - 15:14

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Thu Dec 04, 2025 12:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
60082332304,25sleep00-21swapper/007:09:530
59282318311,5sleep20-21swapper/207:08:502
59022317309,5sleep10-21swapper/107:08:281
58232316302,5sleep30-21swapper/307:07:303
6283993070,304cyclictest29896-21kworker/u16:0+efi_rts_wq07:35:121
6283993030,301cyclictest29896-21kworker/u16:0+efi_rts_wq11:08:181
6285993010,300cyclictest29896-21kworker/u16:0+efi_rts_wq10:45:133
6285992980,297cyclictest22774-21kworker/u16:2+efi_rts_wq10:40:123
6283992980,297cyclictest29896-21kworker/u16:0+efi_rts_wq08:15:131
6283992940,293cyclictest29896-21kworker/u16:0+efi_rts_wq07:47:431
6284992930,292cyclictest29954-21kworker/u16:1+efi_rts_wq11:23:212
6284992920,291cyclictest29896-21kworker/u16:0+efi_rts_wq07:30:122
6284992920,291cyclictest2322-21kworker/u16:1+efi_rts_wq12:30:142
6283992920,291cyclictest2322-21kworker/u16:1+efi_rts_wq12:18:311
6280992910,290cyclictest29896-21kworker/u16:0+efi_rts_wq09:38:020
6280992910,290cyclictest29896-21kworker/u16:0+efi_rts_wq09:30:140
6285992890,288cyclictest22774-21kworker/u16:2+efi_rts_wq09:05:143
6284992880,287cyclictest29896-21kworker/u16:0+efi_rts_wq09:15:132
6285992860,285cyclictest22774-21kworker/u16:2+efi_rts_wq10:20:153
6280992860,284cyclictest29896-21kworker/u16:0+efi_rts_wq10:45:130
6285992850,284cyclictest29896-21kworker/u16:0+efi_rts_wq08:25:123
6285992850,284cyclictest22774-21kworker/u16:2+efi_rts_wq09:20:123
6285992850,284cyclictest15037-21kworker/u16:1+efi_rts_wq08:50:153
6283992850,284cyclictest29954-21kworker/u16:1+efi_rts_wq10:50:131
6283992850,283cyclictest29896-21kworker/u16:0+efi_rts_wq10:55:151
6285992840,283cyclictest29896-21kworker/u16:0+efi_rts_wq09:55:133
6285992820,281cyclictest29896-21kworker/u16:0+efi_rts_wq08:05:143
6280992820,281cyclictest26929-21kworker/u16:0+efi_rts_wq11:50:120
6280992820,281cyclictest2322-21kworker/u16:1+efi_rts_wq12:20:120
6280992790,278cyclictest23155-21kworker/u16:2+efi_rts_wq11:58:280
6285992780,277cyclictest29954-21kworker/u16:1+efi_rts_wq11:20:153
6283992780,277cyclictest29954-21kworker/u16:1+efi_rts_wq11:15:161
6283992780,277cyclictest29896-21kworker/u16:0+efi_rts_wq08:02:461
6283992780,275cyclictest29896-21kworker/u16:0+efi_rts_wq08:25:111
6285992760,275cyclictest22774-21kworker/u16:2+efi_rts_wq09:50:133
6283992760,275cyclictest29896-21kworker/u16:0+efi_rts_wq10:05:141
6283992760,275cyclictest22774-21kworker/u16:2+efi_rts_wq10:18:091
6283992750,274cyclictest29896-21kworker/u16:0+efi_rts_wq08:55:151
6284992730,272cyclictest15037-21kworker/u16:1+efi_rts_wq07:15:142
6283992730,272cyclictest23155-21kworker/u16:2+efi_rts_wq12:00:131
6285992710,270cyclictest15037-21kworker/u16:1+efi_rts_wq08:47:543
6285992700,268cyclictest2322-21kworker/u16:1+efi_rts_wq12:20:143
6284992690,268cyclictest22774-21kworker/u16:2+efi_rts_wq10:23:102
6284992690,268cyclictest15037-21kworker/u16:1+efi_rts_wq08:20:132
6285992680,267cyclictest29896-21kworker/u16:0+efi_rts_wq10:00:123
6283992680,267cyclictest15037-21kworker/u16:1+efi_rts_wq08:10:141
6280992680,267cyclictest26929-21kworker/u16:0+efi_rts_wq11:45:140
6283992670,264cyclictest23155-21kworker/u16:2+efi_rts_wq11:55:121
6284992650,264cyclictest22774-21kworker/u16:2+efi_rts_wq10:35:152
6285992640,262cyclictest29954-21kworker/u16:1+efi_rts_wq11:18:213
6284992640,263cyclictest29896-21kworker/u16:0+efi_rts_wq08:40:152
6283992640,263cyclictest15037-21kworker/u16:1+efi_rts_wq08:35:121
6283992640,263cyclictest15037-21kworker/u16:1+efi_rts_wq08:20:141
6285992630,262cyclictest29896-21kworker/u16:0+efi_rts_wq10:58:163
6280992620,261cyclictest29954-21kworker/u16:1+efi_rts_wq11:30:150
6280992620,261cyclictest22774-21kworker/u16:2+efi_rts_wq10:35:150
6283992610,258cyclictest15037-21kworker/u16:1+efi_rts_wq07:20:151
6283992600,259cyclictest22774-21kworker/u16:2+efi_rts_wq09:48:041
6283992600,259cyclictest15037-21kworker/u16:1+efi_rts_wq07:57:451
6280992600,259cyclictest29954-21kworker/u16:1+efi_rts_wq11:00:140
6284992590,258cyclictest29954-21kworker/u16:1+efi_rts_wq11:33:232
6284992590,258cyclictest29896-21kworker/u16:0+efi_rts_wq07:50:132
6284992580,255cyclictest29896-21kworker/u16:0+efi_rts_wq09:30:152
6280992580,257cyclictest22774-21kworker/u16:2+efi_rts_wq10:20:150
6285992570,256cyclictest29896-21kworker/u16:0+efi_rts_wq08:22:503
6284992570,256cyclictest22774-21kworker/u16:2+efi_rts_wq09:50:132
6284992550,254cyclictest29896-21kworker/u16:0+efi_rts_wq09:35:152
6284992540,253cyclictest22774-21kworker/u16:2+efi_rts_wq09:45:142
6280992540,253cyclictest23155-21kworker/u16:2+efi_rts_wq12:28:330
6285992530,252cyclictest26929-21kworker/u16:0+efi_rts_wq11:45:143
6284992530,251cyclictest29896-21kworker/u16:0+efi_rts_wq10:30:132
6280992520,251cyclictest29954-21kworker/u16:1+efi_rts_wq11:28:220
6280992520,251cyclictest15037-21kworker/u16:1+efi_rts_wq08:35:120
6285992500,249cyclictest2322-21kworker/u16:1+efi_rts_wq12:15:133
6284992500,248cyclictest29896-21kworker/u16:0+efi_rts_wq11:10:132
6285992490,248cyclictest26929-21kworker/u16:0+efi_rts_wq11:50:123
6284992480,247cyclictest15037-21kworker/u16:1+efi_rts_wq07:20:152
6283992460,245cyclictest2322-21kworker/u16:1+efi_rts_wq12:08:301
6280992460,245cyclictest29896-21kworker/u16:0+efi_rts_wq09:28:000
6280992460,245cyclictest29896-21kworker/u16:0+efi_rts_wq09:28:000
6285992450,244cyclictest22774-21kworker/u16:2+efi_rts_wq10:25:133
6285992440,243cyclictest29896-21kworker/u16:0+efi_rts_wq09:15:133
6283992440,243cyclictest22774-21kworker/u16:2+efi_rts_wq09:25:151
6283992440,243cyclictest22774-21kworker/u16:2+efi_rts_wq09:25:141
6285992430,242cyclictest23155-21kworker/u16:2+efi_rts_wq11:40:133
6284992430,242cyclictest22774-21kworker/u16:2+efi_rts_wq09:25:142
6284992430,242cyclictest22774-21kworker/u16:2+efi_rts_wq09:25:142
6284992420,241cyclictest15037-21kworker/u16:1+efi_rts_wq07:45:112
6283992420,241cyclictest2322-21kworker/u16:1+efi_rts_wq12:25:141
6283992420,240cyclictest29896-21kworker/u16:0+efi_rts_wq10:33:111
6283992400,239cyclictest22774-21kworker/u16:2+efi_rts_wq09:40:121
6280992400,239cyclictest29896-21kworker/u16:0+efi_rts_wq08:52:540
6285992381,236cyclictest29896-21kworker/u16:0+efi_rts_wq10:30:133
6284992380,237cyclictest22774-21kworker/u16:2+efi_rts_wq10:13:082
6284992370,236cyclictest23155-21kworker/u16:2+efi_rts_wq12:03:302
6280992370,236cyclictest2322-21kworker/u16:1+efi_rts_wq12:15:130
6284992360,234cyclictest23155-21kworker/u16:2+efi_rts_wq11:40:132
6285992350,234cyclictest23155-21kworker/u16:2+efi_rts_wq12:35:143
6285992350,234cyclictest23155-21kworker/u16:2+efi_rts_wq11:35:133
6284992300,229cyclictest29896-21kworker/u16:0+efi_rts_wq10:05:142
6284992290,228cyclictest29954-21kworker/u16:1+efi_rts_wq10:55:162
6283992270,225cyclictest2322-21kworker/u16:1+efi_rts_wq12:30:151
6280992270,226cyclictest29896-21kworker/u16:0+efi_rts_wq08:15:130
6284992240,223cyclictest29896-21kworker/u16:0+efi_rts_wq08:30:142
6280992230,222cyclictest2322-21kworker/u16:1+efi_rts_wq12:10:130
6283992220,221cyclictest29896-21kworker/u16:0+efi_rts_wq07:40:151
6284992210,220cyclictest29896-21kworker/u16:0+efi_rts_wq11:05:132
6284992210,220cyclictest23155-21kworker/u16:2+efi_rts_wq11:53:272
6283992210,220cyclictest15037-21kworker/u16:1+efi_rts_wq07:15:151
6285992200,219cyclictest22774-21kworker/u16:2+efi_rts_wq09:40:123
6283992160,215cyclictest29896-21kworker/u16:0+efi_rts_wq07:12:371
6284992150,214cyclictest15037-21kworker/u16:1+efi_rts_wq08:10:132
6280992150,214cyclictest15037-21kworker/u16:1+efi_rts_wq09:00:130
6285992120,211cyclictest29896-21kworker/u16:0+efi_rts_wq07:40:153
6283992080,207cyclictest22774-21kworker/u16:2+efi_rts_wq09:23:001
6285992070,206cyclictest29954-21kworker/u16:1+efi_rts_wq11:00:143
6280992070,205cyclictest15037-21kworker/u16:1+efi_rts_wq07:10:120
6283992050,204cyclictest29896-21kworker/u16:0+efi_rts_wq08:30:131
6284992010,200cyclictest29896-21kworker/u16:0+efi_rts_wq10:43:142
6285992000,199cyclictest15037-21kworker/u16:1+efi_rts_wq07:27:393
6284991980,197cyclictest29896-21kworker/u16:0+efi_rts_wq10:15:132
6283991920,191cyclictest2322-21kworker/u16:1+efi_rts_wq12:10:141
6283991920,191cyclictest22774-21kworker/u16:2+efi_rts_wq09:10:141
6280991910,190cyclictest29896-21kworker/u16:0+efi_rts_wq07:55:120
6280991880,187cyclictest29954-21kworker/u16:1+efi_rts_wq10:53:160
6283991870,184cyclictest15037-21kworker/u16:1+efi_rts_wq07:25:131
6285991860,185cyclictest15489-21kworker/u16:3+efi_rts_wq11:25:133
6285991840,183cyclictest23155-21kworker/u16:2+efi_rts_wq11:55:123
6285991820,181cyclictest2322-21kworker/u16:1+efi_rts_wq12:33:343
6284991820,181cyclictest15037-21kworker/u16:1+efi_rts_wq08:07:472
6283991810,180cyclictest29954-21kworker/u16:1+efi_rts_wq11:20:161
6283991790,178cyclictest29896-21kworker/u16:0+efi_rts_wq11:10:131
6285991720,171cyclictest29896-21kworker/u16:0+efi_rts_wq09:02:563
6283991690,168cyclictest29896-21kworker/u16:0+efi_rts_wq08:42:531
6285991680,167cyclictest29896-21kworker/u16:0+efi_rts_wq11:13:193
6285991630,162cyclictest22774-21kworker/u16:2+efi_rts_wq09:10:143
6285991610,160cyclictest15037-21kworker/u16:1+efi_rts_wq07:52:433
6285991540,152cyclictest22774-21kworker/u16:2+efi_rts_wq09:33:013
6285991490,147cyclictest29896-21kworker/u16:0+efi_rts_wq11:05:143
6284991490,148cyclictest15037-21kworker/u16:1+efi_rts_wq08:45:132
6284991480,147cyclictest23155-21kworker/u16:2+efi_rts_wq11:35:142
6280991460,145cyclictest29896-21kworker/u16:0+efi_rts_wq08:05:130
6285991450,144cyclictest29896-21kworker/u16:0+efi_rts_wq08:55:163
6285991440,143cyclictest29896-21kworker/u16:0+efi_rts_wq10:15:133
6285991410,138cyclictest15037-21kworker/u16:1+efi_rts_wq08:00:113
6285991400,139cyclictest15037-21kworker/u16:1+efi_rts_wq07:32:403
6284991390,138cyclictest22774-21kworker/u16:2+efi_rts_wq10:03:072
6284991360,135cyclictest29954-21kworker/u16:1+efi_rts_wq11:15:162
6280991360,135cyclictest29896-21kworker/u16:0+efi_rts_wq10:55:150
6283991320,132cyclictest29896-21kworker/u16:0+efi_rts_wq10:28:111
6283991240,123cyclictest23155-21kworker/u16:2+efi_rts_wq11:38:241
6284991220,121cyclictest29954-21kworker/u16:1+efi_rts_wq11:03:172
6280991220,121cyclictest23155-21kworker/u16:2+efi_rts_wq11:40:140
6280991200,119cyclictest22774-21kworker/u16:2+efi_rts_wq09:12:580
6283991170,115cyclictest29896-21kworker/u16:0+efi_rts_wq09:35:151
6280991150,114cyclictest2322-21kworker/u16:1+efi_rts_wq12:38:360
6284991140,113cyclictest15037-21kworker/u16:1+efi_rts_wq07:10:122
6280991140,113cyclictest15037-21kworker/u16:1+efi_rts_wq07:17:380
6284991130,112cyclictest29896-21kworker/u16:0+efi_rts_wq09:55:132
6283991100,109cyclictest29896-21kworker/u16:0+efi_rts_wq07:50:131
6280991070,106cyclictest29896-21kworker/u16:0+efi_rts_wq08:27:510
6280991020,101cyclictest23155-21kworker/u16:2+efi_rts_wq12:00:130
6285993430,3cyclictest795-21snmpd10:10:123
6284993230,2cyclictest795-21snmpd08:50:552
6283993230,2cyclictest795-21snmpd09:15:511
6283993229,3cyclictest795-21snmpd10:46:221
6280993230,2cyclictest795-21snmpd09:46:560
6280993229,2cyclictest795-21snmpd09:44:500
6280993229,2cyclictest795-21snmpd07:33:590
6285993129,2cyclictest795-21snmpd08:31:583
6284993130,1cyclictest795-21snmpd07:38:022
6284993129,2cyclictest795-21snmpd12:25:362
6283993129,2cyclictest795-21snmpd12:24:211
6283993129,2cyclictest795-21snmpd10:01:091
6283993129,2cyclictest795-21snmpd09:07:491
6280993130,1cyclictest795-21snmpd11:18:130
6280993129,2cyclictest795-21snmpd10:28:040
6280993129,2cyclictest795-21snmpd09:17:020
6280993129,2cyclictest795-21snmpd08:43:070
6280993128,2cyclictest795-21snmpd12:33:450
6285993029,1cyclictest795-21snmpd12:02:053
6285993029,1cyclictest795-21snmpd10:06:303
6285993029,1cyclictest795-21snmpd07:57:473
6285993029,1cyclictest795-21snmpd07:46:513
6285993028,2cyclictest795-21snmpd12:05:353
6285993028,2cyclictest795-21snmpd10:53:043
6285993027,2cyclictest17894-21cat07:35:153
6283993029,1cyclictest795-21snmpd12:39:541
6283993029,1cyclictest795-21snmpd11:43:151
6283993029,1cyclictest795-21snmpd10:40:421
6283993028,2cyclictest795-21snmpd08:06:391
6280993029,1cyclictest795-21snmpd10:43:340
6280993029,1cyclictest795-21snmpd08:03:130
6280993028,2cyclictest795-21snmpd09:21:260
6280993028,2cyclictest795-21snmpd08:32:550
6280993028,2cyclictest795-21snmpd07:36:110
6280993027,2cyclictest795-21snmpd08:59:160
6285992928,1cyclictest795-21snmpd07:15:193
6285992928,1cyclictest795-21snmpd07:13:043
6285992927,2cyclictest795-21snmpd11:30:223
6285992926,2cyclictest795-21snmpd08:42:443
6284992928,1cyclictest795-21snmpd12:17:542
6284992928,1cyclictest795-21snmpd12:09:142
6284992928,1cyclictest795-21snmpd11:48:142
6284992927,2cyclictest795-21snmpd07:57:542
6283992929,0cyclictest795-21snmpd10:20:271
6283992928,1cyclictest795-21snmpd09:30:081
6283992928,1cyclictest795-21snmpd09:00:071
6280992929,0cyclictest19093-21kworker/0:1+events10:31:090
6280992929,0cyclictest17785-21kworker/0:1+events11:20:410
6280992928,1cyclictest795-21snmpd10:18:580
6280992927,2cyclictest795-21snmpd07:23:550
6285992827,1cyclictest795-21snmpd09:28:143
6285992827,1cyclictest795-21snmpd09:28:143
6285992827,1cyclictest795-21snmpd08:15:033
6285992827,1cyclictest795-21snmpd08:12:543
6285992825,2cyclictest795-21snmpd08:39:073
6284992828,0cyclictest795-21snmpd11:59:502
6284992827,1cyclictest795-21snmpd09:40:272
6284992826,2cyclictest804-21ntpd11:28:142
6283992828,0cyclictest795-21snmpd09:57:271
6283992826,2cyclictest795-21snmpd08:47:161
6283992825,3cyclictest795-21snmpd11:52:141
6280992827,1cyclictest795-21snmpd08:12:480
6280992826,2cyclictest795-21snmpd07:29:380
6285992726,1cyclictest795-21snmpd09:38:173
6284992726,1cyclictest795-21snmpd10:28:212
6284992725,2cyclictest795-21snmpd10:54:552
6284992725,2cyclictest795-21snmpd10:45:382
6284992724,2cyclictest795-21snmpd08:35:072
6283992726,1cyclictest795-21snmpd11:48:021
6283992726,1cyclictest795-21snmpd10:14:061
6283992725,2cyclictest795-21snmpd09:53:271
6280992727,0cyclictest19093-21kworker/0:1+events09:55:410
6280992727,0cyclictest19093-21kworker/0:1+events07:54:050
6280992726,1cyclictest795-21snmpd12:08:020
6280992725,2cyclictest795-21snmpd08:20:210
6280992725,2cyclictest795-21snmpd07:45:080
6285992625,1cyclictest795-21snmpd12:14:153
6285992625,1cyclictest795-21snmpd07:24:043
6283992626,0cyclictest29896-21kworker/u16:0+atlantic11:00:231
6283992624,2cyclictest795-21snmpd07:32:201
6280992626,0cyclictest2833-21kworker/0:0+events11:10:070
6280992626,0cyclictest19093-21kworker/0:1+events10:12:450
6280992626,0cyclictest19093-21kworker/0:1+events10:02:050
6280992626,0cyclictest19093-21kworker/0:1+events07:44:490
6280992626,0cyclictest13550-21kworker/0:2+events11:37:010
6280992624,2cyclictest795-21snmpd09:51:240
6285992525,0cyclictest74150irq/134-enp1s010:37:123
6284992524,1cyclictest795-21snmpd09:03:192
6284992523,2cyclictest795-21snmpd12:23:122
6283992525,0cyclictest29954-21kworker/u16:1+atlantic11:32:231
6280992525,0cyclictest19093-21kworker/0:1+events08:49:330
6284992423,1cyclictest795-21snmpd12:36:362
6280992424,0cyclictest19093-21kworker/0:1+events10:09:530
6280992424,0cyclictest10453-21kworker/0:1+events11:06:250
6283992323,0cyclictest74050irq/133-enp1s010:36:361
6283992323,0cyclictest29954-21kworker/u16:1+atlantic11:28:491
6284992120,1cyclictest795-21snmpd08:28:542
6284992119,2cyclictest13764-21cat07:25:162
6284992019,1cyclictest795-21snmpd07:42:292
6284992018,2cyclictest28703-21cat08:00:142
6285991917,2cyclictest795-21snmpd12:27:123
6283991919,0cyclictest29896-21kworker/u16:0+atlantic08:52:231
6285991716,1cyclictest795-21snmpd09:49:293
6280991717,0cyclictest19093-21kworker/0:1+events09:05:180
6284991616,0cyclictest795-21snmpd09:10:222
628499119,2cyclictest30037-21cat09:20:142
6284991111,0cyclictest15037-21kworker/u16:1+atlantic08:58:052
6284991110,1cyclictest8361-21kworker/2:0+events_freezable_pwr_efficient08:16:032
62849999,0cyclictest29896-21kworker/u16:0+atlantic09:08:012
62849966,0cyclictest0-21swapper/212:10:182
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional