You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-09 - 10:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Fri May 09, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
301392323317,4sleep00-21swapper/019:05:460
302082317310,5sleep20-21swapper/219:06:412
301072316302,5sleep30-21swapper/319:05:213
301302315308,5sleep10-21swapper/119:05:391
30730993070,305cyclictest13987-21kworker/u16:3+efi_rts_wq00:10:142
30728993070,306cyclictest13987-21kworker/u16:3+efi_rts_wq00:10:140
30731993050,304cyclictest31805-21kworker/u16:1+efi_rts_wq22:25:143
30730993050,304cyclictest31805-21kworker/u16:1+efi_rts_wq23:15:112
30729993050,304cyclictest11682-21kworker/u16:0+efi_rts_wq23:40:141
30729993040,303cyclictest31805-21kworker/u16:1+efi_rts_wq19:35:141
30728993040,303cyclictest13987-21kworker/u16:3+efi_rts_wq00:25:130
30728993040,303cyclictest13987-21kworker/u16:3+efi_rts_wq00:25:130
30730993020,301cyclictest9823-21kworker/u16:3+efi_rts_wq21:55:112
30728993020,301cyclictest9823-21kworker/u16:3+efi_rts_wq20:45:150
30728993010,300cyclictest9823-21kworker/u16:3+efi_rts_wq20:35:110
30731993000,298cyclictest9823-21kworker/u16:3+efi_rts_wq22:35:143
30728992990,298cyclictest31805-21kworker/u16:1+efi_rts_wq22:30:120
30730992980,297cyclictest31805-21kworker/u16:1+efi_rts_wq19:15:012
30728992980,297cyclictest31805-21kworker/u16:1+efi_rts_wq23:20:170
30731992970,296cyclictest9823-21kworker/u16:3+efi_rts_wq19:40:123
30731992970,296cyclictest31805-21kworker/u16:1+efi_rts_wq23:20:173
30729992970,296cyclictest31805-21kworker/u16:1+efi_rts_wq20:30:141
30729992970,296cyclictest18591-21kworker/u16:1+efi_rts_wq23:50:121
30731992960,295cyclictest31805-21kworker/u16:1+efi_rts_wq22:45:143
30728992940,293cyclictest9823-21kworker/u16:3+efi_rts_wq21:25:180
30728992930,292cyclictest9823-21kworker/u16:3+efi_rts_wq21:15:120
30728992910,290cyclictest13987-21kworker/u16:3+efi_rts_wq00:15:150
30729992900,289cyclictest18591-21kworker/u16:1+efi_rts_wq23:45:141
30729992900,288cyclictest21989-21kworker/u16:2+efi_rts_wq23:00:121
30730992890,288cyclictest13987-21kworker/u16:3+efi_rts_wq00:05:142
30730992870,286cyclictest31805-21kworker/u16:1+efi_rts_wq23:05:142
30731992860,285cyclictest31805-21kworker/u16:1+efi_rts_wq20:25:143
30728992810,280cyclictest31805-21kworker/u16:1+efi_rts_wq21:45:130
30730992800,279cyclictest13987-21kworker/u16:3+efi_rts_wq00:30:132
30731992790,278cyclictest31805-21kworker/u16:1+efi_rts_wq22:15:143
30730992770,276cyclictest9823-21kworker/u16:3+efi_rts_wq20:15:122
30729992770,276cyclictest9823-21kworker/u16:3+efi_rts_wq22:00:151
30728992750,274cyclictest31805-21kworker/u16:1+efi_rts_wq19:20:090
30731992740,273cyclictest9823-21kworker/u16:3+efi_rts_wq20:55:153
30730992710,270cyclictest9823-21kworker/u16:3+efi_rts_wq20:00:122
30731992700,269cyclictest31805-21kworker/u16:1+efi_rts_wq22:20:113
30731992690,268cyclictest9823-21kworker/u16:3+efi_rts_wq21:20:143
30728992660,265cyclictest11682-21kworker/u16:0+efi_rts_wq23:35:140
30729992640,263cyclictest31805-21kworker/u16:1+efi_rts_wq22:50:141
30728992640,263cyclictest9823-21kworker/u16:3+efi_rts_wq21:10:140
30728992630,262cyclictest9823-21kworker/u16:3+efi_rts_wq22:10:130
30730992590,258cyclictest9823-21kworker/u16:3+efi_rts_wq21:30:132
30730992560,255cyclictest13987-21kworker/u16:3+efi_rts_wq00:15:162
30731992550,254cyclictest9823-21kworker/u16:3+efi_rts_wq20:40:123
30730992550,254cyclictest9823-21kworker/u16:3+efi_rts_wq21:00:142
30730992550,254cyclictest31805-21kworker/u16:1+efi_rts_wq19:35:142
30730992540,253cyclictest9823-21kworker/u16:3+efi_rts_wq22:35:142
30728992530,250cyclictest9823-21kworker/u16:3+efi_rts_wq19:50:110
30730992490,248cyclictest13987-21kworker/u16:3+efi_rts_wq23:30:152
30728992480,247cyclictest31805-21kworker/u16:1+efi_rts_wq23:15:120
30729992460,245cyclictest9823-21kworker/u16:3+efi_rts_wq21:55:111
30729992460,245cyclictest9823-21kworker/u16:3+efi_rts_wq19:55:121
30731992420,241cyclictest18591-21kworker/u16:1+efi_rts_wq23:55:143
30729992390,238cyclictest9823-21kworker/u16:3+efi_rts_wq21:05:131
30729992370,236cyclictest13987-21kworker/u16:3+efi_rts_wq00:20:131
30728992370,236cyclictest31805-21kworker/u16:1+efi_rts_wq20:20:100
30729992340,233cyclictest31805-21kworker/u16:1+efi_rts_wq19:30:131
30728992340,233cyclictest31805-21kworker/u16:1+efi_rts_wq19:25:140
30729992330,232cyclictest9823-21kworker/u16:3+efi_rts_wq19:10:131
30731992300,229cyclictest9823-21kworker/u16:3+efi_rts_wq19:45:143
30729992300,229cyclictest21989-21kworker/u16:2+efi_rts_wq23:15:121
30728992300,229cyclictest9823-21kworker/u16:3+efi_rts_wq22:05:140
30728992280,227cyclictest18591-21kworker/u16:1+efi_rts_wq00:00:160
30728992270,226cyclictest31805-21kworker/u16:1+efi_rts_wq21:40:140
30729992250,224cyclictest31805-21kworker/u16:1+efi_rts_wq19:25:141
30731992210,220cyclictest9823-21kworker/u16:3+efi_rts_wq22:05:143
30728992210,220cyclictest9823-21kworker/u16:3+efi_rts_wq22:00:160
30728992200,219cyclictest31805-21kworker/u16:1+efi_rts_wq21:35:130
30731992180,217cyclictest9823-21kworker/u16:3+efi_rts_wq19:55:123
30730992170,216cyclictest9823-21kworker/u16:3+efi_rts_wq19:10:132
30731992160,215cyclictest13987-21kworker/u16:3+efi_rts_wq00:35:143
30730992150,214cyclictest9823-21kworker/u16:3+efi_rts_wq19:40:122
30729992150,214cyclictest9823-21kworker/u16:3+efi_rts_wq21:00:141
30728992140,213cyclictest9823-21kworker/u16:3+efi_rts_wq21:05:130
30729992100,208cyclictest18591-21kworker/u16:1+efi_rts_wq23:55:151
30731992090,208cyclictest9823-21kworker/u16:3+efi_rts_wq21:05:143
30728992090,208cyclictest9823-21kworker/u16:3+efi_rts_wq19:45:140
30729992080,207cyclictest11682-21kworker/u16:0+efi_rts_wq23:35:141
30729992080,206cyclictest31805-21kworker/u16:1+efi_rts_wq22:40:131
30731992060,205cyclictest9823-21kworker/u16:3+efi_rts_wq20:50:113
30731992040,203cyclictest21989-21kworker/u16:2+efi_rts_wq23:25:163
30730992040,203cyclictest21989-21kworker/u16:2+efi_rts_wq22:55:142
30728992040,203cyclictest9823-21kworker/u16:3+efi_rts_wq20:10:140
30730992020,201cyclictest21989-21kworker/u16:2+efi_rts_wq23:25:162
30728992020,201cyclictest9823-21kworker/u16:3+efi_rts_wq20:05:140
30728992020,201cyclictest11682-21kworker/u16:0+efi_rts_wq23:30:150
30730991960,195cyclictest31805-21kworker/u16:1+efi_rts_wq21:35:132
30729991960,195cyclictest31805-21kworker/u16:1+efi_rts_wq19:20:101
30728991940,193cyclictest9823-21kworker/u16:3+efi_rts_wq20:50:110
30729991930,192cyclictest31805-21kworker/u16:1+efi_rts_wq21:40:131
30728991900,189cyclictest21989-21kworker/u16:2+efi_rts_wq23:10:130
30729991880,187cyclictest21989-21kworker/u16:2+efi_rts_wq22:45:131
30731991870,186cyclictest31805-21kworker/u16:1+efi_rts_wq20:20:103
30729991870,186cyclictest9823-21kworker/u16:3+efi_rts_wq19:50:111
30728991850,184cyclictest31805-21kworker/u16:1+efi_rts_wq22:40:130
30730991820,181cyclictest9823-21kworker/u16:3+efi_rts_wq21:50:162
30728991780,177cyclictest13987-21kworker/u16:3+efi_rts_wq00:20:130
30729991750,174cyclictest9823-21kworker/u16:3+efi_rts_wq20:00:121
30729991620,161cyclictest31805-21kworker/u16:1+efi_rts_wq21:35:131
30729991610,160cyclictest9823-21kworker/u16:3+efi_rts_wq20:50:111
30731991550,154cyclictest21989-21kworker/u16:2+efi_rts_wq23:00:133
30730991550,154cyclictest9823-21kworker/u16:3+efi_rts_wq20:55:162
30730991490,148cyclictest31805-21kworker/u16:1+efi_rts_wq22:40:142
30729991460,145cyclictest21989-21kworker/u16:2+efi_rts_wq23:25:171
30728991410,140cyclictest9823-21kworker/u16:3+efi_rts_wq19:40:110
30728991360,135cyclictest31805-21kworker/u16:1+efi_rts_wq20:25:150
30730991330,132cyclictest9823-21kworker/u16:3+efi_rts_wq20:35:112
30731991320,131cyclictest21989-21kworker/u16:2+efi_rts_wq22:55:133
30731991320,131cyclictest13987-21kworker/u16:3+efi_rts_wq00:20:133
30728991320,131cyclictest21989-21kworker/u16:2+efi_rts_wq23:00:130
30730991240,123cyclictest13987-21kworker/u16:3+efi_rts_wq00:35:142
30730991220,121cyclictest18591-21kworker/u16:1+efi_rts_wq23:45:132
30729991140,113cyclictest9823-21kworker/u16:3+efi_rts_wq20:05:141
30728991140,113cyclictest9823-21kworker/u16:3+efi_rts_wq20:40:120
30730991110,111cyclictest31805-21kworker/u16:1+efi_rts_wq20:30:132
30729991110,110cyclictest9823-21kworker/u16:3+efi_rts_wq21:25:181
30731993229,2cyclictest808-21snmpd19:16:223
30729993230,2cyclictest808-21snmpd22:05:151
30729993230,2cyclictest808-21snmpd20:25:551
30729993229,2cyclictest808-21snmpd22:16:451
30731993130,1cyclictest808-21snmpd23:43:473
30731993130,1cyclictest808-21snmpd22:44:113
30731993130,1cyclictest808-21snmpd00:16:463
30731993129,2cyclictest808-21snmpd23:33:083
30731993129,2cyclictest808-21snmpd22:53:443
30731993128,3cyclictest808-21snmpd23:13:143
30730993129,2cyclictest808-21snmpd22:15:302
30730993129,2cyclictest808-21snmpd21:14:052
30730993129,2cyclictest808-21snmpd21:09:272
30730993129,2cyclictest808-21snmpd00:29:322
30730993129,2cyclictest808-21snmpd00:29:312
30729993128,2cyclictest808-21snmpd20:11:381
30728993130,1cyclictest808-21snmpd19:35:100
30728993129,2cyclictest808-21snmpd23:45:420
30728993129,2cyclictest808-21snmpd00:07:030
30728993129,2cyclictest7857-21cat19:30:150
30731993029,1cyclictest808-21snmpd23:07:293
30731993029,1cyclictest808-21snmpd21:40:393
30731993029,1cyclictest808-21snmpd19:54:183
30731993029,1cyclictest808-21snmpd19:11:553
30731993028,2cyclictest808-21snmpd20:30:543
30731993028,2cyclictest808-21snmpd00:14:423
30730993029,1cyclictest808-21snmpd22:25:432
30730993029,1cyclictest808-21snmpd21:41:392
30730993029,1cyclictest808-21snmpd20:40:042
30730993029,1cyclictest808-21snmpd19:29:372
30729993029,1cyclictest808-21snmpd22:30:581
30729993029,1cyclictest808-21snmpd20:36:461
30729993029,1cyclictest808-21snmpd19:46:051
30729993029,1cyclictest808-21snmpd00:32:071
30729993028,2cyclictest808-21snmpd23:30:501
30728993029,1cyclictest808-21snmpd23:57:240
30728993029,1cyclictest808-21snmpd22:22:340
30728993029,1cyclictest808-21snmpd21:20:440
30728993029,1cyclictest808-21snmpd20:18:340
30728993029,1cyclictest25090-21kworker/0:3+events23:53:090
30728993028,2cyclictest808-21snmpd22:35:010
30731992928,1cyclictest808-21snmpd23:49:573
30731992928,1cyclictest808-21snmpd23:16:383
30731992928,1cyclictest808-21snmpd22:34:233
30731992928,1cyclictest808-21snmpd22:01:333
30731992928,1cyclictest808-21snmpd21:34:323
30731992928,1cyclictest808-21snmpd19:37:073
30731992927,2cyclictest808-21snmpd23:51:393
30731992927,2cyclictest808-21snmpd21:56:273
30731992927,2cyclictest26736-21cat20:15:143
30731992926,2cyclictest808-21snmpd19:29:163
30730992929,0cyclictest808-21snmpd23:37:502
30730992928,1cyclictest808-21snmpd22:54:502
30730992928,1cyclictest808-21snmpd22:13:212
30730992928,1cyclictest808-21snmpd21:18:512
30730992928,1cyclictest808-21snmpd20:13:212
30730992927,2cyclictest808-21snmpd20:49:592
30730992927,2cyclictest808-21snmpd19:30:232
30730992927,2cyclictest30894-21cat20:25:162
30729992928,1cyclictest808-21snmpd23:23:171
30729992928,1cyclictest808-21snmpd22:20:291
30729992928,1cyclictest808-21snmpd00:15:451
30729992928,1cyclictest808-21snmpd00:07:311
30729992927,2cyclictest808-21snmpd22:26:221
30729992927,2cyclictest808-21snmpd00:27:181
30729992927,2cyclictest808-21snmpd00:27:181
30729992926,2cyclictest808-21snmpd21:32:141
30728992929,0cyclictest808-21snmpd23:28:300
30728992929,0cyclictest27495-21kworker/0:1+events23:05:120
30728992929,0cyclictest19563-21kworker/0:3+events22:48:270
30728992928,1cyclictest808-21snmpd21:01:310
30728992928,1cyclictest808-21snmpd20:34:570
30728992927,2cyclictest808-21snmpd22:25:160
30731992827,1cyclictest808-21snmpd20:35:243
30731992827,1cyclictest808-21snmpd00:25:523
30731992827,1cyclictest808-21snmpd00:25:513
30731992827,1cyclictest808-21snmpd00:09:303
30731992827,1cyclictest808-21snmpd00:01:423
30731992826,2cyclictest808-21snmpd19:22:043
30731992826,2cyclictest808-21snmpd00:32:053
30730992828,0cyclictest808-21snmpd23:20:082
30730992828,0cyclictest75050irq/133-enp1s023:10:112
30730992827,1cyclictest808-21snmpd23:40:472
30730992827,1cyclictest808-21snmpd22:34:592
30730992827,1cyclictest808-21snmpd21:21:082
30730992827,1cyclictest808-21snmpd20:07:292
30730992827,1cyclictest808-21snmpd00:02:512
30729992826,2cyclictest808-21snmpd21:54:581
30729992826,2cyclictest808-21snmpd00:11:061
30728992827,1cyclictest808-21snmpd20:03:020
30728992827,1cyclictest808-21snmpd19:57:060
30728992827,1cyclictest27495-21kworker/0:1+events22:57:350
30728992827,1cyclictest18613-21kworker/0:2+events23:43:530
30731992726,1cyclictest808-21snmpd21:52:303
30731992726,1cyclictest808-21snmpd20:45:403
30731992725,2cyclictest808-21snmpd19:32:083
30730992726,1cyclictest26060-21cat22:45:152
30730992726,1cyclictest18591-21kworker/u16:1+atlantic23:54:452
30730992725,2cyclictest808-21snmpd22:22:412
30730992725,2cyclictest808-21snmpd19:50:092
30729992726,1cyclictest808-21snmpd22:56:191
30729992726,1cyclictest808-21snmpd22:35:521
30728992727,0cyclictest27495-21kworker/0:1+events22:54:030
30731992625,1cyclictest808-21snmpd22:13:063
30731992624,2cyclictest808-21snmpd20:08:533
30731992623,2cyclictest808-21snmpd23:35:443
30730992626,0cyclictest75050irq/133-enp1s023:01:272
30730992625,1cyclictest808-21snmpd20:23:572
30730992625,1cyclictest808-21snmpd19:55:502
30729992626,0cyclictest9823-21kworker/u16:3+atlantic19:40:491
30729992625,1cyclictest808-21snmpd20:40:551
30729992625,1cyclictest808-21snmpd00:02:091
30729992624,2cyclictest808-21snmpd20:56:291
30729992624,2cyclictest808-21snmpd20:20:571
30728992625,1cyclictest808-21snmpd21:31:060
30731992523,2cyclictest23559-21cat21:25:213
30730992525,0cyclictest18591-21kworker/u16:1+atlantic23:59:022
30730992524,1cyclictest808-21snmpd19:21:592
30730992523,2cyclictest808-21snmpd21:46:212
30729992525,0cyclictest9823-21kworker/u16:3+atlantic21:10:301
30729992523,2cyclictest808-21snmpd21:48:181
30728992524,1cyclictest808-21snmpd00:39:350
30729992422,2cyclictest808-21snmpd22:10:311
30729992421,3cyclictest808-21snmpd23:05:471
30728992423,1cyclictest808-21snmpd19:15:100
30731992322,1cyclictest808-21snmpd21:35:483
30728992320,2cyclictest808-21snmpd00:30:040
30731992220,2cyclictest808-21snmpd21:01:583
30730992221,1cyclictest808-21snmpd22:08:272
30730992220,2cyclictest808-21snmpd20:50:282
30729992221,1cyclictest808-21snmpd23:10:441
30728992222,0cyclictest435-21kworker/0:2+events21:55:120
30728992220,2cyclictest808-21snmpd19:11:220
30730992120,1cyclictest808-21snmpd19:48:442
30728992121,0cyclictest435-21kworker/0:2+events20:56:580
30731992018,2cyclictest808-21snmpd21:16:303
30730992018,2cyclictest808-21snmpd00:20:152
30729992019,1cyclictest808-21snmpd20:46:561
30729991917,2cyclictest808-21snmpd21:20:231
30728991918,1cyclictest435-21kworker/0:2+events21:51:480
30730991817,1cyclictest808-21snmpd22:04:002
30728991716,1cyclictest435-21kworker/0:2+events22:15:440
30730991616,0cyclictest9823-21kworker/u16:3+atlantic21:25:262
30729991513,2cyclictest808-21snmpd20:15:011
3072999109,1cyclictest808-21snmpd00:35:551
307319998,1cyclictest808-21snmpd21:10:203
307299986,2cyclictest1651-21cat19:15:151
307319965,1cyclictest32007-21chrt21:45:173
307319960,6cyclictest21659-21taskset20:04:043
307299965,1cyclictest19061-21expr21:15:121
307319954,1cyclictest24064-21taskset20:10:133
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional