You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-08 - 09:51

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Sat Nov 08, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
227682320310,8sleep30-21swapper/319:07:033
228522318310,5sleep00-21swapper/019:08:070
229962315307,5sleep10-21swapper/119:09:561
227012315308,5sleep20-21swapper/219:06:132
23266992970,296cyclictest29084-21kworker/u16:2+efi_rts_wq22:25:133
23263992970,296cyclictest26358-21kworker/u16:1+efi_rts_wq22:35:100
23265992960,295cyclictest17291-21kworker/u16:0+efi_rts_wq22:05:142
23263992940,293cyclictest17291-21kworker/u16:0+efi_rts_wq20:49:390
23264992910,290cyclictest26358-21kworker/u16:1+efi_rts_wq23:05:021
23265992900,288cyclictest26358-21kworker/u16:1+efi_rts_wq22:45:172
23264992900,289cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:151
23264992900,289cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:151
23263992900,289cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:160
23263992900,289cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:150
23265992880,286cyclictest17369-21kworker/u16:2+efi_rts_wq23:00:122
23263992880,287cyclictest11968-21kworker/u16:1+efi_rts_wq20:25:120
23266992870,285cyclictest11968-21kworker/u16:1+efi_rts_wq20:50:123
23263992870,286cyclictest17291-21kworker/u16:0+efi_rts_wq19:45:120
23266992860,285cyclictest32166-21kworker/u16:2+efi_rts_wq23:25:073
23266992860,285cyclictest17369-21kworker/u16:2+efi_rts_wq22:55:123
23265992860,285cyclictest17291-21kworker/u16:0+efi_rts_wq22:10:132
23264992860,285cyclictest11968-21kworker/u16:1+efi_rts_wq20:24:351
23266992840,283cyclictest17291-21kworker/u16:0+efi_rts_wq19:24:243
23264992840,283cyclictest29084-21kworker/u16:2+efi_rts_wq21:35:161
23266992830,282cyclictest27152-21kworker/u16:3+efi_rts_wq23:20:143
23265992830,282cyclictest17291-21kworker/u16:0+efi_rts_wq19:15:002
23263992830,282cyclictest20683-21kworker/u16:1+efi_rts_wq00:15:130
23266992820,281cyclictest29084-21kworker/u16:2+efi_rts_wq21:05:103
23266992820,281cyclictest18388-21kworker/u16:2+efi_rts_wq00:21:253
23266992820,281cyclictest17291-21kworker/u16:0+efi_rts_wq19:50:133
23265992810,280cyclictest26358-21kworker/u16:1+efi_rts_wq23:05:142
23264992810,280cyclictest29084-21kworker/u16:2+efi_rts_wq21:30:131
23263992810,280cyclictest4811-21kworker/u16:0+efi_rts_wq23:35:110
23266992800,279cyclictest17369-21kworker/u16:2+efi_rts_wq23:05:143
23264992780,277cyclictest11968-21kworker/u16:1+efi_rts_wq20:35:161
23265992770,276cyclictest17291-21kworker/u16:0+efi_rts_wq20:30:142
23263992760,275cyclictest17369-21kworker/u16:2+efi_rts_wq22:44:590
23266992750,274cyclictest31553-21kworker/u16:0+efi_rts_wq00:35:113
23266992750,274cyclictest17291-21kworker/u16:0+efi_rts_wq21:40:133
23266992750,274cyclictest11968-21kworker/u16:1+efi_rts_wq20:15:133
23266992740,273cyclictest17291-21kworker/u16:0+efi_rts_wq21:10:153
23265992740,273cyclictest17369-21kworker/u16:2+efi_rts_wq22:55:002
23263992740,273cyclictest4811-21kworker/u16:0+efi_rts_wq23:40:130
23266992730,272cyclictest20683-21kworker/u16:1+efi_rts_wq00:05:123
23263992730,272cyclictest27152-21kworker/u16:3+efi_rts_wq23:15:050
23265992720,271cyclictest11968-21kworker/u16:1+efi_rts_wq20:10:132
23263992720,271cyclictest31553-21kworker/u16:0+efi_rts_wq00:30:150
23265992710,270cyclictest17291-21kworker/u16:0+efi_rts_wq21:55:162
23266992700,269cyclictest4811-21kworker/u16:0+efi_rts_wq00:00:123
23266992700,269cyclictest17291-21kworker/u16:0+efi_rts_wq20:40:143
23265992700,269cyclictest17291-21kworker/u16:0+efi_rts_wq19:10:152
23263992700,269cyclictest27152-21kworker/u16:3+efi_rts_wq23:20:130
23265992690,268cyclictest17291-21kworker/u16:0+efi_rts_wq20:20:132
23264992690,268cyclictest17291-21kworker/u16:0+efi_rts_wq19:30:131
23265992670,266cyclictest31553-21kworker/u16:0+efi_rts_wq00:30:152
23266992660,265cyclictest11968-21kworker/u16:1+efi_rts_wq19:19:233
23266992650,264cyclictest17291-21kworker/u16:0+efi_rts_wq20:05:143
23264992650,264cyclictest17291-21kworker/u16:0+efi_rts_wq20:00:151
23263992650,264cyclictest26358-21kworker/u16:1+efi_rts_wq22:24:560
23264992630,262cyclictest11968-21kworker/u16:1+efi_rts_wq20:50:111
23263992630,262cyclictest20683-21kworker/u16:1+efi_rts_wq00:06:230
23264992610,260cyclictest29084-21kworker/u16:2+efi_rts_wq21:15:141
23263992590,258cyclictest16087-21kworker/u16:3+efi_rts_wq23:55:150
23266992570,256cyclictest11968-21kworker/u16:1+efi_rts_wq20:35:163
23263992550,254cyclictest11968-21kworker/u16:1+efi_rts_wq20:39:380
23263992540,253cyclictest27152-21kworker/u16:3+efi_rts_wq23:10:130
23263992540,253cyclictest2387-21kworker/u16:1+efi_rts_wq23:25:140
23266992530,252cyclictest4811-21kworker/u16:0+efi_rts_wq23:50:143
23266992500,249cyclictest29084-21kworker/u16:2+efi_rts_wq21:20:133
23265992490,248cyclictest29084-21kworker/u16:2+efi_rts_wq22:20:132
23264992480,247cyclictest11968-21kworker/u16:1+efi_rts_wq19:25:121
23263992470,246cyclictest18388-21kworker/u16:2+efi_rts_wq00:20:140
23266992460,243cyclictest29084-21kworker/u16:2+efi_rts_wq21:50:133
23266992430,242cyclictest11968-21kworker/u16:1+efi_rts_wq19:25:113
23266992420,240cyclictest2387-21kworker/u16:1+efi_rts_wq23:45:113
23263992390,238cyclictest11968-21kworker/u16:1+efi_rts_wq19:40:160
23266992360,235cyclictest26358-21kworker/u16:1+efi_rts_wq22:39:583
23266992350,234cyclictest17291-21kworker/u16:0+efi_rts_wq20:55:113
23263992310,230cyclictest17291-21kworker/u16:0+efi_rts_wq20:40:130
23265992300,229cyclictest32166-21kworker/u16:2+efi_rts_wq23:15:142
23264992280,227cyclictest31553-21kworker/u16:0+efi_rts_wq00:35:111
23264992260,224cyclictest4811-21kworker/u16:0+efi_rts_wq23:50:151
23264992260,223cyclictest29084-21kworker/u16:2+efi_rts_wq22:25:131
23263992260,224cyclictest18388-21kworker/u16:2+efi_rts_wq00:01:230
23264992250,224cyclictest23032-21kworker/u16:3+efi_rts_wq00:25:131
23263992250,224cyclictest2387-21kworker/u16:1+efi_rts_wq23:45:100
23264992240,223cyclictest2387-21kworker/u16:1+efi_rts_wq23:45:101
23264992230,222cyclictest17291-21kworker/u16:0+efi_rts_wq20:45:131
23264992230,222cyclictest11968-21kworker/u16:1+efi_rts_wq19:40:161
23263992210,220cyclictest26358-21kworker/u16:1+efi_rts_wq23:00:010
23263992210,220cyclictest17291-21kworker/u16:0+efi_rts_wq19:15:140
23263992200,219cyclictest29084-21kworker/u16:2+efi_rts_wq21:00:130
23264992190,217cyclictest17291-21kworker/u16:0+efi_rts_wq19:35:111
23264992170,216cyclictest17291-21kworker/u16:0+efi_rts_wq20:09:331
23263992170,214cyclictest17291-21kworker/u16:0+efi_rts_wq19:10:150
23263992130,212cyclictest20683-21kworker/u16:1+efi_rts_wq00:10:140
23265992120,211cyclictest26358-21kworker/u16:1+efi_rts_wq22:19:542
23264992120,210cyclictest26358-21kworker/u16:1+efi_rts_wq22:40:151
23264992110,210cyclictest17291-21kworker/u16:0+efi_rts_wq19:10:151
23265992100,209cyclictest17291-21kworker/u16:0+efi_rts_wq19:55:132
23266992080,207cyclictest23032-21kworker/u16:3+efi_rts_wq00:25:143
23266992070,206cyclictest17291-21kworker/u16:0+efi_rts_wq19:45:123
23266992040,203cyclictest17291-21kworker/u16:0+efi_rts_wq21:25:123
23264992030,202cyclictest17291-21kworker/u16:0+efi_rts_wq21:45:111
23265992010,200cyclictest11968-21kworker/u16:1+efi_rts_wq20:25:122
23264992010,200cyclictest17291-21kworker/u16:0+efi_rts_wq21:14:431
23264991990,198cyclictest17291-21kworker/u16:0+efi_rts_wq21:44:491
23265991980,197cyclictest29084-21kworker/u16:2+efi_rts_wq21:05:102
23266991950,194cyclictest32166-21kworker/u16:2+efi_rts_wq23:40:093
23266991930,192cyclictest32166-21kworker/u16:2+efi_rts_wq23:15:143
23264991920,191cyclictest31553-21kworker/u16:0+efi_rts_wq00:31:291
23263991920,191cyclictest29084-21kworker/u16:2+efi_rts_wq21:20:140
23263991910,190cyclictest14837-21kworker/u16:0+efi_rts_wq22:50:140
23263991900,189cyclictest29084-21kworker/u16:2+efi_rts_wq22:15:120
23264991890,188cyclictest29084-21kworker/u16:2+efi_rts_wq22:00:131
23264991890,188cyclictest17369-21kworker/u16:2+efi_rts_wq22:50:151
23265991880,187cyclictest17291-21kworker/u16:0+efi_rts_wq19:35:122
23263991870,186cyclictest16087-21kworker/u16:3+efi_rts_wq23:51:210
23266991860,185cyclictest17291-21kworker/u16:0+efi_rts_wq22:05:153
23265991860,185cyclictest11968-21kworker/u16:1+efi_rts_wq19:20:142
23264991830,181cyclictest20683-21kworker/u16:1+efi_rts_wq00:10:141
23265991820,181cyclictest17291-21kworker/u16:0+efi_rts_wq22:04:532
23263991800,179cyclictest26358-21kworker/u16:1+efi_rts_wq22:45:170
23263991800,179cyclictest17291-21kworker/u16:0+efi_rts_wq19:30:130
23263991760,175cyclictest29084-21kworker/u16:2+efi_rts_wq21:30:130
23264991750,173cyclictest26358-21kworker/u16:1+efi_rts_wq22:30:161
23263991720,171cyclictest11968-21kworker/u16:1+efi_rts_wq20:54:390
23264991670,166cyclictest17369-21kworker/u16:2+efi_rts_wq22:49:591
23266991660,165cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:153
23266991660,165cyclictest4811-21kworker/u16:0+efi_rts_wq23:30:143
23263991610,160cyclictest29084-21kworker/u16:2+efi_rts_wq21:15:140
23263991600,159cyclictest29084-21kworker/u16:2+efi_rts_wq21:29:470
23265991550,154cyclictest29084-21kworker/u16:2+efi_rts_wq21:00:132
23263991520,151cyclictest23032-21kworker/u16:3+efi_rts_wq00:26:270
23265991510,150cyclictest11968-21kworker/u16:1+efi_rts_wq20:04:332
23263991510,148cyclictest17291-21kworker/u16:0+efi_rts_wq21:40:130
23265991480,147cyclictest29084-21kworker/u16:2+efi_rts_wq21:24:452
23265991460,145cyclictest20683-21kworker/u16:1+efi_rts_wq00:16:252
23263991450,144cyclictest17291-21kworker/u16:0+efi_rts_wq21:54:510
23265991440,143cyclictest26358-21kworker/u16:1+efi_rts_wq22:30:152
23263991400,139cyclictest29084-21kworker/u16:2+efi_rts_wq20:59:410
23266991380,137cyclictest6379-21kworker/u16:3+efi_rts_wq22:40:143
23263991380,137cyclictest11968-21kworker/u16:1+efi_rts_wq20:19:340
23265991370,136cyclictest17291-21kworker/u16:0+efi_rts_wq21:45:112
23263991370,136cyclictest11968-21kworker/u16:1+efi_rts_wq20:14:330
23264991360,135cyclictest20683-21kworker/u16:1+efi_rts_wq00:15:131
23263991360,135cyclictest26358-21kworker/u16:1+efi_rts_wq22:34:580
23266991330,132cyclictest17291-21kworker/u16:0+efi_rts_wq21:04:423
23265991330,132cyclictest29084-21kworker/u16:2+efi_rts_wq21:35:162
23264991310,130cyclictest11968-21kworker/u16:1+efi_rts_wq19:59:311
23266991280,127cyclictest17291-21kworker/u16:0+efi_rts_wq19:39:273
23265991280,127cyclictest17291-21kworker/u16:0+efi_rts_wq19:50:142
23266991270,126cyclictest16087-21kworker/u16:3+efi_rts_wq23:55:153
23263991270,126cyclictest29084-21kworker/u16:2+efi_rts_wq21:09:430
23263991190,118cyclictest17291-21kworker/u16:0+efi_rts_wq22:09:540
23264991160,115cyclictest32166-21kworker/u16:2+efi_rts_wq23:15:141
23266991140,113cyclictest20683-21kworker/u16:1+efi_rts_wq00:11:243
23263991140,113cyclictest29084-21kworker/u16:2+efi_rts_wq22:14:550
23266991070,106cyclictest17291-21kworker/u16:0+efi_rts_wq20:00:143
23266991060,105cyclictest17291-21kworker/u16:0+efi_rts_wq21:59:533
23264991030,102cyclictest32166-21kworker/u16:2+efi_rts_wq23:35:081
23264991020,101cyclictest29084-21kworker/u16:2+efi_rts_wq21:05:111
23263991010,100cyclictest17291-21kworker/u16:0+efi_rts_wq19:54:300
2326499990,98cyclictest11968-21kworker/u16:1+efi_rts_wq20:34:371
23265993229,3cyclictest799-21snmpd22:40:192
23264993229,2cyclictest799-21snmpd23:42:591
23263993229,2cyclictest799-21snmpd21:56:140
23266993130,1cyclictest799-21snmpd21:15:243
23266993129,2cyclictest31154-21cat23:10:153
23265993130,1cyclictest799-21snmpd21:15:402
23265993129,2cyclictest799-21snmpd21:41:552
23265993129,2cyclictest799-21snmpd21:14:152
23265993129,1cyclictest799-21snmpd23:51:452
23265993127,4cyclictest799-21snmpd20:47:172
23265993127,4cyclictest799-21snmpd00:27:582
23265993126,5cyclictest799-21snmpd22:35:482
23264993128,2cyclictest799-21snmpd20:42:561
23263993129,2cyclictest799-21snmpd20:22:340
23266993029,1cyclictest808-21lldpd19:56:283
23266993029,1cyclictest799-21snmpd23:02:413
23266993029,1cyclictest799-21snmpd20:30:063
23266993029,1cyclictest799-21snmpd19:33:063
23266993028,2cyclictest799-21snmpd21:32:403
23266993028,2cyclictest799-21snmpd20:20:533
23266993028,2cyclictest799-21snmpd19:14:033
23265993029,1cyclictest799-21snmpd23:55:332
23265993029,1cyclictest799-21snmpd20:19:582
23265993028,2cyclictest799-21snmpd00:08:332
23264993029,1cyclictest799-21snmpd22:20:091
23264993029,1cyclictest799-21snmpd22:18:351
23264993029,1cyclictest799-21snmpd22:10:051
23264993029,1cyclictest799-21snmpd21:56:081
23264993029,1cyclictest799-21snmpd21:53:471
23264993029,1cyclictest799-21snmpd20:25:591
23264993029,1cyclictest799-21snmpd19:52:591
23264993029,1cyclictest799-21snmpd00:21:321
23264993029,1cyclictest2409-21kworker/1:2+events23:26:251
23264993029,1cyclictest15232-21kworker/1:1+events23:13:371
23264993029,1cyclictest15232-21kworker/1:1+events23:01:021
23264993028,2cyclictest799-21snmpd22:35:301
23264993028,2cyclictest799-21snmpd19:20:521
23263993029,1cyclictest799-21snmpd22:03:230
23263993029,1cyclictest799-21snmpd21:12:510
23263993029,1cyclictest799-21snmpd20:04:160
23263993029,1cyclictest799-21snmpd19:37:150
23263993029,1cyclictest799-21snmpd19:26:450
23263993028,2cyclictest799-21snmpd23:06:220
23263993028,2cyclictest799-21snmpd20:07:520
23266992928,1cyclictest799-21snmpd23:36:093
23266992928,1cyclictest799-21snmpd22:34:243
23266992928,1cyclictest799-21snmpd22:12:143
23266992927,2cyclictest799-21snmpd22:51:123
23265992928,1cyclictest799-21snmpd23:33:352
23265992928,1cyclictest799-21snmpd23:33:352
23265992928,1cyclictest799-21snmpd23:23:152
23265992927,2cyclictest799-21snmpd23:28:082
23265992927,2cyclictest799-21snmpd20:50:382
23265992927,2cyclictest799-21snmpd00:21:052
23265992927,2cyclictest799-21snmpd00:13:162
23265992927,2cyclictest30743-21cat19:25:132
23265992926,2cyclictest9363-21cat22:25:152
23265992926,2cyclictest799-21snmpd20:42:242
23264992927,2cyclictest799-21snmpd22:05:291
23264992927,2cyclictest799-21snmpd21:25:351
23263992928,1cyclictest799-21snmpd20:31:050
23266992827,1cyclictest799-21snmpd22:48:273
23266992827,1cyclictest799-21snmpd22:19:393
23266992827,1cyclictest799-21snmpd21:35:523
23265992828,0cyclictest74050irq/138-enp1s023:11:362
23265992827,1cyclictest799-21snmpd23:35:082
23265992827,1cyclictest799-21snmpd21:33:162
23265992827,1cyclictest799-21snmpd20:07:372
23265992827,1cyclictest799-21snmpd19:31:402
23265992827,1cyclictest12881-21cat23:40:132
23265992826,2cyclictest799-21snmpd20:59:272
23265992825,3cyclictest799-21snmpd19:45:332
23264992828,0cyclictest18321-21kworker/1:0+events00:01:261
23264992826,2cyclictest799-21snmpd21:04:121
23263992827,1cyclictest799-21snmpd21:47:370
23263992827,1cyclictest799-21snmpd00:35:130
23263992826,2cyclictest799-21snmpd22:56:370
23266992726,1cyclictest799-21snmpd20:10:593
23265992726,1cyclictest799-21snmpd19:41:432
23265992725,2cyclictest799-21snmpd00:37:432
23265992725,2cyclictest799-21snmpd00:02:302
23264992726,1cyclictest799-21snmpd23:55:061
23264992726,1cyclictest799-21snmpd22:58:281
23263992726,1cyclictest799-21snmpd21:36:070
23266992625,1cyclictest799-21snmpd00:19:303
23265992623,3cyclictest799-21snmpd20:35:502
23264992625,1cyclictest799-21snmpd20:10:171
23266992525,0cyclictest17291-21kworker/u16:0+atlantic21:47:023
23266992525,0cyclictest17291-21kworker/u16:0+atlantic19:44:413
23265992524,1cyclictest799-21snmpd22:50:282
23265992523,2cyclictest799-21snmpd21:52:172
23264992525,0cyclictest2409-21kworker/1:2+events23:20:531
23263992524,1cyclictest799-21snmpd22:26:300
23263992524,1cyclictest799-21snmpd19:20:130
23264992424,0cyclictest9428-21kworker/1:1+events00:07:051
23264992424,0cyclictest7383-21kworker/1:1+events21:20:211
23264992424,0cyclictest20882-21kworker/1:0+events19:17:411
23264992422,2cyclictest799-21snmpd20:57:301
23265992323,0cyclictest799-21snmpd23:48:292
23264992321,2cyclictest799-21snmpd20:15:131
23263992321,2cyclictest799-21snmpd19:58:550
23264992120,1cyclictest20882-21kworker/1:0+events19:48:431
23266992019,1cyclictest799-21snmpd00:31:343
23265991916,3cyclictest799-21snmpd21:28:202
23266991412,2cyclictest799-21snmpd20:25:083
232669987,1cyclictest0-21swapper/320:50:003
232669977,0cyclictest0-21swapper/322:22:263
232669954,1cyclictest30752-21taskset22:00:053
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional