You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-24 - 14:49

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Mon Nov 24, 2025 00:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
235082331304,24sleep00-21swapper/019:07:220
236482318311,5sleep20-21swapper/219:09:092
236242317302,5sleep10-21swapper/119:08:521
236492314306,5sleep30-21swapper/319:09:103
23979993050,303cyclictest436-21kworker/u16:0+efi_rts_wq19:10:161
23979993040,302cyclictest14926-21kworker/u16:1+efi_rts_wq22:55:131
23980993020,301cyclictest2723-21kworker/u16:2+efi_rts_wq19:50:142
23978993010,300cyclictest28994-21kworker/u16:1+efi_rts_wq23:55:130
23978993010,299cyclictest10241-21kworker/u16:2+efi_rts_wq22:35:140
23981992990,296cyclictest10241-21kworker/u16:2+efi_rts_wq22:40:123
23981992960,295cyclictest2723-21kworker/u16:2+efi_rts_wq19:19:013
23981992960,295cyclictest21164-21kworker/u16:1+efi_rts_wq21:50:133
23980992960,295cyclictest21164-21kworker/u16:1+efi_rts_wq21:50:132
23980992960,294cyclictest436-21kworker/u16:0+efi_rts_wq20:30:122
23979992960,295cyclictest436-21kworker/u16:0+efi_rts_wq23:29:461
23979992960,293cyclictest21164-21kworker/u16:1+efi_rts_wq21:05:131
23979992950,294cyclictest436-21kworker/u16:0+efi_rts_wq19:34:041
23981992940,293cyclictest6719-21kworker/u16:2+efi_rts_wq23:50:143
23979992940,293cyclictest2723-21kworker/u16:2+efi_rts_wq19:20:141
23978992940,293cyclictest28994-21kworker/u16:1+efi_rts_wq23:10:150
23979992930,292cyclictest436-21kworker/u16:0+efi_rts_wq20:50:141
23978992920,289cyclictest13027-21kworker/u16:0+efi_rts_wq23:45:110
23981992910,290cyclictest21164-21kworker/u16:1+efi_rts_wq21:34:253
23980992910,290cyclictest6719-21kworker/u16:2+efi_rts_wq23:44:492
23980992910,290cyclictest10241-21kworker/u16:2+efi_rts_wq23:05:122
23981992900,289cyclictest6719-21kworker/u16:2+efi_rts_wq00:30:133
23981992900,287cyclictest2723-21kworker/u16:2+efi_rts_wq19:35:123
23980992900,289cyclictest21164-21kworker/u16:1+efi_rts_wq21:15:122
23981992890,288cyclictest436-21kworker/u16:0+efi_rts_wq20:40:133
23981992890,288cyclictest21164-21kworker/u16:1+efi_rts_wq21:29:243
23979992880,286cyclictest28994-21kworker/u16:1+efi_rts_wq23:15:111
23980992870,286cyclictest28994-21kworker/u16:1+efi_rts_wq23:35:122
23979992870,285cyclictest28994-21kworker/u16:1+efi_rts_wq23:10:151
23980992860,285cyclictest436-21kworker/u16:0+efi_rts_wq21:20:142
23980992850,284cyclictest436-21kworker/u16:0+efi_rts_wq20:35:142
23981992840,282cyclictest10241-21kworker/u16:2+efi_rts_wq22:54:403
23980992830,282cyclictest2723-21kworker/u16:2+efi_rts_wq19:20:142
23978992830,282cyclictest2723-21kworker/u16:2+efi_rts_wq19:54:090
23981992820,281cyclictest22246-21kworker/u16:3+efi_rts_wq00:11:293
23981992820,281cyclictest22246-21kworker/u16:3+efi_rts_wq00:11:283
23979992810,279cyclictest26982-21kworker/u16:3+efi_rts_wq21:55:131
23980992800,279cyclictest436-21kworker/u16:0+efi_rts_wq20:50:142
23980992800,279cyclictest26982-21kworker/u16:3+efi_rts_wq21:55:132
23980992800,279cyclictest14965-21kworker/u16:3+efi_rts_wq20:14:122
23980992790,278cyclictest436-21kworker/u16:0+efi_rts_wq21:25:142
23980992790,278cyclictest10241-21kworker/u16:2+efi_rts_wq22:35:142
23981992770,276cyclictest6719-21kworker/u16:2+efi_rts_wq00:20:123
23980992770,276cyclictest6719-21kworker/u16:2+efi_rts_wq00:36:342
23981992760,275cyclictest21164-21kworker/u16:1+efi_rts_wq21:44:263
23979992750,274cyclictest2723-21kworker/u16:2+efi_rts_wq19:50:141
23979992750,274cyclictest26982-21kworker/u16:3+efi_rts_wq22:19:331
23979992720,271cyclictest436-21kworker/u16:0+efi_rts_wq20:55:121
23980992710,270cyclictest26982-21kworker/u16:3+efi_rts_wq22:10:152
23978992710,270cyclictest436-21kworker/u16:0+efi_rts_wq23:00:130
23979992700,269cyclictest436-21kworker/u16:0+efi_rts_wq19:15:111
23979992680,267cyclictest13027-21kworker/u16:0+efi_rts_wq23:45:121
23980992670,266cyclictest2723-21kworker/u16:2+efi_rts_wq19:45:142
23981992660,264cyclictest10241-21kworker/u16:2+efi_rts_wq23:05:123
23979992660,265cyclictest436-21kworker/u16:0+efi_rts_wq20:25:131
23979992660,264cyclictest436-21kworker/u16:0+efi_rts_wq22:50:141
23978992660,264cyclictest436-21kworker/u16:0+efi_rts_wq20:30:130
23980992620,261cyclictest436-21kworker/u16:0+efi_rts_wq19:14:002
23979992620,261cyclictest436-21kworker/u16:0+efi_rts_wq20:40:141
23978992610,260cyclictest21164-21kworker/u16:1+efi_rts_wq21:45:120
23978992600,259cyclictest6719-21kworker/u16:2+efi_rts_wq00:05:150
23981992590,257cyclictest22246-21kworker/u16:3+efi_rts_wq00:15:173
23978992590,258cyclictest436-21kworker/u16:0+efi_rts_wq19:15:010
23979992580,257cyclictest436-21kworker/u16:0+efi_rts_wq22:25:151
23979992570,256cyclictest2723-21kworker/u16:2+efi_rts_wq20:00:141
23981992560,255cyclictest21164-21kworker/u16:1+efi_rts_wq21:15:123
23981992530,252cyclictest436-21kworker/u16:0+efi_rts_wq19:55:143
23980992530,252cyclictest21164-21kworker/u16:1+efi_rts_wq21:30:132
23981992520,251cyclictest28994-21kworker/u16:1+efi_rts_wq00:00:133
23981992520,251cyclictest21164-21kworker/u16:1+efi_rts_wq21:45:123
23980992520,251cyclictest436-21kworker/u16:0+efi_rts_wq20:09:102
23980992510,250cyclictest436-21kworker/u16:0+efi_rts_wq23:24:462
23980992510,250cyclictest436-21kworker/u16:0+efi_rts_wq22:05:112
23980992510,250cyclictest28994-21kworker/u16:1+efi_rts_wq23:55:132
23981992500,249cyclictest436-21kworker/u16:0+efi_rts_wq20:20:143
23980992500,249cyclictest22246-21kworker/u16:3+efi_rts_wq00:10:182
23980992500,249cyclictest22246-21kworker/u16:3+efi_rts_wq00:10:172
23980992500,248cyclictest436-21kworker/u16:0+efi_rts_wq22:59:412
23981992490,248cyclictest2723-21kworker/u16:2+efi_rts_wq19:40:143
23978992490,248cyclictest10241-21kworker/u16:2+efi_rts_wq22:45:110
23978992480,247cyclictest21164-21kworker/u16:1+efi_rts_wq20:45:130
23981992450,244cyclictest1298-21kworker/u16:1+efi_rts_wq00:25:143
23981992390,238cyclictest14926-21kworker/u16:1+efi_rts_wq22:39:373
23981992370,236cyclictest14926-21kworker/u16:1+efi_rts_wq22:55:133
23979992370,236cyclictest26982-21kworker/u16:3+efi_rts_wq22:09:311
23980992350,233cyclictest26982-21kworker/u16:3+efi_rts_wq22:20:142
23978992350,234cyclictest436-21kworker/u16:0+efi_rts_wq21:10:140
23979992340,231cyclictest21164-21kworker/u16:1+efi_rts_wq20:45:131
23978992340,233cyclictest6719-21kworker/u16:2+efi_rts_wq00:16:290
23980992330,232cyclictest6719-21kworker/u16:2+efi_rts_wq23:50:142
23979992330,232cyclictest2723-21kworker/u16:2+efi_rts_wq19:39:041
23981992320,231cyclictest436-21kworker/u16:0+efi_rts_wq21:35:133
23978992320,230cyclictest28994-21kworker/u16:1+efi_rts_wq23:40:130
23981992260,225cyclictest436-21kworker/u16:0+efi_rts_wq20:10:143
23980992260,225cyclictest22246-21kworker/u16:3+efi_rts_wq00:01:272
23981992250,224cyclictest436-21kworker/u16:0+efi_rts_wq19:10:153
23979992250,224cyclictest28994-21kworker/u16:1+efi_rts_wq23:30:141
23980992230,222cyclictest26982-21kworker/u16:3+efi_rts_wq22:00:152
23979992230,222cyclictest26982-21kworker/u16:3+efi_rts_wq22:30:131
23980992220,221cyclictest436-21kworker/u16:0+efi_rts_wq21:00:162
23979992210,220cyclictest2723-21kworker/u16:2+efi_rts_wq19:40:151
23981992160,215cyclictest6719-21kworker/u16:2+efi_rts_wq23:56:263
23981992140,213cyclictest10241-21kworker/u16:2+efi_rts_wq22:45:113
23980992140,213cyclictest436-21kworker/u16:0+efi_rts_wq22:15:132
23979992130,212cyclictest2723-21kworker/u16:2+efi_rts_wq20:05:131
23979992120,211cyclictest436-21kworker/u16:0+efi_rts_wq22:04:311
23979992120,211cyclictest436-21kworker/u16:0+efi_rts_wq20:35:141
23978992110,210cyclictest436-21kworker/u16:0+efi_rts_wq20:39:160
23978992110,209cyclictest436-21kworker/u16:0+efi_rts_wq21:40:130
23980992080,207cyclictest28994-21kworker/u16:1+efi_rts_wq23:30:142
23978992040,203cyclictest436-21kworker/u16:0+efi_rts_wq23:19:450
23978991980,197cyclictest2723-21kworker/u16:2+efi_rts_wq20:05:120
23979991950,194cyclictest28994-21kworker/u16:1+efi_rts_wq23:39:481
23980991930,192cyclictest2723-21kworker/u16:2+efi_rts_wq19:44:062
23980991900,189cyclictest436-21kworker/u16:0+efi_rts_wq20:59:192
23980991900,189cyclictest436-21kworker/u16:0+efi_rts_wq20:15:142
23978991870,186cyclictest28994-21kworker/u16:1+efi_rts_wq23:34:460
23979991860,185cyclictest22246-21kworker/u16:3+efi_rts_wq00:10:181
23979991860,185cyclictest22246-21kworker/u16:3+efi_rts_wq00:10:171
23978991860,185cyclictest436-21kworker/u16:0+efi_rts_wq23:20:160
23979991850,183cyclictest436-21kworker/u16:0+efi_rts_wq22:44:391
23980991800,178cyclictest10241-21kworker/u16:2+efi_rts_wq22:45:112
23978991780,176cyclictest28994-21kworker/u16:1+efi_rts_wq23:25:130
23978991760,175cyclictest436-21kworker/u16:0+efi_rts_wq22:25:150
23980991750,174cyclictest436-21kworker/u16:0+efi_rts_wq21:39:252
23980991750,173cyclictest436-21kworker/u16:0+efi_rts_wq23:00:132
23978991740,173cyclictest26982-21kworker/u16:3+efi_rts_wq22:30:130
23981991730,172cyclictest436-21kworker/u16:0+efi_rts_wq22:05:113
23979991680,167cyclictest436-21kworker/u16:0+efi_rts_wq21:54:291
23979991680,167cyclictest436-21kworker/u16:0+efi_rts_wq21:10:131
23979991680,167cyclictest2723-21kworker/u16:2+efi_rts_wq19:25:141
23978991680,167cyclictest28994-21kworker/u16:1+efi_rts_wq23:35:110
23979991620,161cyclictest6719-21kworker/u16:2+efi_rts_wq00:20:121
23979991620,161cyclictest21164-21kworker/u16:1+efi_rts_wq21:24:241
23978991600,159cyclictest10241-21kworker/u16:2+efi_rts_wq22:40:130
23981991570,156cyclictest10241-21kworker/u16:2+efi_rts_wq22:34:363
23979991520,151cyclictest436-21kworker/u16:0+efi_rts_wq19:59:091
23981991510,150cyclictest436-21kworker/u16:0+efi_rts_wq22:15:133
23978991490,148cyclictest1298-21kworker/u16:1+efi_rts_wq00:35:120
23980991480,147cyclictest2723-21kworker/u16:2+efi_rts_wq20:04:112
23979991460,145cyclictest436-21kworker/u16:0+efi_rts_wq21:00:161
23980991450,144cyclictest436-21kworker/u16:0+efi_rts_wq19:15:112
23981991410,140cyclictest436-21kworker/u16:0+efi_rts_wq20:15:143
23978991400,139cyclictest436-21kworker/u16:0+efi_rts_wq20:15:140
23981991350,134cyclictest26982-21kworker/u16:3+efi_rts_wq22:10:143
23980991350,134cyclictest28994-21kworker/u16:1+efi_rts_wq23:25:132
23981991340,133cyclictest1298-21kworker/u16:1+efi_rts_wq00:35:133
23978991300,128cyclictest2723-21kworker/u16:2+efi_rts_wq19:40:150
23981991290,128cyclictest2723-21kworker/u16:2+efi_rts_wq19:45:143
23980991250,125cyclictest1298-21kworker/u16:1+efi_rts_wq00:26:322
23980991230,122cyclictest28994-21kworker/u16:1+efi_rts_wq23:15:112
23978991220,122cyclictest436-21kworker/u16:0+efi_rts_wq21:59:290
23978991200,120cyclictest22246-21kworker/u16:3+efi_rts_wq00:21:300
23979991190,118cyclictest26982-21kworker/u16:3+efi_rts_wq22:24:351
23981991140,113cyclictest436-21kworker/u16:0+efi_rts_wq23:20:163
23981991120,111cyclictest26982-21kworker/u16:3+efi_rts_wq22:29:353
23979991060,105cyclictest436-21kworker/u16:0+efi_rts_wq21:49:271
23981991020,101cyclictest21164-21kworker/u16:1+efi_rts_wq20:49:173
23981993228,2cyclictest795-21snmpd23:19:043
23980993230,2cyclictest795-21snmpd00:05:112
23978993229,2cyclictest795-21snmpd21:00:010
23981993130,1cyclictest795-21snmpd20:02:313
23981993129,2cyclictest9672-21cat19:50:153
23981993129,2cyclictest795-21snmpd21:21:493
23981993129,2cyclictest795-21snmpd20:36:383
23981993128,3cyclictest795-21snmpd23:00:093
23981993128,2cyclictest795-21snmpd22:21:113
23981993128,2cyclictest795-21snmpd00:05:053
23980993129,2cyclictest795-21snmpd22:53:102
23980993129,2cyclictest795-21snmpd21:07:092
23980993129,2cyclictest795-21snmpd20:41:552
23980993129,2cyclictest795-21snmpd00:18:212
23980993129,2cyclictest16674-21cat23:45:132
23979993130,1cyclictest795-21snmpd21:27:581
23979993129,2cyclictest795-21snmpd23:07:311
23979993129,2cyclictest795-21snmpd00:06:471
23978993129,2cyclictest795-21snmpd22:17:440
23981993029,1cyclictest9867-21cat23:30:163
23981993029,1cyclictest795-21snmpd23:10:463
23981993029,1cyclictest795-21snmpd20:32:503
23981993029,1cyclictest795-21snmpd20:08:013
23981993029,1cyclictest795-21snmpd19:33:003
23980993029,1cyclictest795-21snmpd23:11:562
23980993029,1cyclictest795-21snmpd22:43:462
23980993029,1cyclictest795-21snmpd21:44:472
23980993029,1cyclictest795-21snmpd21:13:312
23980993029,1cyclictest795-21snmpd00:20:202
23980993028,2cyclictest10242-21kworker/2:2+events22:32:412
23979993029,1cyclictest795-21snmpd23:59:321
23979993029,1cyclictest795-21snmpd23:50:271
23979993029,1cyclictest795-21snmpd20:16:441
23979993029,1cyclictest795-21snmpd19:46:071
23979993028,2cyclictest795-21snmpd23:01:461
23979993028,2cyclictest795-21snmpd22:39:001
23979993027,2cyclictest795-21snmpd21:17:161
23979993027,2cyclictest795-21snmpd20:31:331
23978993030,0cyclictest795-21snmpd22:05:200
23978993029,1cyclictest795-21snmpd21:35:280
23978993029,1cyclictest795-21snmpd19:32:430
23978993028,2cyclictest795-21snmpd22:54:100
23981992928,1cyclictest795-21snmpd23:25:553
23981992928,1cyclictest795-21snmpd21:10:543
23981992928,1cyclictest795-21snmpd20:59:003
23981992928,1cyclictest795-21snmpd19:28:393
23981992928,1cyclictest795-21snmpd19:22:063
23981992927,2cyclictest795-21snmpd21:58:473
23981992927,2cyclictest795-21snmpd21:04:183
23980992928,1cyclictest795-21snmpd19:38:152
23979992928,1cyclictest795-21snmpd00:28:101
23979992928,1cyclictest795-21snmpd00:16:511
23979992927,2cyclictest795-21snmpd21:44:561
23979992927,2cyclictest795-21snmpd00:03:481
23978992929,0cyclictest795-21snmpd19:49:520
23978992928,1cyclictest795-21snmpd22:10:300
23978992928,1cyclictest795-21snmpd21:31:440
23978992928,1cyclictest795-21snmpd20:14:060
23980992827,1cyclictest795-21snmpd20:21:392
23980992827,1cyclictest795-21snmpd19:59:402
23979992827,1cyclictest795-21snmpd22:48:391
23979992826,2cyclictest795-21snmpd23:20:471
23978992828,0cyclictest795-21snmpd22:23:120
23978992827,1cyclictest795-21snmpd21:50:210
23978992827,1cyclictest795-21snmpd19:27:060
23978992826,2cyclictest795-21snmpd20:55:360
23978992826,2cyclictest795-21snmpd19:56:580
23981992726,1cyclictest795-21snmpd21:05:213
23980992726,1cyclictest795-21snmpd19:29:362
23980992726,1cyclictest795-21snmpd00:31:092
23979992724,2cyclictest795-21snmpd21:37:161
23978992726,1cyclictest795-21snmpd21:25:280
23978992726,1cyclictest795-21snmpd20:23:150
23978992726,1cyclictest795-21snmpd00:00:530
23978992725,2cyclictest795-21snmpd21:21:350
23981992625,1cyclictest795-21snmpd20:27:593
23980992624,2cyclictest795-21snmpd20:27:472
23979992624,2cyclictest795-21snmpd23:40:021
23979992624,2cyclictest795-21snmpd22:11:121
23979992624,2cyclictest795-21snmpd21:33:591
23978992626,0cyclictest74150irq/134-enp1s023:07:160
23978992626,0cyclictest74150irq/134-enp1s022:55:160
23981992524,1cyclictest795-21snmpd23:40:533
23981992523,2cyclictest795-21snmpd23:37:493
23981992522,2cyclictest795-21snmpd22:00:113
23980992524,1cyclictest14229-21kworker/2:1+events21:47:462
23979992524,1cyclictest795-21snmpd00:30:511
23978992525,0cyclictest74150irq/134-enp1s023:50:300
23981992423,1cyclictest795-21snmpd23:45:353
23980992423,1cyclictest795-21snmpd22:29:242
23980992423,1cyclictest795-21snmpd20:45:152
23980992423,1cyclictest795-21snmpd19:31:552
23978992423,1cyclictest795-21snmpd00:34:450
23978992322,1cyclictest795-21snmpd19:24:130
23978992120,1cyclictest795-21snmpd22:01:570
23978992019,1cyclictest795-21snmpd21:19:430
23978992019,1cyclictest795-21snmpd20:29:170
23978992018,2cyclictest795-21snmpd19:39:210
23979991817,1cyclictest795-21snmpd20:15:001
23978991614,2cyclictest795-21snmpd20:03:440
23978991211,1cyclictest795-21snmpd20:50:130
23979991110,1cyclictest795-21snmpd00:37:431
2397899109,1cyclictest795-21snmpd21:08:570
2397899109,1cyclictest795-21snmpd00:25:420
239789977,0cyclictest30730-21cat20:40:160
239789975,2cyclictest795-21snmpd19:10:300
239819965,1cyclictest3317-21taskset20:50:583
239799965,1cyclictest22777-21cat20:20:231
239789965,1cyclictest795-21snmpd00:10:080
239789965,1cyclictest795-21snmpd00:10:080
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional