You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-09 - 03:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Tue Dec 09, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
55452324317,5sleep30-21swapper/319:06:383
57072318304,5sleep20-21swapper/219:08:022
57382316301,5sleep10-21swapper/119:08:251
39672316308,5sleep00-21swapper/019:05:020
6128993000,299cyclictest20243-21kworker/u16:1+efi_rts_wq22:00:123
6126993000,299cyclictest20243-21kworker/u16:1+efi_rts_wq21:55:131
6128992990,298cyclictest25360-21kworker/u16:2+efi_rts_wq23:35:133
6128992970,296cyclictest22358-21kworker/u16:3+efi_rts_wq19:19:553
6127992960,294cyclictest25360-21kworker/u16:2+efi_rts_wq22:45:142
6127992950,293cyclictest20243-21kworker/u16:1+efi_rts_wq19:40:142
6126992950,294cyclictest20243-21kworker/u16:1+efi_rts_wq22:20:131
6127992900,289cyclictest22358-21kworker/u16:3+efi_rts_wq20:55:162
6126992900,289cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:131
6126992900,289cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:131
6128992890,288cyclictest22358-21kworker/u16:3+efi_rts_wq20:40:133
6128992860,285cyclictest25360-21kworker/u16:2+efi_rts_wq00:10:453
6125992860,285cyclictest22358-21kworker/u16:3+efi_rts_wq19:30:150
6126992840,283cyclictest22358-21kworker/u16:3+efi_rts_wq22:40:131
6126992840,283cyclictest22358-21kworker/u16:3+efi_rts_wq20:20:131
6125992840,283cyclictest25360-21kworker/u16:2+efi_rts_wq00:25:130
6128992830,282cyclictest22358-21kworker/u16:3+efi_rts_wq19:20:123
6127992830,282cyclictest29366-21kworker/u16:0+efi_rts_wq23:05:152
6125992820,281cyclictest25360-21kworker/u16:2+efi_rts_wq00:35:140
6128992800,279cyclictest20243-21kworker/u16:1+efi_rts_wq22:20:273
6127992800,279cyclictest22358-21kworker/u16:3+efi_rts_wq19:55:142
6127992800,279cyclictest22358-21kworker/u16:3+efi_rts_wq19:45:132
6128992790,278cyclictest20243-21kworker/u16:1+efi_rts_wq21:40:133
6127992790,277cyclictest29366-21kworker/u16:0+efi_rts_wq22:55:322
6126992790,278cyclictest20243-21kworker/u16:1+efi_rts_wq21:35:151
6126992770,276cyclictest22358-21kworker/u16:3+efi_rts_wq20:40:131
6125992770,276cyclictest22358-21kworker/u16:3+efi_rts_wq20:15:130
6128992750,274cyclictest20243-21kworker/u16:1+efi_rts_wq21:10:163
6128992740,273cyclictest20243-21kworker/u16:1+efi_rts_wq20:50:143
6126992740,273cyclictest22358-21kworker/u16:3+efi_rts_wq19:35:121
6126992740,272cyclictest7146-21kworker/u16:1+efi_rts_wq23:00:121
6125992730,272cyclictest22358-21kworker/u16:3+efi_rts_wq21:20:140
6125992730,272cyclictest22358-21kworker/u16:3+efi_rts_wq19:29:550
6127992720,271cyclictest20243-21kworker/u16:1+efi_rts_wq21:15:142
6128992700,269cyclictest20243-21kworker/u16:1+efi_rts_wq20:45:143
6128992700,268cyclictest20243-21kworker/u16:1+efi_rts_wq22:30:153
6125992700,269cyclictest536-21kworker/u16:3+efi_rts_wq00:30:150
6128992690,268cyclictest25360-21kworker/u16:2+efi_rts_wq00:15:153
6125992690,268cyclictest20243-21kworker/u16:1+efi_rts_wq21:30:130
6127992680,267cyclictest20243-21kworker/u16:1+efi_rts_wq19:34:562
6128992640,263cyclictest20243-21kworker/u16:1+efi_rts_wq22:25:263
6126992640,263cyclictest25360-21kworker/u16:2+efi_rts_wq00:25:141
6126992640,263cyclictest22358-21kworker/u16:3+efi_rts_wq19:15:011
6126992630,262cyclictest20243-21kworker/u16:1+efi_rts_wq20:45:151
6125992620,261cyclictest25360-21kworker/u16:2+efi_rts_wq22:50:150
6125992610,260cyclictest20243-21kworker/u16:1+efi_rts_wq22:15:140
6128992590,258cyclictest20243-21kworker/u16:1+efi_rts_wq20:05:153
6128992570,256cyclictest22358-21kworker/u16:3+efi_rts_wq20:30:133
6128992560,255cyclictest25360-21kworker/u16:2+efi_rts_wq22:45:293
6125992560,252cyclictest22358-21kworker/u16:3+efi_rts_wq22:35:150
6125992530,252cyclictest25360-21kworker/u16:2+efi_rts_wq00:10:150
6128992520,251cyclictest22358-21kworker/u16:3+efi_rts_wq21:45:143
6126992520,250cyclictest20243-21kworker/u16:1+efi_rts_wq22:30:141
6128992500,249cyclictest22358-21kworker/u16:3+efi_rts_wq20:25:143
6126992500,249cyclictest29366-21kworker/u16:0+efi_rts_wq23:25:151
6126992490,248cyclictest29366-21kworker/u16:0+efi_rts_wq22:55:161
6125992460,245cyclictest20243-21kworker/u16:1+efi_rts_wq21:00:140
6128992450,244cyclictest29366-21kworker/u16:0+efi_rts_wq23:20:133
6126992450,244cyclictest29366-21kworker/u16:0+efi_rts_wq23:10:331
6126992450,244cyclictest25360-21kworker/u16:2+efi_rts_wq23:40:141
6128992430,242cyclictest20243-21kworker/u16:1+efi_rts_wq21:05:143
6126992420,241cyclictest29366-21kworker/u16:0+efi_rts_wq23:50:151
6128992410,240cyclictest25360-21kworker/u16:2+efi_rts_wq22:55:163
6127992410,240cyclictest29366-21kworker/u16:0+efi_rts_wq23:50:412
6126992380,237cyclictest25360-21kworker/u16:2+efi_rts_wq23:20:351
6128992370,236cyclictest20243-21kworker/u16:1+efi_rts_wq21:15:133
6127992370,235cyclictest29366-21kworker/u16:0+efi_rts_wq23:30:132
6126992360,235cyclictest22358-21kworker/u16:3+efi_rts_wq20:15:121
6127992350,234cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:132
6127992350,234cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:122
6128992330,232cyclictest22358-21kworker/u16:3+efi_rts_wq20:10:143
6127992330,232cyclictest20243-21kworker/u16:1+efi_rts_wq22:00:122
6125992320,231cyclictest20243-21kworker/u16:1+efi_rts_wq21:40:130
6127992310,230cyclictest22358-21kworker/u16:3+efi_rts_wq22:25:132
6126992310,230cyclictest536-21kworker/u16:3+efi_rts_wq23:55:421
6125992300,229cyclictest22358-21kworker/u16:3+efi_rts_wq21:25:140
6127992290,228cyclictest25360-21kworker/u16:2+efi_rts_wq00:15:152
6127992290,228cyclictest22358-21kworker/u16:3+efi_rts_wq20:30:132
6127992270,226cyclictest22358-21kworker/u16:3+efi_rts_wq21:30:172
6125992260,225cyclictest22358-21kworker/u16:3+efi_rts_wq19:54:590
6128992250,224cyclictest20243-21kworker/u16:1+efi_rts_wq20:55:103
6128992240,223cyclictest25360-21kworker/u16:2+efi_rts_wq00:05:143
6128992230,222cyclictest25360-21kworker/u16:2+efi_rts_wq23:45:133
6126992220,221cyclictest25360-21kworker/u16:2+efi_rts_wq00:05:131
6127992210,220cyclictest22358-21kworker/u16:3+efi_rts_wq21:10:132
6127992200,219cyclictest536-21kworker/u16:3+efi_rts_wq00:20:132
6127992180,217cyclictest25360-21kworker/u16:2+efi_rts_wq23:35:392
6126992170,216cyclictest22358-21kworker/u16:3+efi_rts_wq22:10:141
6126992170,216cyclictest22358-21kworker/u16:3+efi_rts_wq20:35:131
6125992170,216cyclictest20243-21kworker/u16:1+efi_rts_wq19:49:580
6125992160,215cyclictest29366-21kworker/u16:0+efi_rts_wq22:55:160
6125992160,215cyclictest20243-21kworker/u16:1+efi_rts_wq20:05:140
6125992160,215cyclictest20243-21kworker/u16:1+efi_rts_wq19:15:150
6125992150,214cyclictest22358-21kworker/u16:3+efi_rts_wq20:00:150
6125992150,214cyclictest20243-21kworker/u16:1+efi_rts_wq20:40:080
6126992100,209cyclictest29366-21kworker/u16:0+efi_rts_wq22:50:301
6126992090,208cyclictest25360-21kworker/u16:2+efi_rts_wq00:00:141
6127992080,207cyclictest22358-21kworker/u16:3+efi_rts_wq20:10:142
6126992080,207cyclictest29366-21kworker/u16:0+efi_rts_wq23:45:411
6126992080,207cyclictest22358-21kworker/u16:3+efi_rts_wq20:25:041
6126992080,207cyclictest22358-21kworker/u16:3+efi_rts_wq19:14:551
6127992060,205cyclictest22358-21kworker/u16:3+efi_rts_wq22:10:252
6128992040,201cyclictest22358-21kworker/u16:3+efi_rts_wq19:25:133
6128992020,201cyclictest29366-21kworker/u16:0+efi_rts_wq23:30:373
6126992020,201cyclictest20243-21kworker/u16:1+efi_rts_wq20:30:061
6125992010,200cyclictest22358-21kworker/u16:3+efi_rts_wq21:55:220
6125992000,199cyclictest22358-21kworker/u16:3+efi_rts_wq21:15:140
6128991940,193cyclictest29366-21kworker/u16:0+efi_rts_wq23:25:153
6128991940,193cyclictest22358-21kworker/u16:3+efi_rts_wq19:10:153
6127991940,193cyclictest22358-21kworker/u16:3+efi_rts_wq19:50:132
6128991880,185cyclictest20243-21kworker/u16:1+efi_rts_wq21:35:173
6127991880,187cyclictest25360-21kworker/u16:2+efi_rts_wq22:50:152
6128991850,182cyclictest29366-21kworker/u16:0+efi_rts_wq23:10:133
6126991840,183cyclictest22358-21kworker/u16:3+efi_rts_wq21:05:121
6125991840,183cyclictest22358-21kworker/u16:3+efi_rts_wq19:44:580
6128991810,180cyclictest22358-21kworker/u16:3+efi_rts_wq21:25:133
6126991790,178cyclictest22358-21kworker/u16:3+efi_rts_wq22:15:261
6127991770,176cyclictest22358-21kworker/u16:3+efi_rts_wq20:50:102
6127991760,175cyclictest7146-21kworker/u16:1+efi_rts_wq23:00:112
6128991750,174cyclictest20243-21kworker/u16:1+efi_rts_wq19:39:573
6128991730,170cyclictest536-21kworker/u16:3+efi_rts_wq23:55:143
6126991710,170cyclictest22358-21kworker/u16:3+efi_rts_wq21:25:141
6126991700,169cyclictest20243-21kworker/u16:1+efi_rts_wq20:50:141
6126991690,168cyclictest22358-21kworker/u16:3+efi_rts_wq21:50:121
6126991690,167cyclictest25360-21kworker/u16:2+efi_rts_wq23:35:131
6125991650,164cyclictest25360-21kworker/u16:2+efi_rts_wq00:05:440
6126991640,163cyclictest25360-21kworker/u16:2+efi_rts_wq00:35:121
6125991620,161cyclictest22358-21kworker/u16:3+efi_rts_wq21:50:200
6126991580,157cyclictest25360-21kworker/u16:2+efi_rts_wq00:15:451
6127991570,156cyclictest536-21kworker/u16:3+efi_rts_wq00:30:142
6126991570,156cyclictest22358-21kworker/u16:3+efi_rts_wq22:35:281
6128991550,154cyclictest25360-21kworker/u16:2+efi_rts_wq00:35:133
6127991540,154cyclictest25360-21kworker/u16:2+efi_rts_wq23:15:352
6125991540,153cyclictest25360-21kworker/u16:2+efi_rts_wq23:05:330
6126991530,152cyclictest25360-21kworker/u16:2+efi_rts_wq23:15:151
6128991510,150cyclictest25360-21kworker/u16:2+efi_rts_wq00:25:483
6128991460,145cyclictest22358-21kworker/u16:3+efi_rts_wq21:20:153
6128991460,145cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:233
6128991460,145cyclictest20243-21kworker/u16:1+efi_rts_wq22:05:223
6126991440,143cyclictest22358-21kworker/u16:3+efi_rts_wq19:45:121
6128991410,139cyclictest25360-21kworker/u16:2+efi_rts_wq00:00:433
6126991400,139cyclictest22358-21kworker/u16:3+efi_rts_wq20:55:171
6125991370,136cyclictest20243-21kworker/u16:1+efi_rts_wq20:35:070
6128991360,135cyclictest29366-21kworker/u16:0+efi_rts_wq23:40:393
6126991360,135cyclictest536-21kworker/u16:3+efi_rts_wq00:20:131
6126991340,133cyclictest22358-21kworker/u16:3+efi_rts_wq19:20:131
6127991270,126cyclictest22358-21kworker/u16:3+efi_rts_wq22:30:272
6128991250,124cyclictest29366-21kworker/u16:0+efi_rts_wq22:40:293
6128991230,122cyclictest20243-21kworker/u16:1+efi_rts_wq21:55:133
6125991220,121cyclictest29366-21kworker/u16:0+efi_rts_wq23:50:150
6127991190,118cyclictest22358-21kworker/u16:3+efi_rts_wq20:00:152
6125991160,115cyclictest20243-21kworker/u16:1+efi_rts_wq20:10:140
6128991150,114cyclictest22358-21kworker/u16:3+efi_rts_wq20:35:133
6126991120,111cyclictest22358-21kworker/u16:3+efi_rts_wq20:10:141
6127991090,108cyclictest22358-21kworker/u16:3+efi_rts_wq19:10:152
6128991060,105cyclictest20243-21kworker/u16:1+efi_rts_wq22:15:133
6127991050,104cyclictest22358-21kworker/u16:3+efi_rts_wq21:40:192
6126993330,2cyclictest795-21snmpd21:18:201
6127993230,2cyclictest795-21snmpd19:39:122
6126993230,2cyclictest795-21snmpd23:33:241
6126993230,2cyclictest795-21snmpd21:03:441
6126993229,2cyclictest795-21snmpd19:51:331
6126993229,2cyclictest795-21snmpd19:26:381
6125993229,2cyclictest795-21snmpd19:59:530
6128993130,1cyclictest795-21snmpd22:51:233
6128993130,1cyclictest27553-21kworker/3:4+events22:39:503
6128993128,2cyclictest8754-21cat23:00:153
6128993128,2cyclictest795-21snmpd22:12:013
6127993130,1cyclictest795-21snmpd20:44:342
6127993130,1cyclictest795-21snmpd00:09:502
6127993129,2cyclictest795-21snmpd20:23:222
6126993128,2cyclictest795-21snmpd20:02:511
6125993129,2cyclictest795-21snmpd22:41:160
6128993029,1cyclictest795-21snmpd23:51:483
6128993029,1cyclictest795-21snmpd20:15:363
6128993029,1cyclictest795-21snmpd19:56:303
6128993027,2cyclictest795-21snmpd21:33:213
6127993029,1cyclictest795-21snmpd23:55:192
6127993029,1cyclictest795-21snmpd21:00:162
6127993029,1cyclictest795-21snmpd19:15:082
6127993029,1cyclictest795-21snmpd00:38:112
6127993028,2cyclictest795-21snmpd22:17:272
6126993028,2cyclictest795-21snmpd21:10:161
6125993029,1cyclictest795-21snmpd23:46:360
6125993029,1cyclictest795-21snmpd23:43:580
6125993029,1cyclictest795-21snmpd22:02:520
6125993029,1cyclictest795-21snmpd21:36:540
6125993029,1cyclictest795-21snmpd20:56:310
6125993029,1cyclictest795-21snmpd20:52:360
6125993029,1cyclictest795-21snmpd20:26:130
6125993029,1cyclictest795-21snmpd00:18:190
6125993028,2cyclictest6772-21cat19:10:180
6128992929,0cyclictest7173-21kworker/3:1+events00:34:593
6128992929,0cyclictest15097-21kworker/3:2+events23:18:033
6128992928,1cyclictest795-21snmpd21:52:383
6128992928,1cyclictest795-21snmpd19:40:383
6128992928,1cyclictest795-21snmpd00:24:473
6128992927,2cyclictest795-21snmpd23:06:363
6128992927,2cyclictest795-21snmpd21:02:173
6128992927,2cyclictest795-21snmpd19:33:203
6127992929,0cyclictest795-21snmpd23:42:482
6127992928,1cyclictest795-21snmpd21:23:352
6127992928,1cyclictest795-21snmpd20:19:052
6127992928,1cyclictest795-21snmpd19:26:322
6127992927,2cyclictest795-21snmpd20:46:512
6127992926,2cyclictest795-21snmpd20:37:092
6126992929,0cyclictest795-21snmpd23:05:031
6126992928,1cyclictest795-21snmpd21:44:291
6126992928,1cyclictest795-21snmpd19:55:291
6125992928,1cyclictest795-21snmpd23:36:090
6125992928,1cyclictest795-21snmpd23:10:420
6125992928,1cyclictest795-21snmpd23:04:440
6125992928,1cyclictest795-21snmpd20:49:550
6125992927,2cyclictest795-21snmpd19:36:500
6128992826,2cyclictest795-21snmpd19:51:083
6127992827,1cyclictest795-21snmpd22:38:142
6127992827,1cyclictest795-21snmpd20:09:472
6127992826,2cyclictest795-21snmpd21:55:422
6127992826,2cyclictest795-21snmpd21:48:182
6126992827,1cyclictest795-21snmpd21:46:571
6126992826,2cyclictest795-21snmpd20:07:471
6125992827,1cyclictest795-21snmpd23:29:480
6125992827,1cyclictest795-21snmpd20:31:310
6128992727,0cyclictest8207-21kworker/3:0+events20:01:313
6128992725,2cyclictest795-21snmpd19:49:033
6127992726,1cyclictest795-21snmpd23:45:102
6127992726,1cyclictest795-21snmpd21:29:352
6126992726,1cyclictest795-21snmpd21:23:551
6126992726,1cyclictest795-21snmpd00:32:021
6125992725,2cyclictest795-21snmpd22:31:040
6125992725,2cyclictest795-21snmpd00:00:490
6127992625,1cyclictest795-21snmpd23:29:152
6126992625,1cyclictest795-21snmpd19:44:181
6126992625,1cyclictest795-21snmpd00:11:051
6125992625,1cyclictest795-21snmpd22:49:500
6125992625,1cyclictest795-21snmpd22:22:180
6125992625,1cyclictest795-21snmpd21:48:120
6125992625,1cyclictest795-21snmpd21:07:470
6127992524,1cyclictest795-21snmpd00:27:162
6127992524,1cyclictest795-21snmpd00:00:222
6125992524,1cyclictest795-21snmpd23:33:030
6125992523,2cyclictest795-21snmpd20:20:030
6127992423,1cyclictest9117-21cat21:50:142
6127992423,1cyclictest795-21snmpd23:10:592
6127992423,1cyclictest795-21snmpd19:20:342
6127992422,2cyclictest795-21snmpd22:42:262
6126992424,0cyclictest73950irq/132-enp1s022:49:051
6125992424,0cyclictest795-21snmpd23:17:540
6128992220,2cyclictest795-21snmpd20:20:153
6127992221,1cyclictest795-21snmpd21:06:442
6125992222,0cyclictest795-21snmpd23:55:270
6127992121,0cyclictest29366-21kworker/u16:0+atlantic23:22:282
6126992119,2cyclictest795-21snmpd22:03:421
6126991918,1cyclictest795-21snmpd21:34:291
6127991818,0cyclictest20243-21kworker/u16:1+atlantic22:24:092
6127991816,2cyclictest795-21snmpd21:38:302
6125991816,2cyclictest795-21snmpd23:24:300
6127991717,0cyclictest30328-21kworker/2:0+events_freezable20:27:322
6127991714,2cyclictest795-21snmpd00:10:082
6126991716,1cyclictest795-21snmpd22:25:101
6125991716,1cyclictest795-21snmpd22:06:190
6125991716,1cyclictest795-21snmpd22:06:190
6125991615,1cyclictest795-21snmpd19:21:020
61259976,1cyclictest795-21snmpd21:10:430
61269966,0cyclictest0-21swapper/119:32:221
61259965,1cyclictest23432-21cat22:25:130
61259965,1cyclictest18427-21chrt22:12:360
61259965,1cyclictest12634-21sed00:20:160
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional