You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-26 - 18:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Wed Nov 26, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
54192322314,5sleep10-21swapper/107:07:511
55252319303,5sleep30-21swapper/307:09:133
54232316308,5sleep00-21swapper/007:07:540
54132316302,5sleep20-21swapper/207:07:482
5852993000,299cyclictest31268-21kworker/u16:3+efi_rts_wq10:15:132
5851993000,299cyclictest967-21kworker/u16:4+efi_rts_wq08:51:521
5851993000,299cyclictest18728-21kworker/u16:2+efi_rts_wq08:10:131
5850993000,299cyclictest19531-21kworker/u16:3+efi_rts_wq11:25:140
5852992970,296cyclictest18728-21kworker/u16:2+efi_rts_wq07:40:122
5851992970,296cyclictest19531-21kworker/u16:3+efi_rts_wq11:35:131
5851992970,296cyclictest10376-21kworker/u16:2+efi_rts_wq12:17:271
5851992960,295cyclictest967-21kworker/u16:4+efi_rts_wq09:30:131
5853992950,294cyclictest967-21kworker/u16:4+efi_rts_wq09:15:143
5851992950,294cyclictest2814-21kworker/u16:1+efi_rts_wq10:55:131
5850992930,292cyclictest10376-21kworker/u16:2+efi_rts_wq11:55:130
5850992920,291cyclictest31268-21kworker/u16:3+efi_rts_wq09:10:150
5850992920,291cyclictest10376-21kworker/u16:2+efi_rts_wq12:10:120
5852992910,290cyclictest31268-21kworker/u16:3+efi_rts_wq09:25:172
5851992910,290cyclictest31268-21kworker/u16:3+efi_rts_wq09:55:131
5851992900,289cyclictest31268-21kworker/u16:3+efi_rts_wq08:56:521
5852992880,286cyclictest967-21kworker/u16:4+efi_rts_wq09:50:132
5853992870,286cyclictest18728-21kworker/u16:2+efi_rts_wq08:00:133
5853992860,285cyclictest31268-21kworker/u16:3+efi_rts_wq10:07:033
5853992860,285cyclictest31203-21kworker/u16:1+efi_rts_wq07:10:143
5852992830,282cyclictest32758-21kworker/u16:0+efi_rts_wq10:50:132
5850992830,282cyclictest31203-21kworker/u16:1+efi_rts_wq07:30:130
5851992820,281cyclictest31268-21kworker/u16:3+efi_rts_wq10:35:131
5853992810,280cyclictest967-21kworker/u16:4+efi_rts_wq09:35:133
5853992810,280cyclictest10376-21kworker/u16:2+efi_rts_wq11:50:143
5852992810,280cyclictest2814-21kworker/u16:1+efi_rts_wq10:55:132
5851992810,280cyclictest31203-21kworker/u16:1+efi_rts_wq07:41:391
5850992810,280cyclictest967-21kworker/u16:4+efi_rts_wq10:27:070
5851992800,279cyclictest967-21kworker/u16:4+efi_rts_wq10:10:141
5851992800,279cyclictest967-21kworker/u16:4+efi_rts_wq10:10:141
5853992790,277cyclictest18728-21kworker/u16:2+efi_rts_wq07:45:143
5850992780,277cyclictest31203-21kworker/u16:1+efi_rts_wq07:20:150
5852992760,274cyclictest31203-21kworker/u16:1+efi_rts_wq07:25:112
5852992750,274cyclictest10376-21kworker/u16:2+efi_rts_wq12:37:312
5850992750,274cyclictest5330-21kworker/u16:0+efi_rts_wq07:15:000
5853992740,273cyclictest19531-21kworker/u16:3+efi_rts_wq11:30:123
5852992730,272cyclictest2814-21kworker/u16:1+efi_rts_wq11:05:122
5853992720,270cyclictest967-21kworker/u16:4+efi_rts_wq08:30:133
5851992720,271cyclictest967-21kworker/u16:4+efi_rts_wq09:35:121
5851992720,271cyclictest31268-21kworker/u16:3+efi_rts_wq08:25:131
5850992720,271cyclictest31268-21kworker/u16:3+efi_rts_wq11:05:120
5850992700,269cyclictest5330-21kworker/u16:0+efi_rts_wq07:35:120
5853992690,268cyclictest967-21kworker/u16:4+efi_rts_wq10:22:063
5853992680,267cyclictest31203-21kworker/u16:1+efi_rts_wq07:35:133
5852992680,267cyclictest19531-21kworker/u16:3+efi_rts_wq11:30:122
5852992680,267cyclictest18728-21kworker/u16:2+efi_rts_wq07:46:402
5851992680,267cyclictest967-21kworker/u16:4+efi_rts_wq08:20:151
5851992680,267cyclictest5330-21kworker/u16:0+efi_rts_wq07:21:351
5851992680,266cyclictest19531-21kworker/u16:3+efi_rts_wq11:40:131
5850992680,267cyclictest31268-21kworker/u16:3+efi_rts_wq08:25:120
5853992670,266cyclictest967-21kworker/u16:4+efi_rts_wq08:55:143
5852992670,264cyclictest5330-21kworker/u16:0+efi_rts_wq07:15:152
5851992660,265cyclictest31203-21kworker/u16:1+efi_rts_wq07:45:141
5852992650,264cyclictest967-21kworker/u16:4+efi_rts_wq10:42:102
5852992650,264cyclictest31268-21kworker/u16:3+efi_rts_wq09:46:592
5851992650,264cyclictest967-21kworker/u16:4+efi_rts_wq08:45:141
5850992650,263cyclictest10376-21kworker/u16:2+efi_rts_wq11:50:130
5852992640,263cyclictest967-21kworker/u16:4+efi_rts_wq08:31:482
5850992640,263cyclictest5146-21kworker/u16:1+efi_rts_wq12:05:130
5850992640,263cyclictest10376-21kworker/u16:2+efi_rts_wq11:10:120
5852992630,262cyclictest10376-21kworker/u16:2+efi_rts_wq12:00:122
5851992620,261cyclictest31203-21kworker/u16:1+efi_rts_wq07:55:131
5850992580,256cyclictest31268-21kworker/u16:3+efi_rts_wq10:30:140
5852992570,256cyclictest18728-21kworker/u16:2+efi_rts_wq08:05:142
5852992570,256cyclictest10376-21kworker/u16:2+efi_rts_wq11:50:142
5851992570,256cyclictest5146-21kworker/u16:1+efi_rts_wq12:35:121
5851992540,252cyclictest10376-21kworker/u16:2+efi_rts_wq11:57:231
5850992540,253cyclictest19531-21kworker/u16:3+efi_rts_wq12:02:230
5850992530,252cyclictest967-21kworker/u16:4+efi_rts_wq08:36:480
5852992520,251cyclictest31203-21kworker/u16:1+efi_rts_wq07:30:122
5852992510,250cyclictest967-21kworker/u16:4+efi_rts_wq10:05:122
5851992510,250cyclictest18728-21kworker/u16:2+efi_rts_wq07:51:411
5853992490,248cyclictest31268-21kworker/u16:3+efi_rts_wq10:35:123
5852992480,247cyclictest5146-21kworker/u16:1+efi_rts_wq12:30:122
5851992470,246cyclictest967-21kworker/u16:4+efi_rts_wq09:40:141
5851992470,246cyclictest5146-21kworker/u16:1+efi_rts_wq12:20:121
5850992470,246cyclictest19531-21kworker/u16:3+efi_rts_wq11:45:130
5853992450,243cyclictest2814-21kworker/u16:1+efi_rts_wq11:20:133
5850992450,244cyclictest31268-21kworker/u16:3+efi_rts_wq09:20:130
5853992430,242cyclictest967-21kworker/u16:4+efi_rts_wq09:40:133
5853992420,241cyclictest18728-21kworker/u16:2+efi_rts_wq08:10:123
5852992420,241cyclictest31268-21kworker/u16:3+efi_rts_wq08:40:162
5850992400,239cyclictest967-21kworker/u16:4+efi_rts_wq08:15:120
5852992370,236cyclictest967-21kworker/u16:4+efi_rts_wq10:20:142
5851992370,236cyclictest967-21kworker/u16:4+efi_rts_wq10:45:131
5851992370,236cyclictest31203-21kworker/u16:1+efi_rts_wq07:11:331
5851992350,234cyclictest10376-21kworker/u16:2+efi_rts_wq11:22:161
5853992340,233cyclictest5146-21kworker/u16:1+efi_rts_wq12:22:283
5853992340,233cyclictest31268-21kworker/u16:3+efi_rts_wq08:41:493
5851992330,232cyclictest967-21kworker/u16:4+efi_rts_wq10:00:121
5850992330,232cyclictest32758-21kworker/u16:0+efi_rts_wq10:50:120
5852992320,231cyclictest967-21kworker/u16:4+efi_rts_wq08:35:122
5852992320,231cyclictest31268-21kworker/u16:3+efi_rts_wq10:32:082
5852992300,229cyclictest5146-21kworker/u16:1+efi_rts_wq12:15:142
5850992300,229cyclictest18728-21kworker/u16:2+efi_rts_wq08:00:130
5851992290,228cyclictest967-21kworker/u16:4+efi_rts_wq10:20:141
5852992280,227cyclictest31268-21kworker/u16:3+efi_rts_wq09:11:552
5853992270,226cyclictest31268-21kworker/u16:3+efi_rts_wq09:00:103
5851992260,225cyclictest967-21kworker/u16:4+efi_rts_wq09:06:531
5850992230,222cyclictest2814-21kworker/u16:1+efi_rts_wq11:02:120
5850992230,222cyclictest10376-21kworker/u16:2+efi_rts_wq12:27:290
5852992220,221cyclictest31268-21kworker/u16:3+efi_rts_wq09:05:122
5853992200,217cyclictest967-21kworker/u16:4+efi_rts_wq10:10:143
5853992200,217cyclictest967-21kworker/u16:4+efi_rts_wq10:10:133
5853992160,215cyclictest31268-21kworker/u16:3+efi_rts_wq09:45:153
5851992130,212cyclictest5330-21kworker/u16:0+efi_rts_wq07:26:361
5850992100,208cyclictest2814-21kworker/u16:1+efi_rts_wq11:15:130
5852992090,208cyclictest5146-21kworker/u16:1+efi_rts_wq12:25:132
5852992090,208cyclictest31203-21kworker/u16:1+efi_rts_wq07:36:382
5850992070,206cyclictest2814-21kworker/u16:1+efi_rts_wq10:57:130
5853992050,204cyclictest2814-21kworker/u16:1+efi_rts_wq11:00:133
5851992050,204cyclictest10376-21kworker/u16:2+efi_rts_wq12:10:121
5853992040,203cyclictest5146-21kworker/u16:1+efi_rts_wq12:30:123
5851992040,203cyclictest31203-21kworker/u16:1+efi_rts_wq08:01:421
5851992030,202cyclictest5146-21kworker/u16:1+efi_rts_wq12:30:111
5851991990,198cyclictest967-21kworker/u16:4+efi_rts_wq09:52:001
5851991980,197cyclictest5146-21kworker/u16:1+efi_rts_wq12:25:131
5852991970,196cyclictest31268-21kworker/u16:3+efi_rts_wq10:12:042
5852991970,196cyclictest31268-21kworker/u16:3+efi_rts_wq10:12:042
5850991960,194cyclictest967-21kworker/u16:4+efi_rts_wq10:00:120
5853991910,190cyclictest31268-21kworker/u16:3+efi_rts_wq10:17:043
5852991900,188cyclictest18728-21kworker/u16:2+efi_rts_wq08:10:122
5851991890,188cyclictest31268-21kworker/u16:3+efi_rts_wq10:15:131
5850991890,188cyclictest2814-21kworker/u16:1+efi_rts_wq11:20:120
5853991880,187cyclictest19531-21kworker/u16:3+efi_rts_wq11:40:143
5851991850,183cyclictest2814-21kworker/u16:1+efi_rts_wq11:07:141
5850991780,177cyclictest967-21kworker/u16:4+efi_rts_wq08:21:460
5850991770,176cyclictest31268-21kworker/u16:3+efi_rts_wq09:31:570
5851991740,173cyclictest31203-21kworker/u16:1+efi_rts_wq07:16:341
5850991710,169cyclictest967-21kworker/u16:4+efi_rts_wq10:45:130
5851991660,165cyclictest5146-21kworker/u16:1+efi_rts_wq12:05:131
5853991610,159cyclictest19531-21kworker/u16:3+efi_rts_wq11:25:133
5851991560,155cyclictest31268-21kworker/u16:3+efi_rts_wq09:26:561
5851991560,155cyclictest31268-21kworker/u16:3+efi_rts_wq09:21:551
5850991560,156cyclictest967-21kworker/u16:4+efi_rts_wq09:41:580
5853991550,154cyclictest31268-21kworker/u16:3+efi_rts_wq09:10:133
5852991490,149cyclictest967-21kworker/u16:4+efi_rts_wq09:57:012
5851991480,147cyclictest967-21kworker/u16:4+efi_rts_wq08:30:131
5852991450,145cyclictest5146-21kworker/u16:1+efi_rts_wq12:20:132
5850991450,144cyclictest31203-21kworker/u16:1+efi_rts_wq07:25:100
5853991420,141cyclictest5146-21kworker/u16:1+efi_rts_wq12:07:253
5851991420,141cyclictest19531-21kworker/u16:3+efi_rts_wq11:52:211
5852991390,138cyclictest31203-21kworker/u16:1+efi_rts_wq07:55:132
5852991370,136cyclictest2814-21kworker/u16:1+efi_rts_wq11:12:152
5852991330,132cyclictest10376-21kworker/u16:2+efi_rts_wq11:47:212
5853991290,128cyclictest967-21kworker/u16:4+efi_rts_wq08:35:123
5851991280,127cyclictest31268-21kworker/u16:3+efi_rts_wq08:16:451
5851991270,126cyclictest10376-21kworker/u16:2+efi_rts_wq11:15:131
5851991270,124cyclictest967-21kworker/u16:4+efi_rts_wq09:15:141
5853991250,124cyclictest18728-21kworker/u16:2+efi_rts_wq08:06:433
5850991150,114cyclictest31268-21kworker/u16:3+efi_rts_wq09:00:110
5850991150,114cyclictest31203-21kworker/u16:1+efi_rts_wq08:11:440
5852991110,110cyclictest19531-21kworker/u16:3+efi_rts_wq11:42:202
5853991100,109cyclictest5146-21kworker/u16:1+efi_rts_wq12:35:113
277852640,0sleep0221rcuc/009:15:170
5853993429,5cyclictest795-21snmpd10:58:033
5853993229,3cyclictest795-21snmpd12:27:453
5853993229,2cyclictest795-21snmpd10:01:043
5853993227,4cyclictest795-21snmpd07:28:523
5851993229,2cyclictest795-21snmpd08:42:031
5850993229,2cyclictest795-21snmpd09:39:580
5850993229,2cyclictest795-21snmpd08:45:230
5853993129,2cyclictest795-21snmpd10:48:093
5853993129,2cyclictest795-21snmpd09:32:193
5853993129,2cyclictest795-21snmpd08:17:023
5853993128,3cyclictest795-21snmpd08:28:423
5853993128,2cyclictest795-21snmpd07:33:033
5852993129,2cyclictest795-21snmpd12:14:302
5852993128,3cyclictest0-21swapper/211:58:542
5850993130,1cyclictest795-21snmpd09:47:250
5850993129,2cyclictest795-21snmpd07:46:400
5850993129,2cyclictest23368-21cat09:05:130
5853993029,1cyclictest795-21snmpd08:53:323
5853993029,1cyclictest795-21snmpd08:45:453
5852993029,1cyclictest795-21snmpd08:50:332
5852993028,2cyclictest6512-21cat12:05:152
5851993029,1cyclictest795-21snmpd11:31:251
5851993029,1cyclictest795-21snmpd11:01:041
5851993029,1cyclictest795-21snmpd07:36:071
5850993029,1cyclictest795-21snmpd12:37:430
5850993029,1cyclictest795-21snmpd10:05:100
5850993029,1cyclictest25858-21kworker/0:2+events10:43:330
5850993028,2cyclictest795-21snmpd11:43:310
5850993028,2cyclictest795-21snmpd09:27:000
5850993028,2cyclictest795-21snmpd07:14:160
5850993027,2cyclictest795-21snmpd12:15:030
5853992928,1cyclictest795-21snmpd12:04:273
5853992928,1cyclictest795-21snmpd10:25:053
5853992928,1cyclictest795-21snmpd07:44:003
5853992927,2cyclictest795-21snmpd09:52:463
5853992926,3cyclictest795-21snmpd11:57:483
5853992926,3cyclictest795-21snmpd08:21:103
5853992926,2cyclictest795-21snmpd09:29:103
5852992929,0cyclictest967-21kworker/u16:4+atlantic08:47:162
5852992929,0cyclictest31268-21kworker/u16:3+atlantic11:00:162
5852992929,0cyclictest10376-21kworker/u16:2+atlantic11:37:142
5852992928,1cyclictest795-21snmpd10:26:302
5852992928,1cyclictest795-21snmpd09:16:462
5852992928,1cyclictest795-21snmpd08:57:042
5852992927,2cyclictest795-21snmpd10:46:312
5852992927,2cyclictest795-21snmpd08:26:302
5852992927,2cyclictest795-21snmpd08:15:502
5851992929,0cyclictest31268-21kworker/u16:3+atlantic08:36:361
5850992929,0cyclictest2827-21kworker/0:2+events12:22:390
5850992928,1cyclictest795-21snmpd12:33:420
5850992928,1cyclictest795-21snmpd11:32:160
5850992928,1cyclictest795-21snmpd09:57:280
5850992928,1cyclictest795-21snmpd08:09:220
5850992927,2cyclictest795-21snmpd10:24:050
5853992827,1cyclictest795-21snmpd11:45:023
5853992824,3cyclictest795-21snmpd09:24:153
5853992823,4cyclictest795-21snmpd09:57:233
5852992828,0cyclictest31203-21kworker/u16:1+atlantic08:00:202
5852992828,0cyclictest10376-21kworker/u16:2+atlantic11:26:342
5852992827,1cyclictest795-21snmpd10:37:002
5851992828,0cyclictest31268-21kworker/u16:3+atlantic10:08:201
5851992827,1cyclictest795-21snmpd11:48:391
5851992827,1cyclictest795-21snmpd11:12:261
5851992827,1cyclictest795-21snmpd10:25:301
5851992827,1cyclictest795-21snmpd09:11:101
5851992826,2cyclictest795-21snmpd12:02:441
5850992827,1cyclictest795-21snmpd07:51:230
5850992825,2cyclictest795-21snmpd07:40:430
5852992727,0cyclictest31268-21kworker/u16:3+atlantic08:23:482
5852992727,0cyclictest18728-21kworker/u16:2+atlantic07:51:482
5852992726,1cyclictest795-21snmpd07:20:212
5852992726,1cyclictest795-21snmpd07:10:002
5850992726,1cyclictest795-21snmpd11:35:410
5850992726,1cyclictest795-21snmpd08:43:570
5853992625,1cyclictest795-21snmpd11:19:433
5852992625,1cyclictest795-21snmpd11:16:502
5851992626,0cyclictest795-21snmpd10:40:371
5851992625,1cyclictest795-21snmpd09:45:171
5851992623,3cyclictest795-21snmpd10:32:361
5850992626,0cyclictest25858-21kworker/0:2+events10:39:260
5853992524,1cyclictest795-21snmpd11:13:443
5853992524,1cyclictest795-21snmpd11:06:003
5853992524,1cyclictest795-21snmpd07:16:343
5853992524,1cyclictest73950irq/132-enp1s010:30:543
5852992524,1cyclictest795-21snmpd09:00:402
5850992524,1cyclictest795-21snmpd10:16:240
5853992422,2cyclictest795-21snmpd12:11:303
5852992424,0cyclictest967-21kworker/u16:4+atlantic10:04:062
5852992424,0cyclictest967-21kworker/u16:4+atlantic09:41:202
5852992424,0cyclictest967-21kworker/u16:4+atlantic09:36:202
5852992424,0cyclictest967-21kworker/u16:4+atlantic09:32:042
5852992424,0cyclictest31268-21kworker/u16:3+atlantic09:21:262
5852992422,2cyclictest795-21snmpd11:22:382
5851992423,1cyclictest795-21snmpd11:26:381
5850992423,1cyclictest795-21snmpd09:53:260
5851992322,1cyclictest795-21snmpd07:31:071
5851992321,2cyclictest795-21snmpd10:52:431
5850992321,2cyclictest795-21snmpd10:13:240
5850992321,2cyclictest795-21snmpd10:13:230
5850992220,2cyclictest795-21snmpd07:55:160
5850992219,2cyclictest18915-21cat08:55:140
5850992119,2cyclictest795-21snmpd08:30:360
5853991917,2cyclictest795-21snmpd11:35:283
5850991816,2cyclictest16578-21cat08:50:140
5853991717,0cyclictest74150irq/134-enp1s010:54:463
5853991716,1cyclictest74150irq/134-enp1s010:42:103
5853991615,1cyclictest795-21snmpd12:16:063
5851991110,1cyclictest795-21snmpd08:09:201
58539965,1cyclictest27352-21taskset07:59:443
58539965,1cyclictest24592-21apt09:10:013
58539965,1cyclictest24100-21cat07:50:143
58539965,1cyclictest10993-21cat07:20:143
58519965,1cyclictest21446-21find09:00:181
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional