You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-19 - 11:34

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Wed Nov 19, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
86042320313,4sleep10-21swapper/119:07:111
87922319303,5sleep00-21swapper/019:09:350
84922316308,5sleep30-21swapper/319:05:453
85012315307,5sleep20-21swapper/219:05:522
9091993010,300cyclictest2270-21kworker/u16:1+efi_rts_wq22:45:172
9089993010,299cyclictest7414-21kworker/u16:2+efi_rts_wq23:30:140
9089993010,299cyclictest23149-21kworker/u16:3+efi_rts_wq22:05:150
9092993000,299cyclictest32173-21kworker/u16:0+efi_rts_wq23:00:153
9090993000,299cyclictest23149-21kworker/u16:3+efi_rts_wq21:29:341
9089992990,296cyclictest23149-21kworker/u16:3+efi_rts_wq21:25:160
9089992980,297cyclictest23149-21kworker/u16:3+efi_rts_wq21:24:320
9090992960,295cyclictest32173-21kworker/u16:0+efi_rts_wq22:59:501
9090992920,291cyclictest3441-21kworker/u16:3+efi_rts_wq00:00:001
9092992910,290cyclictest23149-21kworker/u16:3+efi_rts_wq21:59:393
9090992910,290cyclictest9128-21kworker/u16:2+efi_rts_wq20:15:171
9092992880,287cyclictest23149-21kworker/u16:3+efi_rts_wq21:45:163
9092992880,287cyclictest23149-21kworker/u16:3+efi_rts_wq21:05:153
9091992880,287cyclictest9128-21kworker/u16:2+efi_rts_wq19:25:142
9091992880,287cyclictest23149-21kworker/u16:3+efi_rts_wq20:10:172
9091992870,286cyclictest32173-21kworker/u16:0+efi_rts_wq23:35:162
9090992870,286cyclictest23149-21kworker/u16:3+efi_rts_wq19:15:161
9089992860,283cyclictest3441-21kworker/u16:3+efi_rts_wq00:35:160
9089992860,283cyclictest3441-21kworker/u16:3+efi_rts_wq00:35:150
9091992850,283cyclictest9128-21kworker/u16:2+efi_rts_wq20:15:172
9090992850,284cyclictest9128-21kworker/u16:2+efi_rts_wq21:35:141
9092992840,283cyclictest7414-21kworker/u16:2+efi_rts_wq23:45:143
9090992840,283cyclictest23149-21kworker/u16:3+efi_rts_wq22:20:141
9091992830,282cyclictest23149-21kworker/u16:3+efi_rts_wq22:40:152
9091992830,281cyclictest9128-21kworker/u16:2+efi_rts_wq20:50:162
9092992810,280cyclictest7414-21kworker/u16:2+efi_rts_wq23:24:533
9092992800,279cyclictest9128-21kworker/u16:2+efi_rts_wq21:15:143
9092992800,279cyclictest32173-21kworker/u16:0+efi_rts_wq23:40:143
9092992800,279cyclictest23149-21kworker/u16:3+efi_rts_wq20:14:203
9092992780,277cyclictest9128-21kworker/u16:2+efi_rts_wq20:34:243
9090992780,277cyclictest7414-21kworker/u16:2+efi_rts_wq23:20:151
9089992780,277cyclictest9128-21kworker/u16:2+efi_rts_wq21:50:150
9090992760,275cyclictest32173-21kworker/u16:0+efi_rts_wq00:10:171
9092992750,274cyclictest9128-21kworker/u16:2+efi_rts_wq22:15:153
9092992740,273cyclictest5862-21kworker/u16:1+efi_rts_wq00:30:143
9092992740,272cyclictest7414-21kworker/u16:2+efi_rts_wq23:05:143
9091992740,273cyclictest9128-21kworker/u16:2+efi_rts_wq22:35:152
9090992730,272cyclictest7414-21kworker/u16:2+efi_rts_wq23:29:551
9090992730,272cyclictest23149-21kworker/u16:3+efi_rts_wq19:50:151
9092992720,269cyclictest23149-21kworker/u16:3+efi_rts_wq22:05:153
9091992720,270cyclictest9128-21kworker/u16:2+efi_rts_wq20:05:152
9090992720,271cyclictest3441-21kworker/u16:3+efi_rts_wq00:05:141
9091992680,267cyclictest23149-21kworker/u16:3+efi_rts_wq19:15:152
9092992660,265cyclictest9128-21kworker/u16:2+efi_rts_wq19:30:173
9092992650,264cyclictest23149-21kworker/u16:3+efi_rts_wq21:44:373
9091992650,263cyclictest9128-21kworker/u16:2+efi_rts_wq22:30:142
9092992640,263cyclictest23149-21kworker/u16:3+efi_rts_wq19:50:153
9090992620,261cyclictest32173-21kworker/u16:0+efi_rts_wq23:35:161
9089992620,261cyclictest23149-21kworker/u16:3+efi_rts_wq19:15:010
9092992610,260cyclictest9128-21kworker/u16:2+efi_rts_wq21:30:163
9092992590,258cyclictest7414-21kworker/u16:2+efi_rts_wq23:30:133
9089992590,258cyclictest7414-21kworker/u16:2+efi_rts_wq23:09:520
9092992580,257cyclictest9128-21kworker/u16:2+efi_rts_wq22:34:453
9092992580,257cyclictest3441-21kworker/u16:3+efi_rts_wq00:10:013
9092992580,257cyclictest32173-21kworker/u16:0+efi_rts_wq23:55:163
9092992570,256cyclictest3441-21kworker/u16:3+efi_rts_wq00:00:133
9091992570,256cyclictest9128-21kworker/u16:2+efi_rts_wq19:55:132
9092992560,255cyclictest5862-21kworker/u16:1+efi_rts_wq00:20:133
9092992560,255cyclictest32173-21kworker/u16:0+efi_rts_wq00:05:013
9091992550,253cyclictest3441-21kworker/u16:3+efi_rts_wq00:15:162
9090992550,254cyclictest23149-21kworker/u16:3+efi_rts_wq21:00:131
9090992530,252cyclictest23149-21kworker/u16:3+efi_rts_wq20:55:151
9092992520,251cyclictest9128-21kworker/u16:2+efi_rts_wq19:55:133
9089992520,251cyclictest23149-21kworker/u16:3+efi_rts_wq21:40:130
9090992500,249cyclictest23149-21kworker/u16:3+efi_rts_wq21:20:131
9092992490,248cyclictest9128-21kworker/u16:2+efi_rts_wq19:45:153
9091992490,248cyclictest23149-21kworker/u16:3+efi_rts_wq21:10:142
9091992490,248cyclictest23149-21kworker/u16:3+efi_rts_wq20:55:152
9092992480,247cyclictest3441-21kworker/u16:3+efi_rts_wq00:15:153
9090992480,247cyclictest9128-21kworker/u16:2+efi_rts_wq19:25:151
9091992470,246cyclictest7414-21kworker/u16:2+efi_rts_wq23:50:122
9090992470,246cyclictest9128-21kworker/u16:2+efi_rts_wq20:09:191
9091992460,245cyclictest23149-21kworker/u16:3+efi_rts_wq20:45:152
9090992460,245cyclictest9128-21kworker/u16:2+efi_rts_wq22:35:151
9092992440,242cyclictest9128-21kworker/u16:2+efi_rts_wq19:10:133
9092992430,242cyclictest23149-21kworker/u16:3+efi_rts_wq22:24:443
9089992420,241cyclictest3441-21kworker/u16:3+efi_rts_wq00:05:130
9090992410,240cyclictest23149-21kworker/u16:3+efi_rts_wq19:44:141
9089992410,240cyclictest23149-21kworker/u16:3+efi_rts_wq20:20:140
9092992360,235cyclictest23149-21kworker/u16:3+efi_rts_wq21:20:143
9090992350,233cyclictest7414-21kworker/u16:2+efi_rts_wq23:45:141
9092992340,233cyclictest23149-21kworker/u16:3+efi_rts_wq22:10:153
9091992340,233cyclictest32173-21kworker/u16:0+efi_rts_wq23:55:162
9090992340,232cyclictest2270-21kworker/u16:1+efi_rts_wq22:50:131
9090992330,231cyclictest5862-21kworker/u16:1+efi_rts_wq00:25:151
9091992320,231cyclictest23149-21kworker/u16:3+efi_rts_wq22:25:142
9090992300,229cyclictest23149-21kworker/u16:3+efi_rts_wq22:25:141
9090992270,226cyclictest5862-21kworker/u16:1+efi_rts_wq00:35:071
9090992270,226cyclictest5862-21kworker/u16:1+efi_rts_wq00:35:061
9089992270,226cyclictest9128-21kworker/u16:2+efi_rts_wq20:54:260
9089992260,224cyclictest32173-21kworker/u16:0+efi_rts_wq22:44:480
9091992250,224cyclictest23149-21kworker/u16:3+efi_rts_wq20:35:162
9089992250,224cyclictest9128-21kworker/u16:2+efi_rts_wq19:10:130
9092992240,223cyclictest7414-21kworker/u16:2+efi_rts_wq23:54:593
9092992240,223cyclictest23149-21kworker/u16:3+efi_rts_wq20:20:153
9092992240,223cyclictest23149-21kworker/u16:3+efi_rts_wq20:00:183
9090992240,223cyclictest23149-21kworker/u16:3+efi_rts_wq21:40:131
9092992230,222cyclictest23149-21kworker/u16:3+efi_rts_wq22:29:453
9092992220,221cyclictest2270-21kworker/u16:1+efi_rts_wq22:55:153
9090992200,219cyclictest9128-21kworker/u16:2+efi_rts_wq19:59:171
9090992200,219cyclictest7414-21kworker/u16:2+efi_rts_wq23:14:521
9089992200,219cyclictest23149-21kworker/u16:3+efi_rts_wq20:35:150
9089992200,219cyclictest23149-21kworker/u16:3+efi_rts_wq19:20:140
9091992150,214cyclictest23149-21kworker/u16:3+efi_rts_wq20:30:142
9092992140,213cyclictest9128-21kworker/u16:2+efi_rts_wq20:25:133
9091992140,213cyclictest23149-21kworker/u16:3+efi_rts_wq21:45:162
9091992130,212cyclictest9128-21kworker/u16:2+efi_rts_wq19:39:122
9090992130,212cyclictest32173-21kworker/u16:0+efi_rts_wq23:40:161
9091992120,210cyclictest3441-21kworker/u16:3+efi_rts_wq00:00:132
9089992090,208cyclictest32173-21kworker/u16:0+efi_rts_wq23:15:160
9092992080,207cyclictest9128-21kworker/u16:2+efi_rts_wq19:35:143
9092992060,205cyclictest9128-21kworker/u16:2+efi_rts_wq20:19:203
9091992050,203cyclictest7414-21kworker/u16:2+efi_rts_wq23:10:222
9089992030,202cyclictest9128-21kworker/u16:2+efi_rts_wq22:00:160
9092991960,195cyclictest3441-21kworker/u16:3+efi_rts_wq00:35:163
9092991960,195cyclictest3441-21kworker/u16:3+efi_rts_wq00:35:153
9092991960,192cyclictest9128-21kworker/u16:2+efi_rts_wq22:00:173
9089991960,195cyclictest7414-21kworker/u16:2+efi_rts_wq23:50:130
9090991950,194cyclictest9128-21kworker/u16:2+efi_rts_wq19:35:151
9089991920,191cyclictest23149-21kworker/u16:3+efi_rts_wq21:10:130
9090991870,186cyclictest23149-21kworker/u16:3+efi_rts_wq20:30:131
9090991850,184cyclictest9128-21kworker/u16:2+efi_rts_wq20:50:151
9090991850,184cyclictest23149-21kworker/u16:3+efi_rts_wq20:39:251
9089991840,183cyclictest9128-21kworker/u16:2+efi_rts_wq22:30:160
9089991830,182cyclictest23149-21kworker/u16:3+efi_rts_wq20:10:160
9092991800,179cyclictest9128-21kworker/u16:2+efi_rts_wq20:40:183
9090991760,175cyclictest23149-21kworker/u16:3+efi_rts_wq19:14:091
9092991750,174cyclictest5862-21kworker/u16:1+efi_rts_wq00:25:153
9091991750,174cyclictest9128-21kworker/u16:2+efi_rts_wq20:25:142
9090991710,170cyclictest9128-21kworker/u16:2+efi_rts_wq22:04:391
9092991690,168cyclictest23149-21kworker/u16:3+efi_rts_wq19:24:103
9091991680,167cyclictest7414-21kworker/u16:2+efi_rts_wq23:30:132
9089991670,166cyclictest23149-21kworker/u16:3+efi_rts_wq22:14:410
9091991620,161cyclictest9128-21kworker/u16:2+efi_rts_wq19:49:142
9090991620,161cyclictest9128-21kworker/u16:2+efi_rts_wq21:30:151
9090991610,160cyclictest9128-21kworker/u16:2+efi_rts_wq19:45:161
9089991610,160cyclictest23149-21kworker/u16:3+efi_rts_wq19:34:110
9089991610,160cyclictest2270-21kworker/u16:1+efi_rts_wq22:45:170
9089991600,159cyclictest23149-21kworker/u16:3+efi_rts_wq21:00:130
9090991590,158cyclictest9128-21kworker/u16:2+efi_rts_wq22:19:431
9091991570,156cyclictest23149-21kworker/u16:3+efi_rts_wq20:00:172
9090991570,156cyclictest9128-21kworker/u16:2+efi_rts_wq20:40:171
9090991560,155cyclictest9128-21kworker/u16:2+efi_rts_wq19:30:171
9091991550,154cyclictest9128-21kworker/u16:2+efi_rts_wq21:50:152
9092991540,153cyclictest23149-21kworker/u16:3+efi_rts_wq20:49:253
9091991540,153cyclictest7414-21kworker/u16:2+efi_rts_wq23:20:142
9091991510,150cyclictest23149-21kworker/u16:3+efi_rts_wq21:09:302
9091991280,126cyclictest5862-21kworker/u16:1+efi_rts_wq00:25:152
9090991270,126cyclictest7414-21kworker/u16:2+efi_rts_wq23:15:161
9092991260,125cyclictest32173-21kworker/u16:0+efi_rts_wq22:39:473
9091991180,117cyclictest23149-21kworker/u16:3+efi_rts_wq22:10:142
9091991170,116cyclictest9128-21kworker/u16:2+efi_rts_wq21:39:362
9089991130,112cyclictest23149-21kworker/u16:3+efi_rts_wq21:49:380
9090991090,108cyclictest9128-21kworker/u16:2+efi_rts_wq21:19:321
9092991080,108cyclictest9128-21kworker/u16:2+efi_rts_wq21:54:393
9091991070,106cyclictest23149-21kworker/u16:3+efi_rts_wq19:40:142
9092991050,104cyclictest9128-21kworker/u16:2+efi_rts_wq21:04:293
9092993230,2cyclictest795-21snmpd22:53:483
9091993229,2cyclictest795-21snmpd21:55:592
9090993229,2cyclictest795-21snmpd00:24:001
9089993230,2cyclictest795-21snmpd21:07:370
9089993229,2cyclictest795-21snmpd22:19:570
9089993229,2cyclictest795-21snmpd20:15:570
9092993130,1cyclictest795-21snmpd23:17:343
9091993130,1cyclictest795-21snmpd20:44:272
9091993130,1cyclictest795-21snmpd00:10:232
9091993128,2cyclictest795-21snmpd22:58:192
9090993130,1cyclictest795-21snmpd22:46:151
9090993130,1cyclictest795-21snmpd21:11:091
9090993129,2cyclictest795-21snmpd21:46:051
9090993129,1cyclictest795-21snmpd20:22:441
9090993128,2cyclictest795-21snmpd00:30:541
9089993130,1cyclictest795-21snmpd00:19:410
9089993128,2cyclictest795-21snmpd00:25:110
9092993029,1cyclictest795-21snmpd23:27:383
9092993029,1cyclictest795-21snmpd23:11:453
9092993029,1cyclictest795-21snmpd20:07:343
9092993028,2cyclictest795-21snmpd20:51:363
9091993029,1cyclictest795-21snmpd22:04:552
9091993029,1cyclictest795-21snmpd00:38:582
9091993029,1cyclictest795-21snmpd00:38:582
9091993029,1cyclictest795-21snmpd00:20:302
9091993029,1cyclictest795-21snmpd00:09:572
9091993029,1cyclictest1727-21cat21:25:172
9090993030,0cyclictest3486-21kworker/1:1+events00:15:421
9090993029,1cyclictest795-21snmpd23:54:291
9090993028,2cyclictest9006-21cat20:25:151
9089993029,1cyclictest795-21snmpd23:03:490
9089993029,1cyclictest795-21snmpd22:58:460
9089993029,1cyclictest795-21snmpd00:30:210
9089993029,1cyclictest795-21snmpd00:01:480
9089993028,2cyclictest795-21snmpd21:36:140
9092992929,0cyclictest23149-21kworker/u16:3+atlantic22:40:033
9092992928,1cyclictest795-21snmpd23:37:503
9092992928,1cyclictest795-21snmpd21:37:023
9091992929,0cyclictest7414-21kworker/u16:2+atlantic23:47:382
9091992928,1cyclictest807-21lldpd22:17:392
9091992928,1cyclictest795-21snmpd23:44:492
9091992928,1cyclictest795-21snmpd23:05:552
9091992928,1cyclictest795-21snmpd21:33:492
9091992928,1cyclictest795-21snmpd19:22:492
9091992927,2cyclictest795-21snmpd23:18:012
9090992929,0cyclictest9592-21kworker/1:0+events23:08:061
9090992929,0cyclictest19685-21kworker/1:2+events22:44:451
9090992929,0cyclictest19685-21kworker/1:2+events22:10:091
9090992929,0cyclictest19685-21kworker/1:2+events20:47:421
9090992929,0cyclictest19685-21kworker/1:2+events20:10:381
9090992928,1cyclictest795-21snmpd23:04:071
9090992928,1cyclictest795-21snmpd20:03:141
9090992928,1cyclictest19987-21kworker/1:2+events23:30:101
9090992927,2cyclictest795-21snmpd22:05:561
9089992928,1cyclictest795-21snmpd23:41:050
9089992928,1cyclictest795-21snmpd19:29:310
9089992927,2cyclictest795-21snmpd23:14:430
9089992927,2cyclictest795-21snmpd19:51:370
9092992827,1cyclictest795-21snmpd19:43:413
9091992826,2cyclictest795-21snmpd22:52:092
9091992826,2cyclictest795-21snmpd19:53:562
9090992828,0cyclictest19685-21kworker/1:2+events21:50:091
9090992828,0cyclictest19685-21kworker/1:2+events21:06:421
9090992827,1cyclictest795-21snmpd21:55:021
9090992827,1cyclictest795-21snmpd00:01:091
9090992826,2cyclictest795-21snmpd19:20:281
9089992827,1cyclictest795-21snmpd22:21:450
9089992827,1cyclictest795-21snmpd20:59:010
9089992827,1cyclictest795-21snmpd20:43:140
9089992827,1cyclictest795-21snmpd20:30:200
9089992826,2cyclictest795-21snmpd00:14:300
9092992726,1cyclictest795-21snmpd20:38:293
9089992727,0cyclictest74150irq/134-enp1s023:48:450
9089992726,1cyclictest795-21snmpd23:20:310
9089992726,1cyclictest795-21snmpd21:57:170
9089992725,2cyclictest795-21snmpd19:56:290
9089992725,2cyclictest795-21snmpd19:42:100
9092992625,1cyclictest795-21snmpd21:13:223
9092992625,1cyclictest795-21snmpd19:18:303
9091992624,2cyclictest795-21snmpd23:25:262
9090992624,1cyclictest19685-21kworker/1:2+events22:34:191
9089992625,1cyclictest795-21snmpd23:59:010
9089992625,1cyclictest795-21snmpd20:06:590
9091992524,1cyclictest795-21snmpd23:00:152
9089992524,1cyclictest795-21snmpd22:35:360
9089992523,2cyclictest795-21snmpd21:30:210
9089992522,2cyclictest31074-21cat20:00:180
9092992422,2cyclictest795-21snmpd21:26:283
9091992424,0cyclictest795-21snmpd00:32:092
9091992422,2cyclictest795-21snmpd22:22:412
9089992423,1cyclictest795-21snmpd23:25:380
9089992423,1cyclictest795-21snmpd19:45:170
9089992421,2cyclictest795-21snmpd20:45:450
9092992323,0cyclictest9128-21kworker/u16:2+atlantic20:55:313
9091992322,1cyclictest795-21snmpd19:12:162
9089992321,2cyclictest795-21snmpd22:51:460
9092992220,2cyclictest795-21snmpd19:29:033
9091992221,1cyclictest795-21snmpd21:24:432
9091992220,2cyclictest795-21snmpd20:20:122
9089992221,1cyclictest795-21snmpd00:24:480
9092992121,0cyclictest73850irq/131-enp1s022:47:563
9091992120,1cyclictest795-21snmpd19:32:252
9089992120,1cyclictest795-21snmpd21:15:220
9091992019,1cyclictest795-21snmpd21:18:462
9089992019,1cyclictest795-21snmpd20:25:120
9091991918,1cyclictest795-21snmpd22:09:172
9091991917,2cyclictest7976-21cat21:40:162
9089991818,0cyclictest7414-21kworker/u16:2+atlantic23:39:050
9089991615,1cyclictest795-21snmpd22:29:570
9091991514,1cyclictest795-21snmpd21:04:402
90899954,1cyclictest200502sleep019:35:140
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional