You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-29 - 20:28

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Sat Nov 29, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
50692320305,5sleep30-21swapper/307:05:213
53412318311,5sleep10-21swapper/107:06:571
52232318305,10sleep00-21swapper/007:05:230
52402314306,5sleep20-21swapper/207:05:382
5849993060,303cyclictest22608-21kworker/u16:3+efi_rts_wq12:20:153
5849993000,298cyclictest25753-21kworker/u16:0+efi_rts_wq10:50:143
5849992980,297cyclictest27249-21kworker/u16:2+efi_rts_wq12:00:153
5849992970,296cyclictest17972-21kworker/u16:1+efi_rts_wq11:25:153
5848992960,295cyclictest2869-21kworker/u16:2+efi_rts_wq09:50:142
5846992960,295cyclictest17972-21kworker/u16:1+efi_rts_wq11:25:170
5846992950,294cyclictest2869-21kworker/u16:2+efi_rts_wq07:10:120
5847992940,293cyclictest9594-21kworker/u16:3+efi_rts_wq08:10:151
5847992940,293cyclictest25753-21kworker/u16:0+efi_rts_wq10:40:141
5847992910,290cyclictest17972-21kworker/u16:1+efi_rts_wq11:25:161
5847992900,289cyclictest9594-21kworker/u16:3+efi_rts_wq10:15:161
5847992900,289cyclictest27249-21kworker/u16:2+efi_rts_wq12:25:161
5847992900,288cyclictest840-21kworker/u16:3+efi_rts_wq11:00:141
5847992890,288cyclictest9594-21kworker/u16:3+efi_rts_wq07:15:011
5846992890,288cyclictest9594-21kworker/u16:3+efi_rts_wq09:08:000
5847992880,287cyclictest9594-21kworker/u16:3+efi_rts_wq08:05:151
5847992880,287cyclictest2869-21kworker/u16:2+efi_rts_wq09:35:151
5848992870,286cyclictest9594-21kworker/u16:3+efi_rts_wq07:40:142
5847992870,286cyclictest9594-21kworker/u16:3+efi_rts_wq08:25:151
5846992870,286cyclictest22608-21kworker/u16:3+efi_rts_wq12:23:330
5848992860,285cyclictest2869-21kworker/u16:2+efi_rts_wq09:05:162
5848992860,285cyclictest22608-21kworker/u16:3+efi_rts_wq11:43:262
5847992860,285cyclictest2869-21kworker/u16:2+efi_rts_wq07:30:121
5847992860,285cyclictest22608-21kworker/u16:3+efi_rts_wq12:10:141
5849992840,283cyclictest9594-21kworker/u16:3+efi_rts_wq09:00:143
5847992820,281cyclictest25753-21kworker/u16:0+efi_rts_wq10:48:171
5848992780,277cyclictest2869-21kworker/u16:2+efi_rts_wq07:15:142
5847992750,274cyclictest2869-21kworker/u16:2+efi_rts_wq09:40:121
5847992750,274cyclictest2869-21kworker/u16:2+efi_rts_wq09:15:141
5849992740,273cyclictest9594-21kworker/u16:3+efi_rts_wq09:20:123
5849992740,273cyclictest2869-21kworker/u16:2+efi_rts_wq07:10:123
5847992740,273cyclictest9594-21kworker/u16:3+efi_rts_wq08:17:511
5847992740,272cyclictest840-21kworker/u16:3+efi_rts_wq10:55:141
5849992720,271cyclictest2869-21kworker/u16:2+efi_rts_wq09:53:073
5847992720,271cyclictest22608-21kworker/u16:3+efi_rts_wq12:03:301
5847992720,269cyclictest9594-21kworker/u16:3+efi_rts_wq07:55:141
5846992720,271cyclictest840-21kworker/u16:3+efi_rts_wq10:55:140
5848992710,270cyclictest2869-21kworker/u16:2+efi_rts_wq08:00:142
5847992710,270cyclictest9594-21kworker/u16:3+efi_rts_wq09:20:121
5848992690,268cyclictest2869-21kworker/u16:2+efi_rts_wq08:45:142
5848992680,267cyclictest9594-21kworker/u16:3+efi_rts_wq08:50:142
5847992680,267cyclictest9594-21kworker/u16:3+efi_rts_wq09:45:141
5847992680,267cyclictest25753-21kworker/u16:0+efi_rts_wq10:35:151
5846992680,267cyclictest2869-21kworker/u16:2+efi_rts_wq10:30:130
5849992670,266cyclictest840-21kworker/u16:3+efi_rts_wq10:58:183
5847992670,266cyclictest2869-21kworker/u16:2+efi_rts_wq08:55:141
5847992670,266cyclictest2869-21kworker/u16:2+efi_rts_wq07:25:141
5848992660,265cyclictest2869-21kworker/u16:2+efi_rts_wq10:45:162
5847992650,264cyclictest9594-21kworker/u16:3+efi_rts_wq10:10:141
5849992640,263cyclictest2869-21kworker/u16:2+efi_rts_wq07:30:123
5848992640,263cyclictest2869-21kworker/u16:2+efi_rts_wq10:00:132
5847992640,263cyclictest27249-21kworker/u16:2+efi_rts_wq12:30:141
5846992640,262cyclictest9594-21kworker/u16:3+efi_rts_wq10:20:140
5847992630,262cyclictest2869-21kworker/u16:2+efi_rts_wq10:28:131
5849992620,261cyclictest2869-21kworker/u16:2+efi_rts_wq08:27:523
5849992620,260cyclictest9594-21kworker/u16:3+efi_rts_wq07:35:173
5848992610,259cyclictest25753-21kworker/u16:0+efi_rts_wq11:05:142
5846992580,257cyclictest9594-21kworker/u16:3+efi_rts_wq09:25:130
5848992570,256cyclictest22608-21kworker/u16:3+efi_rts_wq12:38:362
5847992570,255cyclictest25753-21kworker/u16:0+efi_rts_wq11:10:141
5848992560,255cyclictest2869-21kworker/u16:2+efi_rts_wq09:15:142
5848992560,255cyclictest2869-21kworker/u16:2+efi_rts_wq07:50:142
5846992560,255cyclictest9594-21kworker/u16:3+efi_rts_wq09:30:130
5848992550,254cyclictest22608-21kworker/u16:3+efi_rts_wq12:10:142
5847992550,254cyclictest9594-21kworker/u16:3+efi_rts_wq09:30:131
5847992540,253cyclictest9594-21kworker/u16:3+efi_rts_wq07:20:151
5849992510,249cyclictest15492-21kworker/u16:2+efi_rts_wq11:30:133
5848992510,250cyclictest2869-21kworker/u16:2+efi_rts_wq08:55:142
5847992510,250cyclictest9594-21kworker/u16:3+efi_rts_wq07:45:141
5846992490,248cyclictest27249-21kworker/u16:2+efi_rts_wq12:25:150
5847992480,247cyclictest15492-21kworker/u16:2+efi_rts_wq11:30:131
5846992480,247cyclictest2869-21kworker/u16:2+efi_rts_wq10:45:150
5846992480,247cyclictest27249-21kworker/u16:2+efi_rts_wq12:35:150
5848992470,246cyclictest9594-21kworker/u16:3+efi_rts_wq08:15:142
5847992470,246cyclictest2869-21kworker/u16:2+efi_rts_wq07:50:141
5848992460,245cyclictest25753-21kworker/u16:0+efi_rts_wq10:33:132
5848992450,244cyclictest2869-21kworker/u16:2+efi_rts_wq10:38:152
5846992440,243cyclictest2869-21kworker/u16:2+efi_rts_wq10:05:150
5847992420,241cyclictest9594-21kworker/u16:3+efi_rts_wq09:10:131
5848992410,240cyclictest22608-21kworker/u16:3+efi_rts_wq12:20:142
5848992390,238cyclictest17972-21kworker/u16:1+efi_rts_wq11:35:132
5849992380,237cyclictest9594-21kworker/u16:3+efi_rts_wq07:55:133
5848992360,235cyclictest9594-21kworker/u16:3+efi_rts_wq07:27:412
5847992360,235cyclictest27249-21kworker/u16:2+efi_rts_wq12:08:321
5848992350,234cyclictest22608-21kworker/u16:3+efi_rts_wq12:15:152
5848992290,228cyclictest2869-21kworker/u16:2+efi_rts_wq10:25:152
5847992290,228cyclictest22608-21kworker/u16:3+efi_rts_wq11:40:151
5848992250,224cyclictest9594-21kworker/u16:3+efi_rts_wq08:37:552
5846992240,223cyclictest9594-21kworker/u16:3+efi_rts_wq09:45:140
5847992220,221cyclictest840-21kworker/u16:3+efi_rts_wq11:20:131
5849992210,220cyclictest2869-21kworker/u16:2+efi_rts_wq09:05:153
5846992210,220cyclictest2869-21kworker/u16:2+efi_rts_wq08:35:140
5849992200,219cyclictest22608-21kworker/u16:3+efi_rts_wq12:33:363
5848992200,219cyclictest2869-21kworker/u16:2+efi_rts_wq10:05:152
5847992200,219cyclictest25753-21kworker/u16:0+efi_rts_wq11:15:151
5846992200,219cyclictest2869-21kworker/u16:2+efi_rts_wq08:40:130
5847992180,217cyclictest2869-21kworker/u16:2+efi_rts_wq09:02:581
5846992180,217cyclictest2869-21kworker/u16:2+efi_rts_wq08:20:130
5849992160,215cyclictest2869-21kworker/u16:2+efi_rts_wq10:03:093
5847992160,215cyclictest25753-21kworker/u16:0+efi_rts_wq10:50:141
5849992130,212cyclictest22608-21kworker/u16:3+efi_rts_wq11:50:143
5848992130,212cyclictest27249-21kworker/u16:2+efi_rts_wq11:45:152
5848992110,210cyclictest2869-21kworker/u16:2+efi_rts_wq09:35:152
5846992100,209cyclictest9594-21kworker/u16:3+efi_rts_wq08:50:140
5848992070,206cyclictest15492-21kworker/u16:2+efi_rts_wq11:18:222
5846992070,206cyclictest2869-21kworker/u16:2+efi_rts_wq10:25:150
5846992060,205cyclictest22608-21kworker/u16:3+efi_rts_wq11:38:260
5846992040,203cyclictest2869-21kworker/u16:2+efi_rts_wq07:52:450
5849992030,202cyclictest25753-21kworker/u16:0+efi_rts_wq10:43:153
5847992030,202cyclictest2869-21kworker/u16:2+efi_rts_wq08:22:511
5846992020,201cyclictest9594-21kworker/u16:3+efi_rts_wq09:18:020
5847992000,199cyclictest2869-21kworker/u16:2+efi_rts_wq08:35:141
5847992000,199cyclictest22608-21kworker/u16:3+efi_rts_wq11:50:131
5848991990,198cyclictest9594-21kworker/u16:3+efi_rts_wq09:55:162
5846991990,198cyclictest9594-21kworker/u16:3+efi_rts_wq09:00:140
5846991980,197cyclictest9594-21kworker/u16:3+efi_rts_wq10:13:110
5846991970,196cyclictest22608-21kworker/u16:3+efi_rts_wq11:40:160
5849991940,193cyclictest9594-21kworker/u16:3+efi_rts_wq10:10:143
5849991940,193cyclictest2869-21kworker/u16:2+efi_rts_wq08:20:123
5847991920,191cyclictest2869-21kworker/u16:2+efi_rts_wq08:47:571
5849991910,190cyclictest22608-21kworker/u16:3+efi_rts_wq12:28:343
5848991910,190cyclictest27249-21kworker/u16:2+efi_rts_wq12:05:142
5848991910,190cyclictest25753-21kworker/u16:0+efi_rts_wq10:40:142
5848991890,187cyclictest25753-21kworker/u16:0+efi_rts_wq11:03:192
5847991840,183cyclictest27249-21kworker/u16:2+efi_rts_wq11:45:161
5847991830,182cyclictest27249-21kworker/u16:2+efi_rts_wq11:58:301
5846991830,182cyclictest9594-21kworker/u16:3+efi_rts_wq08:30:120
5849991810,180cyclictest9594-21kworker/u16:3+efi_rts_wq10:20:143
5849991800,179cyclictest9594-21kworker/u16:3+efi_rts_wq08:52:563
5847991740,173cyclictest25753-21kworker/u16:0+efi_rts_wq11:05:141
5849991730,172cyclictest25753-21kworker/u16:0+efi_rts_wq11:10:153
5849991680,167cyclictest27249-21kworker/u16:2+efi_rts_wq12:35:143
5848991630,162cyclictest2869-21kworker/u16:2+efi_rts_wq09:40:122
5848991600,159cyclictest22608-21kworker/u16:3+efi_rts_wq11:33:242
5846991590,157cyclictest22608-21kworker/u16:3+efi_rts_wq11:55:150
5849991570,156cyclictest2869-21kworker/u16:2+efi_rts_wq09:38:053
5846991570,156cyclictest2869-21kworker/u16:2+efi_rts_wq07:47:450
5848991540,153cyclictest2869-21kworker/u16:2+efi_rts_wq08:07:492
5848991530,152cyclictest2869-21kworker/u16:2+efi_rts_wq09:28:032
5849991520,151cyclictest9594-21kworker/u16:3+efi_rts_wq09:48:073
5849991490,148cyclictest2869-21kworker/u16:2+efi_rts_wq07:15:133
5849991430,142cyclictest27249-21kworker/u16:2+efi_rts_wq12:05:143
5846991420,141cyclictest27249-21kworker/u16:2+efi_rts_wq11:48:280
5846991420,141cyclictest25753-21kworker/u16:0+efi_rts_wq10:40:140
5847991410,140cyclictest9594-21kworker/u16:3+efi_rts_wq10:08:111
5848991400,139cyclictest2869-21kworker/u16:2+efi_rts_wq08:32:532
5849991390,138cyclictest840-21kworker/u16:3+efi_rts_wq11:20:133
5849991390,138cyclictest25753-21kworker/u16:0+efi_rts_wq11:15:133
5849991370,136cyclictest9594-21kworker/u16:3+efi_rts_wq08:05:143
5849991350,134cyclictest22608-21kworker/u16:3+efi_rts_wq11:55:143
5846991310,130cyclictest9594-21kworker/u16:3+efi_rts_wq07:40:130
5849991290,128cyclictest17972-21kworker/u16:1+efi_rts_wq11:35:133
5846991290,128cyclictest22608-21kworker/u16:3+efi_rts_wq11:53:280
5849991280,127cyclictest840-21kworker/u16:3+efi_rts_wq11:08:203
5848991270,126cyclictest27249-21kworker/u16:2+efi_rts_wq12:30:142
5846991270,126cyclictest9594-21kworker/u16:3+efi_rts_wq07:32:410
5849991250,124cyclictest9594-21kworker/u16:3+efi_rts_wq09:43:063
5848991220,121cyclictest15492-21kworker/u16:2+efi_rts_wq11:28:232
5846991220,121cyclictest27249-21kworker/u16:2+efi_rts_wq12:05:160
5846991210,119cyclictest25753-21kworker/u16:0+efi_rts_wq11:15:140
5847991200,119cyclictest9594-21kworker/u16:3+efi_rts_wq08:42:551
5848991180,117cyclictest2869-21kworker/u16:2+efi_rts_wq09:13:002
5849991170,116cyclictest9594-21kworker/u16:3+efi_rts_wq08:30:123
5848991160,115cyclictest25753-21kworker/u16:0+efi_rts_wq10:53:172
5849991150,115cyclictest22608-21kworker/u16:3+efi_rts_wq12:18:333
5849991150,114cyclictest9594-21kworker/u16:3+efi_rts_wq08:10:153
5848991150,114cyclictest27249-21kworker/u16:2+efi_rts_wq12:25:152
5848991120,111cyclictest2869-21kworker/u16:2+efi_rts_wq09:33:042
5847991120,111cyclictest2869-21kworker/u16:2+efi_rts_wq08:00:141
5846991120,111cyclictest840-21kworker/u16:3+efi_rts_wq11:00:130
5846991120,111cyclictest2869-21kworker/u16:2+efi_rts_wq07:37:430
5849993329,4cyclictest795-21snmpd11:01:403
5848993330,2cyclictest795-21snmpd09:49:022
5848993330,2cyclictest795-21snmpd07:45:262
5849993229,3cyclictest795-21snmpd08:19:353
5849993227,4cyclictest795-21snmpd07:53:313
5847993229,2cyclictest795-21snmpd08:32:471
5846993230,2cyclictest795-21snmpd08:49:400
5846993229,2cyclictest795-21snmpd08:06:030
5849993129,2cyclictest795-21snmpd10:18:413
5849993128,3cyclictest795-21snmpd09:57:563
5849993128,2cyclictest795-21snmpd10:45:243
5848993129,2cyclictest795-21snmpd10:55:112
5848993129,2cyclictest795-21snmpd10:24:212
5848993129,2cyclictest795-21snmpd10:19:482
5847993129,2cyclictest795-21snmpd12:19:221
5847993129,2cyclictest795-21snmpd11:37:451
5846993128,2cyclictest795-21snmpd08:16:120
5849993029,1cyclictest795-21snmpd07:40:343
5849993027,2cyclictest795-21snmpd08:37:293
5848993029,1cyclictest795-21snmpd10:10:322
5848993029,1cyclictest795-21snmpd08:24:202
5848993029,1cyclictest795-21snmpd07:31:342
5848993028,2cyclictest795-21snmpd12:04:542
5848993028,2cyclictest795-21snmpd08:26:182
5847993029,1cyclictest795-21snmpd08:53:361
5847993029,1cyclictest795-21snmpd07:12:011
5847993029,1cyclictest26824-21cat10:30:151
5846993029,1cyclictest795-21snmpd12:14:120
5846993029,1cyclictest795-21snmpd09:57:540
5846993028,2cyclictest795-21snmpd12:04:030
5846993027,2cyclictest795-21snmpd07:58:570
5848992929,0cyclictest795-21snmpd11:21:262
5848992928,1cyclictest795-21snmpd11:51:272
5848992928,1cyclictest795-21snmpd08:43:422
5847992928,1cyclictest795-21snmpd10:03:441
5847992927,2cyclictest795-21snmpd07:43:581
5846992928,1cyclictest795-21snmpd11:09:200
5846992928,1cyclictest795-21snmpd09:14:510
5846992928,1cyclictest795-21snmpd07:20:010
5849992828,0cyclictest795-21snmpd10:30:243
5849992828,0cyclictest25753-21kworker/u16:0+atlantic10:36:183
5849992827,1cyclictest795-21snmpd10:25:033
5849992827,1cyclictest795-21snmpd10:09:593
5848992827,1cyclictest795-21snmpd11:56:242
5847992826,2cyclictest795-21snmpd09:06:041
5847992825,2cyclictest795-21snmpd07:36:261
5846992827,1cyclictest795-21snmpd12:16:430
5846992826,2cyclictest795-21snmpd11:11:340
5846992826,2cyclictest795-21snmpd09:52:230
5849992726,1cyclictest795-21snmpd07:45:193
5849992724,3cyclictest795-21snmpd07:27:163
5849992724,2cyclictest795-21snmpd08:56:393
5848992726,1cyclictest795-21snmpd08:12:142
5848992726,1cyclictest795-21snmpd07:23:132
5848992725,2cyclictest795-21snmpd07:35:592
5847992726,1cyclictest795-21snmpd09:25:471
5846992725,2cyclictest795-21snmpd08:26:240
5846992724,3cyclictest795-21snmpd10:50:400
5849992626,0cyclictest22608-21kworker/u16:3+atlantic11:48:063
5848992625,1cyclictest795-21snmpd07:55:502
5847992625,1cyclictest795-21snmpd12:24:341
5846992626,0cyclictest73950irq/132-enp1s010:39:100
5846992625,1cyclictest795-21snmpd12:30:340
5846992625,1cyclictest795-21snmpd09:36:140
5846992625,1cyclictest795-21snmpd09:24:100
5846992624,2cyclictest795-21snmpd11:23:380
5846992623,2cyclictest795-21snmpd10:00:320
5849992522,3cyclictest795-21snmpd12:13:373
5847992523,2cyclictest795-21snmpd09:50:411
5846992523,2cyclictest795-21snmpd08:14:200
5846992523,2cyclictest795-21snmpd07:16:440
5849992423,1cyclictest795-21snmpd09:17:123
5849992422,2cyclictest795-21snmpd11:42:233
5848992423,1cyclictest795-21snmpd11:10:012
5848992423,1cyclictest795-21snmpd09:04:152
5846992423,1cyclictest795-21snmpd08:55:400
5849992323,0cyclictest2869-21kworker/u16:2+atlantic08:04:063
5847992320,2cyclictest795-21snmpd09:56:541
5849992222,0cyclictest9594-21kworker/u16:3+atlantic09:31:343
5849992222,0cyclictest2869-21kworker/u16:2+atlantic08:45:223
5849992217,4cyclictest795-21snmpd08:41:473
5846992221,1cyclictest795-21snmpd10:15:540
5846992221,1cyclictest795-21snmpd09:40:250
5846992221,1cyclictest795-21snmpd07:27:320
5848991918,1cyclictest795-21snmpd09:20:122
5846991917,2cyclictest795-21snmpd08:00:020
5848991615,1cyclictest795-21snmpd07:10:482
5849991412,2cyclictest795-21snmpd09:27:553
5849991312,1cyclictest795-21snmpd07:23:163
5846991312,1cyclictest795-21snmpd11:30:500
5849991111,0cyclictest2869-21kworker/u16:2+atlantic09:10:583
58479987,1cyclictest23830-21cron10:25:001
58479965,1cyclictest19977-21tr12:35:131
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional