You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-23 - 18:35

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Sun Nov 23, 2025 12:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137722318311,4sleep30-21swapper/307:09:253
137192317303,5sleep20-21swapper/207:08:442
136812315307,5sleep10-21swapper/107:08:151
134872315308,5sleep00-21swapper/007:05:450
14084993010,300cyclictest28904-21kworker/u16:0+efi_rts_wq10:50:132
14082993000,299cyclictest28904-21kworker/u16:0+efi_rts_wq10:00:120
14085992980,297cyclictest6791-21kworker/u16:3+efi_rts_wq08:55:133
14084992980,297cyclictest15791-21kworker/u16:1+efi_rts_wq07:50:142
14083992980,295cyclictest23365-21kworker/u16:2+efi_rts_wq12:25:101
14085992970,296cyclictest30206-21kworker/u16:2+efi_rts_wq09:30:133
14083992960,294cyclictest7016-21kworker/u16:0+efi_rts_wq11:55:121
14085992940,292cyclictest3705-21kworker/u16:1+efi_rts_wq11:05:133
14084992940,293cyclictest15791-21kworker/u16:1+efi_rts_wq07:15:012
14083992940,293cyclictest30206-21kworker/u16:2+efi_rts_wq09:40:131
14083992930,292cyclictest15791-21kworker/u16:1+efi_rts_wq07:15:141
14085992920,291cyclictest28904-21kworker/u16:0+efi_rts_wq10:55:163
14085992920,291cyclictest26738-21kworker/u16:1+efi_rts_wq12:35:143
14084992920,291cyclictest23365-21kworker/u16:2+efi_rts_wq12:05:132
14085992910,290cyclictest15791-21kworker/u16:1+efi_rts_wq08:00:123
14085992910,290cyclictest15791-21kworker/u16:1+efi_rts_wq08:00:123
14085992880,287cyclictest6791-21kworker/u16:3+efi_rts_wq08:25:133
14085992880,287cyclictest30206-21kworker/u16:2+efi_rts_wq09:45:143
14085992880,287cyclictest28904-21kworker/u16:0+efi_rts_wq10:27:223
14082992880,287cyclictest28904-21kworker/u16:0+efi_rts_wq10:55:140
14084992870,286cyclictest28904-21kworker/u16:0+efi_rts_wq11:20:122
14083992860,285cyclictest6791-21kworker/u16:3+efi_rts_wq08:20:141
14082992850,284cyclictest28904-21kworker/u16:0+efi_rts_wq09:10:120
14082992850,284cyclictest15791-21kworker/u16:1+efi_rts_wq07:31:530
14085992840,283cyclictest2201-21kworker/u16:1+efi_rts_wq09:12:083
14082992840,283cyclictest6791-21kworker/u16:3+efi_rts_wq08:32:030
14085992830,282cyclictest30206-21kworker/u16:2+efi_rts_wq09:20:123
14083992830,282cyclictest30206-21kworker/u16:2+efi_rts_wq10:05:121
14083992820,281cyclictest3705-21kworker/u16:1+efi_rts_wq11:45:131
14082992820,281cyclictest28904-21kworker/u16:0+efi_rts_wq10:35:140
14083992810,280cyclictest26738-21kworker/u16:1+efi_rts_wq12:37:461
14085992800,279cyclictest3705-21kworker/u16:1+efi_rts_wq11:50:133
14085992800,279cyclictest28904-21kworker/u16:0+efi_rts_wq07:10:133
14085992770,274cyclictest6791-21kworker/u16:3+efi_rts_wq08:40:133
14082992770,276cyclictest28904-21kworker/u16:0+efi_rts_wq09:35:130
14082992770,276cyclictest15791-21kworker/u16:1+efi_rts_wq07:40:150
14083992760,275cyclictest28904-21kworker/u16:0+efi_rts_wq09:02:061
14082992750,274cyclictest23365-21kworker/u16:2+efi_rts_wq12:30:150
14083992740,273cyclictest23365-21kworker/u16:2+efi_rts_wq12:30:151
14083992730,272cyclictest23365-21kworker/u16:2+efi_rts_wq12:20:131
14084992710,270cyclictest6791-21kworker/u16:3+efi_rts_wq09:05:142
14082992710,270cyclictest28904-21kworker/u16:0+efi_rts_wq09:55:130
14085992700,269cyclictest23365-21kworker/u16:2+efi_rts_wq12:00:133
14083992700,269cyclictest28904-21kworker/u16:0+efi_rts_wq09:25:151
14082992700,269cyclictest28904-21kworker/u16:0+efi_rts_wq10:15:150
14085992690,268cyclictest30206-21kworker/u16:2+efi_rts_wq10:10:153
14083992690,268cyclictest28904-21kworker/u16:0+efi_rts_wq09:50:181
14085992640,263cyclictest6791-21kworker/u16:3+efi_rts_wq08:15:143
14085992640,263cyclictest28904-21kworker/u16:0+efi_rts_wq09:00:133
14083992640,263cyclictest3705-21kworker/u16:1+efi_rts_wq10:45:111
14085992630,262cyclictest30206-21kworker/u16:2+efi_rts_wq10:30:133
14083992630,262cyclictest7016-21kworker/u16:0+efi_rts_wq12:10:141
14083992630,262cyclictest28904-21kworker/u16:0+efi_rts_wq10:37:241
14082992630,262cyclictest6791-21kworker/u16:3+efi_rts_wq08:25:130
14083992620,261cyclictest28904-21kworker/u16:0+efi_rts_wq07:25:121
14082992620,259cyclictest28904-21kworker/u16:0+efi_rts_wq08:50:120
14085992610,260cyclictest28904-21kworker/u16:0+efi_rts_wq07:35:123
14083992590,258cyclictest3705-21kworker/u16:1+efi_rts_wq11:10:131
14085992580,257cyclictest28904-21kworker/u16:0+efi_rts_wq07:25:123
14083992580,257cyclictest30206-21kworker/u16:2+efi_rts_wq09:15:121
14082992580,257cyclictest30206-21kworker/u16:2+efi_rts_wq09:40:130
14082992560,255cyclictest23365-21kworker/u16:2+efi_rts_wq12:00:130
14083992550,254cyclictest28904-21kworker/u16:0+efi_rts_wq07:30:121
14083992540,253cyclictest23365-21kworker/u16:2+efi_rts_wq12:15:141
14082992540,253cyclictest7016-21kworker/u16:0+efi_rts_wq12:10:150
14083992530,252cyclictest30206-21kworker/u16:2+efi_rts_wq10:25:141
14082992530,252cyclictest3705-21kworker/u16:1+efi_rts_wq11:20:120
14082992530,252cyclictest23365-21kworker/u16:2+efi_rts_wq11:40:130
14085992520,251cyclictest28904-21kworker/u16:0+efi_rts_wq07:56:573
14085992510,249cyclictest28904-21kworker/u16:0+efi_rts_wq07:20:123
14083992510,250cyclictest3705-21kworker/u16:1+efi_rts_wq11:20:121
14083992510,250cyclictest23365-21kworker/u16:2+efi_rts_wq12:02:391
14083992500,249cyclictest28904-21kworker/u16:0+efi_rts_wq08:17:011
14084992470,246cyclictest15791-21kworker/u16:1+efi_rts_wq08:05:132
14083992470,246cyclictest28904-21kworker/u16:0+efi_rts_wq08:10:141
14085992460,245cyclictest28904-21kworker/u16:0+efi_rts_wq08:52:053
14085992420,241cyclictest23365-21kworker/u16:2+efi_rts_wq11:35:153
14083992420,241cyclictest6791-21kworker/u16:3+efi_rts_wq08:35:131
14083992380,237cyclictest28904-21kworker/u16:0+efi_rts_wq09:35:131
14085992360,235cyclictest28904-21kworker/u16:0+efi_rts_wq08:45:143
14082992360,235cyclictest28904-21kworker/u16:0+efi_rts_wq07:35:120
14085992350,234cyclictest6791-21kworker/u16:3+efi_rts_wq08:37:043
14084992310,229cyclictest28904-21kworker/u16:0+efi_rts_wq10:55:152
14083992300,229cyclictest6791-21kworker/u16:3+efi_rts_wq08:30:131
14085992280,227cyclictest15791-21kworker/u16:1+efi_rts_wq07:40:143
14084992250,224cyclictest23365-21kworker/u16:2+efi_rts_wq11:40:132
14083992250,224cyclictest28904-21kworker/u16:0+efi_rts_wq10:50:131
14085992230,222cyclictest23365-21kworker/u16:2+efi_rts_wq12:17:433
14085992220,221cyclictest28904-21kworker/u16:0+efi_rts_wq10:02:173
14083992220,221cyclictest28904-21kworker/u16:0+efi_rts_wq11:30:131
14083992210,220cyclictest28904-21kworker/u16:0+efi_rts_wq10:20:141
14083992210,220cyclictest23365-21kworker/u16:2+efi_rts_wq11:35:141
14082992210,220cyclictest28904-21kworker/u16:0+efi_rts_wq10:52:260
14084992190,218cyclictest15791-21kworker/u16:1+efi_rts_wq07:45:142
14084992160,215cyclictest28904-21kworker/u16:0+efi_rts_wq10:40:132
14084992150,214cyclictest3705-21kworker/u16:1+efi_rts_wq11:00:132
14084992150,214cyclictest28904-21kworker/u16:0+efi_rts_wq09:00:132
14085992140,213cyclictest28904-21kworker/u16:0+efi_rts_wq09:57:163
14085992120,211cyclictest3705-21kworker/u16:1+efi_rts_wq10:45:123
14083992120,210cyclictest15791-21kworker/u16:1+efi_rts_wq08:00:121
14083992120,210cyclictest15791-21kworker/u16:1+efi_rts_wq08:00:121
14083992070,206cyclictest23365-21kworker/u16:2+efi_rts_wq11:25:121
14083992040,203cyclictest28904-21kworker/u16:0+efi_rts_wq07:46:551
14084992030,202cyclictest6791-21kworker/u16:3+efi_rts_wq08:15:152
14083992020,201cyclictest28904-21kworker/u16:0+efi_rts_wq10:32:231
14083992020,201cyclictest15791-21kworker/u16:1+efi_rts_wq07:11:491
14082992020,201cyclictest3705-21kworker/u16:1+efi_rts_wq11:05:120
14083991990,198cyclictest28904-21kworker/u16:0+efi_rts_wq09:10:121
14083991990,196cyclictest3705-21kworker/u16:1+efi_rts_wq11:50:131
14085991970,196cyclictest6791-21kworker/u16:3+efi_rts_wq09:07:073
14085991950,194cyclictest3705-21kworker/u16:1+efi_rts_wq11:15:143
14085991930,192cyclictest28904-21kworker/u16:0+efi_rts_wq09:25:153
14083991890,188cyclictest28904-21kworker/u16:0+efi_rts_wq08:42:051
14085991870,186cyclictest23365-21kworker/u16:2+efi_rts_wq12:27:453
14085991850,184cyclictest30206-21kworker/u16:2+efi_rts_wq10:17:203
14084991820,181cyclictest28904-21kworker/u16:0+efi_rts_wq09:25:162
14082991820,180cyclictest6791-21kworker/u16:3+efi_rts_wq08:12:000
14084991810,180cyclictest7016-21kworker/u16:0+efi_rts_wq11:52:372
14083991810,180cyclictest28904-21kworker/u16:0+efi_rts_wq10:40:131
14085991800,179cyclictest28904-21kworker/u16:0+efi_rts_wq07:30:123
14082991760,176cyclictest28904-21kworker/u16:0+efi_rts_wq09:52:150
14082991760,175cyclictest23365-21kworker/u16:2+efi_rts_wq12:15:130
14082991750,174cyclictest30206-21kworker/u16:2+efi_rts_wq09:30:130
14083991710,170cyclictest15791-21kworker/u16:1+efi_rts_wq08:05:131
14082991710,170cyclictest3705-21kworker/u16:1+efi_rts_wq11:50:140
14085991650,164cyclictest6791-21kworker/u16:3+efi_rts_wq08:30:133
14085991650,164cyclictest28904-21kworker/u16:0+efi_rts_wq10:35:143
14084991640,163cyclictest28904-21kworker/u16:0+efi_rts_wq09:50:182
14083991600,159cyclictest3705-21kworker/u16:1+efi_rts_wq11:15:131
14082991590,157cyclictest3705-21kworker/u16:1+efi_rts_wq11:10:130
14085991580,157cyclictest28904-21kworker/u16:0+efi_rts_wq08:06:593
14083991550,154cyclictest28904-21kworker/u16:0+efi_rts_wq07:41:551
14082991500,149cyclictest30206-21kworker/u16:2+efi_rts_wq10:30:130
14084991480,147cyclictest6791-21kworker/u16:3+efi_rts_wq08:35:142
14083991480,147cyclictest3705-21kworker/u16:1+efi_rts_wq11:05:131
14083991470,146cyclictest28904-21kworker/u16:0+efi_rts_wq09:22:101
14085991450,144cyclictest28904-21kworker/u16:0+efi_rts_wq09:17:093
14085991440,143cyclictest28904-21kworker/u16:0+efi_rts_wq07:16:503
14085991420,141cyclictest28904-21kworker/u16:0+efi_rts_wq07:51:563
14083991420,141cyclictest3705-21kworker/u16:1+efi_rts_wq11:42:351
14084991300,129cyclictest3705-21kworker/u16:1+efi_rts_wq11:10:132
14082991250,125cyclictest6791-21kworker/u16:3+efi_rts_wq08:40:130
14085991230,122cyclictest30206-21kworker/u16:2+efi_rts_wq09:42:133
14082991230,122cyclictest7016-21kworker/u16:0+efi_rts_wq12:22:430
14084991190,118cyclictest30206-21kworker/u16:2+efi_rts_wq09:15:132
14085991170,116cyclictest23365-21kworker/u16:2+efi_rts_wq11:32:333
14082991150,113cyclictest7016-21kworker/u16:0+efi_rts_wq11:55:120
14082991130,113cyclictest7016-21kworker/u16:0+efi_rts_wq12:07:400
14082991130,113cyclictest28904-21kworker/u16:0+efi_rts_wq07:21:510
14082991130,112cyclictest28904-21kworker/u16:0+efi_rts_wq10:20:140
14083991120,111cyclictest30206-21kworker/u16:2+efi_rts_wq09:30:131
14083991100,109cyclictest28904-21kworker/u16:0+efi_rts_wq11:02:281
14084991080,107cyclictest23365-21kworker/u16:2+efi_rts_wq11:47:362
14084991080,107cyclictest15791-21kworker/u16:1+efi_rts_wq07:55:152
14084993630,5cyclictest795-21snmpd11:19:312
14084993429,4cyclictest795-21snmpd11:34:172
14084993330,3cyclictest795-21snmpd10:21:392
14084993329,4cyclictest795-21snmpd08:52:512
14084993328,4cyclictest795-21snmpd07:38:462
14084993229,3cyclictest795-21snmpd09:35:482
14084993229,2cyclictest795-21snmpd12:29:032
14084993229,2cyclictest795-21snmpd09:21:342
14084993229,2cyclictest795-21snmpd07:26:582
14084993227,4cyclictest795-21snmpd11:35:352
14082993230,2cyclictest795-21snmpd07:26:000
14084993130,1cyclictest795-21snmpd09:42:472
14084993129,2cyclictest804-21ntpd09:33:142
14084993129,2cyclictest795-21snmpd11:28:592
14084993129,2cyclictest26487-21cat10:10:172
14084993129,1cyclictest795-21snmpd10:47:162
14084993129,1cyclictest795-21snmpd10:19:182
14084993128,2cyclictest804-21ntpd09:58:142
14084993128,2cyclictest795-21snmpd10:26:032
14084993128,2cyclictest795-21snmpd10:08:152
14082993129,2cyclictest795-21snmpd10:41:330
14082993129,2cyclictest795-21snmpd10:11:330
14082993129,2cyclictest795-21snmpd07:18:000
14082993128,2cyclictest795-21snmpd07:55:100
14085993029,1cyclictest795-21snmpd12:10:273
14085993029,1cyclictest795-21snmpd12:05:523
14085993029,1cyclictest795-21snmpd08:12:263
14085993028,2cyclictest795-21snmpd11:59:453
14085993028,2cyclictest795-21snmpd07:45:553
14085993028,2cyclictest12044-21cat08:20:163
14084993030,0cyclictest23538-21kworker/2:1+events09:14:122
14084993029,1cyclictest795-21snmpd12:15:572
14084993029,1cyclictest795-21snmpd10:34:092
14084993029,1cyclictest795-21snmpd08:26:182
14084993029,1cyclictest18241-21kworker/2:1+events11:07:422
14084993029,1cyclictest13677-21kworker/2:1+events12:03:562
14084993028,1cyclictest795-21snmpd09:46:452
14084993028,1cyclictest795-21snmpd08:30:442
14084993026,3cyclictest795-21snmpd12:11:062
14083993029,1cyclictest795-21snmpd09:58:051
14083993029,1cyclictest795-21snmpd08:28:081
14083993028,2cyclictest795-21snmpd08:59:361
14082993029,1cyclictest795-21snmpd12:25:300
14082993029,1cyclictest795-21snmpd10:48:280
14082993029,1cyclictest795-21snmpd09:03:040
14085992928,1cyclictest795-21snmpd11:00:523
14085992928,1cyclictest795-21snmpd09:39:323
14085992928,1cyclictest27149-21cat11:20:143
14084992929,0cyclictest23538-21kworker/2:1+events10:35:152
14084992929,0cyclictest23538-21kworker/2:1+events10:01:482
14084992929,0cyclictest23538-21kworker/2:1+events08:55:212
14084992929,0cyclictest23538-21kworker/2:1+events08:46:112
14084992929,0cyclictest23538-21kworker/2:1+events08:43:482
14084992929,0cyclictest23538-21kworker/2:1+events08:22:122
14084992929,0cyclictest23538-21kworker/2:1+events07:30:212
14084992929,0cyclictest23538-21kworker/2:1+events07:23:202
14084992929,0cyclictest23538-21kworker/2:1+events07:12:202
14084992929,0cyclictest13677-21kworker/2:1+events12:36:282
14084992929,0cyclictest13677-21kworker/2:1+events12:30:122
14084992928,1cyclictest795-21snmpd07:40:202
14084992926,2cyclictest795-21snmpd12:22:152
14083992928,1cyclictest795-21snmpd08:54:511
14082992928,1cyclictest795-21snmpd11:46:470
14082992928,1cyclictest795-21snmpd08:20:380
14082992927,2cyclictest795-21snmpd11:29:050
14085992828,0cyclictest795-21snmpd10:41:483
14085992828,0cyclictest26738-21kworker/u16:1+atlantic12:33:443
14085992827,1cyclictest795-21snmpd10:09:393
14085992827,1cyclictest12226-21cat10:50:153
14085992826,2cyclictest795-21snmpd12:21:063
14085992826,2cyclictest795-21snmpd11:25:503
14084992828,0cyclictest23538-21kworker/2:1+events08:10:202
14084992827,1cyclictest795-21snmpd08:00:202
14084992827,1cyclictest795-21snmpd08:00:192
14084992827,1cyclictest4661-21kworker/2:0+events11:55:062
14083992828,0cyclictest6791-21kworker/u16:3+atlantic09:06:041
14083992827,1cyclictest795-21snmpd10:17:451
14083992827,1cyclictest795-21snmpd10:02:141
14083992827,1cyclictest795-21snmpd09:45:531
14083992826,2cyclictest795-21snmpd12:05:301
14083992826,2cyclictest795-21snmpd08:47:271
14082992828,0cyclictest28904-21kworker/u16:0+atlantic11:15:300
14082992827,1cyclictest795-21snmpd08:07:590
14082992826,2cyclictest795-21snmpd09:25:400
14082992826,2cyclictest795-21snmpd08:57:270
14082992826,2cyclictest32675-21cat10:25:150
14085992727,0cyclictest795-21snmpd10:20:393
14082992727,0cyclictest795-21snmpd08:17:050
14082992727,0cyclictest30303-21kworker/0:0+events_freezable11:31:400
14082992727,0cyclictest26890-21kworker/0:2+events_freezable11:01:060
14082992726,1cyclictest795-21snmpd07:53:280
14082992725,2cyclictest795-21snmpd08:47:330
14082992725,2cyclictest795-21snmpd08:03:140
14082992725,2cyclictest795-21snmpd08:03:140
14083992624,2cyclictest795-21snmpd07:58:401
14082992625,1cyclictest795-21snmpd11:35:200
14085992523,2cyclictest795-21snmpd11:45:483
14085992522,2cyclictest795-21snmpd11:40:113
14082992524,1cyclictest795-21snmpd09:20:010
14085992423,1cyclictest795-21snmpd09:54:203
14082992423,1cyclictest795-21snmpd09:15:340
14082992422,2cyclictest795-21snmpd08:35:360
14082992322,1cyclictest795-21snmpd09:45:170
14082992321,2cyclictest795-21snmpd10:06:420
14082992222,0cyclictest15791-21kworker/u16:1+atlantic07:47:520
14083992121,0cyclictest74050irq/133-enp1s010:55:161
14083992120,1cyclictest795-21snmpd10:14:571
14083992120,1cyclictest795-21snmpd07:38:011
14082991918,1cyclictest795-21snmpd07:10:210
14085991716,1cyclictest795-21snmpd11:14:163
14083991514,1cyclictest795-21snmpd07:50:161
14083991414,0cyclictest15791-21kworker/u16:1+atlantic07:22:141
1408299119,2cyclictest795-21snmpd12:36:400
140829960,6cyclictest0-21swapper/009:09:100
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional