You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-30 - 03:30

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Sun Nov 30, 2025 00:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
138262336311,23sleep00-21swapper/019:05:340
141122317303,5sleep20-21swapper/219:09:172
139492316308,5sleep10-21swapper/119:07:121
138962315307,5sleep30-21swapper/319:06:303
14438993030,302cyclictest28433-21kworker/u16:3+efi_rts_wq23:40:163
14435993010,299cyclictest28433-21kworker/u16:3+efi_rts_wq19:15:150
14435992980,297cyclictest28433-21kworker/u16:3+efi_rts_wq21:45:150
14435992980,297cyclictest1097-21kworker/u16:0+efi_rts_wq19:25:130
14438992970,295cyclictest28433-21kworker/u16:3+efi_rts_wq19:35:153
14438992930,292cyclictest28433-21kworker/u16:3+efi_rts_wq00:35:413
14436992930,292cyclictest28433-21kworker/u16:3+efi_rts_wq22:05:151
14438992920,291cyclictest28433-21kworker/u16:3+efi_rts_wq21:40:153
14435992920,291cyclictest28433-21kworker/u16:3+efi_rts_wq22:45:150
14438992910,290cyclictest1097-21kworker/u16:0+efi_rts_wq20:30:143
14436992910,290cyclictest28433-21kworker/u16:3+efi_rts_wq21:05:161
14435992890,288cyclictest28433-21kworker/u16:3+efi_rts_wq20:45:150
14436992870,284cyclictest1097-21kworker/u16:0+efi_rts_wq21:00:141
14438992860,285cyclictest28433-21kworker/u16:3+efi_rts_wq20:20:143
14438992860,285cyclictest1097-21kworker/u16:0+efi_rts_wq21:10:153
14436992850,284cyclictest1097-21kworker/u16:0+efi_rts_wq19:40:151
14438992840,283cyclictest28433-21kworker/u16:3+efi_rts_wq20:40:153
14437992840,283cyclictest1097-21kworker/u16:0+efi_rts_wq20:25:142
14438992830,282cyclictest28433-21kworker/u16:3+efi_rts_wq22:20:143
14437992830,282cyclictest1097-21kworker/u16:0+efi_rts_wq23:15:132
14436992800,279cyclictest28433-21kworker/u16:3+efi_rts_wq23:20:141
14436992800,279cyclictest18202-21kworker/u16:2+efi_rts_wq23:10:131
14438992790,278cyclictest1097-21kworker/u16:0+efi_rts_wq19:25:143
14437992790,278cyclictest28433-21kworker/u16:3+efi_rts_wq23:05:252
14437992780,277cyclictest1097-21kworker/u16:0+efi_rts_wq23:50:142
14437992770,276cyclictest28433-21kworker/u16:3+efi_rts_wq21:25:132
14437992770,275cyclictest28433-21kworker/u16:3+efi_rts_wq23:55:132
14436992770,276cyclictest28433-21kworker/u16:3+efi_rts_wq21:45:151
14437992760,275cyclictest28433-21kworker/u16:3+efi_rts_wq22:35:132
14436992760,275cyclictest1097-21kworker/u16:0+efi_rts_wq23:30:121
14438992750,274cyclictest28433-21kworker/u16:3+efi_rts_wq00:10:143
14438992740,272cyclictest10579-21kworker/u16:1+efi_rts_wq22:50:153
14438992740,272cyclictest10579-21kworker/u16:1+efi_rts_wq22:50:153
14437992740,273cyclictest28433-21kworker/u16:3+efi_rts_wq20:45:152
14435992740,273cyclictest28433-21kworker/u16:3+efi_rts_wq22:35:200
14435992740,273cyclictest1097-21kworker/u16:0+efi_rts_wq19:20:140
14435992740,272cyclictest1097-21kworker/u16:0+efi_rts_wq21:35:140
14437992730,272cyclictest1097-21kworker/u16:0+efi_rts_wq21:55:142
14438992720,271cyclictest28433-21kworker/u16:3+efi_rts_wq00:00:363
14436992720,271cyclictest28433-21kworker/u16:3+efi_rts_wq20:10:161
14436992720,271cyclictest28433-21kworker/u16:3+efi_rts_wq19:24:471
14436992710,270cyclictest1097-21kworker/u16:0+efi_rts_wq20:09:551
14435992700,269cyclictest1097-21kworker/u16:0+efi_rts_wq19:34:480
14436992690,268cyclictest28433-21kworker/u16:3+efi_rts_wq22:40:201
14436992690,268cyclictest28433-21kworker/u16:3+efi_rts_wq00:25:151
14438992680,267cyclictest1097-21kworker/u16:0+efi_rts_wq00:20:143
14436992670,266cyclictest28433-21kworker/u16:3+efi_rts_wq00:05:131
14436992650,264cyclictest1097-21kworker/u16:0+efi_rts_wq20:25:141
14438992640,263cyclictest1097-21kworker/u16:0+efi_rts_wq00:15:133
14437992640,263cyclictest28433-21kworker/u16:3+efi_rts_wq19:39:492
14437992640,263cyclictest1097-21kworker/u16:0+efi_rts_wq20:05:162
14436992640,263cyclictest1097-21kworker/u16:0+efi_rts_wq20:15:141
14435992640,263cyclictest28433-21kworker/u16:3+efi_rts_wq22:00:150
14438992630,262cyclictest28433-21kworker/u16:3+efi_rts_wq19:15:013
14438992610,259cyclictest1097-21kworker/u16:0+efi_rts_wq23:00:153
14437992610,260cyclictest28433-21kworker/u16:3+efi_rts_wq23:25:152
14436992610,260cyclictest1097-21kworker/u16:0+efi_rts_wq23:35:121
14435992610,260cyclictest1097-21kworker/u16:0+efi_rts_wq00:30:140
14435992600,259cyclictest28433-21kworker/u16:3+efi_rts_wq20:35:140
14435992600,259cyclictest1097-21kworker/u16:0+efi_rts_wq19:55:130
14437992580,257cyclictest1097-21kworker/u16:0+efi_rts_wq22:10:122
14435992580,256cyclictest1097-21kworker/u16:0+efi_rts_wq22:30:180
14436992570,256cyclictest1097-21kworker/u16:0+efi_rts_wq20:40:001
14435992570,256cyclictest28433-21kworker/u16:3+efi_rts_wq00:10:140
14438992560,255cyclictest1097-21kworker/u16:0+efi_rts_wq21:35:133
14436992560,255cyclictest28433-21kworker/u16:3+efi_rts_wq21:30:081
14436992560,255cyclictest1097-21kworker/u16:0+efi_rts_wq19:49:511
14436992560,254cyclictest1097-21kworker/u16:0+efi_rts_wq00:00:161
14435992550,253cyclictest1097-21kworker/u16:0+efi_rts_wq21:20:150
14437992540,253cyclictest1097-21kworker/u16:0+efi_rts_wq21:50:142
14435992540,253cyclictest1097-21kworker/u16:0+efi_rts_wq00:00:160
14437992530,252cyclictest1097-21kworker/u16:0+efi_rts_wq20:15:142
14435992530,252cyclictest28433-21kworker/u16:3+efi_rts_wq19:50:140
14438992510,250cyclictest1097-21kworker/u16:0+efi_rts_wq21:05:053
14437992500,249cyclictest1097-21kworker/u16:0+efi_rts_wq21:35:132
14436992480,247cyclictest1097-21kworker/u16:0+efi_rts_wq20:50:131
14438992470,246cyclictest1097-21kworker/u16:0+efi_rts_wq22:55:243
14438992460,245cyclictest28433-21kworker/u16:3+efi_rts_wq23:15:143
14438992450,244cyclictest1097-21kworker/u16:0+efi_rts_wq23:50:143
14436992450,244cyclictest28433-21kworker/u16:3+efi_rts_wq23:55:341
14438992440,242cyclictest28433-21kworker/u16:3+efi_rts_wq22:40:143
14437992430,242cyclictest28433-21kworker/u16:3+efi_rts_wq22:40:132
14438992410,240cyclictest28433-21kworker/u16:3+efi_rts_wq21:00:033
14438992380,237cyclictest1097-21kworker/u16:0+efi_rts_wq23:20:293
14438992370,236cyclictest28433-21kworker/u16:3+efi_rts_wq00:05:143
14435992370,234cyclictest1097-21kworker/u16:0+efi_rts_wq23:35:120
14438992360,235cyclictest28433-21kworker/u16:3+efi_rts_wq22:25:133
14438992360,235cyclictest1097-21kworker/u16:0+efi_rts_wq19:40:143
14436992360,235cyclictest1097-21kworker/u16:0+efi_rts_wq22:30:121
14437992350,234cyclictest28433-21kworker/u16:3+efi_rts_wq21:15:152
14436992350,234cyclictest1097-21kworker/u16:0+efi_rts_wq22:15:161
14436992350,234cyclictest1097-21kworker/u16:0+efi_rts_wq20:30:151
14437992340,233cyclictest28433-21kworker/u16:3+efi_rts_wq22:20:162
14435992340,233cyclictest1097-21kworker/u16:0+efi_rts_wq19:45:140
14437992330,232cyclictest28433-21kworker/u16:3+efi_rts_wq21:05:162
14438992290,228cyclictest28433-21kworker/u16:3+efi_rts_wq23:25:303
14437992290,228cyclictest28433-21kworker/u16:3+efi_rts_wq20:10:152
14437992290,228cyclictest1097-21kworker/u16:0+efi_rts_wq21:30:122
14436992290,228cyclictest1097-21kworker/u16:0+efi_rts_wq00:20:141
14438992280,226cyclictest28433-21kworker/u16:3+efi_rts_wq22:35:133
14438992260,225cyclictest28433-21kworker/u16:3+efi_rts_wq19:30:153
14436992230,222cyclictest1097-21kworker/u16:0+efi_rts_wq00:30:401
14437992220,220cyclictest28433-21kworker/u16:3+efi_rts_wq22:45:152
14437992190,218cyclictest28433-21kworker/u16:3+efi_rts_wq20:00:162
14436992180,217cyclictest28433-21kworker/u16:3+efi_rts_wq19:10:141
14437992160,215cyclictest28433-21kworker/u16:3+efi_rts_wq19:30:152
14435992150,214cyclictest28433-21kworker/u16:3+efi_rts_wq00:35:130
14436992140,213cyclictest1097-21kworker/u16:0+efi_rts_wq21:20:141
14435992120,211cyclictest28433-21kworker/u16:3+efi_rts_wq23:25:140
14436992070,206cyclictest1097-21kworker/u16:0+efi_rts_wq21:15:071
14435992000,199cyclictest28433-21kworker/u16:3+efi_rts_wq23:45:320
14438991960,195cyclictest28433-21kworker/u16:3+efi_rts_wq22:00:163
14437991950,194cyclictest1097-21kworker/u16:0+efi_rts_wq00:30:142
14438991940,192cyclictest1097-21kworker/u16:0+efi_rts_wq22:10:153
14435991930,192cyclictest28433-21kworker/u16:3+efi_rts_wq21:15:150
14435991930,192cyclictest1097-21kworker/u16:0+efi_rts_wq22:55:140
14436991910,190cyclictest28433-21kworker/u16:3+efi_rts_wq20:55:151
14437991830,182cyclictest10579-21kworker/u16:1+efi_rts_wq22:50:152
14437991830,182cyclictest10579-21kworker/u16:1+efi_rts_wq22:50:142
14436991830,181cyclictest1097-21kworker/u16:0+efi_rts_wq22:55:141
14437991770,176cyclictest28433-21kworker/u16:3+efi_rts_wq20:55:152
14436991770,176cyclictest1097-21kworker/u16:0+efi_rts_wq00:15:121
14435991760,175cyclictest18202-21kworker/u16:2+efi_rts_wq23:10:130
14436991740,172cyclictest28433-21kworker/u16:3+efi_rts_wq21:55:131
14437991730,172cyclictest28433-21kworker/u16:3+efi_rts_wq00:25:142
14436991710,170cyclictest28433-21kworker/u16:3+efi_rts_wq22:25:131
14438991700,169cyclictest1097-21kworker/u16:0+efi_rts_wq21:25:083
14436991670,167cyclictest1097-21kworker/u16:0+efi_rts_wq19:19:461
14436991660,165cyclictest28433-21kworker/u16:3+efi_rts_wq20:20:151
14438991650,164cyclictest28433-21kworker/u16:3+efi_rts_wq19:10:133
14438991620,161cyclictest18202-21kworker/u16:2+efi_rts_wq23:10:133
14436991610,160cyclictest28433-21kworker/u16:3+efi_rts_wq21:35:101
14435991570,156cyclictest28433-21kworker/u16:3+efi_rts_wq22:15:160
14438991560,154cyclictest28433-21kworker/u16:3+efi_rts_wq23:45:153
14437991550,154cyclictest28433-21kworker/u16:3+efi_rts_wq23:40:332
14435991550,154cyclictest28433-21kworker/u16:3+efi_rts_wq20:24:580
14437991520,151cyclictest1097-21kworker/u16:0+efi_rts_wq00:15:372
14438991510,150cyclictest28433-21kworker/u16:3+efi_rts_wq20:29:593
14436991500,149cyclictest28433-21kworker/u16:3+efi_rts_wq20:00:171
14438991490,148cyclictest28433-21kworker/u16:3+efi_rts_wq20:35:143
14435991490,148cyclictest1097-21kworker/u16:0+efi_rts_wq23:30:120
14437991480,147cyclictest1097-21kworker/u16:0+efi_rts_wq21:00:142
14438991330,132cyclictest1097-21kworker/u16:0+efi_rts_wq20:50:133
14437991270,126cyclictest1097-21kworker/u16:0+efi_rts_wq22:55:142
14438991220,121cyclictest28433-21kworker/u16:3+efi_rts_wq23:55:133
14438991220,121cyclictest28433-21kworker/u16:3+efi_rts_wq20:45:023
14437991210,120cyclictest28433-21kworker/u16:3+efi_rts_wq21:40:142
14437991190,118cyclictest28433-21kworker/u16:3+efi_rts_wq00:10:382
14437991120,111cyclictest1097-21kworker/u16:0+efi_rts_wq23:00:252
14437991090,108cyclictest28433-21kworker/u16:3+efi_rts_wq22:05:152
14437991060,105cyclictest28433-21kworker/u16:3+efi_rts_wq20:50:012
14435991060,105cyclictest1097-21kworker/u16:0+efi_rts_wq20:35:000
14438991040,103cyclictest1097-21kworker/u16:0+efi_rts_wq19:59:533
14438993429,4cyclictest795-21snmpd22:06:223
14435993330,2cyclictest795-21snmpd22:08:580
14437993230,2cyclictest795-21snmpd22:28:562
14436993230,2cyclictest795-21snmpd00:39:021
14435993230,2cyclictest15107-21cat19:10:160
14438993129,2cyclictest9782-21cat21:30:143
14438993129,2cyclictest795-21snmpd20:56:323
14438993129,2cyclictest795-21snmpd19:46:363
14438993129,1cyclictest795-21snmpd21:53:433
14437993130,1cyclictest795-21snmpd19:58:302
14436993129,2cyclictest795-21snmpd19:52:391
14435993130,1cyclictest795-21snmpd20:27:540
14435993129,2cyclictest21205-21cat00:20:160
14435993128,2cyclictest795-21snmpd21:57:040
14435993128,2cyclictest795-21snmpd20:11:190
14435993128,2cyclictest795-21snmpd20:00:060
14438993029,1cyclictest795-21snmpd20:15:433
14438993029,1cyclictest795-21snmpd00:34:033
14438993027,3cyclictest795-21snmpd19:22:583
14437993029,1cyclictest795-21snmpd20:40:512
14437993029,1cyclictest795-21snmpd20:33:212
14437993028,2cyclictest795-21snmpd23:11:242
14437993028,2cyclictest795-21snmpd19:53:232
14437993028,2cyclictest795-21snmpd19:24:072
14437993028,2cyclictest795-21snmpd00:05:012
14437993028,2cyclictest5351-21cat21:20:162
14437993027,3cyclictest795-21snmpd23:31:252
14436993030,0cyclictest73950irq/132-enp1s023:19:521
14436993029,1cyclictest795-21snmpd22:20:071
14436993029,1cyclictest795-21snmpd20:47:021
14435993029,1cyclictest795-21snmpd23:09:260
14435993029,1cyclictest795-21snmpd21:11:530
14435993029,1cyclictest795-21snmpd20:57:440
14438992929,0cyclictest30569-21kworker/3:0+events21:57:373
14438992929,0cyclictest19984-21kworker/3:1+events00:26:093
14438992929,0cyclictest13771-21kworker/3:2+events21:15:493
14438992929,0cyclictest12087-21kworker/3:0+events20:12:003
14438992929,0cyclictest12087-21kworker/3:0+events20:07:133
14438992929,0cyclictest12087-21kworker/3:0+events20:01:363
14438992929,0cyclictest12087-21kworker/3:0+events19:53:203
14438992928,1cyclictest795-21snmpd21:20:083
14438992928,1cyclictest18459-21kworker/3:2+events23:06:593
14438992927,2cyclictest795-21snmpd22:47:153
14437992928,1cyclictest795-21snmpd23:37:212
14437992928,1cyclictest795-21snmpd22:15:222
14437992927,2cyclictest795-21snmpd22:30:222
14437992927,2cyclictest795-21snmpd19:40:352
14436992929,0cyclictest795-21snmpd21:26:511
14436992929,0cyclictest1097-21kworker/u16:0+atlantic23:43:431
14436992929,0cyclictest1097-21kworker/u16:0+atlantic19:55:271
14436992928,1cyclictest795-21snmpd22:49:391
14436992928,1cyclictest12081-21cat22:50:171
14436992928,1cyclictest12081-21cat22:50:161
14436992927,2cyclictest795-21snmpd20:36:401
14435992928,1cyclictest795-21snmpd19:40:510
14435992927,2cyclictest795-21snmpd23:42:280
14435992927,2cyclictest795-21snmpd22:27:410
14438992828,0cyclictest4690-21kworker/3:1+events22:15:493
14438992828,0cyclictest30569-21kworker/3:0+events21:45:053
14438992827,1cyclictest795-21snmpd22:33:563
14437992827,1cyclictest795-21snmpd00:24:482
14437992827,1cyclictest795-21snmpd00:04:262
14437992827,1cyclictest5997-21cat23:45:162
14437992826,2cyclictest795-21snmpd20:24:062
14436992828,0cyclictest28433-21kworker/u16:3+atlantic21:40:401
14436992828,0cyclictest28433-21kworker/u16:3+atlantic19:34:491
14436992828,0cyclictest1097-21kworker/u16:0+atlantic23:28:461
14436992828,0cyclictest1097-21kworker/u16:0+atlantic21:52:041
14436992828,0cyclictest1097-21kworker/u16:0+atlantic21:11:321
14436992828,0cyclictest1097-21kworker/u16:0+atlantic19:27:011
14436992827,1cyclictest795-21snmpd23:51:191
14436992827,1cyclictest795-21snmpd23:03:181
14436992827,1cyclictest795-21snmpd19:36:511
14436992826,2cyclictest795-21snmpd22:03:331
14435992827,1cyclictest795-21snmpd23:54:500
14435992827,1cyclictest795-21snmpd22:42:190
14435992827,1cyclictest795-21snmpd21:04:350
14438992726,1cyclictest795-21snmpd23:34:283
14438992723,3cyclictest795-21snmpd23:37:103
14437992727,0cyclictest1097-21kworker/u16:0+atlantic19:48:192
14437992726,1cyclictest795-21snmpd19:29:562
14436992727,0cyclictest1097-21kworker/u16:0+events_unbound00:11:191
14436992727,0cyclictest1097-21kworker/u16:0+atlantic22:12:401
14435992726,1cyclictest795-21snmpd23:16:260
14435992726,1cyclictest795-21snmpd21:25:480
14435992726,1cyclictest795-21snmpd21:07:140
14435992726,1cyclictest795-21snmpd19:39:200
14435992726,1cyclictest795-21snmpd00:08:490
14435992725,2cyclictest795-21snmpd23:02:000
14435992725,2cyclictest795-21snmpd21:44:290
14437992626,0cyclictest795-21snmpd00:35:352
14437992625,1cyclictest795-21snmpd23:20:462
14437992624,2cyclictest795-21snmpd19:10:012
14435992625,1cyclictest795-21snmpd21:53:270
14435992524,1cyclictest795-21snmpd22:24:160
14435992524,1cyclictest795-21snmpd20:09:300
14436992423,1cyclictest795-21snmpd22:38:591
14435992423,1cyclictest795-21snmpd23:21:010
14435992423,1cyclictest795-21snmpd22:51:300
14435992423,1cyclictest795-21snmpd22:51:290
14437992322,1cyclictest795-21snmpd22:03:542
14435992323,0cyclictest74150irq/134-enp1s023:56:260
14435992221,1cyclictest795-21snmpd20:17:370
14435992220,2cyclictest795-21snmpd21:32:450
14437992120,1cyclictest795-21snmpd21:12:192
14437991918,1cyclictest795-21snmpd20:35:282
14436991817,1cyclictest795-21snmpd23:47:391
14435991615,1cyclictest795-21snmpd22:13:480
14437991514,1cyclictest795-21snmpd19:19:472
14436991513,2cyclictest795-21snmpd23:06:591
14435991311,2cyclictest795-21snmpd00:25:260
14437991212,0cyclictest28433-21kworker/u16:3+atlantic21:46:232
144359965,1cyclictest24652-21expr20:50:140
144359965,1cyclictest21354-21tr20:40:220
144359954,1cyclictest18658-21tr00:15:120
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional