You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-05 - 06:58

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Fri Dec 05, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
294042333311,4sleep10-21swapper/119:05:381
294982331302,5sleep30-21swapper/319:06:523
295952319303,6sleep00-21swapper/019:08:060
295822319304,5sleep20-21swapper/219:07:552
30118993010,299cyclictest24200-21kworker/u16:0+efi_rts_wq19:45:152
30116993000,299cyclictest3607-21kworker/u16:2+efi_rts_wq21:00:061
30116993000,298cyclictest5085-21kworker/u16:0+efi_rts_wq23:15:141
30116992970,296cyclictest16740-21kworker/u16:1+efi_rts_wq23:40:131
30116992960,295cyclictest16740-21kworker/u16:1+efi_rts_wq23:50:121
30115992960,295cyclictest24200-21kworker/u16:0+efi_rts_wq20:55:150
30118992950,294cyclictest5085-21kworker/u16:0+efi_rts_wq23:25:142
30118992940,292cyclictest16740-21kworker/u16:1+efi_rts_wq00:00:152
30115992940,293cyclictest3607-21kworker/u16:2+efi_rts_wq21:25:150
30118992930,292cyclictest7146-21kworker/u16:3+efi_rts_wq22:10:152
30116992930,292cyclictest24200-21kworker/u16:0+efi_rts_wq22:00:131
30116992930,292cyclictest24200-21kworker/u16:0+efi_rts_wq19:34:511
30115992930,292cyclictest3607-21kworker/u16:2+efi_rts_wq21:30:190
30118992920,291cyclictest3607-21kworker/u16:2+efi_rts_wq20:50:162
30118992910,289cyclictest3607-21kworker/u16:2+efi_rts_wq21:40:122
30116992910,290cyclictest24200-21kworker/u16:0+efi_rts_wq20:45:131
30118992890,288cyclictest7146-21kworker/u16:3+efi_rts_wq22:50:152
30115992890,288cyclictest7146-21kworker/u16:3+efi_rts_wq22:15:110
30115992880,287cyclictest24200-21kworker/u16:0+efi_rts_wq20:45:140
30118992870,286cyclictest3607-21kworker/u16:2+efi_rts_wq21:30:182
30116992870,286cyclictest24200-21kworker/u16:0+efi_rts_wq19:20:111
30121992860,285cyclictest7146-21kworker/u16:3+efi_rts_wq22:50:143
30115992860,285cyclictest2557-21kworker/u16:1+efi_rts_wq22:55:280
30115992860,285cyclictest24200-21kworker/u16:0+efi_rts_wq21:45:140
30115992860,284cyclictest7146-21kworker/u16:3+efi_rts_wq22:35:140
30116992850,284cyclictest7146-21kworker/u16:3+efi_rts_wq22:25:221
30116992830,281cyclictest3607-21kworker/u16:2+efi_rts_wq21:55:161
30116992820,281cyclictest5085-21kworker/u16:0+efi_rts_wq23:25:321
30116992820,281cyclictest3607-21kworker/u16:2+efi_rts_wq19:55:151
30116992820,280cyclictest7146-21kworker/u16:3+efi_rts_wq23:00:131
30115992820,281cyclictest7146-21kworker/u16:3+efi_rts_wq22:25:140
30116992790,278cyclictest7146-21kworker/u16:3+efi_rts_wq00:30:451
30115992790,278cyclictest3607-21kworker/u16:2+efi_rts_wq21:55:160
30116992760,275cyclictest24200-21kworker/u16:0+efi_rts_wq21:35:131
30115992760,273cyclictest16740-21kworker/u16:1+efi_rts_wq23:50:130
30121992750,274cyclictest5085-21kworker/u16:0+efi_rts_wq23:25:143
30118992750,274cyclictest16740-21kworker/u16:1+efi_rts_wq00:15:132
30116992740,273cyclictest16740-21kworker/u16:1+efi_rts_wq00:05:131
30118992730,272cyclictest7146-21kworker/u16:3+efi_rts_wq23:05:162
30116992730,272cyclictest3607-21kworker/u16:2+efi_rts_wq20:10:161
30118992710,270cyclictest7146-21kworker/u16:3+efi_rts_wq00:20:132
30116992700,269cyclictest2557-21kworker/u16:1+efi_rts_wq22:45:141
30118992690,268cyclictest3607-21kworker/u16:2+efi_rts_wq19:15:122
30118992680,267cyclictest3607-21kworker/u16:2+efi_rts_wq21:20:102
30115992660,265cyclictest24200-21kworker/u16:0+efi_rts_wq20:40:140
30115992640,263cyclictest16740-21kworker/u16:1+efi_rts_wq00:05:120
30118992630,262cyclictest3607-21kworker/u16:2+efi_rts_wq21:05:162
30116992630,262cyclictest5085-21kworker/u16:0+efi_rts_wq23:30:321
30118992620,261cyclictest24200-21kworker/u16:0+efi_rts_wq21:25:122
30118992610,260cyclictest2557-21kworker/u16:1+efi_rts_wq22:20:152
30118992600,259cyclictest3607-21kworker/u16:2+efi_rts_wq21:50:152
30115992600,259cyclictest24200-21kworker/u16:0+efi_rts_wq22:00:130
30121992590,258cyclictest7146-21kworker/u16:3+efi_rts_wq23:55:163
30121992590,258cyclictest7146-21kworker/u16:3+efi_rts_wq22:55:153
30121992590,258cyclictest3607-21kworker/u16:2+efi_rts_wq19:35:123
30116992590,258cyclictest3607-21kworker/u16:2+efi_rts_wq19:50:121
30118992580,257cyclictest3607-21kworker/u16:2+efi_rts_wq19:55:152
30116992580,257cyclictest24200-21kworker/u16:0+efi_rts_wq21:10:121
30118992570,256cyclictest3607-21kworker/u16:2+efi_rts_wq20:00:152
30118992570,256cyclictest3607-21kworker/u16:2+efi_rts_wq20:00:142
30118992560,255cyclictest3607-21kworker/u16:2+efi_rts_wq21:45:172
30118992560,255cyclictest3607-21kworker/u16:2+efi_rts_wq20:30:202
30118992560,255cyclictest3607-21kworker/u16:2+efi_rts_wq20:14:592
30118992540,253cyclictest24200-21kworker/u16:0+efi_rts_wq20:05:142
30115992540,253cyclictest24200-21kworker/u16:0+efi_rts_wq20:15:130
30115992530,252cyclictest24200-21kworker/u16:0+efi_rts_wq20:50:040
30118992510,250cyclictest24200-21kworker/u16:0+efi_rts_wq20:25:132
30118992500,248cyclictest7146-21kworker/u16:3+efi_rts_wq22:35:142
30115992480,247cyclictest7146-21kworker/u16:3+efi_rts_wq22:50:260
30115992470,246cyclictest3607-21kworker/u16:2+efi_rts_wq20:30:190
30118992460,245cyclictest3607-21kworker/u16:2+efi_rts_wq21:15:152
30116992460,245cyclictest24200-21kworker/u16:0+efi_rts_wq19:40:121
30116992450,244cyclictest3607-21kworker/u16:2+efi_rts_wq21:15:151
30116992450,244cyclictest3607-21kworker/u16:2+efi_rts_wq20:00:161
30116992450,244cyclictest3607-21kworker/u16:2+efi_rts_wq20:00:151
30118992420,241cyclictest24200-21kworker/u16:0+efi_rts_wq19:25:122
30116992420,241cyclictest3607-21kworker/u16:2+efi_rts_wq21:50:121
30115992400,239cyclictest3607-21kworker/u16:2+efi_rts_wq19:39:530
30118992370,235cyclictest5085-21kworker/u16:0+efi_rts_wq23:30:142
30116992370,236cyclictest7146-21kworker/u16:3+efi_rts_wq00:20:141
30115992350,234cyclictest3607-21kworker/u16:2+efi_rts_wq19:14:460
30116992340,233cyclictest5085-21kworker/u16:0+efi_rts_wq23:20:131
30116992320,231cyclictest24200-21kworker/u16:0+efi_rts_wq20:30:001
30115992320,231cyclictest16740-21kworker/u16:1+efi_rts_wq00:25:170
30116992310,230cyclictest3607-21kworker/u16:2+efi_rts_wq20:20:141
30116992290,228cyclictest24200-21kworker/u16:0+efi_rts_wq20:35:131
30115992290,228cyclictest3607-21kworker/u16:2+efi_rts_wq19:55:150
30115992290,227cyclictest2557-21kworker/u16:1+efi_rts_wq22:40:150
30116992280,226cyclictest7146-21kworker/u16:3+efi_rts_wq22:05:141
30121992270,226cyclictest16740-21kworker/u16:1+efi_rts_wq00:00:383
30118992270,226cyclictest7146-21kworker/u16:3+efi_rts_wq00:30:152
30121992260,225cyclictest24200-21kworker/u16:0+efi_rts_wq19:29:493
30115992260,225cyclictest7146-21kworker/u16:3+efi_rts_wq00:20:430
30116992250,222cyclictest7146-21kworker/u16:3+efi_rts_wq00:35:171
30118992230,222cyclictest24200-21kworker/u16:0+efi_rts_wq19:10:132
30116992230,222cyclictest7146-21kworker/u16:3+efi_rts_wq23:55:151
30118992220,221cyclictest24200-21kworker/u16:0+efi_rts_wq21:10:122
30121992200,219cyclictest5085-21kworker/u16:0+efi_rts_wq23:30:143
30121992190,216cyclictest5085-21kworker/u16:0+efi_rts_wq23:10:173
30116992170,215cyclictest7146-21kworker/u16:3+efi_rts_wq00:10:151
30116992140,213cyclictest24200-21kworker/u16:0+efi_rts_wq20:19:581
30115992110,210cyclictest16740-21kworker/u16:1+efi_rts_wq23:45:140
30116992090,208cyclictest24200-21kworker/u16:0+efi_rts_wq20:05:141
30118992070,206cyclictest7146-21kworker/u16:3+efi_rts_wq23:40:342
30118992060,205cyclictest7146-21kworker/u16:3+efi_rts_wq00:35:172
30118992060,205cyclictest16740-21kworker/u16:1+efi_rts_wq23:35:142
30116992050,203cyclictest16740-21kworker/u16:1+efi_rts_wq00:00:151
30121992030,202cyclictest5085-21kworker/u16:0+efi_rts_wq23:15:303
30115992020,201cyclictest7146-21kworker/u16:3+efi_rts_wq23:00:130
30116991960,195cyclictest3607-21kworker/u16:2+efi_rts_wq20:55:061
30115991950,194cyclictest5085-21kworker/u16:0+efi_rts_wq23:15:140
30116991930,192cyclictest24200-21kworker/u16:0+efi_rts_wq21:30:121
30118991890,188cyclictest24200-21kworker/u16:0+efi_rts_wq19:40:122
30118991870,186cyclictest16740-21kworker/u16:1+efi_rts_wq00:25:432
30118991830,182cyclictest24200-21kworker/u16:0+efi_rts_wq20:35:142
30116991820,181cyclictest7146-21kworker/u16:3+efi_rts_wq22:15:111
30118991810,180cyclictest24200-21kworker/u16:0+efi_rts_wq21:00:182
30118991800,179cyclictest7146-21kworker/u16:3+efi_rts_wq23:55:162
30118991800,179cyclictest7146-21kworker/u16:3+efi_rts_wq23:50:362
30121991790,178cyclictest7146-21kworker/u16:3+efi_rts_wq23:05:153
30121991790,178cyclictest7146-21kworker/u16:3+efi_rts_wq22:15:203
30116991780,177cyclictest24200-21kworker/u16:0+efi_rts_wq21:20:131
30118991720,171cyclictest3607-21kworker/u16:2+efi_rts_wq19:30:122
30116991720,171cyclictest24200-21kworker/u16:0+efi_rts_wq19:49:551
30115991700,169cyclictest7146-21kworker/u16:3+efi_rts_wq00:35:450
30118991690,167cyclictest2557-21kworker/u16:1+efi_rts_wq22:30:172
30118991670,166cyclictest7146-21kworker/u16:3+efi_rts_wq22:45:252
30121991660,165cyclictest24200-21kworker/u16:0+efi_rts_wq20:25:133
30118991660,165cyclictest24200-21kworker/u16:0+efi_rts_wq22:00:172
30115991620,161cyclictest3607-21kworker/u16:2+efi_rts_wq20:20:130
30118991590,158cyclictest5085-21kworker/u16:0+efi_rts_wq23:20:132
30116991510,150cyclictest16740-21kworker/u16:1+efi_rts_wq23:35:141
30116991480,147cyclictest7146-21kworker/u16:3+efi_rts_wq22:30:241
30121991460,145cyclictest24200-21kworker/u16:0+efi_rts_wq21:35:123
30118991450,145cyclictest5085-21kworker/u16:0+efi_rts_wq23:10:292
30115991400,139cyclictest3607-21kworker/u16:2+efi_rts_wq20:10:150
30116991370,135cyclictest5085-21kworker/u16:0+efi_rts_wq23:10:171
30116991360,135cyclictest24200-21kworker/u16:0+efi_rts_wq20:40:021
30118991340,134cyclictest16740-21kworker/u16:1+efi_rts_wq00:05:392
30118991310,130cyclictest2557-21kworker/u16:1+efi_rts_wq22:40:262
30118991300,129cyclictest7146-21kworker/u16:3+efi_rts_wq22:25:142
30121991270,126cyclictest2557-21kworker/u16:1+efi_rts_wq22:45:143
30116991270,126cyclictest3607-21kworker/u16:2+efi_rts_wq19:19:481
30115991230,122cyclictest3607-21kworker/u16:2+efi_rts_wq21:05:170
30115991200,119cyclictest24200-21kworker/u16:0+efi_rts_wq19:44:530
30116991120,111cyclictest16740-21kworker/u16:1+efi_rts_wq23:45:361
30115991100,109cyclictest7146-21kworker/u16:3+efi_rts_wq00:10:410
30116991040,103cyclictest16740-21kworker/u16:1+efi_rts_wq00:25:171
30121993330,2cyclictest795-21snmpd19:45:503
30121993230,2cyclictest795-21snmpd00:24:513
30121993229,3cyclictest795-21snmpd21:46:193
30121993229,2cyclictest804-21ntpd22:23:153
30121993229,2cyclictest795-21snmpd22:12:343
30121993229,2cyclictest795-21snmpd20:31:233
30121993228,4cyclictest795-21snmpd20:55:463
30121993227,4cyclictest795-21snmpd19:41:023
30116993229,2cyclictest795-21snmpd20:31:551
30116993228,4cyclictest795-21snmpd22:41:111
30115993230,2cyclictest795-21snmpd23:36:310
30121993129,2cyclictest804-21ntpd00:18:153
30121993129,2cyclictest795-21snmpd19:19:313
30121993129,2cyclictest795-21snmpd19:12:563
30115993130,1cyclictest795-21snmpd23:21:150
30115993129,2cyclictest795-21snmpd00:18:080
30115993129,2cyclictest7420-21cat19:30:130
30115993129,1cyclictest795-21snmpd23:14:240
30121993029,1cyclictest795-21snmpd23:35:203
30121993029,1cyclictest795-21snmpd22:40:483
30121993029,1cyclictest795-21snmpd21:43:453
30121993029,1cyclictest795-21snmpd21:23:053
30121993029,1cyclictest795-21snmpd21:18:243
30121993029,1cyclictest795-21snmpd21:05:243
30121993029,1cyclictest795-21snmpd20:47:253
30121993029,1cyclictest795-21snmpd00:10:533
30121993027,3cyclictest795-21snmpd23:03:253
30121993027,3cyclictest795-21snmpd19:59:593
30121993027,2cyclictest795-21snmpd21:31:243
30121993026,4cyclictest795-21snmpd23:41:433
30118993029,1cyclictest795-21snmpd21:55:572
30118993029,1cyclictest795-21snmpd20:42:312
30118993029,1cyclictest795-21snmpd20:16:272
30118993028,2cyclictest795-21snmpd23:47:082
30118993028,2cyclictest795-21snmpd22:59:092
30118993028,2cyclictest795-21snmpd21:35:222
30116993029,1cyclictest795-21snmpd23:07:371
30116993029,1cyclictest795-21snmpd22:20:021
30116993029,1cyclictest795-21snmpd22:10:141
30116993029,1cyclictest795-21snmpd21:29:211
30116993028,2cyclictest30079-21cat21:40:141
30115993029,1cyclictest795-21snmpd23:58:350
30115993029,1cyclictest795-21snmpd23:30:550
30115993029,1cyclictest795-21snmpd23:05:070
30115993029,1cyclictest795-21snmpd20:05:030
30115993029,1cyclictest795-21snmpd19:46:390
30115993029,1cyclictest795-21snmpd00:31:490
30115993029,1cyclictest15621-21kworker/0:2+events22:31:490
30115993028,2cyclictest795-21snmpd21:19:500
30115993028,1cyclictest795-21snmpd19:22:190
30115993028,1cyclictest22718-21kworker/0:0+events22:48:260
30121992928,1cyclictest795-21snmpd20:40:533
30121992928,1cyclictest795-21snmpd20:03:103
30121992928,1cyclictest795-21snmpd20:03:093
30121992927,2cyclictest795-21snmpd22:30:093
30121992927,2cyclictest795-21snmpd21:29:463
30121992926,2cyclictest795-21snmpd19:30:043
30118992928,1cyclictest795-21snmpd23:17:222
30118992928,1cyclictest795-21snmpd22:16:582
30118992927,2cyclictest795-21snmpd20:22:552
30118992927,2cyclictest795-21snmpd19:53:382
30116992927,2cyclictest795-21snmpd22:37:261
30116992927,2cyclictest795-21snmpd19:13:191
30116992926,2cyclictest795-21snmpd20:54:311
30115992929,0cyclictest32389-21kworker/0:2+events21:20:370
30115992929,0cyclictest32389-21kworker/0:2+events19:51:010
30115992929,0cyclictest32389-21kworker/0:2+events19:26:500
30115992929,0cyclictest32389-21kworker/0:2+events19:16:540
30115992929,0cyclictest19126-21kworker/0:1+events23:41:490
30115992929,0cyclictest11015-21kworker/0:1+events22:22:290
30115992927,2cyclictest795-21snmpd22:05:310
30115992927,2cyclictest795-21snmpd20:25:430
30121992827,1cyclictest795-21snmpd23:23:063
30121992827,1cyclictest795-21snmpd22:28:593
30121992827,1cyclictest795-21snmpd20:14:073
30121992825,2cyclictest795-21snmpd20:08:303
30118992827,1cyclictest1437-21cat23:00:152
30118992825,2cyclictest795-21snmpd20:55:052
30116992825,3cyclictest795-21snmpd00:15:081
30115992828,0cyclictest7831-21kworker/0:2+events23:28:380
30115992828,0cyclictest32389-21kworker/0:2+events20:03:060
30115992828,0cyclictest32389-21kworker/0:2+events20:03:050
30115992828,0cyclictest11015-21kworker/0:1+events22:11:500
30115992827,1cyclictest795-21snmpd21:03:500
30121992726,1cyclictest795-21snmpd20:22:433
30121992726,1cyclictest795-21snmpd00:05:333
30118992726,1cyclictest795-21snmpd00:12:142
30121992625,1cyclictest795-21snmpd22:35:353
30121992624,2cyclictest9677-21cat00:30:153
30121992624,2cyclictest795-21snmpd20:37:283
30118992626,0cyclictest795-21snmpd22:08:552
30116992625,1cyclictest795-21snmpd22:51:111
30121992524,1cyclictest795-21snmpd20:18:423
30121992523,2cyclictest795-21snmpd21:10:023
30121992522,2cyclictest795-21snmpd20:51:583
30118992523,2cyclictest795-21snmpd19:35:332
30116992523,2cyclictest795-21snmpd22:56:271
30115992524,1cyclictest795-21snmpd21:52:100
30121992423,1cyclictest795-21snmpd23:48:023
30121992422,2cyclictest795-21snmpd23:50:193
30115992424,0cyclictest28245-21kworker/0:1+events00:04:540
30121992322,1cyclictest795-21snmpd19:53:203
30115992323,0cyclictest32389-21kworker/0:2+events21:41:580
30116992221,1cyclictest795-21snmpd21:47:391
30115992222,0cyclictest32389-21kworker/0:2+events20:37:140
30121992119,2cyclictest6583-21cat22:00:143
30118992121,0cyclictest24200-21kworker/u16:0+atlantic20:45:032
30118992120,1cyclictest795-21snmpd19:20:522
30115992121,0cyclictest32389-21kworker/0:2+events21:14:130
30121992018,2cyclictest795-21snmpd21:50:123
30115991715,2cyclictest795-21snmpd21:35:030
30121991514,1cyclictest795-21snmpd21:55:313
30121991412,2cyclictest795-21snmpd21:04:533
3012199119,2cyclictest11774-21cat00:35:193
3012199109,1cyclictest795-21snmpd00:25:243
3012199103,5cyclictest4258-21chrt19:21:583
301219990,5cyclictest8812-21ls22:05:183
301169987,1cyclictest795-21snmpd21:07:241
301169965,1cyclictest9602-21ls19:35:161
301169965,1cyclictest4868-21cpuspeed_turbos19:25:121
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional