You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-08-27 - 09:28

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Wed Aug 27, 2025 00:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
74462335309,23sleep20-21swapper/219:06:092
77212321307,4sleep30-21swapper/319:09:393
76132319312,4sleep10-21swapper/119:08:161
75922315307,5sleep00-21swapper/019:07:590
8014992960,295cyclictest1016-21kworker/u16:3+efi_rts_wq22:25:152
8015992950,294cyclictest1016-21kworker/u16:3+efi_rts_wq19:49:203
8013992950,294cyclictest1016-21kworker/u16:3+efi_rts_wq19:15:011
8014992930,292cyclictest17509-21kworker/u16:2+efi_rts_wq19:45:152
8012992930,291cyclictest17509-21kworker/u16:2+efi_rts_wq22:40:190
8015992910,290cyclictest1016-21kworker/u16:3+efi_rts_wq22:55:133
8013992910,290cyclictest1881-21kworker/u16:1+efi_rts_wq00:15:131
8013992910,290cyclictest17509-21kworker/u16:2+efi_rts_wq22:00:161
8013992910,290cyclictest17509-21kworker/u16:2+efi_rts_wq21:40:171
8013992910,290cyclictest17509-21kworker/u16:2+efi_rts_wq21:40:171
8014992890,288cyclictest10873-21kworker/u16:0+efi_rts_wq23:10:182
8014992890,288cyclictest1016-21kworker/u16:3+efi_rts_wq21:29:372
8014992890,288cyclictest1016-21kworker/u16:3+efi_rts_wq21:10:132
8012992880,287cyclictest17509-21kworker/u16:2+efi_rts_wq20:39:290
8012992880,287cyclictest1016-21kworker/u16:3+efi_rts_wq20:50:140
8014992870,286cyclictest15934-21kworker/u16:3+efi_rts_wq23:25:172
8012992870,286cyclictest15934-21kworker/u16:3+efi_rts_wq23:50:140
8015992860,285cyclictest17509-21kworker/u16:2+efi_rts_wq21:25:153
8015992860,285cyclictest13418-21kworker/u16:1+efi_rts_wq23:30:133
8014992860,285cyclictest17509-21kworker/u16:2+efi_rts_wq21:15:162
8012992860,285cyclictest17509-21kworker/u16:2+efi_rts_wq20:00:140
8012992860,285cyclictest17509-21kworker/u16:2+efi_rts_wq19:25:140
8012992860,285cyclictest17509-21kworker/u16:2+efi_rts_wq19:10:130
8012992860,285cyclictest1016-21kworker/u16:3+efi_rts_wq20:20:140
8012992860,285cyclictest1016-21kworker/u16:3+efi_rts_wq19:39:180
8014992850,284cyclictest1016-21kworker/u16:3+efi_rts_wq21:05:152
8012992840,283cyclictest1016-21kworker/u16:3+efi_rts_wq22:15:140
8014992830,282cyclictest17509-21kworker/u16:2+efi_rts_wq19:40:142
8012992820,281cyclictest1016-21kworker/u16:3+efi_rts_wq19:30:150
8015992810,280cyclictest17509-21kworker/u16:2+efi_rts_wq21:40:173
8015992810,280cyclictest17509-21kworker/u16:2+efi_rts_wq21:40:173
8015992800,279cyclictest17509-21kworker/u16:2+efi_rts_wq22:30:173
8015992800,279cyclictest15934-21kworker/u16:3+efi_rts_wq23:45:193
8013992790,278cyclictest17509-21kworker/u16:2+efi_rts_wq22:50:141
8012992790,278cyclictest1016-21kworker/u16:3+efi_rts_wq19:24:140
8014992780,277cyclictest17509-21kworker/u16:2+efi_rts_wq22:30:172
8015992760,275cyclictest13418-21kworker/u16:1+efi_rts_wq23:14:573
8014992750,274cyclictest17509-21kworker/u16:2+efi_rts_wq22:05:152
8014992750,274cyclictest17509-21kworker/u16:2+efi_rts_wq19:50:142
8013992740,273cyclictest17509-21kworker/u16:2+efi_rts_wq19:40:141
8015992720,271cyclictest27229-21kworker/u16:2+efi_rts_wq00:35:093
8014992710,270cyclictest1016-21kworker/u16:3+efi_rts_wq20:30:132
8015992700,269cyclictest13418-21kworker/u16:1+efi_rts_wq23:20:183
8015992690,268cyclictest17509-21kworker/u16:2+efi_rts_wq22:45:143
8014992690,268cyclictest1016-21kworker/u16:3+efi_rts_wq21:45:122
8014992690,268cyclictest1016-21kworker/u16:3+efi_rts_wq21:45:122
8014992680,267cyclictest17509-21kworker/u16:2+efi_rts_wq22:00:162
8013992670,266cyclictest13418-21kworker/u16:1+efi_rts_wq23:35:141
8015992650,264cyclictest17509-21kworker/u16:2+efi_rts_wq20:04:233
8015992640,263cyclictest1016-21kworker/u16:3+efi_rts_wq22:15:143
8014992640,263cyclictest1016-21kworker/u16:3+efi_rts_wq20:50:142
8012992640,263cyclictest15934-21kworker/u16:3+efi_rts_wq23:25:170
8015992630,261cyclictest15934-21kworker/u16:3+efi_rts_wq23:15:163
8012992630,262cyclictest15934-21kworker/u16:3+efi_rts_wq23:19:580
8012992620,261cyclictest1881-21kworker/u16:1+efi_rts_wq00:25:140
8015992610,260cyclictest17509-21kworker/u16:2+efi_rts_wq23:05:163
8015992610,260cyclictest10873-21kworker/u16:0+efi_rts_wq23:04:553
8014992610,260cyclictest17509-21kworker/u16:2+efi_rts_wq21:00:142
8014992610,259cyclictest17509-21kworker/u16:2+efi_rts_wq22:50:142
8013992610,260cyclictest17509-21kworker/u16:2+efi_rts_wq20:05:151
8014992600,259cyclictest17509-21kworker/u16:2+efi_rts_wq19:10:132
8012992600,259cyclictest17509-21kworker/u16:2+efi_rts_wq20:15:160
8015992590,257cyclictest1016-21kworker/u16:3+efi_rts_wq22:44:513
8015992580,257cyclictest1016-21kworker/u16:3+efi_rts_wq20:10:163
8012992560,255cyclictest17509-21kworker/u16:2+efi_rts_wq22:20:160
8012992560,255cyclictest1016-21kworker/u16:3+efi_rts_wq21:55:160
8013992550,254cyclictest17509-21kworker/u16:2+efi_rts_wq22:59:541
8015992540,253cyclictest1016-21kworker/u16:3+efi_rts_wq20:45:173
8012992540,253cyclictest17509-21kworker/u16:2+efi_rts_wq21:39:390
8015992510,250cyclictest1016-21kworker/u16:3+efi_rts_wq19:15:143
8013992490,247cyclictest17509-21kworker/u16:2+efi_rts_wq22:40:191
8014992480,247cyclictest17509-21kworker/u16:2+efi_rts_wq22:35:142
8014992470,246cyclictest1016-21kworker/u16:3+efi_rts_wq22:55:132
8014992460,245cyclictest17509-21kworker/u16:2+efi_rts_wq19:35:152
8015992450,244cyclictest1016-21kworker/u16:3+efi_rts_wq19:20:133
8013992430,242cyclictest1016-21kworker/u16:3+efi_rts_wq20:29:271
8013992420,241cyclictest27229-21kworker/u16:2+efi_rts_wq00:30:151
8013992400,239cyclictest17509-21kworker/u16:2+efi_rts_wq21:50:171
8013992400,239cyclictest17509-21kworker/u16:2+efi_rts_wq20:15:161
8015992390,238cyclictest27229-21kworker/u16:2+efi_rts_wq23:40:183
8015992390,238cyclictest15934-21kworker/u16:3+efi_rts_wq23:50:153
8015992380,237cyclictest1016-21kworker/u16:3+efi_rts_wq20:55:133
8012992380,237cyclictest27229-21kworker/u16:2+efi_rts_wq23:39:590
8015992370,236cyclictest1881-21kworker/u16:1+efi_rts_wq00:10:153
8014992370,236cyclictest17509-21kworker/u16:2+efi_rts_wq20:19:252
8012992360,235cyclictest1881-21kworker/u16:1+efi_rts_wq00:20:130
8014992340,233cyclictest17509-21kworker/u16:2+efi_rts_wq22:45:132
8012992340,233cyclictest17509-21kworker/u16:2+efi_rts_wq21:10:140
8015992320,231cyclictest1881-21kworker/u16:1+efi_rts_wq00:25:143
8014992320,231cyclictest27229-21kworker/u16:2+efi_rts_wq23:55:142
8012992300,229cyclictest27229-21kworker/u16:2+efi_rts_wq00:30:150
8015992270,226cyclictest1016-21kworker/u16:3+efi_rts_wq21:20:143
8014992230,222cyclictest27229-21kworker/u16:2+efi_rts_wq00:00:142
8012992230,221cyclictest27229-21kworker/u16:2+efi_rts_wq00:00:130
8014992180,217cyclictest1881-21kworker/u16:1+efi_rts_wq00:05:142
8012992180,217cyclictest17509-21kworker/u16:2+efi_rts_wq20:40:130
8015992170,216cyclictest1016-21kworker/u16:3+efi_rts_wq21:30:123
8013992160,215cyclictest27229-21kworker/u16:2+efi_rts_wq23:40:181
8014992130,212cyclictest13418-21kworker/u16:1+efi_rts_wq23:35:142
8013992120,211cyclictest15934-21kworker/u16:3+efi_rts_wq23:55:021
8013992120,211cyclictest1016-21kworker/u16:3+efi_rts_wq19:59:221
8015992110,210cyclictest17509-21kworker/u16:2+efi_rts_wq21:04:333
8013992100,209cyclictest17509-21kworker/u16:2+efi_rts_wq21:19:351
8013992090,208cyclictest1016-21kworker/u16:3+efi_rts_wq20:34:281
8014992070,206cyclictest15934-21kworker/u16:3+efi_rts_wq23:45:182
8012992050,204cyclictest13418-21kworker/u16:1+efi_rts_wq23:20:190
8013992040,203cyclictest1016-21kworker/u16:3+efi_rts_wq22:25:151
8015992030,202cyclictest17509-21kworker/u16:2+efi_rts_wq20:25:143
8013991980,197cyclictest17509-21kworker/u16:2+efi_rts_wq21:14:341
8012991970,196cyclictest1016-21kworker/u16:3+efi_rts_wq20:49:300
8013991960,195cyclictest27229-21kworker/u16:2+efi_rts_wq00:10:051
8012991960,195cyclictest17509-21kworker/u16:2+efi_rts_wq22:14:460
8012991940,193cyclictest1016-21kworker/u16:3+efi_rts_wq20:59:320
8013991910,190cyclictest15934-21kworker/u16:3+efi_rts_wq23:50:151
8012991910,190cyclictest17509-21kworker/u16:2+efi_rts_wq21:15:160
8012991910,190cyclictest1016-21kworker/u16:3+efi_rts_wq19:15:150
8015991900,187cyclictest1016-21kworker/u16:3+efi_rts_wq19:55:153
8012991880,187cyclictest1881-21kworker/u16:1+efi_rts_wq00:10:130
8014991850,184cyclictest17509-21kworker/u16:2+efi_rts_wq23:00:142
8012991840,183cyclictest1016-21kworker/u16:3+efi_rts_wq21:49:410
8012991840,183cyclictest1016-21kworker/u16:3+efi_rts_wq21:49:410
8013991830,182cyclictest17509-21kworker/u16:2+efi_rts_wq22:35:141
8015991820,181cyclictest1016-21kworker/u16:3+efi_rts_wq22:09:453
8014991820,181cyclictest15934-21kworker/u16:3+efi_rts_wq23:15:162
8013991790,178cyclictest1016-21kworker/u16:3+efi_rts_wq21:24:361
8012991780,177cyclictest1016-21kworker/u16:3+efi_rts_wq21:30:120
8013991740,173cyclictest27229-21kworker/u16:2+efi_rts_wq00:20:061
8014991730,172cyclictest17509-21kworker/u16:2+efi_rts_wq20:05:152
8015991710,170cyclictest1881-21kworker/u16:1+efi_rts_wq00:30:083
8015991670,166cyclictest1016-21kworker/u16:3+efi_rts_wq20:09:233
8012991650,164cyclictest1881-21kworker/u16:1+efi_rts_wq00:05:140
8013991640,163cyclictest17509-21kworker/u16:2+efi_rts_wq22:05:141
8012991560,155cyclictest17509-21kworker/u16:2+efi_rts_wq22:45:130
8014991550,154cyclictest17509-21kworker/u16:2+efi_rts_wq20:35:192
8015991500,149cyclictest17509-21kworker/u16:2+efi_rts_wq22:24:473
8014991500,149cyclictest15934-21kworker/u16:3+efi_rts_wq23:24:582
8013991410,140cyclictest1016-21kworker/u16:3+efi_rts_wq20:54:311
8013991390,138cyclictest17509-21kworker/u16:2+efi_rts_wq22:10:131
8013991390,138cyclictest1016-21kworker/u16:3+efi_rts_wq20:24:261
8015991350,134cyclictest17509-21kworker/u16:2+efi_rts_wq22:54:533
8013991300,129cyclictest1016-21kworker/u16:3+efi_rts_wq19:14:121
8013991290,128cyclictest17509-21kworker/u16:2+efi_rts_wq19:25:141
8013991230,121cyclictest1016-21kworker/u16:3+efi_rts_wq21:34:381
8013991150,114cyclictest27229-21kworker/u16:2+efi_rts_wq00:35:131
8012991140,114cyclictest17509-21kworker/u16:2+efi_rts_wq22:29:480
8012991110,110cyclictest17509-21kworker/u16:2+efi_rts_wq22:00:160
8014991040,103cyclictest17509-21kworker/u16:2+efi_rts_wq20:25:142
801299980,98cyclictest15934-21kworker/u16:3+efi_rts_wq23:34:590
801599970,96cyclictest1016-21kworker/u16:3+efi_rts_wq21:09:343
8015993230,2cyclictest799-21snmpd21:47:343
8015993230,2cyclictest799-21snmpd21:47:343
8015993230,2cyclictest799-21snmpd00:23:143
8014993230,2cyclictest799-21snmpd22:44:122
8013993230,2cyclictest799-21snmpd20:58:441
8012993230,2cyclictest799-21snmpd21:54:370
8012993230,2cyclictest799-21snmpd00:15:200
8012993229,3cyclictest799-21snmpd22:36:530
8015993130,1cyclictest799-21snmpd19:53:243
8015993129,2cyclictest799-21snmpd23:25:403
8014993129,2cyclictest799-21snmpd21:24:302
8014993129,2cyclictest799-21snmpd19:31:032
8014993129,2cyclictest799-21snmpd00:24:532
8014993128,2cyclictest799-21snmpd21:40:582
8014993128,2cyclictest799-21snmpd21:40:582
8013993129,2cyclictest799-21snmpd23:11:211
8013993129,2cyclictest799-21snmpd23:01:511
8013993129,2cyclictest799-21snmpd21:47:311
8013993129,2cyclictest799-21snmpd21:47:311
8013993129,2cyclictest799-21snmpd20:45:291
8013993129,2cyclictest799-21snmpd20:42:471
8012993130,1cyclictest799-21snmpd22:30:200
8015993029,1cyclictest799-21snmpd22:02:103
8015993029,1cyclictest799-21snmpd21:13:433
8015993029,1cyclictest799-21snmpd20:50:363
8015993029,1cyclictest799-21snmpd20:23:433
8015993029,1cyclictest799-21snmpd00:16:563
8015993029,1cyclictest799-21snmpd00:05:103
8015993028,2cyclictest799-21snmpd22:12:263
8015993028,2cyclictest799-21snmpd00:02:073
8014993030,0cyclictest15510-21kworker/2:2+events23:40:532
8014993029,1cyclictest799-21snmpd20:49:562
8014993029,1cyclictest799-21snmpd20:14:132
8014993029,1cyclictest799-21snmpd19:55:002
8014993029,1cyclictest799-21snmpd19:26:092
8014993029,1cyclictest799-21snmpd00:25:022
8014993029,1cyclictest25525-21kworker/2:0+events20:20:132
8014993028,1cyclictest31049-21kworker/2:1+events21:35:472
8013993029,1cyclictest799-21snmpd22:20:531
8013993029,1cyclictest799-21snmpd19:37:571
8013993028,2cyclictest799-21snmpd23:21:181
8013993028,2cyclictest799-21snmpd22:33:021
8013993028,2cyclictest799-21snmpd20:12:341
8012993030,0cyclictest4132-21kworker/0:0+mm_percpu_wq23:56:490
8012993029,1cyclictest799-21snmpd21:00:350
8015992928,1cyclictest799-21snmpd22:36:113
8015992928,1cyclictest799-21snmpd22:28:173
8015992928,1cyclictest799-21snmpd21:38:493
8015992928,1cyclictest799-21snmpd21:15:093
8015992928,1cyclictest799-21snmpd19:43:363
8015992927,2cyclictest799-21snmpd21:54:223
8015992927,2cyclictest799-21snmpd20:19:553
8014992929,0cyclictest31049-21kworker/2:1+events22:14:332
8014992929,0cyclictest31049-21kworker/2:1+events21:59:372
8014992929,0cyclictest31049-21kworker/2:1+events21:50:172
8014992929,0cyclictest25525-21kworker/2:0+events21:30:292
8014992929,0cyclictest25525-21kworker/2:0+events20:03:022
8014992929,0cyclictest24562-21kworker/2:2+events20:56:212
8014992928,1cyclictest799-21snmpd23:53:372
8014992928,1cyclictest799-21snmpd22:20:082
8014992928,1cyclictest799-21snmpd00:15:322
8014992928,1cyclictest31049-21kworker/2:1+events22:16:072
8014992928,1cyclictest27077-21kworker/2:0+events23:34:572
8013992929,0cyclictest799-21snmpd23:19:331
8013992929,0cyclictest1016-21kworker/u16:3+atlantic21:26:131
8013992928,1cyclictest799-21snmpd22:47:241
8013992927,2cyclictest799-21snmpd00:04:011
8012992929,0cyclictest73950irq/137-enp1s023:10:110
8012992929,0cyclictest1016-21kworker/u16:3+atlantic20:30:450
8012992928,1cyclictest799-21snmpd23:41:250
8012992928,1cyclictest799-21snmpd21:42:490
8012992928,1cyclictest799-21snmpd21:42:490
8012992928,1cyclictest799-21snmpd21:26:270
8012992928,1cyclictest799-21snmpd00:36:020
8015992825,2cyclictest799-21snmpd19:33:393
8014992828,0cyclictest10936-21kworker/2:0+events00:31:052
8014992827,1cyclictest8027-21kworker/2:0+events23:06:292
8014992827,1cyclictest799-21snmpd19:21:202
8014992827,1cyclictest799-21snmpd19:18:172
8014992827,1cyclictest24562-21kworker/2:2+events20:42:392
8013992828,0cyclictest1881-21kworker/u16:1+atlantic00:26:491
8013992828,0cyclictest17509-21kworker/u16:2+atlantic20:39:171
8013992828,0cyclictest1016-21kworker/u16:3+atlantic19:30:171
8013992827,1cyclictest799-21snmpd23:30:161
8013992826,2cyclictest799-21snmpd22:15:081
8013992826,2cyclictest799-21snmpd21:03:511
8013992826,2cyclictest799-21snmpd20:02:251
8012992826,2cyclictest799-21snmpd19:58:180
8015992726,1cyclictest799-21snmpd23:56:283
8013992726,1cyclictest799-21snmpd21:37:551
8013992725,2cyclictest799-21snmpd00:08:161
8012992727,0cyclictest1016-21kworker/u16:3+atlantic21:09:510
8013992626,0cyclictest1016-21kworker/u16:3+atlantic19:23:531
8013992624,2cyclictest799-21snmpd23:09:541
8013992624,2cyclictest799-21snmpd19:50:061
8012992626,0cyclictest17509-21kworker/u16:2+atlantic21:21:130
8012992626,0cyclictest17509-21kworker/u16:2+atlantic19:51:370
8012992625,1cyclictest799-21snmpd20:29:580
8012992625,1cyclictest799-21snmpd19:47:540
8012992624,2cyclictest799-21snmpd22:57:570
8015992524,1cyclictest799-21snmpd19:39:303
8015992524,1cyclictest799-21snmpd19:10:443
8015992523,2cyclictest799-21snmpd19:26:033
8013992525,0cyclictest799-21snmpd21:58:281
8012992524,1cyclictest799-21snmpd23:45:520
8012992524,1cyclictest799-21snmpd20:07:040
8015992423,1cyclictest799-21snmpd23:37:283
8015992423,1cyclictest799-21snmpd20:35:443
8013992422,2cyclictest799-21snmpd23:49:101
8012992423,1cyclictest799-21snmpd23:07:090
8014992221,1cyclictest10936-21kworker/2:0+events00:14:192
8013992222,0cyclictest799-21snmpd23:28:341
8013992221,1cyclictest799-21snmpd21:06:061
8012992221,1cyclictest799-21snmpd22:50:390
8012992119,2cyclictest799-21snmpd22:06:230
8014992019,1cyclictest8424-21kworker/2:2+events00:39:272
8012992020,0cyclictest73850irq/136-enp1s023:02:030
8015991917,2cyclictest799-21snmpd20:33:233
8013991917,2cyclictest799-21snmpd19:45:361
8015991615,1cyclictest799-21snmpd20:40:113
8012991616,0cyclictest1016-21kworker/u16:3+atlantic19:43:470
8012991511,2cyclictest2622-21cat20:10:180
801599108,2cyclictest14084-21cat21:55:183
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional