You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-10-14 - 04:13

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Tue Oct 14, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
193782319304,5sleep20-21swapper/219:06:092
194562318303,5sleep30-21swapper/319:07:093
193562316308,5sleep00-21swapper/019:05:500
193522316303,10sleep10-21swapper/119:05:481
19947992950,294cyclictest11570-21kworker/u16:1+efi_rts_wq21:40:122
19948992920,291cyclictest11570-21kworker/u16:1+efi_rts_wq22:55:173
19948992910,290cyclictest2892-21kworker/u16:3+efi_rts_wq21:25:133
19947992910,290cyclictest10384-21kworker/u16:0+efi_rts_wq20:15:132
19946992890,288cyclictest7782-21kworker/u16:3+efi_rts_wq00:00:521
19946992890,288cyclictest17544-21kworker/u16:2+efi_rts_wq19:15:141
19946992890,286cyclictest2892-21kworker/u16:3+efi_rts_wq22:10:121
19946992880,287cyclictest11570-21kworker/u16:1+efi_rts_wq21:45:151
19948992870,286cyclictest2892-21kworker/u16:3+efi_rts_wq23:30:153
19948992870,286cyclictest10384-21kworker/u16:0+efi_rts_wq19:55:073
19946992870,286cyclictest2892-21kworker/u16:3+efi_rts_wq22:20:161
19946992870,286cyclictest17544-21kworker/u16:2+efi_rts_wq19:50:171
19946992870,286cyclictest11570-21kworker/u16:1+efi_rts_wq23:10:131
19948992850,284cyclictest28901-21kworker/u16:3+efi_rts_wq19:30:153
19948992840,283cyclictest28901-21kworker/u16:3+efi_rts_wq19:25:133
19947992840,283cyclictest10384-21kworker/u16:0+efi_rts_wq19:40:142
19946992840,283cyclictest29126-21kworker/u16:0+efi_rts_wq23:40:131
19948992830,282cyclictest29126-21kworker/u16:0+efi_rts_wq23:50:143
19948992830,282cyclictest17544-21kworker/u16:2+efi_rts_wq20:10:173
19948992820,281cyclictest17544-21kworker/u16:2+efi_rts_wq19:50:173
19948992810,277cyclictest7782-21kworker/u16:3+efi_rts_wq00:05:133
19948992800,279cyclictest11570-21kworker/u16:1+efi_rts_wq22:05:303
19946992800,279cyclictest2892-21kworker/u16:3+efi_rts_wq22:50:391
19946992790,278cyclictest7782-21kworker/u16:3+efi_rts_wq23:55:121
19948992780,277cyclictest10384-21kworker/u16:0+efi_rts_wq20:20:173
19947992770,276cyclictest29126-21kworker/u16:0+efi_rts_wq23:25:152
19946992770,276cyclictest17544-21kworker/u16:2+efi_rts_wq20:50:141
19948992750,274cyclictest28037-21kworker/u16:1+efi_rts_wq00:30:573
19946992750,274cyclictest11570-21kworker/u16:1+efi_rts_wq22:15:161
19946992740,273cyclictest11570-21kworker/u16:1+efi_rts_wq21:55:281
19945992740,273cyclictest11570-21kworker/u16:1+efi_rts_wq23:20:130
19946992720,271cyclictest17544-21kworker/u16:2+efi_rts_wq20:30:141
19946992710,269cyclictest2892-21kworker/u16:3+efi_rts_wq22:45:141
19945992710,270cyclictest2892-21kworker/u16:3+efi_rts_wq22:30:130
19946992700,269cyclictest17544-21kworker/u16:2+efi_rts_wq20:05:081
19945992680,267cyclictest11570-21kworker/u16:1+efi_rts_wq22:05:130
19946992670,266cyclictest2892-21kworker/u16:3+efi_rts_wq22:00:141
19945992670,266cyclictest28901-21kworker/u16:3+efi_rts_wq19:20:140
19948992660,265cyclictest10384-21kworker/u16:0+efi_rts_wq20:05:153
19948992650,264cyclictest11570-21kworker/u16:1+efi_rts_wq21:50:153
19948992650,262cyclictest11570-21kworker/u16:1+efi_rts_wq22:15:153
19947992650,264cyclictest17544-21kworker/u16:2+efi_rts_wq20:10:172
19947992640,263cyclictest7782-21kworker/u16:3+efi_rts_wq00:25:132
19947992640,263cyclictest29126-21kworker/u16:0+efi_rts_wq23:40:132
19947992640,262cyclictest17544-21kworker/u16:2+efi_rts_wq20:00:142
19948992630,262cyclictest29126-21kworker/u16:0+efi_rts_wq23:25:153
19947992620,261cyclictest10384-21kworker/u16:0+efi_rts_wq20:30:132
19947992610,260cyclictest14693-21kworker/u16:0+efi_rts_wq00:15:132
19947992570,256cyclictest11570-21kworker/u16:1+efi_rts_wq22:25:132
19947992550,254cyclictest14693-21kworker/u16:0+efi_rts_wq00:10:132
19947992540,253cyclictest17544-21kworker/u16:2+efi_rts_wq19:15:152
19946992540,253cyclictest11570-21kworker/u16:1+efi_rts_wq23:15:131
19946992540,253cyclictest11570-21kworker/u16:1+efi_rts_wq23:00:411
19948992530,252cyclictest11570-21kworker/u16:1+efi_rts_wq21:55:133
19946992520,251cyclictest17544-21kworker/u16:2+efi_rts_wq20:35:151
19948992500,249cyclictest14693-21kworker/u16:0+efi_rts_wq00:20:143
19948992500,248cyclictest17544-21kworker/u16:2+efi_rts_wq21:00:083
19946992470,246cyclictest2892-21kworker/u16:3+efi_rts_wq21:30:111
19946992470,246cyclictest17544-21kworker/u16:2+efi_rts_wq21:05:121
19946992470,245cyclictest2892-21kworker/u16:3+efi_rts_wq22:30:351
19948992460,245cyclictest17544-21kworker/u16:2+efi_rts_wq19:35:143
19947992460,245cyclictest2892-21kworker/u16:3+efi_rts_wq22:00:142
19947992450,244cyclictest2892-21kworker/u16:3+efi_rts_wq22:50:152
19947992440,243cyclictest7782-21kworker/u16:3+efi_rts_wq23:55:132
19945992440,243cyclictest2892-21kworker/u16:3+efi_rts_wq22:15:330
19948992430,242cyclictest14693-21kworker/u16:0+efi_rts_wq00:15:133
19948992420,241cyclictest29126-21kworker/u16:0+efi_rts_wq23:35:133
19948992390,238cyclictest11570-21kworker/u16:1+efi_rts_wq23:15:143
19947992380,237cyclictest17544-21kworker/u16:2+efi_rts_wq20:45:092
19948992370,236cyclictest28901-21kworker/u16:3+efi_rts_wq19:10:143
19947992370,236cyclictest2892-21kworker/u16:3+efi_rts_wq22:10:312
19945992370,236cyclictest10384-21kworker/u16:0+efi_rts_wq20:25:150
19946992360,235cyclictest17544-21kworker/u16:2+efi_rts_wq20:15:101
19946992350,234cyclictest28901-21kworker/u16:3+efi_rts_wq19:25:131
19945992340,233cyclictest10384-21kworker/u16:0+efi_rts_wq20:35:140
19946992330,232cyclictest2892-21kworker/u16:3+efi_rts_wq23:20:131
19946992330,232cyclictest2892-21kworker/u16:3+efi_rts_wq22:40:141
19946992320,231cyclictest14693-21kworker/u16:0+efi_rts_wq00:20:551
19948992310,230cyclictest11570-21kworker/u16:1+efi_rts_wq23:20:133
19947992300,229cyclictest14693-21kworker/u16:0+efi_rts_wq00:30:132
19946992300,229cyclictest11570-21kworker/u16:1+efi_rts_wq21:40:261
19946992290,228cyclictest11570-21kworker/u16:1+efi_rts_wq22:25:141
19947992240,223cyclictest2892-21kworker/u16:3+efi_rts_wq22:20:162
19946992240,223cyclictest10384-21kworker/u16:0+efi_rts_wq19:45:161
19947992230,222cyclictest7782-21kworker/u16:3+efi_rts_wq00:35:132
19945992230,222cyclictest2892-21kworker/u16:3+efi_rts_wq22:35:120
19947992220,221cyclictest2892-21kworker/u16:3+efi_rts_wq21:30:242
19946992190,218cyclictest10384-21kworker/u16:0+efi_rts_wq21:20:221
19946992170,216cyclictest17544-21kworker/u16:2+efi_rts_wq19:55:141
19945992170,216cyclictest14827-21kworker/u16:2+efi_rts_wq23:00:130
19948992150,214cyclictest17544-21kworker/u16:2+efi_rts_wq21:05:123
19947992150,214cyclictest29126-21kworker/u16:0+efi_rts_wq23:30:462
19946992150,214cyclictest2892-21kworker/u16:3+efi_rts_wq21:35:121
19946992150,214cyclictest14693-21kworker/u16:0+efi_rts_wq00:30:131
19948992140,213cyclictest2892-21kworker/u16:3+efi_rts_wq22:45:133
19948992130,212cyclictest10384-21kworker/u16:0+efi_rts_wq20:15:133
19947992120,211cyclictest11570-21kworker/u16:1+efi_rts_wq22:55:182
19948992110,210cyclictest10384-21kworker/u16:0+efi_rts_wq21:20:153
19947992110,210cyclictest2892-21kworker/u16:3+efi_rts_wq21:25:132
19946992050,204cyclictest17544-21kworker/u16:2+efi_rts_wq20:55:181
19948992040,203cyclictest10384-21kworker/u16:0+efi_rts_wq21:15:213
19948992030,202cyclictest10384-21kworker/u16:0+efi_rts_wq19:45:173
19946992010,200cyclictest10384-21kworker/u16:0+efi_rts_wq20:25:151
19948992000,199cyclictest7782-21kworker/u16:3+efi_rts_wq00:25:133
19948991940,193cyclictest2892-21kworker/u16:3+efi_rts_wq22:50:153
19948991940,193cyclictest2892-21kworker/u16:3+efi_rts_wq22:20:163
19947991920,191cyclictest14827-21kworker/u16:2+efi_rts_wq23:00:132
19947991910,190cyclictest10384-21kworker/u16:0+efi_rts_wq20:20:172
19945991870,186cyclictest14827-21kworker/u16:2+efi_rts_wq23:05:130
19946991850,184cyclictest17544-21kworker/u16:2+efi_rts_wq19:35:131
19947991780,177cyclictest10384-21kworker/u16:0+efi_rts_wq21:20:152
19946991780,177cyclictest11570-21kworker/u16:1+efi_rts_wq21:50:151
19947991770,176cyclictest17544-21kworker/u16:2+efi_rts_wq19:55:142
19946991770,176cyclictest10384-21kworker/u16:0+efi_rts_wq21:10:201
19946991760,175cyclictest2892-21kworker/u16:3+efi_rts_wq21:25:231
19947991710,170cyclictest11570-21kworker/u16:1+efi_rts_wq22:40:372
19946991710,170cyclictest29126-21kworker/u16:0+efi_rts_wq23:45:101
19948991700,169cyclictest14693-21kworker/u16:0+efi_rts_wq00:10:133
19946991690,168cyclictest7782-21kworker/u16:3+efi_rts_wq00:25:561
19948991660,165cyclictest2892-21kworker/u16:3+efi_rts_wq21:30:123
19947991640,163cyclictest10384-21kworker/u16:0+efi_rts_wq19:50:052
19948991570,156cyclictest28901-21kworker/u16:3+efi_rts_wq19:20:143
19945991560,155cyclictest10384-21kworker/u16:0+efi_rts_wq21:15:100
19947991510,150cyclictest17544-21kworker/u16:2+efi_rts_wq20:50:142
19946991510,150cyclictest28901-21kworker/u16:3+efi_rts_wq19:30:151
19946991480,147cyclictest14693-21kworker/u16:0+efi_rts_wq00:10:541
19947991470,147cyclictest28901-21kworker/u16:3+efi_rts_wq19:20:142
19948991460,145cyclictest31389-21kworker/u16:2+efi_rts_wq23:40:493
19947991450,144cyclictest10384-21kworker/u16:0+efi_rts_wq20:40:152
19948991420,141cyclictest17544-21kworker/u16:2+efi_rts_wq19:19:593
19946991410,140cyclictest14827-21kworker/u16:2+efi_rts_wq23:05:131
19948991400,139cyclictest29126-21kworker/u16:0+efi_rts_wq23:45:513
19948991400,139cyclictest14827-21kworker/u16:2+efi_rts_wq23:05:133
19946991350,134cyclictest14693-21kworker/u16:0+efi_rts_wq00:05:531
19948991320,131cyclictest10384-21kworker/u16:0+efi_rts_wq20:00:073
19946991300,129cyclictest17544-21kworker/u16:2+efi_rts_wq20:00:141
19947991290,128cyclictest17544-21kworker/u16:2+efi_rts_wq20:25:122
19946991290,128cyclictest29126-21kworker/u16:0+efi_rts_wq23:35:471
19948991280,127cyclictest7782-21kworker/u16:3+efi_rts_wq00:35:133
19948991280,127cyclictest2892-21kworker/u16:3+efi_rts_wq21:35:243
19947991270,126cyclictest11570-21kworker/u16:1+efi_rts_wq21:50:272
19946991270,126cyclictest10384-21kworker/u16:0+efi_rts_wq20:10:091
19946991260,125cyclictest29126-21kworker/u16:0+efi_rts_wq23:25:141
19945991250,124cyclictest28901-21kworker/u16:3+efi_rts_wq19:30:150
19946991220,121cyclictest11570-21kworker/u16:1+efi_rts_wq22:35:371
19945991200,119cyclictest11570-21kworker/u16:1+efi_rts_wq23:10:140
19946991110,110cyclictest28037-21kworker/u16:1+efi_rts_wq00:35:581
19948991090,108cyclictest2892-21kworker/u16:3+efi_rts_wq22:35:123
19948991010,100cyclictest31389-21kworker/u16:2+efi_rts_wq00:00:143
19945993832,4cyclictest17807-21cat20:20:190
19947993230,2cyclictest799-21snmpd23:17:422
19945993229,3cyclictest799-21snmpd00:28:520
19945993227,5cyclictest799-21snmpd23:55:330
19945993227,5cyclictest12408-21cat21:35:140
19948993130,1cyclictest799-21snmpd20:44:073
19948993129,2cyclictest16563-21cat21:45:163
19947993130,1cyclictest799-21snmpd19:28:512
19947993129,2cyclictest799-21snmpd23:10:202
19947993129,2cyclictest799-21snmpd20:06:032
19946993129,2cyclictest799-21snmpd23:32:291
19945993130,1cyclictest799-21snmpd00:22:110
19945993129,2cyclictest799-21snmpd22:47:250
19945993129,2cyclictest799-21snmpd20:47:010
19945993127,4cyclictest799-21snmpd21:52:390
19948993029,1cyclictest799-21snmpd23:14:233
19948993029,1cyclictest799-21snmpd22:43:553
19948993029,1cyclictest799-21snmpd22:31:433
19948993029,1cyclictest799-21snmpd21:41:153
19948993028,2cyclictest799-21snmpd22:25:433
19947993029,1cyclictest799-21snmpd22:38:162
19947993029,1cyclictest799-21snmpd21:18:532
19947993029,1cyclictest799-21snmpd21:00:352
19947993029,1cyclictest799-21snmpd00:05:552
19947993028,2cyclictest799-21snmpd23:08:332
19947993028,2cyclictest799-21snmpd22:08:422
19947993028,2cyclictest799-21snmpd21:09:382
19946993028,2cyclictest799-21snmpd19:42:321
19946993028,2cyclictest799-21snmpd19:11:201
19945993029,1cyclictest799-21snmpd23:34:390
19945993029,1cyclictest799-21snmpd21:01:340
19945993029,1cyclictest799-21snmpd20:30:020
19945993029,1cyclictest799-21snmpd20:00:490
19945993029,1cyclictest799-21snmpd00:08:310
19945993029,1cyclictest799-21snmpd00:03:380
19945993028,2cyclictest808-21lldpd19:36:030
19945993028,2cyclictest799-21snmpd22:12:210
19945993028,2cyclictest799-21snmpd19:15:260
19945993026,4cyclictest799-21snmpd20:14:190
19948992928,1cyclictest799-21snmpd20:30:073
19948992927,2cyclictest799-21snmpd22:00:543
19948992927,2cyclictest799-21snmpd19:42:443
19947992929,0cyclictest799-21snmpd22:15:332
19947992928,1cyclictest799-21snmpd22:45:442
19947992928,1cyclictest799-21snmpd21:15:002
19947992928,1cyclictest799-21snmpd00:00:062
19947992927,2cyclictest799-21snmpd21:59:392
19947992927,2cyclictest799-21snmpd20:55:582
19946992928,1cyclictest799-21snmpd23:50:001
19946992928,1cyclictest799-21snmpd20:46:071
19946992928,1cyclictest799-21snmpd20:20:421
19946992928,1cyclictest17005-21kworker/1:3+events22:58:431
19945992928,1cyclictest799-21snmpd23:40:030
19945992928,1cyclictest799-21snmpd23:27:350
19945992928,1cyclictest799-21snmpd22:53:580
19945992928,1cyclictest799-21snmpd21:20:530
19945992928,1cyclictest799-21snmpd20:51:460
19945992928,1cyclictest799-21snmpd20:16:270
19945992928,1cyclictest799-21snmpd20:09:000
19945992928,1cyclictest799-21snmpd00:36:080
19945992928,1cyclictest799-21snmpd00:34:000
19948992827,1cyclictest808-21lldpd20:36:033
19948992827,1cyclictest799-21snmpd23:56:013
19948992826,2cyclictest799-21snmpd22:12:453
19947992827,1cyclictest799-21snmpd23:45:062
19947992827,1cyclictest799-21snmpd23:20:562
19945992827,1cyclictest799-21snmpd21:47:210
19945992827,1cyclictest799-21snmpd21:40:230
19945992827,1cyclictest799-21snmpd20:41:380
19945992827,1cyclictest799-21snmpd19:43:530
19945992825,3cyclictest799-21snmpd20:57:100
19945992824,4cyclictest799-21snmpd19:59:090
19948992727,0cyclictest11570-21kworker/u16:1+atlantic23:01:223
19947992726,1cyclictest799-21snmpd22:31:372
19947992726,1cyclictest799-21snmpd21:39:202
19947992726,1cyclictest799-21snmpd20:35:102
19947992726,1cyclictest799-21snmpd00:20:282
19946992726,1cyclictest799-21snmpd19:20:381
19945992726,1cyclictest799-21snmpd23:46:450
19945992726,1cyclictest799-21snmpd23:38:030
19945992726,1cyclictest799-21snmpd19:47:140
19945992726,1cyclictest799-21snmpd00:12:440
19945992725,2cyclictest799-21snmpd22:41:100
19945992725,2cyclictest799-21snmpd21:05:370
19945992725,2cyclictest799-21snmpd00:17:520
19948992625,1cyclictest799-21snmpd20:57:043
19948992623,2cyclictest799-21snmpd20:28:343
19947992624,2cyclictest799-21snmpd19:38:332
19945992625,1cyclictest799-21snmpd22:26:460
19945992624,2cyclictest31419-21cat22:20:180
19948992524,1cyclictest799-21snmpd21:12:123
19947992525,0cyclictest31389-21kworker/u16:2+atlantic23:50:242
19945992524,1cyclictest799-21snmpd21:25:230
19945992523,2cyclictest799-21snmpd23:18:050
19947992423,1cyclictest799-21snmpd19:32:082
19946992322,1cyclictest799-21snmpd00:19:131
19945992322,1cyclictest799-21snmpd19:53:090
19945992319,4cyclictest799-21snmpd23:54:460
19947992222,0cyclictest73950irq/137-enp1s023:35:182
19945992221,1cyclictest799-21snmpd19:14:200
19945992220,2cyclictest27433-21cat19:25:150
19947992120,1cyclictest799-21snmpd19:49:482
19945992121,0cyclictest73850irq/136-enp1s022:57:540
19945992120,1cyclictest799-21snmpd22:04:090
19946992019,1cyclictest799-21snmpd21:17:501
19945992017,2cyclictest799-21snmpd21:55:160
19947991919,0cyclictest2892-21kworker/u16:3+atlantic21:48:502
19947991817,1cyclictest799-21snmpd19:11:502
19945991817,1cyclictest799-21snmpd21:14:440
19945991614,2cyclictest10367-21cat21:30:130
19946991515,0cyclictest21860-21kworker/1:2+events22:05:111
19946991515,0cyclictest13018-21kworker/1:1+events21:01:541
19946991513,2cyclictest799-21snmpd20:41:441
1994899119,2cyclictest28805-21cat20:50:153
199489965,1cyclictest26506-21forks20:45:103
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional