You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-13 - 05:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Tue May 13, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
149882337303,31sleep10-21swapper/119:05:571
149792315309,4sleep20-21swapper/219:05:502
152572314306,5sleep30-21swapper/319:09:273
152392314307,5sleep00-21swapper/019:09:110
15567993100,309cyclictest14099-21kworker/u16:1+efi_rts_wq20:30:162
15566993090,308cyclictest25021-21kworker/u16:2+efi_rts_wq23:05:151
15568993070,306cyclictest25021-21kworker/u16:2+efi_rts_wq21:50:123
15565993070,306cyclictest25021-21kworker/u16:2+efi_rts_wq00:30:150
15567993050,304cyclictest11857-21kworker/u16:0+efi_rts_wq00:10:162
15566993040,303cyclictest14099-21kworker/u16:1+efi_rts_wq22:35:141
15568993020,301cyclictest11857-21kworker/u16:0+efi_rts_wq23:25:153
15566993010,300cyclictest25021-21kworker/u16:2+efi_rts_wq21:50:111
15567993000,299cyclictest25021-21kworker/u16:2+efi_rts_wq23:05:152
15565993000,299cyclictest14099-21kworker/u16:1+efi_rts_wq21:25:140
15565993000,299cyclictest14099-21kworker/u16:1+efi_rts_wq20:50:150
15568992980,297cyclictest14099-21kworker/u16:1+efi_rts_wq21:35:153
15567992980,297cyclictest11857-21kworker/u16:0+efi_rts_wq23:45:132
15566992980,296cyclictest11857-21kworker/u16:0+efi_rts_wq23:30:131
15568992970,296cyclictest25021-21kworker/u16:2+efi_rts_wq00:20:143
15565992970,296cyclictest14099-21kworker/u16:1+efi_rts_wq19:10:140
15566992960,295cyclictest25021-21kworker/u16:2+efi_rts_wq21:00:131
15565992960,294cyclictest11857-21kworker/u16:0+efi_rts_wq22:55:140
15565992950,294cyclictest25021-21kworker/u16:2+efi_rts_wq21:15:160
15568992940,293cyclictest25021-21kworker/u16:2+efi_rts_wq23:10:163
15567992940,293cyclictest25021-21kworker/u16:2+efi_rts_wq19:55:122
15567992940,293cyclictest25021-21kworker/u16:2+efi_rts_wq19:20:162
15566992940,293cyclictest14099-21kworker/u16:1+efi_rts_wq20:15:101
15565992940,293cyclictest25021-21kworker/u16:2+efi_rts_wq00:15:150
15566992930,292cyclictest11857-21kworker/u16:0+efi_rts_wq00:35:151
15565992930,292cyclictest14099-21kworker/u16:1+efi_rts_wq19:15:150
15566992920,291cyclictest25021-21kworker/u16:2+efi_rts_wq00:05:151
15567992900,289cyclictest11857-21kworker/u16:0+efi_rts_wq23:30:142
15566992870,286cyclictest14099-21kworker/u16:1+efi_rts_wq20:00:151
15567992850,284cyclictest25021-21kworker/u16:2+efi_rts_wq23:40:142
15567992850,284cyclictest25021-21kworker/u16:2+efi_rts_wq20:05:132
15567992820,281cyclictest14099-21kworker/u16:1+efi_rts_wq19:50:172
15567992810,280cyclictest25021-21kworker/u16:2+efi_rts_wq22:25:152
15566992790,278cyclictest25021-21kworker/u16:2+efi_rts_wq22:15:141
15568992780,277cyclictest14099-21kworker/u16:1+efi_rts_wq21:20:143
15566992780,277cyclictest25021-21kworker/u16:2+efi_rts_wq20:05:131
15565992780,277cyclictest14099-21kworker/u16:1+efi_rts_wq21:40:130
15568992770,276cyclictest25021-21kworker/u16:2+efi_rts_wq23:35:163
15568992750,274cyclictest11857-21kworker/u16:0+efi_rts_wq23:50:143
15567992740,273cyclictest25021-21kworker/u16:2+efi_rts_wq23:20:162
15568992720,271cyclictest14099-21kworker/u16:1+efi_rts_wq20:40:153
15565992710,270cyclictest25021-21kworker/u16:2+efi_rts_wq21:10:130
15568992700,269cyclictest11857-21kworker/u16:0+efi_rts_wq23:55:133
15567992700,269cyclictest11857-21kworker/u16:0+efi_rts_wq22:50:142
15565992690,268cyclictest25021-21kworker/u16:2+efi_rts_wq19:25:120
15568992680,267cyclictest25021-21kworker/u16:2+efi_rts_wq23:15:163
15566992680,267cyclictest14099-21kworker/u16:1+efi_rts_wq20:35:151
15567992670,266cyclictest25021-21kworker/u16:2+efi_rts_wq00:25:162
15567992650,264cyclictest14099-21kworker/u16:1+efi_rts_wq20:35:162
15567992630,262cyclictest25021-21kworker/u16:2+efi_rts_wq20:55:112
15566992600,259cyclictest25021-21kworker/u16:2+efi_rts_wq23:10:161
15567992580,257cyclictest14099-21kworker/u16:1+efi_rts_wq22:35:152
15566992580,257cyclictest25021-21kworker/u16:2+efi_rts_wq21:30:131
15565992580,257cyclictest11857-21kworker/u16:0+efi_rts_wq00:35:150
15566992570,256cyclictest14099-21kworker/u16:1+efi_rts_wq21:05:151
15568992550,254cyclictest14099-21kworker/u16:1+efi_rts_wq22:00:123
15566992540,253cyclictest14099-21kworker/u16:1+efi_rts_wq22:05:151
15566992540,253cyclictest14099-21kworker/u16:1+efi_rts_wq22:05:141
15567992510,250cyclictest14099-21kworker/u16:1+efi_rts_wq22:10:162
15566992480,247cyclictest11857-21kworker/u16:0+efi_rts_wq23:45:141
15568992460,245cyclictest25021-21kworker/u16:2+efi_rts_wq20:45:153
15567992390,238cyclictest14099-21kworker/u16:1+efi_rts_wq22:05:152
15567992390,238cyclictest14099-21kworker/u16:1+efi_rts_wq22:05:142
15565992380,237cyclictest11857-21kworker/u16:0+efi_rts_wq00:00:140
15568992360,235cyclictest25021-21kworker/u16:2+efi_rts_wq19:20:163
15565992360,234cyclictest14099-21kworker/u16:1+efi_rts_wq22:30:150
15566992340,233cyclictest14099-21kworker/u16:1+efi_rts_wq22:30:151
15565992340,233cyclictest14099-21kworker/u16:1+efi_rts_wq22:00:120
15568992320,231cyclictest14099-21kworker/u16:1+efi_rts_wq19:30:133
15568992300,228cyclictest14099-21kworker/u16:1+efi_rts_wq22:40:153
15567992290,228cyclictest11857-21kworker/u16:0+efi_rts_wq23:55:142
15566992280,227cyclictest25021-21kworker/u16:2+efi_rts_wq19:25:121
15565992270,226cyclictest14099-21kworker/u16:1+efi_rts_wq22:20:140
15568992260,225cyclictest14099-21kworker/u16:1+efi_rts_wq22:35:143
15567992240,223cyclictest25021-21kworker/u16:2+efi_rts_wq23:15:162
15566992190,218cyclictest25021-21kworker/u16:2+efi_rts_wq19:45:131
15565992160,215cyclictest25021-21kworker/u16:2+efi_rts_wq19:35:130
15565992150,214cyclictest11857-21kworker/u16:0+efi_rts_wq23:50:130
15567992140,213cyclictest14099-21kworker/u16:1+efi_rts_wq21:35:152
15566992140,213cyclictest14099-21kworker/u16:1+efi_rts_wq19:40:141
15567992120,211cyclictest14099-21kworker/u16:1+efi_rts_wq21:55:162
15568992100,209cyclictest14099-21kworker/u16:1+efi_rts_wq19:15:013
15568992070,206cyclictest25021-21kworker/u16:2+efi_rts_wq23:00:183
15567992070,206cyclictest25021-21kworker/u16:2+efi_rts_wq21:15:152
15567992040,203cyclictest25021-21kworker/u16:2+efi_rts_wq20:20:152
15567992030,202cyclictest14099-21kworker/u16:1+efi_rts_wq21:45:152
15566992030,202cyclictest14099-21kworker/u16:1+efi_rts_wq20:10:171
15565991980,197cyclictest11857-21kworker/u16:0+efi_rts_wq22:50:130
15566991960,195cyclictest14099-21kworker/u16:1+efi_rts_wq21:20:131
15567991950,194cyclictest25021-21kworker/u16:2+efi_rts_wq00:20:142
15565991940,193cyclictest14099-21kworker/u16:1+efi_rts_wq20:40:140
15565991920,191cyclictest14099-21kworker/u16:1+efi_rts_wq20:30:150
15567991890,188cyclictest25021-21kworker/u16:2+efi_rts_wq19:35:142
15565991880,187cyclictest25021-21kworker/u16:2+efi_rts_wq23:40:130
15568991830,182cyclictest14099-21kworker/u16:1+efi_rts_wq21:05:143
15565991830,182cyclictest14099-21kworker/u16:1+efi_rts_wq20:00:140
15568991820,179cyclictest25021-21kworker/u16:2+efi_rts_wq00:05:143
15568991800,179cyclictest11857-21kworker/u16:0+efi_rts_wq00:00:153
15565991790,178cyclictest11857-21kworker/u16:0+efi_rts_wq23:15:170
15565991760,175cyclictest14099-21kworker/u16:1+efi_rts_wq22:10:160
15568991740,173cyclictest25021-21kworker/u16:2+efi_rts_wq22:45:143
15565991740,173cyclictest14099-21kworker/u16:1+efi_rts_wq19:40:140
15566991710,170cyclictest14099-21kworker/u16:1+efi_rts_wq20:30:161
15567991670,166cyclictest25021-21kworker/u16:2+efi_rts_wq20:25:152
15566991640,162cyclictest11857-21kworker/u16:0+efi_rts_wq23:25:161
15565991630,162cyclictest25021-21kworker/u16:2+efi_rts_wq23:35:170
15566991590,158cyclictest14099-21kworker/u16:1+efi_rts_wq19:10:131
15568991580,157cyclictest14099-21kworker/u16:1+efi_rts_wq21:45:143
15566991540,153cyclictest11857-21kworker/u16:0+efi_rts_wq22:55:131
15565991520,151cyclictest25021-21kworker/u16:2+efi_rts_wq20:25:150
15566991420,141cyclictest14099-21kworker/u16:1+efi_rts_wq19:15:161
15566991410,140cyclictest14099-21kworker/u16:1+efi_rts_wq21:55:161
15567991360,135cyclictest25021-21kworker/u16:2+efi_rts_wq21:10:142
15567991310,130cyclictest11857-21kworker/u16:0+efi_rts_wq22:55:132
15568991260,125cyclictest25021-21kworker/u16:2+efi_rts_wq00:25:163
15566991240,123cyclictest25021-21kworker/u16:2+efi_rts_wq00:30:151
15565991220,121cyclictest25021-21kworker/u16:2+efi_rts_wq19:45:130
15565991210,120cyclictest25021-21kworker/u16:2+efi_rts_wq22:25:150
15568991170,116cyclictest25021-21kworker/u16:2+efi_rts_wq20:20:153
15567993329,3cyclictest808-21snmpd22:34:282
15566993330,2cyclictest808-21snmpd00:27:471
15568993229,2cyclictest808-21snmpd22:15:273
15567993230,2cyclictest14622-21cat21:40:152
15566993229,2cyclictest808-21snmpd00:12:451
15565993229,2cyclictest808-21snmpd23:10:200
15565993229,2cyclictest808-21snmpd23:05:270
15568993130,1cyclictest808-21snmpd22:12:523
15568993129,2cyclictest808-21snmpd22:58:493
15568993129,2cyclictest808-21snmpd21:42:003
15568993129,2cyclictest808-21snmpd20:52:343
15568993129,2cyclictest808-21snmpd00:17:293
15568993128,2cyclictest808-21snmpd00:31:013
15567993130,1cyclictest808-21snmpd19:48:142
15567993130,1cyclictest808-21snmpd19:10:212
15567993129,2cyclictest808-21snmpd23:10:512
15567993129,2cyclictest808-21snmpd19:29:262
15566993130,1cyclictest808-21snmpd22:52:471
15566993130,1cyclictest808-21snmpd21:29:321
15566993129,2cyclictest808-21snmpd22:29:091
15566993129,2cyclictest808-21snmpd20:22:361
15566993129,2cyclictest808-21snmpd00:18:051
15566993129,2cyclictest808-21snmpd00:04:541
15566993129,1cyclictest808-21snmpd23:43:151
15565993130,1cyclictest808-21snmpd20:06:230
15565993129,2cyclictest808-21snmpd22:44:230
15565993129,2cyclictest808-21snmpd22:18:330
15565993129,2cyclictest808-21snmpd21:46:390
15565993129,2cyclictest808-21snmpd19:33:230
15568993029,1cyclictest808-21snmpd22:28:363
15568993029,1cyclictest808-21snmpd20:57:573
15568993028,2cyclictest808-21snmpd23:47:243
15568993028,2cyclictest808-21snmpd22:51:053
15568993028,2cyclictest808-21snmpd22:05:393
15568993028,2cyclictest808-21snmpd22:05:383
15568993028,2cyclictest808-21snmpd19:52:583
15567993029,1cyclictest808-21snmpd23:35:262
15567993029,1cyclictest808-21snmpd22:43:532
15567993029,1cyclictest808-21snmpd20:13:542
15567993029,1cyclictest808-21snmpd19:41:432
15567993027,3cyclictest808-21snmpd22:49:282
15566993029,1cyclictest808-21snmpd23:17:151
15566993029,1cyclictest808-21snmpd21:43:321
15566993029,1cyclictest808-21snmpd20:40:071
15566993029,1cyclictest808-21snmpd19:55:111
15566993029,1cyclictest808-21snmpd19:37:311
15566993028,2cyclictest808-21snmpd22:02:381
15565993029,1cyclictest808-21snmpd23:32:230
15565993029,1cyclictest808-21snmpd22:07:300
15565993029,1cyclictest808-21snmpd22:07:290
15565993029,1cyclictest808-21snmpd21:36:470
15565993029,1cyclictest808-21snmpd20:17:020
15565993027,2cyclictest808-21snmpd21:50:560
15565993027,2cyclictest808-21snmpd00:21:520
15568992928,1cyclictest808-21snmpd21:30:263
15568992928,1cyclictest808-21snmpd21:02:523
15568992928,1cyclictest808-21snmpd20:17:593
15568992928,1cyclictest808-21snmpd20:00:563
15568992928,1cyclictest808-21snmpd19:10:063
15568992928,1cyclictest808-21snmpd00:14:263
15568992926,2cyclictest808-21snmpd22:21:103
15568992926,2cyclictest808-21snmpd19:27:083
15567992928,1cyclictest808-21snmpd20:53:342
15567992928,1cyclictest808-21snmpd00:09:252
15567992927,2cyclictest808-21snmpd23:00:082
15567992927,2cyclictest18747-21cat21:50:132
15567992926,2cyclictest808-21snmpd22:15:362
15567992926,2cyclictest808-21snmpd21:20:472
15566992929,0cyclictest7106-21kworker/1:1+events23:04:311
15566992929,0cyclictest17640-21kworker/1:0+events22:41:551
15566992928,1cyclictest808-21snmpd21:35:501
15566992927,2cyclictest808-21snmpd21:13:471
15566992927,2cyclictest11375-21cat23:55:161
15565992928,1cyclictest808-21snmpd23:20:350
15565992928,1cyclictest808-21snmpd23:04:380
15565992928,1cyclictest808-21snmpd21:57:330
15565992928,1cyclictest808-21snmpd21:34:130
15565992928,1cyclictest808-21snmpd21:22:100
15565992928,1cyclictest808-21snmpd20:11:120
15565992928,1cyclictest808-21snmpd19:58:500
15565992928,1cyclictest808-21snmpd19:20:200
15565992928,1cyclictest808-21snmpd00:11:240
15568992827,1cyclictest808-21snmpd23:44:043
15568992827,1cyclictest808-21snmpd23:33:423
15568992827,1cyclictest808-21snmpd22:31:463
15567992827,1cyclictest808-21snmpd22:01:052
15567992827,1cyclictest808-21snmpd20:43:432
15567992827,1cyclictest808-21snmpd00:34:462
15566992828,0cyclictest9739-21kworker/1:2+events22:46:541
15566992828,0cyclictest24662-21kworker/1:1+events23:23:581
15566992827,1cyclictest808-21snmpd19:50:201
15566992826,2cyclictest808-21snmpd23:35:151
15566992826,2cyclictest808-21snmpd20:27:351
15566992826,2cyclictest808-21snmpd19:33:081
15566992826,2cyclictest808-21snmpd00:24:161
15565992827,1cyclictest808-21snmpd23:25:240
15565992827,1cyclictest808-21snmpd20:35:250
15565992827,1cyclictest808-21snmpd00:29:080
15565992826,2cyclictest808-21snmpd21:02:180
15565992825,3cyclictest808-21snmpd22:39:070
15568992726,1cyclictest808-21snmpd20:26:413
15567992726,1cyclictest808-21snmpd21:06:252
15567992726,1cyclictest808-21snmpd19:34:372
15566992726,1cyclictest808-21snmpd23:52:481
15565992726,1cyclictest808-21snmpd21:08:470
15565992725,2cyclictest808-21snmpd22:46:110
15565992725,2cyclictest808-21snmpd19:51:140
15568992625,1cyclictest808-21snmpd19:57:243
15568992624,2cyclictest9519-21cat20:10:193
15567992624,2cyclictest808-21snmpd00:00:512
15565992625,1cyclictest808-21snmpd20:49:130
15565992624,2cyclictest808-21snmpd00:07:400
15568992524,1cyclictest808-21snmpd23:08:323
15568992523,2cyclictest21118-21cat21:55:183
15567992525,0cyclictest75050irq/133-enp1s023:25:582
15567992523,2cyclictest808-21snmpd19:15:282
15566992524,1cyclictest808-21snmpd19:23:321
15568992422,2cyclictest29240-21cat19:40:153
15566992423,1cyclictest808-21snmpd22:21:131
15566992422,2cyclictest808-21snmpd20:51:461
15565992423,1cyclictest808-21snmpd20:57:280
15568992322,1cyclictest808-21snmpd00:39:203
15567992321,2cyclictest808-21snmpd23:53:552
15567992321,2cyclictest28493-21cat00:35:172
15566992322,1cyclictest808-21snmpd20:46:451
15565992322,1cyclictest818-21lldpd23:58:130
15567992221,1cyclictest808-21snmpd00:19:142
15567992119,2cyclictest808-21snmpd21:33:352
15567992119,2cyclictest808-21snmpd20:16:502
15566992120,1cyclictest808-21snmpd21:46:361
15568991918,1cyclictest808-21snmpd23:21:273
15567991918,1cyclictest808-21snmpd21:00:432
15567991917,2cyclictest8413-21cat21:25:142
15566991919,0cyclictest17640-21kworker/1:0+events22:12:031
15568991816,2cyclictest808-21snmpd21:29:433
15567991716,1cyclictest808-21snmpd22:20:522
15565991716,1cyclictest808-21snmpd23:46:400
15566991313,0cyclictest17640-21kworker/1:0+events21:15:511
15566991312,1cyclictest808-21snmpd20:58:091
1556899109,1cyclictest815-21ntpd19:37:013
155689998,1cyclictest808-21snmpd19:47:293
155679999,0cyclictest14099-21kworker/u16:1+atlantic20:48:062
155689965,1cyclictest8050-21timerandwakeup20:05:213
155689965,1cyclictest4205-21cat21:15:173
155689965,1cyclictest20637-21chrt20:35:223
155689965,1cyclictest1902-21expr21:10:133
155679965,1cyclictest4611-21grep20:00:142
155659965,1cyclictest14210-21netstat20:20:190
155689954,1cyclictest808-21snmpd20:30:273
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional