You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-29 - 22:47

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Tue Apr 29, 2025 12:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
175802319304,5sleep10-21swapper/107:06:121
177042315307,5sleep00-21swapper/007:07:470
177212314308,4sleep20-21swapper/207:08:002
175572313305,5sleep30-21swapper/307:05:533
18138993100,309cyclictest7712-21kworker/u16:2+efi_rts_wq09:20:130
18141993090,308cyclictest13135-21kworker/u16:2+efi_rts_wq11:20:133
18140993040,303cyclictest7712-21kworker/u16:2+efi_rts_wq07:15:162
18138993040,302cyclictest32224-21kworker/u16:3+efi_rts_wq12:00:150
18141993030,302cyclictest7712-21kworker/u16:2+efi_rts_wq09:50:093
18140993030,302cyclictest30207-21kworker/u16:1+efi_rts_wq07:55:132
18141993020,301cyclictest16743-21kworker/u16:3+efi_rts_wq11:30:093
18141993010,300cyclictest7712-21kworker/u16:2+efi_rts_wq08:55:183
18141993010,300cyclictest30207-21kworker/u16:1+efi_rts_wq08:25:143
18139993000,299cyclictest16743-21kworker/u16:3+efi_rts_wq11:30:091
18138992990,298cyclictest7712-21kworker/u16:2+efi_rts_wq08:40:170
18140992980,297cyclictest7712-21kworker/u16:2+efi_rts_wq08:45:132
18139992960,295cyclictest7712-21kworker/u16:2+efi_rts_wq10:30:101
18141992950,294cyclictest7830-21kworker/u16:0+efi_rts_wq11:00:133
18139992940,293cyclictest32224-21kworker/u16:3+efi_rts_wq11:55:121
18140992930,292cyclictest32224-21kworker/u16:3+efi_rts_wq12:10:152
18140992930,292cyclictest13135-21kworker/u16:2+efi_rts_wq11:20:132
18138992930,291cyclictest6780-21kworker/u16:3+efi_rts_wq10:50:090
18141992920,291cyclictest30207-21kworker/u16:1+efi_rts_wq08:30:173
18139992910,290cyclictest7712-21kworker/u16:2+efi_rts_wq07:35:141
18139992910,290cyclictest30207-21kworker/u16:1+efi_rts_wq07:50:171
18140992890,288cyclictest30207-21kworker/u16:1+efi_rts_wq08:20:152
18138992890,288cyclictest30207-21kworker/u16:1+efi_rts_wq07:50:170
18139992870,286cyclictest7712-21kworker/u16:2+efi_rts_wq09:40:161
18138992870,286cyclictest7712-21kworker/u16:2+efi_rts_wq09:15:140
18139992850,284cyclictest7712-21kworker/u16:2+efi_rts_wq09:10:151
18141992820,281cyclictest7712-21kworker/u16:2+efi_rts_wq07:45:133
18139992820,281cyclictest7712-21kworker/u16:2+efi_rts_wq08:55:171
18141992790,278cyclictest30207-21kworker/u16:1+efi_rts_wq08:15:133
18140992780,277cyclictest7712-21kworker/u16:2+efi_rts_wq07:25:152
18139992740,273cyclictest7712-21kworker/u16:2+efi_rts_wq07:40:141
18139992720,271cyclictest7712-21kworker/u16:2+efi_rts_wq08:45:121
18139992710,270cyclictest13135-21kworker/u16:2+efi_rts_wq12:30:081
18139992710,270cyclictest13135-21kworker/u16:2+efi_rts_wq11:15:141
18141992690,268cyclictest13135-21kworker/u16:2+efi_rts_wq12:30:093
18139992690,268cyclictest7712-21kworker/u16:2+efi_rts_wq07:20:141
18138992670,266cyclictest30207-21kworker/u16:1+efi_rts_wq08:05:130
18138992650,264cyclictest7712-21kworker/u16:2+efi_rts_wq09:40:160
18139992610,257cyclictest7712-21kworker/u16:2+efi_rts_wq09:05:131
18138992600,257cyclictest30207-21kworker/u16:1+efi_rts_wq09:35:130
18138992590,258cyclictest13135-21kworker/u16:2+efi_rts_wq12:20:140
18138992590,258cyclictest13135-21kworker/u16:2+efi_rts_wq12:20:140
18141992570,256cyclictest13135-21kworker/u16:2+efi_rts_wq11:15:153
18139992560,255cyclictest13135-21kworker/u16:2+efi_rts_wq11:35:131
18140992530,252cyclictest30207-21kworker/u16:1+efi_rts_wq08:10:152
18138992530,252cyclictest7712-21kworker/u16:2+efi_rts_wq07:15:010
18138992530,252cyclictest13135-21kworker/u16:2+efi_rts_wq11:15:150
18138992520,251cyclictest7712-21kworker/u16:2+efi_rts_wq10:20:150
18139992510,250cyclictest7712-21kworker/u16:2+efi_rts_wq07:25:151
18138992480,247cyclictest13135-21kworker/u16:2+efi_rts_wq11:10:090
18141992470,246cyclictest30207-21kworker/u16:1+efi_rts_wq08:00:133
18141992470,244cyclictest30207-21kworker/u16:1+efi_rts_wq10:35:143
18140992470,246cyclictest7712-21kworker/u16:2+efi_rts_wq09:55:122
18140992470,246cyclictest30207-21kworker/u16:1+efi_rts_wq09:35:122
18139992470,246cyclictest32224-21kworker/u16:3+efi_rts_wq12:35:131
18139992470,246cyclictest30207-21kworker/u16:1+efi_rts_wq10:35:131
18138992470,244cyclictest7712-21kworker/u16:2+efi_rts_wq07:30:170
18141992460,245cyclictest7712-21kworker/u16:2+efi_rts_wq09:55:133
18139992460,245cyclictest7712-21kworker/u16:2+efi_rts_wq09:00:161
18139992440,243cyclictest13135-21kworker/u16:2+efi_rts_wq12:20:151
18139992440,243cyclictest13135-21kworker/u16:2+efi_rts_wq12:20:141
18140992390,238cyclictest7712-21kworker/u16:2+efi_rts_wq09:50:092
18140992390,238cyclictest7712-21kworker/u16:2+efi_rts_wq07:40:152
18140992370,236cyclictest7712-21kworker/u16:2+efi_rts_wq10:20:152
18140992370,236cyclictest7712-21kworker/u16:2+efi_rts_wq10:10:092
18141992360,235cyclictest13135-21kworker/u16:2+efi_rts_wq12:15:133
18139992360,235cyclictest7712-21kworker/u16:2+efi_rts_wq08:35:131
18139992360,235cyclictest30207-21kworker/u16:1+efi_rts_wq08:05:121
18138992360,235cyclictest32224-21kworker/u16:3+efi_rts_wq11:55:120
18141992350,234cyclictest7712-21kworker/u16:2+efi_rts_wq10:00:143
18139992340,233cyclictest6780-21kworker/u16:3+efi_rts_wq10:50:091
18139992320,231cyclictest13135-21kworker/u16:2+efi_rts_wq12:15:121
18139992300,229cyclictest30207-21kworker/u16:1+efi_rts_wq11:50:091
18138992260,225cyclictest30207-21kworker/u16:1+efi_rts_wq10:55:140
18141992200,219cyclictest32224-21kworker/u16:3+efi_rts_wq11:55:133
18139992180,217cyclictest7712-21kworker/u16:2+efi_rts_wq09:15:131
18138992170,216cyclictest7712-21kworker/u16:2+efi_rts_wq09:30:090
18140992150,214cyclictest7712-21kworker/u16:2+efi_rts_wq07:20:142
18139992150,214cyclictest7712-21kworker/u16:2+efi_rts_wq08:50:181
18140992140,213cyclictest7712-21kworker/u16:2+efi_rts_wq07:35:132
18138992120,211cyclictest7712-21kworker/u16:2+efi_rts_wq10:00:140
18139992050,204cyclictest7712-21kworker/u16:2+efi_rts_wq09:30:091
18139991950,194cyclictest7712-21kworker/u16:2+efi_rts_wq09:20:131
18139991950,194cyclictest13135-21kworker/u16:2+efi_rts_wq11:40:131
18140991930,192cyclictest16743-21kworker/u16:3+efi_rts_wq11:30:102
18139991930,192cyclictest30207-21kworker/u16:1+efi_rts_wq08:20:151
18138991910,189cyclictest30207-21kworker/u16:1+efi_rts_wq10:40:150
18141991890,188cyclictest30207-21kworker/u16:1+efi_rts_wq07:10:163
18141991870,186cyclictest7712-21kworker/u16:2+efi_rts_wq09:05:143
18138991840,183cyclictest7712-21kworker/u16:2+efi_rts_wq09:00:160
18139991830,182cyclictest7712-21kworker/u16:2+efi_rts_wq07:30:171
18138991760,175cyclictest7712-21kworker/u16:2+efi_rts_wq10:30:090
18140991720,171cyclictest7712-21kworker/u16:2+efi_rts_wq09:10:152
18138991710,170cyclictest30207-21kworker/u16:1+efi_rts_wq08:15:130
18139991700,167cyclictest30207-21kworker/u16:1+efi_rts_wq10:40:151
18141991620,161cyclictest30207-21kworker/u16:1+efi_rts_wq07:55:143
18140991620,161cyclictest13135-21kworker/u16:2+efi_rts_wq11:10:092
18139991590,158cyclictest30207-21kworker/u16:1+efi_rts_wq07:10:161
18141991510,150cyclictest7712-21kworker/u16:2+efi_rts_wq10:15:113
18140991410,140cyclictest7830-21kworker/u16:0+efi_rts_wq11:00:132
18138991350,134cyclictest32224-21kworker/u16:3+efi_rts_wq12:10:140
18140991340,133cyclictest30207-21kworker/u16:1+efi_rts_wq10:40:152
18140991320,131cyclictest30207-21kworker/u16:1+efi_rts_wq10:35:142
18141991300,129cyclictest7712-21kworker/u16:2+efi_rts_wq07:15:003
18138991280,127cyclictest7712-21kworker/u16:2+efi_rts_wq10:15:110
18138991260,125cyclictest7712-21kworker/u16:2+efi_rts_wq10:10:090
18140991230,120cyclictest7712-21kworker/u16:2+efi_rts_wq07:45:122
18140991200,119cyclictest7712-21kworker/u16:2+efi_rts_wq09:40:162
18141991180,117cyclictest30207-21kworker/u16:1+efi_rts_wq10:55:153
18138991130,112cyclictest7712-21kworker/u16:2+efi_rts_wq09:50:090
18138993530,5cyclictest808-21snmpd11:34:580
18138993430,4cyclictest808-21snmpd08:51:350
18141993330,2cyclictest808-21snmpd12:20:483
18141993330,2cyclictest808-21snmpd12:20:483
18141993330,2cyclictest808-21snmpd09:19:213
18138993328,4cyclictest808-21snmpd12:08:230
18138993328,4cyclictest808-21snmpd08:37:230
18141993229,2cyclictest808-21snmpd12:05:383
18141993229,2cyclictest808-21snmpd09:46:193
18141993229,2cyclictest808-21snmpd09:35:193
18141993229,2cyclictest808-21snmpd07:37:263
18141993228,4cyclictest808-21snmpd10:52:093
18141993228,4cyclictest808-21snmpd10:32:423
18141993228,3cyclictest808-21snmpd09:24:123
18141993227,5cyclictest808-21snmpd11:08:313
18141993227,4cyclictest808-21snmpd07:30:453
18141993227,4cyclictest808-21snmpd07:22:203
18140993229,2cyclictest808-21snmpd08:58:192
18140993229,2cyclictest808-21snmpd08:00:072
18139993230,2cyclictest808-21snmpd09:39:481
18139993229,2cyclictest808-21snmpd08:31:261
18138993228,4cyclictest808-21snmpd11:51:380
18138993228,4cyclictest808-21snmpd11:45:230
18141993130,1cyclictest808-21snmpd12:27:333
18141993129,2cyclictest808-21snmpd12:01:383
18141993129,2cyclictest808-21snmpd11:44:503
18141993129,2cyclictest808-21snmpd11:37:323
18141993129,2cyclictest5675-21cat10:40:173
18141993129,1cyclictest808-21snmpd09:32:063
18141993128,3cyclictest808-21snmpd08:42:413
18140993129,2cyclictest808-21snmpd09:21:062
18140993128,2cyclictest808-21snmpd08:08:032
18139993130,1cyclictest808-21snmpd11:46:341
18139993130,1cyclictest808-21snmpd10:47:111
18139993130,1cyclictest808-21snmpd08:41:561
18139993129,2cyclictest808-21snmpd12:03:111
18139993129,2cyclictest808-21snmpd09:25:261
18139993129,2cyclictest808-21snmpd08:02:071
18139993128,2cyclictest808-21snmpd12:26:241
18139993128,2cyclictest808-21snmpd11:20:041
18138993130,1cyclictest808-21snmpd08:14:040
18138993130,1cyclictest808-21snmpd07:28:260
18138993129,2cyclictest808-21snmpd09:55:010
18138993129,2cyclictest808-21snmpd08:45:280
18141993029,1cyclictest808-21snmpd08:11:433
18141993028,2cyclictest808-21snmpd07:26:163
18140993029,1cyclictest808-21snmpd08:43:382
18140993028,2cyclictest9438-21cat10:50:112
18140993028,2cyclictest808-21snmpd12:21:092
18140993028,2cyclictest808-21snmpd12:21:082
18140993028,2cyclictest808-21snmpd12:03:172
18140993028,2cyclictest808-21snmpd11:48:192
18140993028,2cyclictest808-21snmpd09:31:212
18139993029,1cyclictest808-21snmpd09:56:091
18139993029,1cyclictest808-21snmpd07:55:081
18139993029,1cyclictest808-21snmpd07:47:171
18139993028,2cyclictest808-21snmpd11:12:551
18139993028,2cyclictest808-21snmpd10:14:561
18139993028,2cyclictest808-21snmpd08:16:541
18138993029,1cyclictest808-21snmpd12:32:120
18138993029,1cyclictest808-21snmpd11:41:080
18138993029,1cyclictest808-21snmpd11:02:310
18138993029,1cyclictest808-21snmpd10:46:170
18138993029,1cyclictest808-21snmpd09:45:400
18138993029,1cyclictest808-21snmpd08:29:410
18138993027,2cyclictest808-21snmpd12:17:210
18138993027,2cyclictest808-21snmpd07:43:540
18141992929,0cyclictest3857-21kworker/3:2+events10:49:513
18141992929,0cyclictest30772-21kworker/3:2+events10:23:273
18141992929,0cyclictest30772-21kworker/3:2+events09:44:273
18141992929,0cyclictest30772-21kworker/3:2+events09:12:153
18141992929,0cyclictest30772-21kworker/3:2+events08:45:313
18141992929,0cyclictest30772-21kworker/3:2+events08:06:593
18141992929,0cyclictest30772-21kworker/3:2+events07:42:393
18141992928,1cyclictest808-21snmpd10:29:563
18141992926,3cyclictest808-21snmpd11:11:103
18141992926,3cyclictest808-21snmpd10:13:173
18141992926,2cyclictest808-21snmpd12:35:093
18141992926,2cyclictest808-21snmpd11:25:403
18141992926,2cyclictest808-21snmpd09:01:023
18141992925,4cyclictest808-21snmpd11:53:443
18140992929,0cyclictest808-21snmpd12:17:562
18140992928,1cyclictest808-21snmpd10:33:182
18140992928,1cyclictest808-21snmpd10:28:502
18140992928,1cyclictest808-21snmpd09:00:022
18140992928,1cyclictest808-21snmpd08:19:572
18140992927,2cyclictest808-21snmpd10:16:252
18140992927,2cyclictest808-21snmpd08:25:362
18140992927,2cyclictest29145-21cat08:50:202
18139992928,1cyclictest808-21snmpd11:01:001
18139992928,1cyclictest808-21snmpd10:55:591
18139992928,1cyclictest808-21snmpd10:20:201
18139992928,1cyclictest808-21snmpd10:06:371
18139992926,2cyclictest808-21snmpd10:28:161
18138992928,1cyclictest808-21snmpd12:37:120
18138992928,1cyclictest808-21snmpd09:28:330
18138992928,1cyclictest808-21snmpd07:35:030
18138992927,2cyclictest808-21snmpd07:21:350
18141992828,0cyclictest30772-21kworker/3:2+events10:06:433
18141992828,0cyclictest30772-21kworker/3:2+events09:26:353
18141992828,0cyclictest30772-21kworker/3:2+events08:50:313
18141992828,0cyclictest30772-21kworker/3:2+events08:20:353
18141992826,2cyclictest808-21snmpd07:54:213
18140992828,0cyclictest808-21snmpd11:56:582
18140992827,1cyclictest808-21snmpd11:07:042
18140992826,2cyclictest808-21snmpd12:09:102
18140992826,2cyclictest808-21snmpd09:16:352
18140992826,2cyclictest808-21snmpd08:30:532
18139992827,1cyclictest808-21snmpd11:29:151
18139992825,2cyclictest808-21snmpd09:52:161
18141992727,0cyclictest31497-21kworker/3:2+events12:12:513
18140992726,1cyclictest808-21snmpd11:41:592
18140992726,1cyclictest808-21snmpd10:05:322
18140992726,1cyclictest808-21snmpd10:04:022
18139992726,1cyclictest808-21snmpd10:18:221
18139992726,1cyclictest808-21snmpd07:16:531
18138992727,0cyclictest74850irq/131-enp1s011:06:330
18138992726,1cyclictest808-21snmpd11:27:130
18138992726,1cyclictest808-21snmpd10:05:500
18138992726,1cyclictest808-21snmpd08:02:160
18138992725,2cyclictest808-21snmpd09:14:570
18140992625,1cyclictest808-21snmpd12:30:002
18140992625,1cyclictest808-21snmpd11:39:372
18140992625,1cyclictest808-21snmpd11:19:152
18140992625,1cyclictest808-21snmpd10:56:512
18139992624,2cyclictest808-21snmpd10:02:401
18139992623,2cyclictest808-21snmpd08:10:491
18141992524,1cyclictest808-21snmpd11:46:053
18139992525,0cyclictest808-21snmpd11:05:571
18139992524,1cyclictest808-21snmpd12:05:521
18138992525,0cyclictest30207-21kworker/u16:1+atlantic10:38:380
18141992423,1cyclictest808-21snmpd08:38:053
18140992424,0cyclictest30207-21kworker/u16:1+atlantic07:12:272
18140992422,2cyclictest808-21snmpd11:26:032
18138992423,1cyclictest808-21snmpd10:25:080
18138992422,2cyclictest16748-21cat08:20:170
18138992419,5cyclictest808-21snmpd07:49:480
18140992323,0cyclictest7712-21kworker/u16:2+atlantic07:33:472
18140992322,1cyclictest808-21snmpd11:53:472
18140992322,1cyclictest808-21snmpd10:49:092
18139992322,1cyclictest808-21snmpd12:14:511
18138992322,1cyclictest808-21snmpd08:55:290
18140992221,1cyclictest808-21snmpd08:35:282
18138992219,3cyclictest808-21snmpd11:23:340
18140992020,0cyclictest7712-21kworker/u16:2+atlantic09:26:502
18140992020,0cyclictest32224-21kworker/u16:3+atlantic12:36:432
18140992020,0cyclictest30207-21kworker/u16:1+atlantic07:54:232
18140992020,0cyclictest13135-21kworker/u16:2+atlantic12:33:092
18140991917,2cyclictest808-21snmpd09:07:382
18138991917,2cyclictest808-21snmpd11:35:340
18139991615,1cyclictest808-21snmpd08:25:181
18138991614,2cyclictest808-21snmpd08:30:020
18140991111,0cyclictest7712-21kworker/u16:2+atlantic09:45:182
181399965,1cyclictest177842sleep109:46:461
181389965,1cyclictest141122sleep012:26:450
181389960,0cyclictest0-21swapper/007:57:280
181389954,1cyclictest3079-21cat09:05:170
181389954,1cyclictest18162-21sort07:10:140
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional