You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-13 - 02:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Mon May 12, 2025 12:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
253402320305,5sleep30-21swapper/307:07:113
255022319305,5sleep10-21swapper/107:09:161
252192319305,5sleep20-21swapper/207:05:372
255532316308,5sleep00-21swapper/007:09:550
25822993090,308cyclictest6029-21kworker/u16:2+efi_rts_wq08:10:140
25824993080,307cyclictest24523-21kworker/u16:1+efi_rts_wq08:25:132
25822993080,307cyclictest24523-21kworker/u16:1+efi_rts_wq07:10:140
25824993070,306cyclictest4886-21kworker/u16:2+efi_rts_wq12:00:132
25822993060,305cyclictest24523-21kworker/u16:1+efi_rts_wq09:05:160
25825993050,304cyclictest10375-21kworker/u16:0+efi_rts_wq11:30:133
25823992990,298cyclictest1618-21kworker/u16:3+efi_rts_wq10:35:091
25824992980,297cyclictest24523-21kworker/u16:1+efi_rts_wq09:55:152
25824992980,297cyclictest24523-21kworker/u16:1+efi_rts_wq08:30:162
25822992980,297cyclictest24523-21kworker/u16:1+efi_rts_wq09:45:140
25824992950,294cyclictest24523-21kworker/u16:1+efi_rts_wq07:40:142
25823992950,294cyclictest6029-21kworker/u16:2+efi_rts_wq09:25:141
25822992950,294cyclictest6029-21kworker/u16:2+efi_rts_wq07:55:160
25823992920,291cyclictest24523-21kworker/u16:1+efi_rts_wq09:20:141
25822992920,291cyclictest6029-21kworker/u16:2+efi_rts_wq08:15:160
25822992920,291cyclictest16729-21kworker/u16:3+efi_rts_wq12:30:110
25825992890,288cyclictest10375-21kworker/u16:0+efi_rts_wq11:20:133
25824992890,288cyclictest6029-21kworker/u16:2+efi_rts_wq07:45:112
25825992860,285cyclictest6029-21kworker/u16:2+efi_rts_wq08:35:123
25825992860,284cyclictest14291-21kworker/u16:2+efi_rts_wq11:15:113
25825992860,284cyclictest14291-21kworker/u16:2+efi_rts_wq11:15:103
25822992860,285cyclictest6029-21kworker/u16:2+efi_rts_wq10:15:090
25823992850,284cyclictest24523-21kworker/u16:1+efi_rts_wq08:40:141
25822992850,284cyclictest24523-21kworker/u16:1+efi_rts_wq08:40:140
25823992820,281cyclictest24523-21kworker/u16:1+efi_rts_wq09:10:131
25825992810,280cyclictest24523-21kworker/u16:1+efi_rts_wq09:35:153
25825992810,280cyclictest1618-21kworker/u16:3+efi_rts_wq10:35:103
25823992810,280cyclictest24523-21kworker/u16:1+efi_rts_wq08:45:131
25823992800,279cyclictest4886-21kworker/u16:2+efi_rts_wq12:25:131
25822992800,279cyclictest24523-21kworker/u16:1+efi_rts_wq10:55:090
25825992790,278cyclictest6029-21kworker/u16:2+efi_rts_wq09:30:123
25822992790,278cyclictest16729-21kworker/u16:3+efi_rts_wq11:50:130
25825992750,274cyclictest24523-21kworker/u16:1+efi_rts_wq09:50:123
25825992740,273cyclictest6029-21kworker/u16:2+efi_rts_wq08:55:133
25823992710,270cyclictest24523-21kworker/u16:1+efi_rts_wq09:45:141
25822992710,270cyclictest24523-21kworker/u16:1+efi_rts_wq08:00:130
25824992700,269cyclictest4886-21kworker/u16:2+efi_rts_wq12:25:142
25824992700,269cyclictest28190-21kworker/u16:0+efi_rts_wq07:20:142
25824992700,269cyclictest24523-21kworker/u16:1+efi_rts_wq09:05:152
25823992690,268cyclictest16729-21kworker/u16:3+efi_rts_wq12:20:141
25823992690,268cyclictest16729-21kworker/u16:3+efi_rts_wq11:25:171
25823992640,263cyclictest24523-21kworker/u16:1+efi_rts_wq07:10:131
25822992630,262cyclictest10375-21kworker/u16:0+efi_rts_wq11:55:150
25823992620,261cyclictest16729-21kworker/u16:3+efi_rts_wq11:50:131
25822992610,260cyclictest24523-21kworker/u16:1+efi_rts_wq08:45:120
25825992590,258cyclictest24523-21kworker/u16:1+efi_rts_wq08:05:163
25822992570,256cyclictest10375-21kworker/u16:0+efi_rts_wq11:45:140
25822992560,255cyclictest6029-21kworker/u16:2+efi_rts_wq08:55:130
25825992520,251cyclictest16729-21kworker/u16:3+efi_rts_wq11:40:143
25824992520,251cyclictest24523-21kworker/u16:1+efi_rts_wq09:35:152
25823992520,251cyclictest24523-21kworker/u16:1+efi_rts_wq08:20:161
25825992470,246cyclictest24523-21kworker/u16:1+efi_rts_wq07:15:123
25822992430,242cyclictest28190-21kworker/u16:0+efi_rts_wq07:35:120
25824992410,240cyclictest24523-21kworker/u16:1+efi_rts_wq08:50:142
25822992400,239cyclictest6029-21kworker/u16:2+efi_rts_wq09:00:130
25825992370,236cyclictest16729-21kworker/u16:3+efi_rts_wq12:05:163
25822992370,236cyclictest24523-21kworker/u16:1+efi_rts_wq08:30:150
25824992350,234cyclictest16729-21kworker/u16:3+efi_rts_wq12:10:112
25823992350,234cyclictest10375-21kworker/u16:0+efi_rts_wq11:20:131
25822992330,232cyclictest24523-21kworker/u16:1+efi_rts_wq07:15:110
25824992290,228cyclictest24523-21kworker/u16:1+efi_rts_wq08:05:152
25824992250,223cyclictest6029-21kworker/u16:2+efi_rts_wq07:50:142
25823992250,222cyclictest24523-21kworker/u16:1+efi_rts_wq10:55:091
25822992200,219cyclictest24523-21kworker/u16:1+efi_rts_wq09:40:110
25823992180,217cyclictest24523-21kworker/u16:1+efi_rts_wq09:50:121
25822992180,217cyclictest24523-21kworker/u16:1+efi_rts_wq07:40:150
25822992160,215cyclictest24523-21kworker/u16:1+efi_rts_wq07:25:140
25823992150,214cyclictest28190-21kworker/u16:0+efi_rts_wq07:15:001
25825992120,211cyclictest6029-21kworker/u16:2+efi_rts_wq09:15:143
25823992120,211cyclictest16729-21kworker/u16:3+efi_rts_wq11:40:141
25824992100,209cyclictest16729-21kworker/u16:3+efi_rts_wq12:35:142
25823992030,202cyclictest6029-21kworker/u16:2+efi_rts_wq08:35:121
25825991990,198cyclictest24523-21kworker/u16:1+efi_rts_wq09:10:143
25822991950,194cyclictest24523-21kworker/u16:1+efi_rts_wq08:20:150
25823991920,191cyclictest6029-21kworker/u16:2+efi_rts_wq09:00:131
25823991890,188cyclictest4886-21kworker/u16:2+efi_rts_wq12:15:141
25822991880,187cyclictest16729-21kworker/u16:3+efi_rts_wq11:35:120
25822991880,187cyclictest1618-21kworker/u16:3+efi_rts_wq10:35:090
25825991840,183cyclictest4886-21kworker/u16:2+efi_rts_wq12:25:133
25823991820,181cyclictest24523-21kworker/u16:1+efi_rts_wq07:30:141
25822991820,179cyclictest4886-21kworker/u16:2+efi_rts_wq12:15:140
25823991810,180cyclictest16729-21kworker/u16:3+efi_rts_wq12:10:111
25825991800,179cyclictest16729-21kworker/u16:3+efi_rts_wq11:25:163
25823991790,178cyclictest24523-21kworker/u16:1+efi_rts_wq08:25:131
25825991780,177cyclictest6029-21kworker/u16:2+efi_rts_wq07:45:113
25825991750,174cyclictest4886-21kworker/u16:2+efi_rts_wq12:00:133
25823991740,173cyclictest6029-21kworker/u16:2+efi_rts_wq08:10:151
25822991740,173cyclictest24523-21kworker/u16:1+efi_rts_wq09:55:140
25824991720,171cyclictest16729-21kworker/u16:3+efi_rts_wq11:25:162
25824991640,163cyclictest24523-21kworker/u16:1+efi_rts_wq09:40:102
25824991620,161cyclictest6029-21kworker/u16:2+efi_rts_wq09:25:132
25822991620,161cyclictest16729-21kworker/u16:3+efi_rts_wq12:05:160
25824991560,153cyclictest10375-21kworker/u16:0+efi_rts_wq11:30:132
25824991550,154cyclictest6029-21kworker/u16:2+efi_rts_wq08:35:122
25824991550,152cyclictest10375-21kworker/u16:0+efi_rts_wq11:35:122
25823991530,152cyclictest6029-21kworker/u16:2+efi_rts_wq09:15:141
25825991520,151cyclictest28190-21kworker/u16:0+efi_rts_wq07:20:143
25825991520,151cyclictest24523-21kworker/u16:1+efi_rts_wq08:50:143
25822991470,146cyclictest24523-21kworker/u16:1+efi_rts_wq09:20:140
25823991440,143cyclictest16729-21kworker/u16:3+efi_rts_wq12:35:131
25824991360,133cyclictest24523-21kworker/u16:1+efi_rts_wq10:55:092
25823991330,132cyclictest16729-21kworker/u16:3+efi_rts_wq11:45:151
25823991280,127cyclictest6029-21kworker/u16:2+efi_rts_wq09:30:121
25824991250,124cyclictest24523-21kworker/u16:1+efi_rts_wq07:30:132
25825991240,123cyclictest6029-21kworker/u16:2+efi_rts_wq10:15:093
25825991190,118cyclictest10375-21kworker/u16:0+efi_rts_wq11:55:153
25824993330,2cyclictest808-21snmpd10:12:332
25824993330,2cyclictest808-21snmpd08:12:492
25822993330,2cyclictest808-21snmpd08:05:090
25825993229,2cyclictest808-21snmpd12:19:103
25825993229,2cyclictest808-21snmpd10:06:153
25825993229,2cyclictest808-21snmpd08:29:093
25824993230,2cyclictest808-21snmpd08:40:232
25825993130,1cyclictest808-21snmpd11:51:183
25825993129,2cyclictest808-21snmpd09:09:073
25825993129,2cyclictest808-21snmpd08:24:003
25825993129,2cyclictest808-21snmpd08:11:033
25825993129,2cyclictest808-21snmpd07:56:483
25825993128,2cyclictest808-21snmpd08:02:243
25824993129,2cyclictest808-21snmpd11:55:432
25824993129,2cyclictest808-21snmpd11:49:192
25824993128,2cyclictest808-21snmpd12:32:252
25823993130,1cyclictest808-21snmpd08:53:131
25823993129,2cyclictest808-21snmpd10:21:421
25823993129,2cyclictest808-21snmpd07:37:351
25822993130,1cyclictest808-21snmpd12:03:150
25822993130,1cyclictest5495-21kworker/0:3+events11:04:510
25822993129,2cyclictest808-21snmpd11:17:090
25822993129,2cyclictest808-21snmpd11:17:080
25822993129,2cyclictest808-21snmpd10:27:360
25822993128,2cyclictest808-21snmpd08:37:220
25825993029,1cyclictest808-21snmpd10:55:413
25825993029,1cyclictest808-21snmpd10:45:383
25825993029,1cyclictest808-21snmpd10:30:363
25825993029,1cyclictest808-21snmpd10:13:543
25825993029,1cyclictest808-21snmpd09:48:473
25825993028,2cyclictest808-21snmpd07:14:443
25825993027,2cyclictest808-21snmpd08:45:283
25825993027,2cyclictest808-21snmpd08:19:423
25824993029,1cyclictest808-21snmpd11:52:122
25824993029,1cyclictest808-21snmpd11:09:462
25824993029,1cyclictest808-21snmpd09:53:142
25824993029,1cyclictest808-21snmpd08:48:102
25824993028,2cyclictest808-21snmpd09:22:082
25824993028,2cyclictest808-21snmpd07:28:112
25824993027,2cyclictest808-21snmpd10:17:582
25823993029,1cyclictest808-21snmpd11:00:581
25823993029,1cyclictest808-21snmpd10:13:061
25823993029,1cyclictest808-21snmpd10:03:421
25823993029,1cyclictest808-21snmpd07:41:331
25823993028,2cyclictest808-21snmpd10:40:481
25823993028,2cyclictest808-21snmpd10:09:371
25823993028,2cyclictest808-21snmpd09:58:491
25823993028,2cyclictest808-21snmpd09:07:161
25823993028,2cyclictest808-21snmpd07:58:361
25823993028,2cyclictest808-21snmpd07:53:571
25822993029,1cyclictest9133-21kworker/0:1+events11:05:490
25822993029,1cyclictest808-21snmpd12:27:490
25822993029,1cyclictest808-21snmpd10:41:550
25822993029,1cyclictest808-21snmpd10:22:360
25822993029,1cyclictest808-21snmpd08:26:420
25822993029,1cyclictest5495-21kworker/0:3+events10:51:500
25822993029,1cyclictest5495-21kworker/0:3+events10:45:420
25822993028,2cyclictest808-21snmpd12:24:580
25822993028,2cyclictest808-21snmpd12:13:280
25825992928,1cyclictest808-21snmpd12:22:103
25825992928,1cyclictest808-21snmpd08:30:163
25825992927,2cyclictest808-21snmpd11:39:533
25825992927,2cyclictest808-21snmpd10:51:043
25824992929,0cyclictest75050irq/133-enp1s011:10:132
25824992928,1cyclictest808-21snmpd11:19:292
25824992928,1cyclictest808-21snmpd11:19:292
25824992928,1cyclictest808-21snmpd07:18:322
25824992927,2cyclictest808-21snmpd11:03:222
25824992927,2cyclictest808-21snmpd10:45:412
25824992927,2cyclictest808-21snmpd10:40:572
25824992927,2cyclictest808-21snmpd10:26:012
25823992928,1cyclictest808-21snmpd08:09:361
25823992927,2cyclictest808-21snmpd12:30:371
25823992927,2cyclictest808-21snmpd11:19:021
25823992927,2cyclictest808-21snmpd11:19:021
25822992929,0cyclictest28544-21kworker/0:0+events12:39:260
25822992928,1cyclictest808-21snmpd10:31:090
25822992928,1cyclictest808-21snmpd09:54:140
25822992928,1cyclictest808-21snmpd09:11:410
25822992928,1cyclictest808-21snmpd07:45:080
25822992928,1cyclictest808-21snmpd07:21:480
25822992928,1cyclictest15907-21kworker/0:0+events11:25:030
25822992927,2cyclictest808-21snmpd10:09:450
25825992826,2cyclictest808-21snmpd07:40:563
25824992827,1cyclictest808-21snmpd10:54:522
25824992827,1cyclictest808-21snmpd10:30:152
25824992826,2cyclictest808-21snmpd07:13:232
25822992828,0cyclictest23737-21kworker/0:1+events11:30:270
25822992827,1cyclictest808-21snmpd11:40:080
25822992827,1cyclictest808-21snmpd11:22:140
25822992827,1cyclictest808-21snmpd09:25:180
25822992827,1cyclictest808-21snmpd09:15:420
25822992826,2cyclictest808-21snmpd08:52:520
25822992826,2cyclictest808-21snmpd07:33:480
25825992726,1cyclictest808-21snmpd07:53:533
25825992726,1cyclictest808-21snmpd07:28:593
25825992725,2cyclictest808-21snmpd10:02:393
25825992725,2cyclictest24978-21cat09:40:123
25825992724,2cyclictest808-21snmpd12:37:273
25824992726,1cyclictest808-21snmpd11:41:562
25824992725,2cyclictest808-21snmpd11:23:172
25823992726,1cyclictest808-21snmpd11:07:041
25823992725,2cyclictest808-21snmpd12:05:371
25822992725,2cyclictest808-21snmpd11:12:470
25825992625,1cyclictest808-21snmpd10:43:463
25825992625,1cyclictest808-21snmpd09:55:303
25825992624,2cyclictest808-21snmpd11:11:313
25825992624,2cyclictest808-21snmpd11:07:293
25824992624,2cyclictest808-21snmpd12:21:132
25824992624,2cyclictest808-21snmpd09:45:442
25823992625,1cyclictest808-21snmpd11:11:371
25823992625,1cyclictest808-21snmpd09:37:001
25823992625,1cyclictest808-21snmpd08:58:071
25823992624,2cyclictest9277-21cat07:45:131
25823992624,2cyclictest808-21snmpd08:00:401
25825992524,1cyclictest808-21snmpd12:14:433
25825992524,1cyclictest808-21snmpd11:47:123
25825992524,1cyclictest808-21snmpd09:27:503
25824992524,1cyclictest808-21snmpd10:37:582
25824992524,1cyclictest808-21snmpd09:04:372
25823992525,0cyclictest808-21snmpd11:31:531
25823992525,0cyclictest808-21snmpd07:26:441
25823992525,0cyclictest4886-21kworker/u16:2+atlantic12:01:401
25822992524,1cyclictest808-21snmpd09:32:590
25822992523,1cyclictest808-21snmpd09:37:510
25825992423,1cyclictest808-21snmpd10:20:123
25823992424,0cyclictest16729-21kworker/u16:3+atlantic11:58:101
25823992423,1cyclictest808-21snmpd09:41:201
25823992423,1cyclictest808-21snmpd08:30:271
25823992422,2cyclictest808-21snmpd11:37:241
25825992321,2cyclictest808-21snmpd07:36:563
25824992322,1cyclictest808-21snmpd09:13:082
25824992322,1cyclictest808-21snmpd07:35:172
25823992322,1cyclictest808-21snmpd10:46:101
25823992322,1cyclictest75150irq/134-enp1s010:50:431
25822992321,1cyclictest17384-21kworker/0:1+events10:00:530
25824992221,1cyclictest808-21snmpd10:22:392
25823992222,0cyclictest74850irq/131-enp1s010:32:031
25823992220,2cyclictest808-21snmpd08:15:421
25822992221,1cyclictest808-21snmpd07:51:270
25822992221,1cyclictest17384-21kworker/0:1+events10:10:170
25823992120,1cyclictest808-21snmpd07:23:291
25824992018,2cyclictest808-21snmpd08:18:032
25824992018,2cyclictest24053-21cat08:20:182
25824991918,1cyclictest808-21snmpd12:05:192
25824991918,1cyclictest808-21snmpd10:05:282
25824991918,1cyclictest808-21snmpd10:00:032
25825991716,1cyclictest808-21snmpd09:04:533
25825991615,1cyclictest808-21snmpd11:04:313
25824991615,1cyclictest808-21snmpd09:17:082
25824991513,2cyclictest808-21snmpd09:30:232
25824991413,1cyclictest808-21snmpd08:00:032
25824991212,0cyclictest16729-21kworker/u16:3+atlantic12:18:032
258259965,1cyclictest48552sleep310:26:583
258259965,1cyclictest20423-21cat12:34:593
258259960,6cyclictest17849-21taskset09:24:043
258249965,1cyclictest14240-21chrt07:55:412
258249960,6cyclictest6485-21wc08:55:162
258239965,1cyclictest49152sleep110:27:431
258239965,1cyclictest3588-21chrt10:16:301
258259954,1cyclictest32273-21expr08:40:153
258259954,1cyclictest2782-21grep07:30:143
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional