You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-02 - 23:01

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Fri May 02, 2025 12:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
170822319312,4sleep30-21swapper/307:06:593
172872317311,4sleep20-21swapper/207:09:382
17579993150,314cyclictest26381-21kworker/u16:3+efi_rts_wq11:20:110
170792315308,4sleep00-21swapper/007:06:550
173062314306,5sleep10-21swapper/107:09:531
17580993050,304cyclictest11357-21kworker/u16:3+efi_rts_wq12:05:121
17581993040,303cyclictest24365-21kworker/u16:1+efi_rts_wq10:15:162
17581993040,303cyclictest24365-21kworker/u16:1+efi_rts_wq10:15:152
17579993040,303cyclictest24365-21kworker/u16:1+efi_rts_wq09:10:130
17580993030,301cyclictest24365-21kworker/u16:1+efi_rts_wq08:30:131
17579993020,301cyclictest26198-21kworker/u16:2+efi_rts_wq08:00:140
17581993010,298cyclictest6605-21kworker/u16:0+efi_rts_wq12:00:132
17580993010,300cyclictest26198-21kworker/u16:2+efi_rts_wq09:50:151
17579993010,300cyclictest6605-21kworker/u16:0+efi_rts_wq10:50:140
17579993010,300cyclictest3713-21kworker/u16:1+efi_rts_wq11:45:130
17582993000,299cyclictest26198-21kworker/u16:2+efi_rts_wq07:25:153
17580992970,296cyclictest26198-21kworker/u16:2+efi_rts_wq10:25:151
17581992960,295cyclictest24365-21kworker/u16:1+efi_rts_wq08:15:132
17581992950,294cyclictest11357-21kworker/u16:3+efi_rts_wq12:15:142
17582992930,292cyclictest6605-21kworker/u16:0+efi_rts_wq10:45:133
17580992890,288cyclictest6605-21kworker/u16:0+efi_rts_wq11:05:141
17582992870,286cyclictest24365-21kworker/u16:1+efi_rts_wq09:25:143
17582992860,285cyclictest24365-21kworker/u16:1+efi_rts_wq09:20:133
17581992860,285cyclictest24365-21kworker/u16:1+efi_rts_wq08:05:132
17581992860,285cyclictest24365-21kworker/u16:1+efi_rts_wq07:10:142
17580992820,281cyclictest24365-21kworker/u16:1+efi_rts_wq10:00:151
17579992820,281cyclictest6605-21kworker/u16:0+efi_rts_wq12:10:110
17581992810,280cyclictest29138-21kworker/u16:2+efi_rts_wq11:25:152
17581992790,278cyclictest26381-21kworker/u16:3+efi_rts_wq11:00:132
17581992790,278cyclictest26198-21kworker/u16:2+efi_rts_wq09:35:152
17580992790,278cyclictest3713-21kworker/u16:1+efi_rts_wq11:50:121
17580992790,278cyclictest26198-21kworker/u16:2+efi_rts_wq09:25:141
17579992780,277cyclictest26198-21kworker/u16:2+efi_rts_wq08:40:160
17582992770,276cyclictest26198-21kworker/u16:2+efi_rts_wq07:30:133
17581992750,274cyclictest6605-21kworker/u16:0+efi_rts_wq12:20:122
17581992750,274cyclictest24365-21kworker/u16:1+efi_rts_wq10:00:152
17580992750,274cyclictest26198-21kworker/u16:2+efi_rts_wq08:45:131
17580992740,273cyclictest24365-21kworker/u16:1+efi_rts_wq07:10:151
17579992740,272cyclictest26198-21kworker/u16:2+efi_rts_wq09:35:140
17580992730,272cyclictest24365-21kworker/u16:1+efi_rts_wq09:00:151
17579992730,272cyclictest26198-21kworker/u16:2+efi_rts_wq09:15:130
17580992710,270cyclictest26198-21kworker/u16:2+efi_rts_wq08:55:161
17580992690,268cyclictest6605-21kworker/u16:0+efi_rts_wq10:45:131
17580992670,266cyclictest24365-21kworker/u16:1+efi_rts_wq08:50:121
17581992660,263cyclictest24365-21kworker/u16:1+efi_rts_wq07:45:172
17579992650,264cyclictest26381-21kworker/u16:3+efi_rts_wq10:35:140
17582992640,263cyclictest29138-21kworker/u16:2+efi_rts_wq11:35:143
17581992630,261cyclictest24365-21kworker/u16:1+efi_rts_wq10:30:152
17581992610,260cyclictest24365-21kworker/u16:1+efi_rts_wq09:40:142
17579992610,260cyclictest24365-21kworker/u16:1+efi_rts_wq08:45:130
17579992600,259cyclictest26198-21kworker/u16:2+efi_rts_wq07:40:130
17580992590,258cyclictest6605-21kworker/u16:0+efi_rts_wq12:10:111
17580992580,255cyclictest26198-21kworker/u16:2+efi_rts_wq08:10:151
17579992580,257cyclictest11357-21kworker/u16:3+efi_rts_wq11:55:150
17581992550,254cyclictest6605-21kworker/u16:0+efi_rts_wq12:30:122
17581992550,254cyclictest24365-21kworker/u16:1+efi_rts_wq07:35:162
17580992550,254cyclictest6605-21kworker/u16:0+efi_rts_wq10:55:151
17580992550,254cyclictest11357-21kworker/u16:3+efi_rts_wq12:15:141
17581992540,253cyclictest11357-21kworker/u16:3+efi_rts_wq12:35:162
17580992520,251cyclictest6605-21kworker/u16:0+efi_rts_wq12:00:121
17580992520,251cyclictest26198-21kworker/u16:2+efi_rts_wq10:05:131
17582992510,250cyclictest26381-21kworker/u16:3+efi_rts_wq11:00:123
17581992510,250cyclictest26198-21kworker/u16:2+efi_rts_wq10:20:132
17580992510,250cyclictest11357-21kworker/u16:3+efi_rts_wq12:35:161
17579992510,250cyclictest26198-21kworker/u16:2+efi_rts_wq09:45:160
17579992480,247cyclictest24365-21kworker/u16:1+efi_rts_wq08:50:110
17581992470,246cyclictest24365-21kworker/u16:1+efi_rts_wq07:20:132
17581992460,245cyclictest6605-21kworker/u16:0+efi_rts_wq12:25:152
17581992450,244cyclictest26198-21kworker/u16:2+efi_rts_wq08:35:152
17580992440,243cyclictest26198-21kworker/u16:2+efi_rts_wq09:05:141
17581992430,242cyclictest26198-21kworker/u16:2+efi_rts_wq09:05:152
17579992430,242cyclictest6019-21kworker/u16:3+efi_rts_wq11:40:140
17579992430,242cyclictest26198-21kworker/u16:2+efi_rts_wq07:55:160
17581992420,241cyclictest24365-21kworker/u16:1+efi_rts_wq09:00:152
17579992420,241cyclictest26198-21kworker/u16:2+efi_rts_wq07:50:110
17580992410,240cyclictest24365-21kworker/u16:1+efi_rts_wq07:15:001
17580992390,238cyclictest26198-21kworker/u16:2+efi_rts_wq10:10:141
17580992390,236cyclictest24365-21kworker/u16:1+efi_rts_wq10:15:161
17580992390,236cyclictest24365-21kworker/u16:1+efi_rts_wq10:15:151
17579992360,235cyclictest26381-21kworker/u16:3+efi_rts_wq11:10:140
17580992340,233cyclictest26198-21kworker/u16:2+efi_rts_wq08:20:161
17579992330,232cyclictest6605-21kworker/u16:0+efi_rts_wq12:20:120
17581992320,231cyclictest29138-21kworker/u16:2+efi_rts_wq11:35:142
17581992320,231cyclictest26198-21kworker/u16:2+efi_rts_wq07:15:132
17580992320,231cyclictest26198-21kworker/u16:2+efi_rts_wq07:55:151
17581992310,230cyclictest26381-21kworker/u16:3+efi_rts_wq10:40:162
17582992300,229cyclictest3713-21kworker/u16:1+efi_rts_wq11:50:133
17581992300,229cyclictest6605-21kworker/u16:0+efi_rts_wq11:15:142
17581992300,229cyclictest26198-21kworker/u16:2+efi_rts_wq07:30:142
17579992270,226cyclictest26198-21kworker/u16:2+efi_rts_wq08:35:160
17582992260,225cyclictest6605-21kworker/u16:0+efi_rts_wq10:55:163
17581992220,221cyclictest24365-21kworker/u16:1+efi_rts_wq08:45:132
17580992220,221cyclictest11357-21kworker/u16:3+efi_rts_wq11:55:151
17580992200,219cyclictest26198-21kworker/u16:2+efi_rts_wq07:50:111
17579992170,216cyclictest26198-21kworker/u16:2+efi_rts_wq10:05:140
17582992140,213cyclictest26381-21kworker/u16:3+efi_rts_wq11:20:113
17580992140,213cyclictest26198-21kworker/u16:2+efi_rts_wq09:30:161
17582992120,211cyclictest24365-21kworker/u16:1+efi_rts_wq08:05:133
17580992070,206cyclictest29138-21kworker/u16:2+efi_rts_wq11:25:151
17582992050,203cyclictest26198-21kworker/u16:2+efi_rts_wq09:55:183
17579991960,195cyclictest29138-21kworker/u16:2+efi_rts_wq11:25:160
17579991910,190cyclictest26198-21kworker/u16:2+efi_rts_wq10:10:140
17581991890,188cyclictest6605-21kworker/u16:0+efi_rts_wq10:55:152
17582991880,187cyclictest26381-21kworker/u16:3+efi_rts_wq11:10:133
17580991870,186cyclictest26198-21kworker/u16:2+efi_rts_wq10:20:131
17582991810,180cyclictest11357-21kworker/u16:3+efi_rts_wq12:05:113
17580991800,179cyclictest26381-21kworker/u16:3+efi_rts_wq11:20:101
17581991680,167cyclictest26198-21kworker/u16:2+efi_rts_wq08:40:172
17581991650,162cyclictest6605-21kworker/u16:0+efi_rts_wq11:30:152
17580991640,163cyclictest6605-21kworker/u16:0+efi_rts_wq11:15:141
17580991630,162cyclictest6605-21kworker/u16:0+efi_rts_wq10:40:161
17580991590,158cyclictest24365-21kworker/u16:1+efi_rts_wq07:45:171
17579991530,152cyclictest24365-21kworker/u16:1+efi_rts_wq08:30:130
17582991500,149cyclictest24365-21kworker/u16:1+efi_rts_wq07:15:013
17580991470,146cyclictest3713-21kworker/u16:1+efi_rts_wq11:45:131
17580991420,141cyclictest24365-21kworker/u16:1+efi_rts_wq09:40:141
17579991420,141cyclictest26198-21kworker/u16:2+efi_rts_wq08:25:160
17582991380,137cyclictest24365-21kworker/u16:1+efi_rts_wq07:20:133
17582991340,133cyclictest6019-21kworker/u16:3+efi_rts_wq11:40:153
17582991310,130cyclictest24365-21kworker/u16:1+efi_rts_wq10:30:153
17581991180,117cyclictest6605-21kworker/u16:0+efi_rts_wq11:05:142
17579991160,115cyclictest26198-21kworker/u16:2+efi_rts_wq10:20:130
17582991150,114cyclictest24365-21kworker/u16:1+efi_rts_wq07:35:173
17581991150,114cyclictest26198-21kworker/u16:2+efi_rts_wq08:25:152
17580991150,114cyclictest6605-21kworker/u16:0+efi_rts_wq11:30:151
17580991140,113cyclictest24365-21kworker/u16:1+efi_rts_wq08:15:131
17582993330,2cyclictest808-21snmpd12:21:243
17582993330,2cyclictest808-21snmpd09:13:153
17582993330,2cyclictest808-21snmpd08:15:553
17582993229,2cyclictest808-21snmpd08:02:043
17580993230,2cyclictest808-21snmpd12:31:151
17580993230,2cyclictest808-21snmpd10:37:511
17579993229,2cyclictest808-21snmpd12:06:510
17579993229,2cyclictest808-21snmpd09:31:040
17579993229,2cyclictest808-21snmpd07:39:480
17582993130,1cyclictest808-21snmpd12:35:403
17582993130,1cyclictest808-21snmpd11:58:593
17582993130,1cyclictest808-21snmpd08:55:023
17582993129,2cyclictest808-21snmpd11:26:253
17582993129,2cyclictest808-21snmpd11:08:583
17582993129,2cyclictest808-21snmpd10:36:543
17582993128,2cyclictest808-21snmpd07:56:573
17581993129,2cyclictest808-21snmpd10:06:102
17580993130,1cyclictest808-21snmpd08:05:391
17580993129,2cyclictest808-21snmpd07:36:231
17579993130,1cyclictest808-21snmpd11:19:280
17579993129,2cyclictest808-21snmpd12:17:340
17579993129,2cyclictest808-21snmpd10:17:300
17579993129,2cyclictest808-21snmpd10:17:290
17579993129,2cyclictest808-21snmpd09:20:460
17579993128,2cyclictest808-21snmpd11:36:530
17579993128,2cyclictest808-21snmpd09:27:030
17582993029,1cyclictest808-21snmpd12:01:363
17582993029,1cyclictest808-21snmpd10:52:183
17582993029,1cyclictest808-21snmpd10:00:403
17582993029,1cyclictest808-21snmpd09:47:413
17582993029,1cyclictest808-21snmpd08:31:113
17582993029,1cyclictest808-21snmpd08:12:173
17582993029,1cyclictest808-21snmpd07:52:283
17582993028,2cyclictest815-21ntpd12:12:003
17582993028,2cyclictest808-21snmpd12:32:513
17582993028,2cyclictest808-21snmpd10:24:233
17581993029,1cyclictest808-21snmpd11:43:482
17581993029,1cyclictest808-21snmpd10:51:182
17581993029,1cyclictest808-21snmpd09:52:382
17581993029,1cyclictest808-21snmpd09:17:252
17581993029,1cyclictest808-21snmpd07:57:302
17581993029,1cyclictest808-21snmpd07:50:492
17581993029,1cyclictest808-21snmpd07:25:092
17581993029,1cyclictest26292-21kworker/2:0+events11:12:232
17581993029,1cyclictest13986-21kworker/2:2+events10:47:092
17581993028,2cyclictest808-21snmpd09:31:422
17581993028,2cyclictest808-21snmpd08:00:132
17580993029,1cyclictest808-21snmpd09:48:461
17580993029,1cyclictest808-21snmpd09:15:491
17580993029,1cyclictest808-21snmpd08:40:141
17580993029,1cyclictest808-21snmpd07:27:261
17580993028,2cyclictest808-21snmpd12:24:001
17580993028,2cyclictest808-21snmpd09:23:421
17579993029,1cyclictest808-21snmpd10:26:450
17579993029,1cyclictest808-21snmpd08:59:120
17579993028,2cyclictest808-21snmpd10:32:360
17579993028,2cyclictest808-21snmpd08:13:520
17579993027,2cyclictest808-21snmpd11:33:320
17582992928,1cyclictest808-21snmpd11:46:113
17582992928,1cyclictest808-21snmpd10:16:393
17582992928,1cyclictest808-21snmpd10:16:383
17582992928,1cyclictest808-21snmpd10:10:303
17582992928,1cyclictest808-21snmpd08:37:523
17582992927,2cyclictest815-21ntpd09:37:003
17582992927,2cyclictest808-21snmpd12:27:313
17582992927,2cyclictest808-21snmpd09:01:303
17582992927,2cyclictest808-21snmpd08:51:543
17581992929,0cyclictest19655-21kworker/2:2+events09:49:112
17581992929,0cyclictest1593-21kworker/2:2+events11:52:112
17581992929,0cyclictest1593-21kworker/2:2+events11:46:462
17581992929,0cyclictest12768-21kworker/2:1+events11:55:072
17581992928,1cyclictest6921-21kworker/2:1+events10:35:272
17581992927,2cyclictest808-21snmpd10:26:062
17581992927,2cyclictest808-21snmpd08:58:002
17580992928,1cyclictest808-21snmpd12:27:431
17580992928,1cyclictest808-21snmpd11:41:471
17579992929,0cyclictest26198-21kworker/u16:2+atlantic10:02:510
17579992929,0cyclictest26198-21kworker/u16:2+atlantic09:59:580
17579992929,0cyclictest26198-21kworker/u16:2+atlantic07:31:230
17579992928,1cyclictest808-21snmpd09:09:370
17579992927,2cyclictest808-21snmpd11:04:160
17579992926,2cyclictest808-21snmpd12:37:550
17579992926,2cyclictest808-21snmpd07:21:360
17582992827,1cyclictest808-21snmpd10:05:083
17582992827,1cyclictest808-21snmpd09:18:583
17582992826,2cyclictest815-21ntpd08:22:013
17582992826,2cyclictest815-21ntpd07:42:013
17582992826,2cyclictest808-21snmpd08:41:363
17582992824,2cyclictest808-21snmpd11:31:563
17581992828,0cyclictest26292-21kworker/2:0+events11:22:152
17581992828,0cyclictest1593-21kworker/2:2+events12:12:582
17581992827,1cyclictest808-21snmpd08:23:472
17581992826,2cyclictest808-21snmpd09:57:502
17580992827,1cyclictest808-21snmpd11:36:461
17580992827,1cyclictest808-21snmpd09:37:461
17580992827,1cyclictest808-21snmpd09:13:451
17580992827,1cyclictest808-21snmpd07:44:101
17580992825,2cyclictest808-21snmpd07:31:541
17579992827,1cyclictest808-21snmpd11:54:080
17579992827,1cyclictest808-21snmpd10:46:540
17579992827,1cyclictest808-21snmpd08:17:140
17579992826,2cyclictest808-21snmpd12:03:050
17579992826,2cyclictest808-21snmpd08:23:340
17582992726,1cyclictest808-21snmpd12:19:373
17581992727,0cyclictest808-21snmpd09:21:302
17581992727,0cyclictest19655-21kworker/2:2+events10:11:232
17581992726,1cyclictest20309-21cat08:30:162
17580992726,1cyclictest808-21snmpd11:03:521
17580992726,1cyclictest808-21snmpd09:55:341
17580992726,1cyclictest808-21snmpd07:22:121
17579992727,0cyclictest26198-21kworker/u16:2+atlantic07:11:270
17579992727,0cyclictest24365-21kworker/u16:1+atlantic09:52:110
17579992726,1cyclictest808-21snmpd10:41:520
17579992725,2cyclictest1721-21cat07:45:190
17579992724,2cyclictest808-21snmpd09:41:170
17581992626,0cyclictest19655-21kworker/2:2+events08:50:002
17580992625,1cyclictest808-21snmpd10:30:201
17580992624,2cyclictest808-21snmpd08:36:351
17582992523,2cyclictest3597-21cat10:25:163
17581992525,0cyclictest19655-21kworker/2:2+events07:44:392
17582992424,0cyclictest74850irq/131-enp1s010:40:453
17580992422,2cyclictest808-21snmpd10:52:131
17579992423,1cyclictest808-21snmpd12:29:580
17579992423,1cyclictest808-21snmpd11:05:000
17579992422,2cyclictest808-21snmpd10:57:240
17582992321,2cyclictest808-21snmpd09:40:253
17581992323,0cyclictest19655-21kworker/2:2+events09:28:432
17581992323,0cyclictest19655-21kworker/2:2+events09:10:102
17580992322,1cyclictest808-21snmpd11:13:171
17579992322,1cyclictest808-21snmpd07:18:320
17582992119,2cyclictest808-21snmpd08:49:293
17581992121,0cyclictest1593-21kworker/2:2+events12:05:232
17582992019,1cyclictest808-21snmpd11:15:173
17582992019,1cyclictest808-21snmpd09:50:343
17580992018,2cyclictest808-21snmpd08:26:231
17582991918,1cyclictest808-21snmpd09:08:213
17581991919,0cyclictest19655-21kworker/2:2+events08:10:312
17579991917,2cyclictest9975-21cat08:05:160
17582991816,2cyclictest815-21ntpd09:31:593
17579991817,1cyclictest808-21snmpd09:00:350
17579991616,0cyclictest24365-21kworker/u16:1+atlantic07:28:300
17579991514,1cyclictest808-21snmpd12:33:570
17582991210,2cyclictest18214-21cat08:25:173
175829965,1cyclictest17587-21taskset07:10:033
175829965,1cyclictest1482-21diskstats07:45:183
175809954,1cyclictest8165-21nfs4_client08:00:181
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional