You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-23 - 00:43

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Sat Nov 22, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
32182319305,5sleep10-21swapper/107:08:401
33222318303,5sleep00-21swapper/007:09:580
32042317303,5sleep20-21swapper/207:08:292
14892315307,5sleep30-21swapper/307:05:093
3589993000,298cyclictest27870-21kworker/u16:1+efi_rts_wq10:25:113
3586993000,299cyclictest12583-21kworker/u16:1+efi_rts_wq11:15:160
3587992990,296cyclictest15461-21kworker/u16:0+efi_rts_wq10:15:141
3586992990,298cyclictest15461-21kworker/u16:0+efi_rts_wq08:52:500
3589992980,297cyclictest27870-21kworker/u16:1+efi_rts_wq08:25:143
3588992980,297cyclictest27870-21kworker/u16:1+efi_rts_wq08:55:132
3588992970,296cyclictest19994-21kworker/u16:1+efi_rts_wq12:00:122
3587992970,295cyclictest5026-21kworker/u16:3+efi_rts_wq11:10:131
3589992950,294cyclictest27870-21kworker/u16:1+efi_rts_wq10:00:143
3588992950,294cyclictest27870-21kworker/u16:1+efi_rts_wq08:35:162
3586992940,291cyclictest27870-21kworker/u16:1+efi_rts_wq08:25:130
3589992930,292cyclictest19994-21kworker/u16:1+efi_rts_wq11:48:203
3587992930,291cyclictest27870-21kworker/u16:1+efi_rts_wq08:15:131
3589992920,291cyclictest27870-21kworker/u16:1+efi_rts_wq07:20:163
3587992920,290cyclictest15461-21kworker/u16:0+efi_rts_wq07:25:141
3589992910,290cyclictest15461-21kworker/u16:0+efi_rts_wq08:47:493
3589992910,289cyclictest15461-21kworker/u16:0+efi_rts_wq10:40:143
3586992910,290cyclictest992-21kworker/u16:0+efi_rts_wq11:00:120
3586992910,290cyclictest27870-21kworker/u16:1+efi_rts_wq07:55:140
3588992890,288cyclictest15461-21kworker/u16:0+efi_rts_wq07:10:142
3588992880,287cyclictest30651-21kworker/u16:2+efi_rts_wq10:55:142
3588992860,285cyclictest27870-21kworker/u16:1+efi_rts_wq10:28:052
3588992850,284cyclictest19994-21kworker/u16:1+efi_rts_wq12:30:142
3588992850,284cyclictest15461-21kworker/u16:0+efi_rts_wq07:35:142
3587992850,284cyclictest27870-21kworker/u16:1+efi_rts_wq08:07:401
3586992850,284cyclictest15461-21kworker/u16:0+efi_rts_wq09:00:160
3586992840,283cyclictest15461-21kworker/u16:0+efi_rts_wq07:50:180
3587992830,280cyclictest992-21kworker/u16:0+efi_rts_wq11:05:151
3588992810,280cyclictest992-21kworker/u16:0+efi_rts_wq11:00:122
3586992810,280cyclictest27870-21kworker/u16:1+efi_rts_wq09:10:130
3588992800,279cyclictest15374-21kworker/u16:2+efi_rts_wq11:28:172
3587992800,279cyclictest5026-21kworker/u16:3+efi_rts_wq12:10:151
3589992790,278cyclictest5026-21kworker/u16:3+efi_rts_wq12:18:253
3587992780,277cyclictest15461-21kworker/u16:0+efi_rts_wq07:12:321
3586992780,277cyclictest28107-21kworker/u16:1+efi_rts_wq10:50:130
3587992760,275cyclictest15461-21kworker/u16:0+efi_rts_wq07:50:181
3589992750,274cyclictest27870-21kworker/u16:1+efi_rts_wq08:55:133
3587992750,274cyclictest15461-21kworker/u16:0+efi_rts_wq07:40:151
3586992750,274cyclictest15374-21kworker/u16:2+efi_rts_wq11:30:140
3588992740,273cyclictest15461-21kworker/u16:0+efi_rts_wq08:20:152
3589992730,272cyclictest28107-21kworker/u16:1+efi_rts_wq10:50:133
3589992720,271cyclictest5026-21kworker/u16:3+efi_rts_wq11:25:143
3589992720,271cyclictest27870-21kworker/u16:1+efi_rts_wq08:05:153
3589992720,269cyclictest27870-21kworker/u16:1+efi_rts_wq10:13:033
3587992720,271cyclictest23195-21kworker/u16:3+efi_rts_wq10:38:061
3589992710,270cyclictest15461-21kworker/u16:0+efi_rts_wq08:40:133
3588992710,270cyclictest27870-21kworker/u16:1+efi_rts_wq10:03:012
3587992710,269cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:161
3587992710,269cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:151
3586992700,269cyclictest5026-21kworker/u16:3+efi_rts_wq11:08:140
3589992690,268cyclictest27870-21kworker/u16:1+efi_rts_wq09:30:123
3589992680,267cyclictest27870-21kworker/u16:1+efi_rts_wq10:20:133
3589992670,265cyclictest15374-21kworker/u16:2+efi_rts_wq11:30:133
3588992630,262cyclictest15461-21kworker/u16:0+efi_rts_wq10:23:052
3586992630,262cyclictest15461-21kworker/u16:0+efi_rts_wq08:00:140
3589992620,261cyclictest5026-21kworker/u16:3+efi_rts_wq11:53:203
3588992610,260cyclictest15461-21kworker/u16:0+efi_rts_wq07:25:142
3586992610,260cyclictest5026-21kworker/u16:3+efi_rts_wq12:15:130
3586992600,259cyclictest15461-21kworker/u16:0+efi_rts_wq08:30:140
3588992590,258cyclictest15461-21kworker/u16:0+efi_rts_wq08:50:142
3586992590,258cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:160
3586992590,258cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:150
3589992580,257cyclictest15461-21kworker/u16:0+efi_rts_wq09:15:163
3586992580,257cyclictest15461-21kworker/u16:0+efi_rts_wq07:10:150
3588992570,256cyclictest5026-21kworker/u16:3+efi_rts_wq11:35:142
3586992570,256cyclictest5026-21kworker/u16:3+efi_rts_wq11:25:140
3586992570,256cyclictest15461-21kworker/u16:0+efi_rts_wq08:20:150
3588992560,255cyclictest27870-21kworker/u16:1+efi_rts_wq07:45:182
3588992560,255cyclictest15461-21kworker/u16:0+efi_rts_wq09:15:152
3589992550,254cyclictest19994-21kworker/u16:1+efi_rts_wq12:35:153
3588992550,254cyclictest27870-21kworker/u16:1+efi_rts_wq07:57:392
3586992540,253cyclictest12583-21kworker/u16:1+efi_rts_wq11:20:130
3587992510,250cyclictest15461-21kworker/u16:0+efi_rts_wq09:50:151
3588992500,249cyclictest23195-21kworker/u16:3+efi_rts_wq10:35:142
3586992480,247cyclictest15461-21kworker/u16:0+efi_rts_wq09:55:140
3589992460,245cyclictest15461-21kworker/u16:0+efi_rts_wq08:32:453
3588992450,244cyclictest19994-21kworker/u16:1+efi_rts_wq12:20:132
3589992440,243cyclictest19994-21kworker/u16:1+efi_rts_wq12:30:143
3586992430,242cyclictest15461-21kworker/u16:0+efi_rts_wq08:10:140
3587992420,241cyclictest19994-21kworker/u16:1+efi_rts_wq11:40:141
3587992420,241cyclictest15374-21kworker/u16:2+efi_rts_wq11:23:151
3586992420,241cyclictest15461-21kworker/u16:0+efi_rts_wq07:35:130
3587992410,240cyclictest27870-21kworker/u16:1+efi_rts_wq09:20:131
3587992400,239cyclictest15461-21kworker/u16:0+efi_rts_wq09:55:151
3589992380,237cyclictest5026-21kworker/u16:3+efi_rts_wq12:25:143
3589992380,237cyclictest23195-21kworker/u16:3+efi_rts_wq10:35:143
3589992380,237cyclictest15461-21kworker/u16:0+efi_rts_wq08:50:133
3588992360,235cyclictest5026-21kworker/u16:3+efi_rts_wq12:28:272
3588992360,235cyclictest23195-21kworker/u16:3+efi_rts_wq10:40:142
3588992360,234cyclictest15461-21kworker/u16:0+efi_rts_wq09:25:132
3587992350,234cyclictest19994-21kworker/u16:1+efi_rts_wq12:00:121
3587992340,233cyclictest23195-21kworker/u16:3+efi_rts_wq10:40:141
3587992340,233cyclictest15461-21kworker/u16:0+efi_rts_wq10:08:011
3586992340,233cyclictest15461-21kworker/u16:0+efi_rts_wq10:30:150
3589992330,232cyclictest15461-21kworker/u16:0+efi_rts_wq08:12:413
3588992330,232cyclictest19994-21kworker/u16:1+efi_rts_wq11:50:142
3588992320,231cyclictest27870-21kworker/u16:1+efi_rts_wq09:45:172
3588992320,231cyclictest15461-21kworker/u16:0+efi_rts_wq10:05:142
3588992320,230cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:162
3588992320,230cyclictest28107-21kworker/u16:1+efi_rts_wq10:45:152
3589992310,230cyclictest27870-21kworker/u16:1+efi_rts_wq09:35:173
3588992300,229cyclictest15461-21kworker/u16:0+efi_rts_wq10:30:152
3587992300,229cyclictest27870-21kworker/u16:1+efi_rts_wq09:45:171
3586992200,218cyclictest19994-21kworker/u16:1+efi_rts_wq11:55:130
3589992190,218cyclictest19994-21kworker/u16:1+efi_rts_wq12:05:143
3587992180,217cyclictest15461-21kworker/u16:0+efi_rts_wq08:30:141
3589992170,216cyclictest27870-21kworker/u16:1+efi_rts_wq09:05:133
3586992170,216cyclictest15461-21kworker/u16:0+efi_rts_wq07:15:130
3587992150,214cyclictest27870-21kworker/u16:1+efi_rts_wq09:12:541
3586992150,214cyclictest27870-21kworker/u16:1+efi_rts_wq09:05:120
3586992130,212cyclictest5026-21kworker/u16:3+efi_rts_wq11:35:140
3588992120,211cyclictest19994-21kworker/u16:1+efi_rts_wq12:13:232
3588992100,209cyclictest27870-21kworker/u16:1+efi_rts_wq07:30:132
3588992080,207cyclictest5026-21kworker/u16:3+efi_rts_wq11:33:172
3588992080,207cyclictest27870-21kworker/u16:1+efi_rts_wq09:20:132
3588992070,206cyclictest15461-21kworker/u16:0+efi_rts_wq08:02:392
3589992050,204cyclictest19994-21kworker/u16:1+efi_rts_wq11:40:133
3588992050,204cyclictest15461-21kworker/u16:0+efi_rts_wq07:17:332
3587992050,204cyclictest15461-21kworker/u16:0+efi_rts_wq08:45:131
3589992040,203cyclictest992-21kworker/u16:0+efi_rts_wq11:05:153
3588992040,201cyclictest15461-21kworker/u16:0+efi_rts_wq10:15:142
3589992030,202cyclictest19994-21kworker/u16:1+efi_rts_wq12:20:123
3589992030,202cyclictest15461-21kworker/u16:0+efi_rts_wq09:55:153
3588992020,201cyclictest27870-21kworker/u16:1+efi_rts_wq09:32:562
3587992020,201cyclictest15461-21kworker/u16:0+efi_rts_wq10:20:131
3589991920,191cyclictest15461-21kworker/u16:0+efi_rts_wq07:15:013
3587991850,184cyclictest15461-21kworker/u16:0+efi_rts_wq08:42:481
3587991760,175cyclictest19994-21kworker/u16:1+efi_rts_wq11:55:151
3588991750,174cyclictest992-21kworker/u16:0+efi_rts_wq11:13:142
3589991740,173cyclictest15461-21kworker/u16:0+efi_rts_wq09:40:153
3586991720,170cyclictest5026-21kworker/u16:3+efi_rts_wq11:10:140
3587991710,170cyclictest27870-21kworker/u16:1+efi_rts_wq10:10:151
3586991680,167cyclictest15461-21kworker/u16:0+efi_rts_wq08:40:140
3586991640,163cyclictest27870-21kworker/u16:1+efi_rts_wq07:47:360
3586991600,159cyclictest27870-21kworker/u16:1+efi_rts_wq08:37:460
3588991570,156cyclictest27870-21kworker/u16:1+efi_rts_wq08:17:432
3586991560,155cyclictest27870-21kworker/u16:1+efi_rts_wq09:30:140
3587991520,151cyclictest27870-21kworker/u16:1+efi_rts_wq07:55:151
3586991520,150cyclictest19994-21kworker/u16:1+efi_rts_wq11:40:140
3588991510,150cyclictest15461-21kworker/u16:0+efi_rts_wq08:10:142
3589991470,146cyclictest5026-21kworker/u16:3+efi_rts_wq11:58:223
3589991470,145cyclictest27870-21kworker/u16:1+efi_rts_wq07:45:183
3587991470,146cyclictest992-21kworker/u16:0+efi_rts_wq11:03:121
3586991400,139cyclictest27870-21kworker/u16:1+efi_rts_wq10:25:110
3587991390,139cyclictest15461-21kworker/u16:0+efi_rts_wq10:33:071
3587991370,136cyclictest5026-21kworker/u16:3+efi_rts_wq11:45:191
3586991370,136cyclictest15461-21kworker/u16:0+efi_rts_wq09:27:540
3587991350,132cyclictest15461-21kworker/u16:0+efi_rts_wq09:40:151
3588991340,134cyclictest15461-21kworker/u16:0+efi_rts_wq09:02:512
3587991330,132cyclictest5026-21kworker/u16:3+efi_rts_wq11:35:141
3586991320,131cyclictest27870-21kworker/u16:1+efi_rts_wq07:32:360
3587991310,130cyclictest27870-21kworker/u16:1+efi_rts_wq09:30:141
3589991250,124cyclictest27870-21kworker/u16:1+efi_rts_wq09:47:593
3586991240,123cyclictest30651-21kworker/u16:2+efi_rts_wq10:55:140
3586991170,116cyclictest27870-21kworker/u16:1+efi_rts_wq07:22:340
672621080,0sleep06729-21awk09:50:140
3588993230,2cyclictest795-21snmpd12:05:112
3587993230,2cyclictest795-21snmpd08:37:061
3587993229,2cyclictest795-21snmpd09:03:321
3587993229,2cyclictest795-21snmpd08:59:461
3586993229,2cyclictest795-21snmpd12:09:370
3586993229,2cyclictest795-21snmpd10:35:010
3589993130,1cyclictest795-21snmpd09:29:303
3589993129,2cyclictest795-21snmpd11:03:353
3589993129,2cyclictest795-21snmpd09:22:503
3589993129,2cyclictest795-21snmpd08:20:423
3589993129,2cyclictest795-21snmpd07:28:023
3589993128,3cyclictest795-21snmpd11:10:053
3589993128,2cyclictest795-21snmpd07:34:533
3588993129,2cyclictest795-21snmpd09:41:192
3587993129,2cyclictest795-21snmpd11:51:581
3587993128,2cyclictest795-21snmpd08:26:061
3586993130,1cyclictest795-21snmpd10:11:110
3586993130,1cyclictest17689-21kworker/0:0+events12:05:000
3586993129,2cyclictest795-21snmpd12:30:390
3586993129,2cyclictest795-21snmpd12:11:260
3586993129,2cyclictest795-21snmpd09:17:200
3586993129,2cyclictest795-21snmpd08:48:550
3586993128,2cyclictest795-21snmpd08:09:390
3589993029,1cyclictest795-21snmpd10:58:363
3589993029,1cyclictest795-21snmpd09:10:113
3589993029,1cyclictest795-21snmpd09:01:433
3589993029,1cyclictest795-21snmpd07:37:573
3589993029,1cyclictest74050irq/133-enp1s011:23:393
3589993028,2cyclictest795-21snmpd07:10:013
3589993027,2cyclictest795-21snmpd07:59:243
3588993029,1cyclictest795-21snmpd11:55:142
3588993029,1cyclictest795-21snmpd11:21:542
3588993029,1cyclictest795-21snmpd09:36:512
3588993029,1cyclictest795-21snmpd07:42:172
3588993028,2cyclictest795-21snmpd11:16:432
3587993029,1cyclictest795-21snmpd12:20:391
3587993029,1cyclictest795-21snmpd10:53:201
3587993029,1cyclictest795-21snmpd09:35:141
3587993029,1cyclictest795-21snmpd08:24:311
3587993029,1cyclictest795-21snmpd07:23:081
3587993027,3cyclictest795-21snmpd11:15:251
3586993029,1cyclictest795-21snmpd11:50:410
3586993029,1cyclictest795-21snmpd10:44:150
3586993029,1cyclictest795-21snmpd10:21:590
3586993029,1cyclictest795-21snmpd10:05:480
3586993029,1cyclictest795-21snmpd10:02:430
3586993029,1cyclictest795-21snmpd09:22:210
3586993028,2cyclictest795-21snmpd09:37:570
3589992928,1cyclictest795-21snmpd12:02:193
3589992928,1cyclictest795-21snmpd08:35:493
3588992928,1cyclictest795-21snmpd12:38:572
3588992928,1cyclictest795-21snmpd09:54:312
3588992927,2cyclictest795-21snmpd07:24:312
3587992929,0cyclictest992-21kworker/u16:0+atlantic10:57:241
3587992928,1cyclictest795-21snmpd10:28:101
3587992928,1cyclictest795-21snmpd09:15:171
3587992928,1cyclictest795-21snmpd08:12:071
3587992928,1cyclictest795-21snmpd07:39:241
3587992928,1cyclictest795-21snmpd07:16:231
3587992926,2cyclictest795-21snmpd10:04:041
3587992926,2cyclictest795-21snmpd09:26:351
3587992926,2cyclictest795-21snmpd08:03:121
3586992929,0cyclictest8134-21kworker/0:2+events11:48:370
3586992927,2cyclictest795-21snmpd09:44:190
3586992927,2cyclictest5268-21cat09:45:180
3589992827,1cyclictest795-21snmpd12:14:373
3589992827,1cyclictest795-21snmpd10:08:053
3589992827,1cyclictest795-21snmpd08:18:583
3588992828,0cyclictest795-21snmpd08:45:382
3588992828,0cyclictest73950irq/132-enp1s011:43:032
3588992827,1cyclictest795-21snmpd11:09:452
3588992827,1cyclictest795-21snmpd08:32:522
3588992826,2cyclictest795-21snmpd11:47:322
3588992825,2cyclictest795-21snmpd07:52:172
3586992827,1cyclictest795-21snmpd12:39:380
3586992827,1cyclictest795-21snmpd07:27:310
3586992826,2cyclictest795-21snmpd12:27:440
3589992726,1cyclictest795-21snmpd11:36:403
3589992726,1cyclictest795-21snmpd09:54:373
3589992725,2cyclictest795-21snmpd10:47:303
3589992725,2cyclictest795-21snmpd10:47:293
3588992726,1cyclictest795-21snmpd12:18:532
3588992725,2cyclictest795-21snmpd10:50:472
3586992726,1cyclictest795-21snmpd08:56:520
3589992625,1cyclictest795-21snmpd07:50:593
3589992624,2cyclictest795-21snmpd10:34:263
3587992625,1cyclictest795-21snmpd07:48:481
3587992624,2cyclictest795-21snmpd12:35:511
3587992624,2cyclictest795-21snmpd11:29:131
3586992626,0cyclictest5667-21kworker/0:3+events07:44:420
3589992524,1cyclictest795-21snmpd07:41:563
3589992523,2cyclictest795-21snmpd11:19:583
3589992523,2cyclictest795-21snmpd08:04:143
3588992524,1cyclictest795-21snmpd08:43:322
3588992523,2cyclictest795-21snmpd08:05:332
3587992524,1cyclictest795-21snmpd12:18:261
3587992524,1cyclictest795-21snmpd09:05:401
3588992424,0cyclictest15461-21kworker/u16:0+atlantic08:29:302
3588992323,0cyclictest27870-21kworker/u16:1+atlantic09:10:022
3588992222,0cyclictest27870-21kworker/u16:1+atlantic10:10:282
3588992222,0cyclictest15461-21kworker/u16:0+atlantic09:56:572
3587992222,0cyclictest5026-21kworker/u16:3+atlantic12:27:001
3586992221,1cyclictest5667-21kworker/0:3+events10:15:070
3586992221,1cyclictest5667-21kworker/0:3+events08:16:350
3586992221,1cyclictest17689-21kworker/0:0+events12:21:120
3587992121,0cyclictest19994-21kworker/u16:1+atlantic12:31:161
3587992018,2cyclictest795-21snmpd08:54:441
3587991918,1cyclictest795-21snmpd07:32:531
3587991917,2cyclictest795-21snmpd11:32:121
3587991615,1cyclictest795-21snmpd12:08:531
35899986,2cyclictest795-21snmpd10:19:373
35889965,1cyclictest21460-21expr09:05:282
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional