You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-25 - 04:47

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Tue Nov 25, 2025 00:43:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
312532334313,4sleep20-21swapper/219:05:092
4852317302,5sleep00-21swapper/019:08:120
4472316309,5sleep30-21swapper/319:07:423
3622315308,5sleep10-21swapper/119:06:401
945993000,298cyclictest31623-21kworker/u16:2+efi_rts_wq22:55:131
944993000,299cyclictest31623-21kworker/u16:2+efi_rts_wq19:55:110
944992980,297cyclictest31623-21kworker/u16:2+efi_rts_wq21:05:160
944992980,297cyclictest31623-21kworker/u16:2+efi_rts_wq19:10:130
945992970,296cyclictest31623-21kworker/u16:2+efi_rts_wq19:35:151
947992960,295cyclictest18592-21kworker/u16:3+efi_rts_wq00:20:533
946992960,295cyclictest14634-21kworker/u16:0+efi_rts_wq23:30:142
946992960,294cyclictest31623-21kworker/u16:2+efi_rts_wq20:00:142
944992950,294cyclictest14634-21kworker/u16:0+efi_rts_wq22:55:370
947992940,293cyclictest14634-21kworker/u16:0+efi_rts_wq19:25:143
946992940,293cyclictest31623-21kworker/u16:2+efi_rts_wq22:40:132
944992940,293cyclictest14634-21kworker/u16:0+efi_rts_wq21:00:160
944992920,291cyclictest18592-21kworker/u16:3+efi_rts_wq23:50:130
947992910,290cyclictest14634-21kworker/u16:0+efi_rts_wq22:15:133
947992910,289cyclictest31623-21kworker/u16:2+efi_rts_wq20:00:143
947992901,288cyclictest14634-21kworker/u16:0+efi_rts_wq23:15:143
946992900,287cyclictest14634-21kworker/u16:0+efi_rts_wq23:00:152
947992880,287cyclictest18592-21kworker/u16:3+efi_rts_wq00:15:133
946992880,287cyclictest18592-21kworker/u16:3+efi_rts_wq00:20:152
945992880,287cyclictest31623-21kworker/u16:2+efi_rts_wq20:05:121
947992860,285cyclictest14634-21kworker/u16:0+efi_rts_wq21:25:213
945992860,285cyclictest14634-21kworker/u16:0+efi_rts_wq20:55:141
944992860,285cyclictest18592-21kworker/u16:3+efi_rts_wq00:35:120
945992850,283cyclictest2297-21kworker/u16:1+efi_rts_wq23:05:121
944992850,284cyclictest14634-21kworker/u16:0+efi_rts_wq22:35:130
945992840,283cyclictest31623-21kworker/u16:2+efi_rts_wq21:35:141
947992830,282cyclictest31623-21kworker/u16:2+efi_rts_wq21:30:143
947992830,282cyclictest14634-21kworker/u16:0+efi_rts_wq19:30:153
944992830,282cyclictest18592-21kworker/u16:3+efi_rts_wq00:30:150
947992810,278cyclictest14634-21kworker/u16:0+efi_rts_wq21:45:143
946992810,280cyclictest31623-21kworker/u16:2+efi_rts_wq21:55:132
947992790,278cyclictest14634-21kworker/u16:0+efi_rts_wq20:15:153
945992790,278cyclictest31623-21kworker/u16:2+efi_rts_wq21:50:111
947992770,275cyclictest14634-21kworker/u16:0+efi_rts_wq22:50:123
945992760,275cyclictest14634-21kworker/u16:0+efi_rts_wq23:00:151
946992750,274cyclictest14634-21kworker/u16:0+efi_rts_wq21:45:242
944992750,274cyclictest2297-21kworker/u16:1+efi_rts_wq23:20:410
947992740,273cyclictest31623-21kworker/u16:2+efi_rts_wq21:10:183
947992740,273cyclictest31623-21kworker/u16:2+efi_rts_wq19:55:123
947992740,272cyclictest31623-21kworker/u16:2+efi_rts_wq22:45:143
947992740,272cyclictest14634-21kworker/u16:0+efi_rts_wq20:35:133
946992740,273cyclictest14634-21kworker/u16:0+efi_rts_wq23:10:122
945992720,270cyclictest31623-21kworker/u16:2+efi_rts_wq21:05:131
944992720,270cyclictest14634-21kworker/u16:0+efi_rts_wq19:45:110
946992710,270cyclictest14634-21kworker/u16:0+efi_rts_wq22:45:352
945992710,270cyclictest31623-21kworker/u16:2+efi_rts_wq19:40:141
944992710,270cyclictest31623-21kworker/u16:2+efi_rts_wq19:35:140
945992700,269cyclictest31623-21kworker/u16:2+efi_rts_wq20:20:081
947992690,268cyclictest14634-21kworker/u16:0+efi_rts_wq22:00:123
947992690,268cyclictest14634-21kworker/u16:0+efi_rts_wq22:00:123
946992680,267cyclictest18592-21kworker/u16:3+efi_rts_wq23:50:132
946992680,267cyclictest18592-21kworker/u16:3+efi_rts_wq00:00:492
945992670,266cyclictest31623-21kworker/u16:2+efi_rts_wq22:30:121
946992660,265cyclictest31623-21kworker/u16:2+efi_rts_wq21:10:142
945992660,265cyclictest16249-21kworker/u16:2+efi_rts_wq23:55:141
944992660,265cyclictest18592-21kworker/u16:3+efi_rts_wq00:10:140
947992640,261cyclictest14634-21kworker/u16:0+efi_rts_wq23:05:383
947992630,262cyclictest14634-21kworker/u16:0+efi_rts_wq20:50:143
944992630,262cyclictest14634-21kworker/u16:0+efi_rts_wq20:30:130
947992620,261cyclictest14634-21kworker/u16:0+efi_rts_wq21:40:153
946992610,260cyclictest14634-21kworker/u16:0+efi_rts_wq20:15:152
947992580,257cyclictest31623-21kworker/u16:2+efi_rts_wq20:05:133
947992580,257cyclictest14634-21kworker/u16:0+efi_rts_wq19:50:153
946992570,256cyclictest14634-21kworker/u16:0+efi_rts_wq22:00:272
946992570,256cyclictest14634-21kworker/u16:0+efi_rts_wq22:00:272
947992560,255cyclictest31623-21kworker/u16:2+efi_rts_wq20:25:133
945992560,255cyclictest14634-21kworker/u16:0+efi_rts_wq20:35:131
947992550,254cyclictest14634-21kworker/u16:0+efi_rts_wq22:35:133
945992550,254cyclictest18592-21kworker/u16:3+efi_rts_wq00:15:521
947992540,253cyclictest18592-21kworker/u16:3+efi_rts_wq00:05:133
947992530,252cyclictest31623-21kworker/u16:2+efi_rts_wq20:10:063
946992530,252cyclictest31623-21kworker/u16:2+efi_rts_wq21:35:222
945992530,252cyclictest18592-21kworker/u16:3+efi_rts_wq00:30:151
945992530,252cyclictest14634-21kworker/u16:0+efi_rts_wq20:25:091
944992530,252cyclictest14634-21kworker/u16:0+efi_rts_wq19:50:030
947992510,250cyclictest31623-21kworker/u16:2+efi_rts_wq19:45:023
947992510,250cyclictest18592-21kworker/u16:3+efi_rts_wq23:40:133
945992500,249cyclictest2297-21kworker/u16:1+efi_rts_wq23:20:121
945992500,249cyclictest14634-21kworker/u16:0+efi_rts_wq22:50:361
947992490,248cyclictest14634-21kworker/u16:0+efi_rts_wq21:00:123
944992470,246cyclictest18592-21kworker/u16:3+efi_rts_wq00:20:150
946992460,245cyclictest31623-21kworker/u16:2+efi_rts_wq19:35:152
946992430,242cyclictest14634-21kworker/u16:0+efi_rts_wq20:45:142
946992410,240cyclictest16249-21kworker/u16:2+efi_rts_wq00:25:132
944992410,240cyclictest22875-21kworker/u16:0+efi_rts_wq23:45:120
944992400,239cyclictest31623-21kworker/u16:2+efi_rts_wq20:25:130
947992380,237cyclictest14634-21kworker/u16:0+efi_rts_wq23:25:123
947992380,236cyclictest14634-21kworker/u16:0+efi_rts_wq21:15:143
946992380,237cyclictest31623-21kworker/u16:2+efi_rts_wq22:05:272
944992360,235cyclictest31623-21kworker/u16:2+efi_rts_wq21:55:120
944992360,235cyclictest31623-21kworker/u16:2+efi_rts_wq20:15:060
945992350,233cyclictest31623-21kworker/u16:2+efi_rts_wq22:40:131
946992340,233cyclictest14634-21kworker/u16:0+efi_rts_wq19:29:592
945992340,231cyclictest31623-21kworker/u16:2+efi_rts_wq22:10:131
947992320,231cyclictest31623-21kworker/u16:2+efi_rts_wq22:55:133
946992310,230cyclictest31623-21kworker/u16:2+efi_rts_wq19:20:132
945992310,230cyclictest14634-21kworker/u16:0+efi_rts_wq20:10:131
946992250,223cyclictest31623-21kworker/u16:2+efi_rts_wq19:15:132
947992240,222cyclictest31623-21kworker/u16:2+efi_rts_wq22:30:123
946992230,222cyclictest2297-21kworker/u16:1+efi_rts_wq23:35:152
947992220,220cyclictest31623-21kworker/u16:2+efi_rts_wq22:05:123
946992220,221cyclictest14634-21kworker/u16:0+efi_rts_wq22:35:332
946992210,220cyclictest14634-21kworker/u16:0+efi_rts_wq19:14:562
946992200,219cyclictest14634-21kworker/u16:0+efi_rts_wq20:55:152
947992190,218cyclictest14634-21kworker/u16:0+efi_rts_wq20:30:133
947992150,214cyclictest2297-21kworker/u16:1+efi_rts_wq23:35:153
947992140,213cyclictest31623-21kworker/u16:2+efi_rts_wq19:40:143
946992130,212cyclictest18592-21kworker/u16:3+efi_rts_wq00:05:142
947992120,211cyclictest31623-21kworker/u16:2+efi_rts_wq21:05:133
946992100,209cyclictest31623-21kworker/u16:2+efi_rts_wq21:30:142
947992070,205cyclictest14634-21kworker/u16:0+efi_rts_wq23:00:153
947992060,205cyclictest14634-21kworker/u16:0+efi_rts_wq23:30:153
945992050,204cyclictest16249-21kworker/u16:2+efi_rts_wq00:35:561
945992040,203cyclictest14634-21kworker/u16:0+efi_rts_wq21:40:141
947992030,202cyclictest18592-21kworker/u16:3+efi_rts_wq00:10:143
945992020,201cyclictest14634-21kworker/u16:0+efi_rts_wq22:25:311
944992010,200cyclictest14634-21kworker/u16:0+efi_rts_wq21:40:230
944992010,200cyclictest14634-21kworker/u16:0+efi_rts_wq20:40:140
947992000,199cyclictest31623-21kworker/u16:2+efi_rts_wq21:50:253
946991980,197cyclictest14634-21kworker/u16:0+efi_rts_wq20:20:142
945991980,197cyclictest31623-21kworker/u16:2+efi_rts_wq19:20:131
945991950,194cyclictest31623-21kworker/u16:2+efi_rts_wq21:30:221
944991950,194cyclictest14634-21kworker/u16:0+efi_rts_wq21:45:130
947991910,190cyclictest16249-21kworker/u16:2+efi_rts_wq23:50:473
947991900,189cyclictest31623-21kworker/u16:2+efi_rts_wq22:10:283
947991860,185cyclictest31623-21kworker/u16:2+efi_rts_wq19:24:583
947991860,185cyclictest18592-21kworker/u16:3+efi_rts_wq00:00:143
944991850,184cyclictest31623-21kworker/u16:2+efi_rts_wq22:10:120
944991800,179cyclictest31623-21kworker/u16:2+efi_rts_wq21:10:140
945991790,178cyclictest31623-21kworker/u16:2+efi_rts_wq22:20:121
947991750,174cyclictest14634-21kworker/u16:0+efi_rts_wq20:45:143
946991730,172cyclictest14634-21kworker/u16:0+efi_rts_wq22:25:132
944991730,172cyclictest14634-21kworker/u16:0+efi_rts_wq22:50:110
947991710,170cyclictest31623-21kworker/u16:2+efi_rts_wq19:10:143
944991640,162cyclictest14634-21kworker/u16:0+efi_rts_wq21:25:120
945991630,162cyclictest14634-21kworker/u16:0+efi_rts_wq21:15:191
946991610,160cyclictest16249-21kworker/u16:2+efi_rts_wq23:40:462
944991600,159cyclictest2297-21kworker/u16:1+efi_rts_wq23:35:450
946991590,157cyclictest14634-21kworker/u16:0+efi_rts_wq22:50:122
947991570,156cyclictest14634-21kworker/u16:0+efi_rts_wq21:20:133
946991570,156cyclictest2297-21kworker/u16:1+efi_rts_wq23:25:432
944991560,155cyclictest31623-21kworker/u16:2+efi_rts_wq22:20:110
944991520,150cyclictest14634-21kworker/u16:0+efi_rts_wq23:10:130
947991510,150cyclictest2297-21kworker/u16:1+efi_rts_wq23:10:403
945991450,144cyclictest14634-21kworker/u16:0+efi_rts_wq21:20:131
946991420,141cyclictest31623-21kworker/u16:2+efi_rts_wq19:40:012
944991380,137cyclictest16249-21kworker/u16:2+efi_rts_wq00:25:130
946991370,136cyclictest2297-21kworker/u16:1+efi_rts_wq23:05:122
945991280,127cyclictest14634-21kworker/u16:0+efi_rts_wq23:15:411
946991260,125cyclictest14634-21kworker/u16:0+efi_rts_wq22:15:132
945991230,122cyclictest31623-21kworker/u16:2+efi_rts_wq20:40:121
946991190,118cyclictest14634-21kworker/u16:0+efi_rts_wq20:10:132
945991180,116cyclictest14634-21kworker/u16:0+efi_rts_wq19:15:011
947991140,113cyclictest31623-21kworker/u16:2+efi_rts_wq19:15:133
944991140,113cyclictest18592-21kworker/u16:3+efi_rts_wq23:40:120
945991090,108cyclictest16249-21kworker/u16:2+efi_rts_wq23:45:471
944991090,108cyclictest18592-21kworker/u16:3+efi_rts_wq00:15:140
944991080,107cyclictest14634-21kworker/u16:0+efi_rts_wq20:20:140
946991050,104cyclictest14634-21kworker/u16:0+efi_rts_wq19:50:142
945993330,2cyclictest795-21snmpd19:48:311
945993329,2cyclictest795-21snmpd23:33:151
947993229,2cyclictest795-21snmpd20:23:203
946993229,2cyclictest795-21snmpd23:19:562
946993229,2cyclictest795-21snmpd21:24:372
947993130,1cyclictest795-21snmpd23:47:243
946993130,1cyclictest795-21snmpd21:05:162
946993129,2cyclictest795-21snmpd23:55:272
946993129,2cyclictest795-21snmpd21:29:072
945993130,1cyclictest795-21snmpd00:01:331
945993129,2cyclictest795-21snmpd19:52:131
945993128,2cyclictest795-21snmpd00:07:101
944993130,1cyclictest795-21snmpd20:05:580
944993129,2cyclictest795-21snmpd23:57:000
944993129,2cyclictest795-21snmpd22:44:450
944993129,2cyclictest795-21snmpd19:34:190
947993029,1cyclictest9757-21cat00:25:143
947993029,1cyclictest795-21snmpd21:36:263
947993029,1cyclictest795-21snmpd00:39:553
947993029,1cyclictest795-21snmpd00:33:403
946993030,0cyclictest10270-21kworker/2:1+events19:57:412
946993029,1cyclictest795-21snmpd20:07:322
946993029,1cyclictest23299-21kworker/2:2+events23:46:372
946993028,2cyclictest795-21snmpd22:22:092
946993028,2cyclictest795-21snmpd20:29:212
946993028,2cyclictest13918-21cat00:35:142
946993028,1cyclictest795-21snmpd22:57:372
945993029,1cyclictest795-21snmpd23:40:541
945993029,1cyclictest795-21snmpd22:47:161
945993029,1cyclictest795-21snmpd20:19:171
945993029,1cyclictest795-21snmpd19:26:361
945993028,2cyclictest795-21snmpd20:46:361
944993029,1cyclictest795-21snmpd22:01:450
944993029,1cyclictest795-21snmpd22:01:440
944993029,1cyclictest795-21snmpd21:30:530
944993029,1cyclictest795-21snmpd20:58:210
944993028,2cyclictest795-21snmpd23:08:080
947992928,1cyclictest795-21snmpd20:41:423
946992929,0cyclictest22157-21kworker/2:1+events22:33:292
946992928,1cyclictest795-21snmpd00:15:252
946992927,2cyclictest795-21snmpd21:50:562
946992927,2cyclictest795-21snmpd20:51:512
945992928,1cyclictest795-21snmpd23:26:351
945992928,1cyclictest795-21snmpd22:19:391
945992928,1cyclictest795-21snmpd21:02:281
945992928,1cyclictest795-21snmpd20:31:331
945992928,1cyclictest795-21snmpd19:32:401
945992927,2cyclictest795-21snmpd20:52:211
945992927,2cyclictest26535-21cat23:50:151
945992926,2cyclictest795-21snmpd00:29:461
944992928,1cyclictest795-21snmpd19:40:520
944992928,1cyclictest795-21snmpd00:05:400
944992927,2cyclictest795-21snmpd20:49:470
944992926,2cyclictest795-21snmpd21:20:580
947992828,0cyclictest795-21snmpd22:25:333
946992827,1cyclictest795-21snmpd00:11:462
945992827,1cyclictest795-21snmpd22:05:421
945992827,1cyclictest795-21snmpd21:56:531
945992827,1cyclictest795-21snmpd19:55:281
945992826,2cyclictest795-21snmpd22:04:271
945992826,2cyclictest795-21snmpd22:04:271
945992826,2cyclictest795-21snmpd21:14:251
945992826,2cyclictest795-21snmpd20:04:531
944992827,1cyclictest795-21snmpd22:27:240
944992827,1cyclictest795-21snmpd19:29:380
944992826,2cyclictest795-21snmpd22:31:350
947992726,1cyclictest795-21snmpd22:42:493
946992727,0cyclictest13851-21kworker/2:2+events23:21:132
946992726,1cyclictest795-21snmpd21:02:192
945992726,1cyclictest795-21snmpd23:13:231
945992726,1cyclictest795-21snmpd21:27:581
945992725,2cyclictest795-21snmpd23:37:211
945992725,2cyclictest795-21snmpd00:24:281
944992727,0cyclictest795-21snmpd23:25:350
944992726,1cyclictest795-21snmpd23:00:580
944992726,1cyclictest795-21snmpd21:53:170
944992726,1cyclictest795-21snmpd19:16:330
944992725,2cyclictest795-21snmpd19:24:210
946992625,1cyclictest795-21snmpd00:30:012
945992626,0cyclictest795-21snmpd22:38:461
944992625,1cyclictest795-21snmpd21:35:280
944992625,1cyclictest795-21snmpd20:35:200
944992624,2cyclictest795-21snmpd20:51:060
947992523,2cyclictest795-21snmpd19:38:283
946992523,2cyclictest795-21snmpd21:15:012
944992523,2cyclictest795-21snmpd20:14:410
947992423,1cyclictest795-21snmpd23:55:333
947992423,1cyclictest795-21snmpd20:58:133
947992422,2cyclictest795-21snmpd23:22:593
944992424,0cyclictest795-21snmpd23:16:200
944992321,2cyclictest795-21snmpd22:45:100
944992321,2cyclictest795-21snmpd00:02:370
944992320,3cyclictest795-21snmpd23:32:080
946992220,2cyclictest795-21snmpd19:30:582
944992220,2cyclictest795-21snmpd20:02:380
944992220,2cyclictest21865-21cat21:15:150
946992120,1cyclictest795-21snmpd20:38:332
946992120,1cyclictest795-21snmpd19:48:582
946992017,2cyclictest795-21snmpd20:40:122
944991918,1cyclictest795-21snmpd22:09:540
947991817,1cyclictest795-21snmpd21:59:383
946991818,0cyclictest22157-21kworker/2:1+events22:10:212
946991818,0cyclictest10270-21kworker/2:1+events20:30:012
945991817,1cyclictest795-21snmpd00:13:581
947991715,2cyclictest795-21snmpd22:24:003
945991211,1cyclictest795-21snmpd21:45:561
944991211,1cyclictest795-21snmpd22:15:180
946991111,0cyclictest4291-21kworker/2:0+events21:42:572
9459954,1cyclictest2219-21wc19:10:211
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional