You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-04 - 08:15

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot3s.osadl.org (updated Thu Dec 04, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
71692316308,5sleep30-21swapper/319:09:093
53942316309,5sleep20-21swapper/219:05:032
70542315307,5sleep10-21swapper/119:07:391
68972315308,5sleep00-21swapper/019:05:360
7501993010,300cyclictest14330-21kworker/u16:0+efi_rts_wq22:25:132
7500993010,298cyclictest10195-21kworker/u16:1+efi_rts_wq19:10:131
7499993010,300cyclictest21507-21kworker/u16:3+efi_rts_wq23:56:160
7499993000,299cyclictest10195-21kworker/u16:1+efi_rts_wq20:45:120
7500992980,297cyclictest10195-21kworker/u16:1+efi_rts_wq19:25:031
7499992970,296cyclictest13359-21kworker/u16:2+efi_rts_wq20:35:140
7502992960,295cyclictest13359-21kworker/u16:2+efi_rts_wq23:05:143
7501992940,293cyclictest13359-21kworker/u16:2+efi_rts_wq19:30:042
7500992920,291cyclictest13359-21kworker/u16:2+efi_rts_wq23:25:121
7500992920,291cyclictest10195-21kworker/u16:1+efi_rts_wq19:15:131
7502992910,290cyclictest11215-21kworker/u16:1+efi_rts_wq00:11:203
7501992910,290cyclictest14330-21kworker/u16:0+efi_rts_wq21:25:282
7499992910,290cyclictest11215-21kworker/u16:1+efi_rts_wq00:05:160
7502992890,288cyclictest14330-21kworker/u16:0+efi_rts_wq21:15:263
7500992890,287cyclictest13359-21kworker/u16:2+efi_rts_wq23:05:121
7502992870,286cyclictest14330-21kworker/u16:0+efi_rts_wq22:45:123
7501992870,286cyclictest14330-21kworker/u16:0+efi_rts_wq21:35:132
7500992870,286cyclictest10195-21kworker/u16:1+efi_rts_wq19:45:121
7500992870,285cyclictest11215-21kworker/u16:1+efi_rts_wq23:50:141
7502992860,285cyclictest14330-21kworker/u16:0+efi_rts_wq22:25:123
7502992860,285cyclictest13359-21kworker/u16:2+efi_rts_wq21:20:273
7500992860,285cyclictest13359-21kworker/u16:2+efi_rts_wq22:20:131
7499992850,284cyclictest13359-21kworker/u16:2+efi_rts_wq20:20:160
7500992840,283cyclictest10195-21kworker/u16:1+efi_rts_wq20:45:121
7500992830,282cyclictest13359-21kworker/u16:2+efi_rts_wq20:30:121
7502992820,281cyclictest10195-21kworker/u16:1+efi_rts_wq19:20:143
7501992820,281cyclictest13359-21kworker/u16:2+efi_rts_wq22:10:162
7501992820,281cyclictest13359-21kworker/u16:2+efi_rts_wq20:20:162
7502992810,280cyclictest21507-21kworker/u16:3+efi_rts_wq00:00:143
7501992800,279cyclictest13359-21kworker/u16:2+efi_rts_wq23:10:132
7500992800,278cyclictest13359-21kworker/u16:2+efi_rts_wq22:40:121
7499992800,279cyclictest11215-21kworker/u16:1+efi_rts_wq00:10:150
7499992790,278cyclictest14330-21kworker/u16:0+efi_rts_wq22:25:140
7499992790,278cyclictest11215-21kworker/u16:1+efi_rts_wq23:50:120
7499992780,277cyclictest21507-21kworker/u16:3+efi_rts_wq23:45:120
7501992760,275cyclictest13359-21kworker/u16:2+efi_rts_wq19:15:012
7501992750,274cyclictest21507-21kworker/u16:3+efi_rts_wq00:01:182
7502992730,272cyclictest14330-21kworker/u16:0+efi_rts_wq21:05:143
7502992730,272cyclictest11215-21kworker/u16:1+efi_rts_wq00:20:133
7499992730,272cyclictest13359-21kworker/u16:2+efi_rts_wq22:50:130
7501992720,271cyclictest13359-21kworker/u16:2+efi_rts_wq22:00:342
7499992720,269cyclictest13359-21kworker/u16:2+efi_rts_wq19:50:130
7501992710,270cyclictest10195-21kworker/u16:1+efi_rts_wq19:40:132
7500992710,270cyclictest13359-21kworker/u16:2+efi_rts_wq20:50:141
7501992700,269cyclictest10195-21kworker/u16:1+efi_rts_wq19:45:122
7502992690,268cyclictest10195-21kworker/u16:1+efi_rts_wq20:05:163
7501992680,267cyclictest13359-21kworker/u16:2+efi_rts_wq19:25:112
7500992680,267cyclictest10195-21kworker/u16:1+efi_rts_wq19:20:131
7502992670,266cyclictest21507-21kworker/u16:3+efi_rts_wq00:30:123
7502992660,265cyclictest13359-21kworker/u16:2+efi_rts_wq19:30:133
7500992660,265cyclictest14330-21kworker/u16:0+efi_rts_wq21:40:131
7502992640,263cyclictest13359-21kworker/u16:2+efi_rts_wq22:55:133
7502992640,263cyclictest11215-21kworker/u16:1+efi_rts_wq23:40:163
7502992630,262cyclictest14330-21kworker/u16:0+efi_rts_wq21:40:133
7501992620,261cyclictest10195-21kworker/u16:1+efi_rts_wq20:00:142
7501992610,260cyclictest13359-21kworker/u16:2+efi_rts_wq22:40:122
7499992610,260cyclictest10195-21kworker/u16:1+efi_rts_wq20:55:140
7502992590,258cyclictest11215-21kworker/u16:1+efi_rts_wq00:25:143
7500992590,256cyclictest14330-21kworker/u16:0+efi_rts_wq21:05:131
7499992590,258cyclictest13359-21kworker/u16:2+efi_rts_wq21:20:140
7501992580,257cyclictest13359-21kworker/u16:2+efi_rts_wq19:35:132
7501992580,257cyclictest11215-21kworker/u16:1+efi_rts_wq23:20:472
7499992580,257cyclictest13359-21kworker/u16:2+efi_rts_wq23:15:460
7502992570,256cyclictest11215-21kworker/u16:1+efi_rts_wq00:06:193
7502992560,255cyclictest13359-21kworker/u16:2+efi_rts_wq23:10:133
7500992540,253cyclictest10195-21kworker/u16:1+efi_rts_wq20:55:141
7502992530,252cyclictest13359-21kworker/u16:2+efi_rts_wq22:40:123
7502992490,248cyclictest11215-21kworker/u16:1+efi_rts_wq00:15:163
7501992490,248cyclictest10195-21kworker/u16:1+efi_rts_wq19:55:142
7500992490,248cyclictest13359-21kworker/u16:2+efi_rts_wq20:40:131
7502992480,247cyclictest13359-21kworker/u16:2+efi_rts_wq19:25:113
7499992460,245cyclictest13359-21kworker/u16:2+efi_rts_wq21:10:130
7500992440,243cyclictest13359-21kworker/u16:2+efi_rts_wq21:45:131
7502992400,239cyclictest13359-21kworker/u16:2+efi_rts_wq22:00:123
7501992400,239cyclictest21507-21kworker/u16:3+efi_rts_wq00:30:132
7499992400,239cyclictest14330-21kworker/u16:0+efi_rts_wq22:35:120
7500992390,237cyclictest13359-21kworker/u16:2+efi_rts_wq20:25:171
7501992370,236cyclictest14330-21kworker/u16:0+efi_rts_wq22:05:152
7501992370,236cyclictest11215-21kworker/u16:1+efi_rts_wq00:25:142
7500992370,236cyclictest13359-21kworker/u16:2+efi_rts_wq21:00:131
7500992370,235cyclictest14330-21kworker/u16:0+efi_rts_wq22:30:131
7500992370,235cyclictest14330-21kworker/u16:0+efi_rts_wq22:30:131
7499992370,236cyclictest13359-21kworker/u16:2+efi_rts_wq21:30:290
7502992360,235cyclictest13359-21kworker/u16:2+efi_rts_wq20:15:123
7499992340,233cyclictest13359-21kworker/u16:2+efi_rts_wq21:55:120
7502992320,231cyclictest21507-21kworker/u16:3+efi_rts_wq00:35:163
7502992250,224cyclictest11215-21kworker/u16:1+efi_rts_wq23:35:503
7500992240,223cyclictest13359-21kworker/u16:2+efi_rts_wq20:15:151
7501992230,222cyclictest11215-21kworker/u16:1+efi_rts_wq00:20:122
7502992200,219cyclictest13359-21kworker/u16:2+efi_rts_wq20:35:183
7500992190,218cyclictest14330-21kworker/u16:0+efi_rts_wq22:15:361
7502992180,217cyclictest13359-21kworker/u16:2+efi_rts_wq21:45:153
7501992170,215cyclictest14330-21kworker/u16:0+efi_rts_wq22:35:142
7499992130,212cyclictest10195-21kworker/u16:1+efi_rts_wq20:05:150
7500992110,210cyclictest13359-21kworker/u16:2+efi_rts_wq21:10:131
7500992100,209cyclictest13359-21kworker/u16:2+efi_rts_wq22:10:151
7501992030,202cyclictest11215-21kworker/u16:1+efi_rts_wq00:05:162
7502992020,201cyclictest13359-21kworker/u16:2+efi_rts_wq23:15:133
7501992020,201cyclictest11215-21kworker/u16:1+efi_rts_wq23:35:152
7499992020,201cyclictest13359-21kworker/u16:2+efi_rts_wq22:55:430
7501992010,200cyclictest21507-21kworker/u16:3+efi_rts_wq00:35:162
7500991990,198cyclictest21507-21kworker/u16:3+efi_rts_wq23:40:511
7500991960,195cyclictest11215-21kworker/u16:1+efi_rts_wq23:55:131
7500991960,195cyclictest10195-21kworker/u16:1+efi_rts_wq20:00:141
7502991950,194cyclictest13359-21kworker/u16:2+efi_rts_wq22:10:363
7499991920,191cyclictest10195-21kworker/u16:1+efi_rts_wq20:10:120
7500991910,189cyclictest14330-21kworker/u16:0+efi_rts_wq21:50:141
7500991880,187cyclictest10195-21kworker/u16:1+efi_rts_wq19:50:081
7502991860,185cyclictest10195-21kworker/u16:1+efi_rts_wq20:45:193
7502991850,184cyclictest13359-21kworker/u16:2+efi_rts_wq20:50:193
7502991820,181cyclictest13359-21kworker/u16:2+efi_rts_wq23:20:143
7502991820,181cyclictest13359-21kworker/u16:2+efi_rts_wq21:00:123
7500991820,181cyclictest13359-21kworker/u16:2+efi_rts_wq21:55:121
7502991810,180cyclictest13359-21kworker/u16:2+efi_rts_wq21:30:133
7502991780,177cyclictest14330-21kworker/u16:0+efi_rts_wq22:15:153
7500991760,175cyclictest11215-21kworker/u16:1+efi_rts_wq00:15:161
7501991750,174cyclictest11215-21kworker/u16:1+efi_rts_wq23:30:122
7502991740,173cyclictest11215-21kworker/u16:1+efi_rts_wq23:25:473
7499991740,173cyclictest13359-21kworker/u16:2+efi_rts_wq23:05:440
7499991730,172cyclictest13359-21kworker/u16:2+efi_rts_wq23:00:140
7499991710,170cyclictest14330-21kworker/u16:0+efi_rts_wq22:15:160
7501991570,156cyclictest11215-21kworker/u16:1+efi_rts_wq00:16:212
7499991560,155cyclictest13359-21kworker/u16:2+efi_rts_wq23:20:140
7500991550,154cyclictest14330-21kworker/u16:0+efi_rts_wq21:15:141
7500991510,150cyclictest8649-21kworker/u16:3+efi_rts_wq23:00:431
7501991500,149cyclictest13359-21kworker/u16:2+efi_rts_wq21:00:222
7501991490,149cyclictest14330-21kworker/u16:0+efi_rts_wq22:45:412
7502991480,147cyclictest13359-21kworker/u16:2+efi_rts_wq19:10:003
7501991480,147cyclictest8649-21kworker/u16:3+efi_rts_wq23:00:142
7502991460,146cyclictest13359-21kworker/u16:2+efi_rts_wq20:40:193
7500991460,145cyclictest14330-21kworker/u16:0+efi_rts_wq22:05:161
7500991450,144cyclictest13359-21kworker/u16:2+efi_rts_wq23:10:451
7501991440,143cyclictest14330-21kworker/u16:0+efi_rts_wq22:50:422
7501991420,141cyclictest10195-21kworker/u16:1+efi_rts_wq20:10:132
7499991410,140cyclictest13359-21kworker/u16:2+efi_rts_wq19:40:060
7502991400,140cyclictest14330-21kworker/u16:0+efi_rts_wq22:30:383
7502991400,140cyclictest14330-21kworker/u16:0+efi_rts_wq22:30:373
7502991370,137cyclictest13359-21kworker/u16:2+efi_rts_wq22:20:363
7502991370,136cyclictest10195-21kworker/u16:1+efi_rts_wq20:00:123
7500991360,135cyclictest14330-21kworker/u16:0+efi_rts_wq21:35:281
7499991360,135cyclictest14330-21kworker/u16:0+efi_rts_wq21:25:120
7502991300,130cyclictest13359-21kworker/u16:2+efi_rts_wq21:10:243
7502991300,129cyclictest13359-21kworker/u16:2+efi_rts_wq19:45:063
7501991280,127cyclictest14330-21kworker/u16:0+efi_rts_wq21:50:322
7500991260,125cyclictest13359-21kworker/u16:2+efi_rts_wq23:30:491
7499991220,121cyclictest10195-21kworker/u16:1+efi_rts_wq19:55:140
7499991220,120cyclictest13359-21kworker/u16:2+efi_rts_wq22:10:150
7502991210,120cyclictest14330-21kworker/u16:0+efi_rts_wq22:35:393
7500991180,117cyclictest10195-21kworker/u16:1+efi_rts_wq19:40:121
7500991150,114cyclictest13359-21kworker/u16:2+efi_rts_wq22:50:131
7502991140,113cyclictest14330-21kworker/u16:0+efi_rts_wq22:05:353
7499991080,107cyclictest13359-21kworker/u16:2+efi_rts_wq19:30:140
7499993429,1cyclictest27509-21cat22:30:150
7499993429,1cyclictest27509-21cat22:30:150
7502993330,3cyclictest27994-21kworker/3:0+mm_percpu_wq23:45:433
7499993328,5cyclictest795-21snmpd22:49:060
7502993230,2cyclictest795-21snmpd21:35:583
7500993230,2cyclictest795-21snmpd00:38:251
7500993229,2cyclictest795-21snmpd00:11:171
7499993229,3cyclictest795-21snmpd21:54:410
7499993229,3cyclictest795-21snmpd20:30:200
7499993229,2cyclictest795-21snmpd21:41:250
7499993228,1cyclictest795-21snmpd00:39:520
7499993227,2cyclictest795-21snmpd21:15:590
7499993227,1cyclictest795-21snmpd23:35:290
7502993130,1cyclictest795-21snmpd19:44:133
7501993130,1cyclictest23116-21kworker/2:0+events23:28:222
7501993129,2cyclictest795-21snmpd23:50:032
7501993129,2cyclictest31947-21cat20:05:172
7501993128,2cyclictest795-21snmpd19:10:332
7500993129,2cyclictest795-21snmpd23:35:141
7500993129,2cyclictest795-21snmpd23:22:231
7500993129,2cyclictest795-21snmpd22:37:361
7500993128,2cyclictest795-21snmpd21:27:071
7499993129,2cyclictest795-21snmpd23:33:200
7499993128,2cyclictest795-21snmpd23:26:170
7499993126,2cyclictest4681-21cat21:35:150
7502993028,2cyclictest795-21snmpd20:20:143
7502993028,2cyclictest10802-21cat19:15:163
750299301,0cyclictest0-21swapper/319:55:193
7501993029,1cyclictest795-21snmpd22:56:102
7501993029,1cyclictest795-21snmpd21:19:582
7501993029,1cyclictest795-21snmpd20:35:052
7501993029,1cyclictest795-21snmpd20:17:112
7501993029,1cyclictest795-21snmpd00:13:482
7501993029,1cyclictest28407-21kworker/2:0+events22:31:312
7501993029,1cyclictest28407-21kworker/2:0+events22:31:312
7501993028,2cyclictest795-21snmpd23:57:272
7501993028,2cyclictest795-21snmpd23:48:212
7501993027,2cyclictest795-21snmpd20:51:322
7500993029,1cyclictest795-21snmpd22:47:091
7499993029,1cyclictest795-21snmpd23:13:130
7499993029,1cyclictest795-21snmpd22:05:290
7499993029,1cyclictest795-21snmpd00:24:100
7499993029,1cyclictest795-21snmpd00:00:020
7502992928,1cyclictest795-21snmpd23:58:063
7502992927,2cyclictest795-21snmpd20:11:013
7501992928,1cyclictest795-21snmpd22:15:202
7501992928,1cyclictest795-21snmpd21:55:132
7501992928,1cyclictest795-21snmpd21:20:402
7501992926,2cyclictest795-21snmpd19:22:212
7500992929,0cyclictest795-21snmpd20:09:521
7500992928,1cyclictest795-21snmpd21:24:311
7500992928,1cyclictest795-21snmpd19:59:341
7500992928,1cyclictest795-21snmpd19:30:091
7500992928,1cyclictest795-21snmpd00:31:341
7500992927,2cyclictest795-21snmpd22:58:241
7500992927,2cyclictest795-21snmpd00:01:591
7499992928,1cyclictest795-21snmpd20:27:500
7499992927,2cyclictest795-21snmpd22:00:410
7499992927,2cyclictest795-21snmpd19:15:210
7499992927,2cyclictest18152-21cat00:30:150
7499992926,2cyclictest795-21snmpd19:28:390
7502992828,0cyclictest795-21snmpd23:34:383
7502992828,0cyclictest73850irq/131-enp1s023:01:313
7502992828,0cyclictest13359-21kworker/u16:2+atlantic21:50:393
7502992828,0cyclictest13359-21kworker/u16:2+atlantic19:54:033
7501992827,1cyclictest795-21snmpd23:41:082
7501992827,1cyclictest795-21snmpd20:26:082
7501992827,1cyclictest795-21snmpd19:50:432
7500992828,0cyclictest795-21snmpd23:19:411
7500992826,2cyclictest7808-21cat00:05:171
7500992825,2cyclictest795-21snmpd00:26:281
7499992827,1cyclictest795-21snmpd22:43:390
7499992827,1cyclictest795-21snmpd21:03:540
7499992827,1cyclictest795-21snmpd19:39:190
7499992827,1cyclictest795-21snmpd19:24:300
7499992827,1cyclictest795-21snmpd19:13:360
7499992825,2cyclictest795-21snmpd00:29:340
7502992726,1cyclictest795-21snmpd21:55:233
7501992726,1cyclictest795-21snmpd23:06:182
7500992727,0cyclictest795-21snmpd00:24:551
7499992726,1cyclictest795-21snmpd23:40:320
7499992726,1cyclictest795-21snmpd22:24:390
7499992726,1cyclictest795-21snmpd21:09:000
7499992725,2cyclictest795-21snmpd21:46:440
7502992624,2cyclictest795-21snmpd23:52:543
7501992626,0cyclictest11052-21kworker/2:3+events23:18:382
7501992624,2cyclictest795-21snmpd21:40:072
7500992624,2cyclictest795-21snmpd21:33:191
7502992525,0cyclictest795-21snmpd22:54:283
7499992524,1cyclictest795-21snmpd20:51:120
7499992524,1cyclictest795-21snmpd00:19:460
7501992423,1cyclictest795-21snmpd21:05:332
7500992424,0cyclictest795-21snmpd22:01:111
7500992424,0cyclictest795-21snmpd20:37:081
7499992423,1cyclictest795-21snmpd19:45:280
7502992322,1cyclictest795-21snmpd21:29:463
7500992322,1cyclictest795-21snmpd20:20:461
7500992322,1cyclictest795-21snmpd19:39:221
7502992220,2cyclictest9895-21cat20:30:153
7499992221,1cyclictest795-21snmpd20:18:020
7501992120,1cyclictest795-21snmpd20:40:402
7501992119,2cyclictest795-21snmpd22:24:242
7501992119,2cyclictest795-21snmpd21:45:312
7500992120,1cyclictest795-21snmpd20:10:271
7501992019,1cyclictest795-21snmpd20:58:272
7501992018,2cyclictest795-21snmpd21:14:512
7499992018,2cyclictest795-21snmpd20:02:030
7502991816,2cyclictest795-21snmpd20:27:263
7501991817,1cyclictest795-21snmpd20:34:262
7501991816,2cyclictest795-21snmpd20:49:482
7500991414,0cyclictest73850irq/131-enp1s023:45:261
7502991312,1cyclictest19484-21cat19:35:143
7502991210,2cyclictest804-21ntpd20:58:153
7501991211,1cyclictest795-21snmpd21:30:432
75009954,1cyclictest24782-21find22:25:121
74999954,1cyclictest138102sleep020:40:140
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional