You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-15 - 11:43

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Sat Nov 15, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
283032319304,5sleep20-21swapper/219:05:562
282942316303,10sleep30-21swapper/319:05:493
283532314307,5sleep00-21swapper/019:06:330
282752313305,5sleep10-21swapper/119:05:351
28886992970,296cyclictest7645-21kworker/u16:3+efi_rts_wq00:20:131
28885992930,292cyclictest14935-21kworker/u16:0+efi_rts_wq23:45:010
28885992930,291cyclictest14935-21kworker/u16:0+efi_rts_wq23:35:160
28886992920,290cyclictest31237-21kworker/u16:4+efi_rts_wq22:59:521
28888992910,290cyclictest7645-21kworker/u16:3+efi_rts_wq00:00:133
28885992910,290cyclictest7645-21kworker/u16:3+efi_rts_wq23:20:130
28888992900,289cyclictest7645-21kworker/u16:3+efi_rts_wq00:10:143
28887992900,288cyclictest31237-21kworker/u16:4+efi_rts_wq22:30:152
28887992900,288cyclictest31237-21kworker/u16:4+efi_rts_wq22:30:142
28887992890,288cyclictest14935-21kworker/u16:0+efi_rts_wq23:55:132
28886992890,288cyclictest25760-21kworker/u16:0+efi_rts_wq22:54:521
28888992880,287cyclictest15074-21kworker/u16:2+efi_rts_wq19:20:153
28885992880,287cyclictest28830-21kworker/u16:3+efi_rts_wq20:50:130
28888992870,286cyclictest31237-21kworker/u16:4+efi_rts_wq22:10:143
28888992870,286cyclictest15074-21kworker/u16:2+efi_rts_wq19:14:113
28886992870,286cyclictest15074-21kworker/u16:2+efi_rts_wq20:20:141
28888992850,284cyclictest14935-21kworker/u16:0+efi_rts_wq00:15:133
28887992850,284cyclictest14935-21kworker/u16:0+efi_rts_wq00:05:142
28887992830,282cyclictest2196-21kworker/u16:1+efi_rts_wq20:10:122
28888992820,281cyclictest18120-21kworker/u16:1+efi_rts_wq22:50:153
28886992820,281cyclictest31237-21kworker/u16:4+efi_rts_wq22:00:121
28887992810,280cyclictest30984-21kworker/u16:1+efi_rts_wq23:15:142
28886992810,280cyclictest7645-21kworker/u16:3+efi_rts_wq00:30:131
28888992800,278cyclictest31237-21kworker/u16:4+efi_rts_wq22:40:153
28888992780,277cyclictest15074-21kworker/u16:2+efi_rts_wq19:49:183
28887992780,277cyclictest31237-21kworker/u16:4+efi_rts_wq21:15:152
28887992770,276cyclictest31237-21kworker/u16:4+efi_rts_wq22:45:132
28886992760,275cyclictest28830-21kworker/u16:3+efi_rts_wq21:00:151
28887992750,274cyclictest14935-21kworker/u16:0+efi_rts_wq00:35:132
28887992740,273cyclictest31237-21kworker/u16:4+efi_rts_wq21:05:162
28885992740,273cyclictest28830-21kworker/u16:3+efi_rts_wq20:44:290
28887992730,272cyclictest7645-21kworker/u16:3+efi_rts_wq23:40:012
28886992720,271cyclictest14935-21kworker/u16:0+efi_rts_wq23:56:171
28888992710,270cyclictest2196-21kworker/u16:1+efi_rts_wq19:25:133
28888992710,270cyclictest1115-21kworker/u16:2+efi_rts_wq23:24:593
28885992710,270cyclictest15074-21kworker/u16:2+efi_rts_wq20:15:120
28887992700,269cyclictest31237-21kworker/u16:4+efi_rts_wq20:49:292
28885992700,269cyclictest2196-21kworker/u16:1+efi_rts_wq19:40:140
28887992690,268cyclictest31237-21kworker/u16:4+efi_rts_wq22:55:132
28888992680,267cyclictest31237-21kworker/u16:4+efi_rts_wq20:45:173
28888992680,267cyclictest28830-21kworker/u16:3+efi_rts_wq22:15:153
28888992680,267cyclictest28830-21kworker/u16:3+efi_rts_wq21:45:143
28888992670,266cyclictest7645-21kworker/u16:3+efi_rts_wq00:31:243
28886992670,266cyclictest2196-21kworker/u16:1+efi_rts_wq19:50:121
28887992650,264cyclictest31237-21kworker/u16:4+efi_rts_wq21:20:182
28885992650,264cyclictest2196-21kworker/u16:1+efi_rts_wq19:25:120
28888992640,263cyclictest31237-21kworker/u16:4+efi_rts_wq21:30:173
28885992630,262cyclictest31237-21kworker/u16:4+efi_rts_wq21:50:120
28885992630,262cyclictest28830-21kworker/u16:3+efi_rts_wq21:45:150
28887992620,260cyclictest7645-21kworker/u16:3+efi_rts_wq23:30:152
28888992610,259cyclictest1115-21kworker/u16:2+efi_rts_wq23:05:153
28887992580,257cyclictest2196-21kworker/u16:1+efi_rts_wq20:00:142
28888992570,256cyclictest2196-21kworker/u16:1+efi_rts_wq19:15:013
28888992560,255cyclictest31237-21kworker/u16:4+efi_rts_wq21:15:153
28888992550,254cyclictest7645-21kworker/u16:3+efi_rts_wq23:50:133
28888992530,252cyclictest2196-21kworker/u16:1+efi_rts_wq20:19:233
28886992530,252cyclictest7645-21kworker/u16:3+efi_rts_wq23:29:591
28887992510,250cyclictest28830-21kworker/u16:3+efi_rts_wq21:25:132
28887992510,250cyclictest28830-21kworker/u16:3+efi_rts_wq21:00:152
28887992500,249cyclictest7645-21kworker/u16:3+efi_rts_wq23:50:132
28885992500,249cyclictest28830-21kworker/u16:3+efi_rts_wq21:35:150
28888992490,248cyclictest14935-21kworker/u16:0+efi_rts_wq00:35:123
28885992490,248cyclictest14935-21kworker/u16:0+efi_rts_wq00:05:150
28887992480,247cyclictest28830-21kworker/u16:3+efi_rts_wq22:35:142
28886992480,247cyclictest28830-21kworker/u16:3+efi_rts_wq22:19:461
28888992470,246cyclictest15074-21kworker/u16:2+efi_rts_wq19:30:143
28887992470,246cyclictest28830-21kworker/u16:3+efi_rts_wq21:10:142
28887992470,246cyclictest15074-21kworker/u16:2+efi_rts_wq19:45:182
28888992450,244cyclictest2196-21kworker/u16:1+efi_rts_wq20:29:253
28886992450,244cyclictest2196-21kworker/u16:1+efi_rts_wq19:39:161
28888992430,239cyclictest28830-21kworker/u16:3+efi_rts_wq21:55:123
28887992420,241cyclictest2196-21kworker/u16:1+efi_rts_wq19:15:142
28887992420,239cyclictest28830-21kworker/u16:3+efi_rts_wq22:15:152
28887992380,237cyclictest14935-21kworker/u16:0+efi_rts_wq23:35:152
28888992360,235cyclictest1115-21kworker/u16:2+efi_rts_wq23:10:153
28888992350,234cyclictest31237-21kworker/u16:4+efi_rts_wq20:59:313
28887992320,231cyclictest14935-21kworker/u16:0+efi_rts_wq00:25:142
28886992320,231cyclictest31237-21kworker/u16:4+efi_rts_wq20:30:131
28888992310,230cyclictest31237-21kworker/u16:4+efi_rts_wq21:40:133
28888992310,230cyclictest15074-21kworker/u16:2+efi_rts_wq20:05:163
28888992310,229cyclictest15074-21kworker/u16:2+efi_rts_wq19:55:143
28886992310,230cyclictest14935-21kworker/u16:0+efi_rts_wq00:25:151
28885992310,230cyclictest15074-21kworker/u16:2+efi_rts_wq20:04:200
28888992300,228cyclictest15074-21kworker/u16:2+efi_rts_wq19:35:143
28887992300,229cyclictest28830-21kworker/u16:3+efi_rts_wq22:25:142
28886992290,227cyclictest15074-21kworker/u16:2+efi_rts_wq19:30:141
28887992280,227cyclictest31237-21kworker/u16:4+efi_rts_wq22:10:132
28888992240,222cyclictest30984-21kworker/u16:1+efi_rts_wq23:15:143
28886992230,222cyclictest30984-21kworker/u16:1+efi_rts_wq23:04:541
28885992220,221cyclictest15074-21kworker/u16:2+efi_rts_wq20:09:200
28887992210,220cyclictest15074-21kworker/u16:2+efi_rts_wq19:55:142
28887992180,217cyclictest2196-21kworker/u16:1+efi_rts_wq19:34:152
28886992170,216cyclictest31237-21kworker/u16:4+efi_rts_wq22:14:441
28885992130,212cyclictest2196-21kworker/u16:1+efi_rts_wq20:25:130
28886992120,211cyclictest14935-21kworker/u16:0+efi_rts_wq00:16:211
28886992120,210cyclictest1115-21kworker/u16:2+efi_rts_wq23:05:151
28887992100,208cyclictest7645-21kworker/u16:3+efi_rts_wq23:25:142
28885992100,209cyclictest28830-21kworker/u16:3+efi_rts_wq20:34:270
28888992080,206cyclictest2196-21kworker/u16:1+efi_rts_wq19:40:133
28886992060,205cyclictest28830-21kworker/u16:3+efi_rts_wq22:39:481
28888992010,200cyclictest31237-21kworker/u16:4+efi_rts_wq20:30:123
28888992010,200cyclictest25760-21kworker/u16:0+efi_rts_wq23:00:143
28887992010,200cyclictest31237-21kworker/u16:4+efi_rts_wq22:24:462
28888991970,196cyclictest31237-21kworker/u16:4+efi_rts_wq22:04:433
28887991960,195cyclictest14935-21kworker/u16:0+efi_rts_wq23:45:132
28888991950,194cyclictest31237-21kworker/u16:4+efi_rts_wq21:09:333
28887991940,191cyclictest28830-21kworker/u16:3+efi_rts_wq22:05:132
28887991930,192cyclictest7645-21kworker/u16:3+efi_rts_wq00:30:132
28886991930,192cyclictest31237-21kworker/u16:4+efi_rts_wq22:20:111
28885991930,192cyclictest31237-21kworker/u16:4+efi_rts_wq21:40:130
28886991890,188cyclictest15074-21kworker/u16:2+efi_rts_wq19:10:131
28885991880,187cyclictest18120-21kworker/u16:1+efi_rts_wq22:49:500
28887991840,181cyclictest15074-21kworker/u16:2+efi_rts_wq20:15:122
28886991780,177cyclictest28830-21kworker/u16:3+efi_rts_wq20:40:141
28885991780,177cyclictest25760-21kworker/u16:0+efi_rts_wq23:00:130
28888991760,175cyclictest31237-21kworker/u16:4+efi_rts_wq20:39:273
28887991750,174cyclictest25760-21kworker/u16:0+efi_rts_wq23:00:142
28888991730,171cyclictest31237-21kworker/u16:4+efi_rts_wq22:45:133
28887991730,172cyclictest15074-21kworker/u16:2+efi_rts_wq19:35:132
28886991710,170cyclictest14935-21kworker/u16:0+efi_rts_wq23:45:131
28888991700,169cyclictest28830-21kworker/u16:3+efi_rts_wq21:14:353
28886991690,168cyclictest18120-21kworker/u16:1+efi_rts_wq22:44:501
28886991680,167cyclictest28830-21kworker/u16:3+efi_rts_wq21:29:361
28886991670,166cyclictest28830-21kworker/u16:3+efi_rts_wq21:35:141
28885991660,165cyclictest15074-21kworker/u16:2+efi_rts_wq19:20:150
28886991640,163cyclictest31237-21kworker/u16:4+efi_rts_wq21:34:371
28886991610,160cyclictest31237-21kworker/u16:4+efi_rts_wq20:35:141
28888991600,159cyclictest31237-21kworker/u16:4+efi_rts_wq21:54:413
28886991560,155cyclictest28830-21kworker/u16:3+efi_rts_wq22:05:141
28888991510,150cyclictest2196-21kworker/u16:1+efi_rts_wq19:54:183
28888991460,144cyclictest28830-21kworker/u16:3+efi_rts_wq21:25:133
28886991450,144cyclictest1115-21kworker/u16:2+efi_rts_wq23:10:151
28887991410,140cyclictest28830-21kworker/u16:3+efi_rts_wq20:54:312
28886991310,130cyclictest31237-21kworker/u16:4+efi_rts_wq21:44:391
28886991300,129cyclictest2196-21kworker/u16:1+efi_rts_wq20:10:131
28887991270,126cyclictest18120-21kworker/u16:1+efi_rts_wq22:50:152
28887991260,126cyclictest28830-21kworker/u16:3+efi_rts_wq21:49:402
28887991230,122cyclictest31237-21kworker/u16:4+efi_rts_wq20:55:132
28885991190,118cyclictest7645-21kworker/u16:3+efi_rts_wq23:30:140
28886991130,112cyclictest31237-21kworker/u16:4+efi_rts_wq21:24:351
28886991120,110cyclictest31237-21kworker/u16:4+efi_rts_wq22:45:131
28888991110,110cyclictest28830-21kworker/u16:3+efi_rts_wq20:50:143
28888991100,109cyclictest7645-21kworker/u16:3+efi_rts_wq23:25:143
28888991060,105cyclictest2196-21kworker/u16:1+efi_rts_wq20:10:123
28888993230,2cyclictest795-21snmpd23:35:003
28888993229,2cyclictest795-21snmpd20:00:353
28888993229,2cyclictest795-21snmpd00:26:073
28885993229,2cyclictest795-21snmpd22:09:490
28888993129,2cyclictest795-21snmpd23:48:273
28887993129,2cyclictest795-21snmpd23:24:392
28887993129,2cyclictest795-21snmpd21:54:572
28886993130,1cyclictest795-21snmpd20:54:441
28886993128,2cyclictest795-21snmpd20:07:201
28885993130,1cyclictest795-21snmpd23:58:100
28885993129,2cyclictest795-21snmpd23:29:270
28885993129,2cyclictest795-21snmpd22:50:440
28885993129,2cyclictest795-21snmpd00:23:040
28885993128,2cyclictest795-21snmpd23:05:020
28885993128,1cyclictest795-21snmpd22:36:100
28888993029,1cyclictest795-21snmpd22:31:313
28888993029,1cyclictest795-21snmpd22:31:313
28888993029,1cyclictest795-21snmpd21:37:353
28888993029,1cyclictest795-21snmpd21:00:263
28888993029,1cyclictest795-21snmpd20:43:213
28888993029,1cyclictest795-21snmpd00:07:243
28888993028,2cyclictest795-21snmpd22:55:283
28888993028,2cyclictest795-21snmpd21:20:363
28887993029,1cyclictest795-21snmpd21:38:352
28886993029,1cyclictest795-21snmpd21:06:311
28886993029,1cyclictest795-21snmpd20:19:021
28886993029,1cyclictest795-21snmpd19:44:251
28886993029,1cyclictest795-21snmpd00:39:051
28886993028,2cyclictest795-21snmpd22:33:531
28886993028,2cyclictest795-21snmpd22:33:521
28886993028,1cyclictest795-21snmpd19:20:161
28886993027,2cyclictest795-21snmpd23:50:451
28886993027,2cyclictest795-21snmpd20:55:071
28885993029,1cyclictest795-21snmpd23:52:330
28885993029,1cyclictest795-21snmpd23:40:030
28885993029,1cyclictest795-21snmpd22:17:070
28885993029,1cyclictest795-21snmpd20:11:180
28885993029,1cyclictest795-21snmpd19:16:070
28885993029,1cyclictest795-21snmpd00:00:450
28885993028,2cyclictest795-21snmpd22:56:490
28885993028,2cyclictest795-21snmpd21:57:550
28885993028,1cyclictest795-21snmpd19:36:160
28885993027,2cyclictest795-21snmpd19:58:380
28888992928,1cyclictest795-21snmpd22:24:533
28888992928,1cyclictest795-21snmpd22:08:213
28887992929,0cyclictest795-21snmpd19:27:592
28887992928,1cyclictest795-21snmpd23:06:232
28887992928,1cyclictest795-21snmpd20:37:092
28887992928,1cyclictest795-21snmpd20:26:242
28887992928,1cyclictest795-21snmpd00:20:252
28887992928,1cyclictest795-21snmpd00:10:042
28887992928,1cyclictest795-21snmpd00:02:002
28886992928,1cyclictest795-21snmpd21:18:491
28886992928,1cyclictest795-21snmpd20:03:541
28886992928,1cyclictest795-21snmpd19:28:141
28885992929,0cyclictest30984-21kworker/u16:1+atlantic23:15:160
28885992928,1cyclictest795-21snmpd21:14:520
28885992928,1cyclictest795-21snmpd19:46:040
28885992927,2cyclictest5914-21cat00:25:170
28888992828,0cyclictest13062-21kworker/3:2+events23:32:233
28887992827,1cyclictest795-21snmpd20:34:132
28887992827,1cyclictest795-21snmpd20:24:452
28887992826,2cyclictest29034-21cat21:40:162
28886992827,1cyclictest795-21snmpd23:41:481
28886992827,1cyclictest795-21snmpd23:19:471
28886992827,1cyclictest795-21snmpd00:14:191
28885992827,1cyclictest795-21snmpd19:11:160
28885992826,2cyclictest795-21snmpd21:30:080
28885992825,2cyclictest795-21snmpd22:11:270
28888992726,1cyclictest795-21snmpd00:21:083
28887992726,1cyclictest795-21snmpd19:41:432
28885992727,0cyclictest73850irq/131-enp1s022:31:080
28885992727,0cyclictest73850irq/131-enp1s022:31:070
28885992726,1cyclictest795-21snmpd22:28:200
28885992726,1cyclictest795-21snmpd22:01:480
28885992726,1cyclictest795-21snmpd20:59:070
28885992725,2cyclictest795-21snmpd20:49:330
28885992725,2cyclictest27697-21cat20:20:160
28888992626,0cyclictest20645-21kworker/3:3+events22:35:283
28887992626,0cyclictest795-21snmpd23:11:452
28887992625,1cyclictest795-21snmpd22:01:362
28887992625,1cyclictest22311-21cat22:40:182
28886992625,1cyclictest795-21snmpd23:37:211
28886992623,2cyclictest795-21snmpd20:27:541
28888992523,2cyclictest795-21snmpd23:58:513
28887992525,0cyclictest795-21snmpd19:14:302
28887992524,1cyclictest795-21snmpd21:34:122
28886992524,1cyclictest795-21snmpd22:25:531
28886992524,1cyclictest795-21snmpd19:55:561
28886992523,2cyclictest795-21snmpd21:58:251
28885992524,1cyclictest795-21snmpd21:21:590
28885992524,1cyclictest795-21snmpd21:15:410
28885992524,1cyclictest795-21snmpd00:17:290
28885992424,0cyclictest795-21snmpd22:43:440
28885992423,1cyclictest795-21snmpd00:35:410
28885992422,2cyclictest795-21snmpd22:22:240
28888992323,0cyclictest73850irq/131-enp1s023:40:373
28888992322,1cyclictest795-21snmpd22:27:163
28886992320,2cyclictest795-21snmpd20:48:091
28885992321,2cyclictest795-21snmpd21:02:520
28886992221,1cyclictest795-21snmpd23:23:091
28886992118,2cyclictest795-21snmpd19:49:321
28885992121,0cyclictest73950irq/132-enp1s023:12:560
28885992118,2cyclictest795-21snmpd00:11:580
28885992019,1cyclictest795-21snmpd21:29:300
28887991919,0cyclictest795-21snmpd19:20:312
28886991919,0cyclictest74150irq/134-enp1s000:00:241
28885991918,1cyclictest795-21snmpd00:32:520
28887991817,1cyclictest795-21snmpd19:50:232
28887991816,2cyclictest795-21snmpd00:19:102
28885991817,1cyclictest795-21snmpd21:05:430
28886991513,2cyclictest795-21snmpd23:31:321
28887991412,2cyclictest2823-21cat21:55:142
28885991311,2cyclictest795-21snmpd20:35:480
28886991210,2cyclictest16292-21cat21:10:161
28888991010,0cyclictest13963-21kworker/3:0+events20:20:123
288879998,1cyclictest25169-21kworker/2:0+events_freezable_pwr_efficient20:44:262
288879997,2cyclictest804-21ntpd20:08:142
288869965,1cyclictest325112sleep121:50:101
288869965,1cyclictest32419-21sed21:50:011
288869965,1cyclictest31141-21sensors_temp19:15:001
288869965,1cyclictest311202sleep100:08:461
288859965,1cyclictest6545-21ls19:30:160
288859965,1cyclictest15731-21taskset19:50:310
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional