You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-18 - 08:51

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Thu Dec 18, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
11452319312,5sleep20-21swapper/219:07:062
12842318305,4sleep10-21swapper/119:08:531
10792318311,4sleep30-21swapper/319:06:143
11312316303,5sleep00-21swapper/019:06:560
1637993140,313cyclictest32694-21kworker/u16:3+efi_rts_wq00:31:370
1639993130,312cyclictest32694-21kworker/u16:3+efi_rts_wq00:16:352
1638993130,312cyclictest1287-21kworker/u16:3+efi_rts_wq22:24:221
1637993130,312cyclictest15383-21kworker/u16:1+efi_rts_wq22:50:120
1640993120,311cyclictest32694-21kworker/u16:3+efi_rts_wq23:15:143
1640993120,311cyclictest1287-21kworker/u16:3+efi_rts_wq21:45:123
1640993110,310cyclictest1287-21kworker/u16:3+efi_rts_wq20:35:143
1639993110,310cyclictest15383-21kworker/u16:1+efi_rts_wq22:45:132
1637993090,308cyclictest10856-21kworker/u16:0+efi_rts_wq23:25:120
1640993080,307cyclictest15383-21kworker/u16:1+efi_rts_wq22:30:133
1640993070,306cyclictest1287-21kworker/u16:3+efi_rts_wq21:15:123
1640993030,302cyclictest6506-21kworker/u16:2+efi_rts_wq21:10:123
1640993030,302cyclictest6506-21kworker/u16:2+efi_rts_wq21:10:123
1640993030,302cyclictest1287-21kworker/u16:3+efi_rts_wq21:35:133
1640993030,301cyclictest32694-21kworker/u16:3+efi_rts_wq23:45:123
1639993020,301cyclictest1287-21kworker/u16:3+efi_rts_wq20:35:142
1638993020,301cyclictest32694-21kworker/u16:3+efi_rts_wq22:54:271
1637993020,301cyclictest15383-21kworker/u16:1+efi_rts_wq22:30:120
1638993010,300cyclictest1287-21kworker/u16:3+efi_rts_wq20:20:131
1638993000,299cyclictest10856-21kworker/u16:0+efi_rts_wq23:56:301
1640992980,297cyclictest1287-21kworker/u16:3+efi_rts_wq21:55:113
1639992980,297cyclictest32694-21kworker/u16:3+efi_rts_wq23:45:142
1639992980,297cyclictest1287-21kworker/u16:3+efi_rts_wq21:05:152
1639992970,296cyclictest15383-21kworker/u16:1+efi_rts_wq22:39:242
1637992970,296cyclictest6506-21kworker/u16:2+efi_rts_wq21:00:130
1640992960,295cyclictest15383-21kworker/u16:1+efi_rts_wq21:34:133
1638992950,294cyclictest32694-21kworker/u16:3+efi_rts_wq00:15:141
1638992950,294cyclictest10856-21kworker/u16:0+efi_rts_wq23:20:151
1639992940,293cyclictest1287-21kworker/u16:3+efi_rts_wq22:40:132
1638992930,292cyclictest1287-21kworker/u16:3+efi_rts_wq20:15:141
1638992920,291cyclictest32694-21kworker/u16:3+efi_rts_wq23:50:111
1637992920,291cyclictest6506-21kworker/u16:2+efi_rts_wq20:45:120
1640992910,290cyclictest1287-21kworker/u16:3+efi_rts_wq22:04:193
1639992900,289cyclictest32694-21kworker/u16:3+efi_rts_wq00:00:132
1639992900,288cyclictest25368-21kworker/u16:2+efi_rts_wq23:05:132
1638992900,289cyclictest6506-21kworker/u16:2+efi_rts_wq19:43:501
1640992870,286cyclictest1287-21kworker/u16:3+efi_rts_wq21:54:173
1639992870,286cyclictest1287-21kworker/u16:3+efi_rts_wq20:15:132
1638992860,285cyclictest1287-21kworker/u16:3+efi_rts_wq20:40:131
1638992850,284cyclictest1287-21kworker/u16:3+efi_rts_wq19:15:011
1639992840,283cyclictest32694-21kworker/u16:3+efi_rts_wq23:40:112
1640992830,282cyclictest32694-21kworker/u16:3+efi_rts_wq23:55:123
1640992820,281cyclictest1287-21kworker/u16:3+efi_rts_wq20:29:003
1640992820,281cyclictest10856-21kworker/u16:0+efi_rts_wq23:35:143
1638992820,281cyclictest1287-21kworker/u16:3+efi_rts_wq19:28:481
1637992810,280cyclictest1287-21kworker/u16:3+efi_rts_wq21:55:110
1640992780,277cyclictest25368-21kworker/u16:2+efi_rts_wq22:55:123
1640992770,276cyclictest32694-21kworker/u16:3+efi_rts_wq00:30:133
1639992760,275cyclictest32694-21kworker/u16:3+efi_rts_wq00:35:142
1640992750,274cyclictest1287-21kworker/u16:3+efi_rts_wq22:05:133
1639992750,273cyclictest15383-21kworker/u16:1+efi_rts_wq22:50:132
1638992740,273cyclictest10856-21kworker/u16:0+efi_rts_wq00:21:351
1640992730,272cyclictest10856-21kworker/u16:0+efi_rts_wq00:05:143
1639992730,272cyclictest6506-21kworker/u16:2+efi_rts_wq19:55:112
1639992730,272cyclictest1287-21kworker/u16:3+efi_rts_wq20:25:132
1639992730,272cyclictest1287-21kworker/u16:3+efi_rts_wq19:40:132
1639992720,271cyclictest32694-21kworker/u16:3+efi_rts_wq23:04:292
1640992690,268cyclictest15383-21kworker/u16:1+efi_rts_wq21:40:133
1638992690,268cyclictest1287-21kworker/u16:3+efi_rts_wq20:05:141
1639992670,266cyclictest32694-21kworker/u16:3+efi_rts_wq00:20:122
1639992660,265cyclictest1287-21kworker/u16:3+efi_rts_wq20:40:132
1639992650,264cyclictest6506-21kworker/u16:2+efi_rts_wq19:10:092
1638992620,261cyclictest6506-21kworker/u16:2+efi_rts_wq19:10:091
1640992610,260cyclictest1287-21kworker/u16:3+efi_rts_wq19:50:133
1639992610,260cyclictest10856-21kworker/u16:0+efi_rts_wq00:10:122
1637992610,260cyclictest6506-21kworker/u16:2+efi_rts_wq21:25:120
1639992600,259cyclictest25368-21kworker/u16:2+efi_rts_wq23:14:312
1639992580,257cyclictest1287-21kworker/u16:3+efi_rts_wq19:35:132
1639992570,256cyclictest1287-21kworker/u16:3+efi_rts_wq21:20:132
1640992560,255cyclictest32694-21kworker/u16:3+efi_rts_wq23:00:133
1638992560,255cyclictest6506-21kworker/u16:2+efi_rts_wq20:03:541
1638992550,254cyclictest1287-21kworker/u16:3+efi_rts_wq20:55:131
1638992550,254cyclictest1287-21kworker/u16:3+efi_rts_wq19:20:131
1639992530,252cyclictest6506-21kworker/u16:2+efi_rts_wq19:30:132
1638992520,251cyclictest6506-21kworker/u16:2+efi_rts_wq21:24:101
1638992510,250cyclictest1287-21kworker/u16:3+efi_rts_wq19:35:131
1639992500,249cyclictest15383-21kworker/u16:1+efi_rts_wq21:59:172
1638992500,249cyclictest1287-21kworker/u16:3+efi_rts_wq19:50:131
1639992490,248cyclictest10856-21kworker/u16:0+efi_rts_wq23:25:122
1637992490,248cyclictest1287-21kworker/u16:3+efi_rts_wq20:05:150
1640992480,247cyclictest1287-21kworker/u16:3+efi_rts_wq20:54:043
1638992470,246cyclictest6506-21kworker/u16:2+efi_rts_wq20:39:021
1639992440,243cyclictest10856-21kworker/u16:0+efi_rts_wq00:26:372
1640992400,239cyclictest15383-21kworker/u16:1+efi_rts_wq22:35:133
1640992400,239cyclictest10856-21kworker/u16:0+efi_rts_wq23:51:303
1637992400,239cyclictest1287-21kworker/u16:3+efi_rts_wq22:25:140
1639992380,237cyclictest15383-21kworker/u16:1+efi_rts_wq21:39:132
1639992380,237cyclictest1287-21kworker/u16:3+efi_rts_wq22:05:132
1637992360,235cyclictest10856-21kworker/u16:0+efi_rts_wq00:25:130
1638992350,234cyclictest1287-21kworker/u16:3+efi_rts_wq22:00:121
1639992330,232cyclictest10856-21kworker/u16:0+efi_rts_wq23:30:132
1638992330,232cyclictest10856-21kworker/u16:0+efi_rts_wq00:25:131
1637992330,232cyclictest32694-21kworker/u16:3+efi_rts_wq23:15:150
1638992320,231cyclictest10856-21kworker/u16:0+efi_rts_wq23:34:351
1637992320,231cyclictest10856-21kworker/u16:0+efi_rts_wq23:30:130
1637992300,229cyclictest6506-21kworker/u16:2+efi_rts_wq20:59:050
1640992290,228cyclictest6506-21kworker/u16:2+efi_rts_wq19:25:133
1639992290,228cyclictest6506-21kworker/u16:2+efi_rts_wq19:45:132
1640992270,226cyclictest25368-21kworker/u16:2+efi_rts_wq23:09:303
1637992260,225cyclictest10856-21kworker/u16:0+efi_rts_wq00:05:140
1639992230,222cyclictest1287-21kworker/u16:3+efi_rts_wq21:29:112
1640992210,220cyclictest32694-21kworker/u16:3+efi_rts_wq00:15:153
1639992200,219cyclictest6506-21kworker/u16:2+efi_rts_wq20:00:132
1639992190,218cyclictest6506-21kworker/u16:2+efi_rts_wq20:30:122
1639992190,218cyclictest6506-21kworker/u16:2+efi_rts_wq20:10:112
1637992180,217cyclictest1287-21kworker/u16:3+efi_rts_wq20:34:000
1639992170,216cyclictest15383-21kworker/u16:1+efi_rts_wq22:19:212
1638992170,216cyclictest15383-21kworker/u16:1+efi_rts_wq22:14:201
1638992170,216cyclictest15383-21kworker/u16:1+efi_rts_wq21:50:111
1640992130,212cyclictest1287-21kworker/u16:3+efi_rts_wq22:15:123
1640992100,208cyclictest32694-21kworker/u16:3+efi_rts_wq23:40:113
1640992100,207cyclictest15383-21kworker/u16:1+efi_rts_wq22:10:133
1638992100,209cyclictest1287-21kworker/u16:3+efi_rts_wq21:19:091
1638992080,207cyclictest15383-21kworker/u16:1+efi_rts_wq21:40:121
1640992070,206cyclictest25368-21kworker/u16:2+efi_rts_wq23:10:103
1640992070,206cyclictest10856-21kworker/u16:0+efi_rts_wq00:10:133
1640991980,197cyclictest6506-21kworker/u16:2+efi_rts_wq19:15:133
1637991900,189cyclictest1287-21kworker/u16:3+efi_rts_wq20:50:120
1638991880,187cyclictest1287-21kworker/u16:3+efi_rts_wq21:49:151
1638991870,186cyclictest15383-21kworker/u16:1+efi_rts_wq22:29:221
1637991870,186cyclictest32694-21kworker/u16:3+efi_rts_wq00:00:130
1637991860,185cyclictest1287-21kworker/u16:3+efi_rts_wq19:18:470
1637991840,183cyclictest15383-21kworker/u16:1+efi_rts_wq22:09:190
1640991820,181cyclictest1287-21kworker/u16:3+efi_rts_wq20:49:033
1639991820,181cyclictest1287-21kworker/u16:3+efi_rts_wq19:23:472
1637991800,178cyclictest25368-21kworker/u16:2+efi_rts_wq22:55:130
1640991770,176cyclictest6506-21kworker/u16:2+efi_rts_wq19:48:513
1640991750,174cyclictest1287-21kworker/u16:3+efi_rts_wq20:18:573
1638991710,170cyclictest6506-21kworker/u16:2+efi_rts_wq20:13:561
1637991710,170cyclictest32694-21kworker/u16:3+efi_rts_wq23:10:100
1638991690,168cyclictest10856-21kworker/u16:0+efi_rts_wq00:36:381
1638991690,168cyclictest10856-21kworker/u16:0+efi_rts_wq00:01:321
1637991690,168cyclictest15383-21kworker/u16:1+efi_rts_wq21:44:140
1640991650,164cyclictest1287-21kworker/u16:3+efi_rts_wq21:09:073
1637991630,162cyclictest32694-21kworker/u16:3+efi_rts_wq00:20:120
1638991580,157cyclictest32694-21kworker/u16:3+efi_rts_wq23:15:151
1637991580,156cyclictest25368-21kworker/u16:2+efi_rts_wq23:05:140
1640991540,153cyclictest1287-21kworker/u16:3+efi_rts_wq19:38:493
1640991520,151cyclictest1287-21kworker/u16:3+efi_rts_wq19:20:133
1640991500,150cyclictest25368-21kworker/u16:2+efi_rts_wq22:44:263
1640991490,148cyclictest1287-21kworker/u16:3+efi_rts_wq21:04:063
1640991470,146cyclictest6506-21kworker/u16:2+efi_rts_wq20:23:593
1637991470,146cyclictest32694-21kworker/u16:3+efi_rts_wq23:24:330
1639991410,140cyclictest1287-21kworker/u16:3+efi_rts_wq21:30:132
1639991350,134cyclictest1287-21kworker/u16:3+efi_rts_wq20:55:132
1640991340,134cyclictest6506-21kworker/u16:2+efi_rts_wq20:08:553
1637991330,132cyclictest1287-21kworker/u16:3+efi_rts_wq21:14:080
1637991330,132cyclictest1287-21kworker/u16:3+efi_rts_wq21:14:080
1638991290,128cyclictest1287-21kworker/u16:3+efi_rts_wq19:33:491
1638991280,127cyclictest32694-21kworker/u16:3+efi_rts_wq00:30:131
1640991270,126cyclictest1287-21kworker/u16:3+efi_rts_wq19:40:133
1637991210,120cyclictest1287-21kworker/u16:3+efi_rts_wq21:05:140
1637991190,118cyclictest1287-21kworker/u16:3+efi_rts_wq19:58:540
1639991150,114cyclictest1287-21kworker/u16:3+efi_rts_wq19:15:012
1637991130,112cyclictest1287-21kworker/u16:3+efi_rts_wq20:20:130
217262620,0sleep10-21swapper/119:55:131
1640993329,3cyclictest818-21snmpd23:25:233
1640993229,2cyclictest818-21snmpd20:43:283
1639993230,2cyclictest818-21snmpd23:24:382
1639993229,2cyclictest818-21snmpd22:28:102
1637993229,2cyclictest818-21snmpd21:18:470
1640993130,1cyclictest818-21snmpd22:27:553
1639993129,2cyclictest818-21snmpd19:54:392
1639993128,2cyclictest818-21snmpd21:46:242
1638993130,1cyclictest818-21snmpd22:58:591
1638993129,2cyclictest818-21snmpd23:29:481
1638993129,2cyclictest818-21snmpd00:11:071
1637993130,1cyclictest818-21snmpd19:34:470
1637993129,2cyclictest7053-21cat19:20:150
1637993128,2cyclictest818-21snmpd20:03:390
1640993029,1cyclictest818-21snmpd23:23:383
1640993029,1cyclictest818-21snmpd20:32:463
1640993029,1cyclictest818-21snmpd20:13:543
1640993029,1cyclictest818-21snmpd20:04:243
1640993028,2cyclictest818-21snmpd00:38:373
1639993029,1cyclictest818-21snmpd23:39:422
1639993029,1cyclictest818-21snmpd21:42:522
1639993029,1cyclictest818-21snmpd21:17:172
1639993029,1cyclictest818-21snmpd20:48:412
1639993029,1cyclictest818-21snmpd20:06:062
1639993028,2cyclictest818-21snmpd21:11:572
1639993028,2cyclictest818-21snmpd21:11:562
1638993029,1cyclictest818-21snmpd23:00:051
1638993029,1cyclictest818-21snmpd22:46:261
1638993029,1cyclictest818-21snmpd22:35:281
1638993029,1cyclictest818-21snmpd22:09:251
1638993029,1cyclictest818-21snmpd21:08:201
1638993028,2cyclictest28780-21cat21:30:141
1638993028,2cyclictest17701-21cat19:45:141
1638993027,2cyclictest818-21snmpd21:26:381
1638993027,2cyclictest818-21snmpd00:07:151
1637993029,1cyclictest818-21snmpd23:48:240
1637993029,1cyclictest818-21snmpd22:02:000
1637993029,1cyclictest818-21snmpd19:12:170
1637993029,1cyclictest31615-21kworker/0:2+events22:40:340
1637993029,1cyclictest19536-21kworker/0:1+events22:37:030
1637993029,1cyclictest13027-21kworker/0:1+events23:37:060
1637993028,2cyclictest818-21snmpd23:02:320
1637993028,2cyclictest818-21snmpd22:21:100
1637993028,2cyclictest818-21snmpd00:35:400
1637993027,2cyclictest818-21snmpd19:54:210
1640992928,1cyclictest818-21snmpd19:31:423
1640992928,1cyclictest818-21snmpd00:24:463
1639992929,0cyclictest818-21snmpd22:59:112
1639992928,1cyclictest818-21snmpd23:18:352
1639992928,1cyclictest818-21snmpd00:33:192
1639992928,1cyclictest818-21snmpd00:08:162
1639992926,2cyclictest818-21snmpd21:52:282
1638992928,1cyclictest818-21snmpd23:48:071
1638992927,2cyclictest21930-21cat22:30:141
1637992928,1cyclictest818-21snmpd21:20:110
1637992928,1cyclictest818-21snmpd19:39:150
1637992927,2cyclictest818-21snmpd22:45:240
1640992827,1cyclictest818-21snmpd23:33:003
1640992827,1cyclictest818-21snmpd19:57:513
1640992827,1cyclictest818-21snmpd00:25:203
1638992828,0cyclictest818-21snmpd23:08:231
1638992827,1cyclictest818-21snmpd21:00:501
1638992827,1cyclictest818-21snmpd20:46:051
1637992828,0cyclictest818-21snmpd21:36:090
1637992828,0cyclictest31615-21kworker/0:2+events20:11:510
1637992828,0cyclictest22388-21kworker/0:2+events23:41:460
1637992826,2cyclictest818-21snmpd20:43:520
1637992826,2cyclictest818-21snmpd19:41:020
1640992726,1cyclictest818-21snmpd22:48:143
1640992725,2cyclictest818-21snmpd20:56:293
1640992724,2cyclictest818-21snmpd21:29:023
1639992726,1cyclictest818-21snmpd23:56:342
1639992725,2cyclictest818-21snmpd22:20:252
1638992726,1cyclictest818-21snmpd23:40:451
1637992726,1cyclictest818-21snmpd23:59:480
1637992726,1cyclictest818-21snmpd20:39:370
1637992725,2cyclictest818-21snmpd00:15:460
1640992624,2cyclictest818-21snmpd00:02:003
1639992625,1cyclictest818-21snmpd22:30:282
1639992625,1cyclictest818-21snmpd21:01:412
1639992624,2cyclictest818-21snmpd20:50:192
1639992623,2cyclictest818-21snmpd20:24:402
1638992623,2cyclictest818-21snmpd21:40:001
1637992626,0cyclictest3388-21kworker/0:0+events20:27:150
1637992625,1cyclictest818-21snmpd23:54:420
1637992623,2cyclictest30109-21cat20:15:160
1637992525,0cyclictest31615-21kworker/0:2+events19:45:200
1637992524,1cyclictest818-21snmpd19:29:180
1640992422,2cyclictest818-21snmpd22:52:323
1638992423,1cyclictest818-21snmpd22:15:581
1637992423,1cyclictest818-21snmpd22:18:230
1639992322,1cyclictest818-21snmpd19:29:532
1638992322,1cyclictest818-21snmpd23:12:291
1639992220,2cyclictest818-21snmpd23:53:212
1639992219,2cyclictest818-21snmpd22:04:122
1637992222,0cyclictest31615-21kworker/0:2+events21:45:200
1637992221,1cyclictest31615-21kworker/0:2+events22:10:240
1637992221,1cyclictest19536-21kworker/0:1+events21:31:120
1639992120,1cyclictest818-21snmpd22:10:132
1637992120,1cyclictest31615-21kworker/0:2+events21:52:040
1637992120,1cyclictest15399-21kworker/0:0+events00:10:520
1640992018,2cyclictest818-21snmpd22:20:533
1640992018,2cyclictest818-21snmpd19:10:123
1638991918,1cyclictest818-21snmpd21:10:381
1638991918,1cyclictest818-21snmpd21:10:381
1638991817,1cyclictest818-21snmpd22:42:341
1638991817,1cyclictest818-21snmpd20:25:231
1638991816,2cyclictest818-21snmpd23:39:491
1640991716,1cyclictest818-21snmpd21:22:503
1638991413,1cyclictest825-21lldpd20:32:161
1638991110,1cyclictest818-21snmpd21:56:121
16389965,1cyclictest11837-21expr20:50:121
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional