You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-05 - 00:44

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Apr 04, 2026 12:43:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
326459910752,23cyclictest0-21swapper/019:25:450
32645991039,54cyclictest908-21runrttasks21:10:490
32645999350,9cyclictest16485-21taskset17:15:490
218522880,2sleep30-21swapper/318:42:033
168202870,6sleep33265199cyclictest21:11:033
32645998243,4cyclictest0-21swapper/019:20:500
320302800,3sleep032031-21ssh19:31:320
320302800,3sleep032031-21ssh19:31:320
3264599781,36cyclictest0-21swapper/017:25:490
32645997513,12cyclictest0-21swapper/021:15:500
3264599736,45cyclictest0-21swapper/019:05:500
197992720,2sleep20-21swapper/220:35:552
3264599701,41cyclictest0-21swapper/021:55:510
3265099685,12cyclictest0-21swapper/219:25:402
3264599667,40cyclictest0-21swapper/017:00:510
3264599664,13cyclictest9275-21runrttasks16:55:500
32645996620,43cyclictest101ktimersoftd/019:40:500
3264599651,48cyclictest30347-21unixbench_multi17:51:050
3264599651,48cyclictest0-21swapper/020:35:390
3265099642,48cyclictest7850irq/56-dwc_otg_16:55:382
3264599649,6cyclictest23913-21munin-run18:45:370
3265099633,3cyclictest7950irq/56-dwc_otg_20:21:012
32651996235,23cyclictest7950irq/56-dwc_otg_21:00:513
3265099621,11cyclictest14535-21grep19:11:072
3264599622,33cyclictest26734-21unixbench_multi17:41:060
3264599622,33cyclictest26734-21unixbench_multi17:41:060
32645996220,5cyclictest0-21swapper/020:10:490
113132620,1sleep20-21swapper/218:30:392
3265099612,8cyclictest25455-21unixbench_singl21:21:062
3265099612,8cyclictest25455-21unixbench_singl21:21:062
3264999614,14cyclictest28415-21ssh21:25:501
3264599616,27cyclictest0-21swapper/021:20:500
3264599616,27cyclictest0-21swapper/021:20:500
32645996114,29cyclictest4580-21fschecks_count21:35:560
3265099605,4cyclictest7850irq/56-dwc_otg_16:45:522
3265099602,7cyclictest7850irq/56-dwc_otg_21:35:512
3265099601,4cyclictest20932-21grep18:41:032
3265099601,18cyclictest0-21swapper/217:27:052
3264599608,32cyclictest28934-21unixbench_multi20:46:070
32645996036,5cyclictest7850irq/56-dwc_otg_17:45:510
3264599601,29cyclictest527950ssh19:00:590
3265099597,5cyclictest7950irq/56-dwc_otg_18:08:332
3265099591,13cyclictest4785-21grep20:56:052
32645995934,19cyclictest0-21swapper/017:30:510
3265099583,6cyclictest7950irq/56-dwc_otg_21:56:052
3265099583,4cyclictest0-21swapper/221:40:512
3265099581,4cyclictest7850irq/56-dwc_otg_21:15:522
3265099581,4cyclictest7750irq/56-dwc_otg19:19:222
3265099581,3cyclictest0-21swapper/221:45:542
3264599581,6cyclictest25577-21systemd-journal21:05:380
3265099575,7cyclictest7850irq/56-dwc_otg_21:00:582
3265099571,5cyclictest7850irq/56-dwc_otg_18:46:072
3265099571,3cyclictest0-21swapper/221:31:032
32645995723,6cyclictest0-21swapper/021:45:380
3265099569,4cyclictest0-21swapper/220:07:272
3265099563,11cyclictest0-21swapper/217:00:492
3265099562,4cyclictest0-21swapper/220:00:572
32650995616,4cyclictest23703-21aten_rbpower_cu17:35:522
3265099561,5cyclictest10463-21/usr/sbin/munin19:45:482
3265099561,17cyclictest15472-21ls20:30:522
3265099561,12cyclictest7750irq/56-dwc_otg19:41:012
32645995635,5cyclictest7950irq/56-dwc_otg_18:36:000
303672560,2sleep30-21swapper/321:27:183
3265099553,10cyclictest13655-21rm20:28:182
3265099552,6cyclictest13620-21ps17:06:032
3265099551,11cyclictest0-21swapper/220:10:552
3265099551,10cyclictest7850irq/56-dwc_otg_21:10:292
32645995534,5cyclictest7850irq/56-dwc_otg_18:15:540
32645995526,7cyclictest2314-21aten_rbpower_vo18:05:520
3264599552,31cyclictest0-21swapper/016:31:040
32645995519,20cyclictest1360-21unixbench_singl21:31:050
3265099546,4cyclictest0-21swapper/220:53:212
3265099545,5cyclictest7850irq/56-dwc_otg_19:08:232
3265099542,4cyclictest7750irq/56-dwc_otg19:58:092
3265099542,3cyclictest7750irq/56-dwc_otg17:10:572
3265099542,3cyclictest7750irq/56-dwc_otg17:10:572
3265099541,4cyclictest7950irq/56-dwc_otg_18:01:002
3264599543,31cyclictest0-21swapper/017:35:520
3264599542,33cyclictest0-21swapper/018:25:550
3264599541,30cyclictest0-21swapper/017:05:490
3264599541,27cyclictest26816-21latency_hist20:05:390
3264599541,25cyclictest0-21swapper/020:15:510
3265099536,4cyclictest0-21swapper/219:00:142
3265099532,4cyclictest30289-21taskset17:51:052
3265099531,5cyclictest31326-21ssh20:50:222
3265099531,4cyclictest6703-21ssh19:02:192
3265099531,4cyclictest31233-21ssh19:30:582
3265099531,4cyclictest31233-21ssh19:30:582
3265099531,3cyclictest0-21swapper/218:51:562
3265099531,14cyclictest0-21swapper/219:24:502
3264599534,21cyclictest0-21swapper/019:55:480
3264599533,4cyclictest0-21swapper/019:50:480
3264599532,28cyclictest0-21swapper/019:10:520
3264599531,4cyclictest23868-21grep20:40:540
32645995310,23cyclictest3976-21aten_rbpower_vo16:40:530
3265099527,7cyclictest7950irq/56-dwc_otg_16:55:502
3265099525,8cyclictest7950irq/56-dwc_otg_18:33:042
3265099521,3cyclictest7850irq/56-dwc_otg_20:20:382
3264999521,38cyclictest0-21swapper/118:45:511
32649995210,34cyclictest23-21ksoftirqd/120:50:481
32645995223,16cyclictest24250-21/usr/sbin/munin18:46:040
3264599522,30cyclictest908-21runrttasks20:56:290
3264599521,26cyclictest12057-21ssh20:26:030
3264599521,21cyclictest0-21swapper/020:21:080
3265099515,4cyclictest7950irq/56-dwc_otg_21:55:382
3265099514,9cyclictest7950irq/56-dwc_otg_21:25:562
3265099511,5cyclictest7950irq/56-dwc_otg_18:22:272
3265099511,4cyclictest0-21swapper/219:51:562
3264599512,26cyclictest0-21swapper/017:11:030
3264599512,26cyclictest0-21swapper/017:11:030
3264599511,29cyclictest1504-21unixbench_multi18:01:060
3265099501,5cyclictest0-21swapper/221:13:562
32650995010,7cyclictest23867-21fschecks_time20:40:542
3264599503,29cyclictest0-21swapper/017:55:510
3265099498,3cyclictest7750irq/56-dwc_otg17:40:492
3265099498,3cyclictest7750irq/56-dwc_otg17:40:492
3265099494,4cyclictest7850irq/56-dwc_otg_19:36:012
3265099491,5cyclictest0-21swapper/217:56:022
32650994913,5cyclictest4162-21fschecks_time16:40:562
3264599491,33cyclictest0-21swapper/020:35:580
3264599491,24cyclictest30249-21sh20:09:380
3265199481,27cyclictest376-21ssh18:55:523
3265099482,16cyclictest0-21swapper/216:34:522
3264599482,25cyclictest0-21swapper/018:56:030
32645994819,14cyclictest17629-21aten_rbpower_en19:15:520
3264599481,18cyclictest0-21swapper/016:46:030
3265199477,25cyclictest0-21swapper/316:50:513
3265199477,24cyclictest0-21swapper/317:50:513
3265099473,4cyclictest917-21snmpd17:24:262
3265099471,2cyclictest0-21swapper/218:35:502
3264599476,19cyclictest0-21swapper/018:30:520
3264599474,30cyclictest0-21swapper/019:50:380
32645994727,5cyclictest0-21swapper/018:55:320
3264599471,26cyclictest0-21swapper/021:50:500
3264999467,25cyclictest0-21swapper/118:10:521
3264999463,14cyclictest0-21swapper/121:05:501
32649994623,19cyclictest7950irq/56-dwc_otg_21:20:501
32649994623,19cyclictest7950irq/56-dwc_otg_21:20:501
3264599469,24cyclictest3442-21head19:36:060
3264599462,26cyclictest0-21swapper/021:49:360
3264599461,27cyclictest19033-21proc_pri17:21:030
3264599461,26cyclictest28296-21gdbus21:25:390
321452463,14sleep00-21swapper/016:27:390
3264999457,24cyclictest0-21swapper/118:05:511
3264599456,22cyclictest0-21swapper/020:54:090
3264599452,20cyclictest0-21swapper/018:20:580
3265199447,23cyclictest0-21swapper/318:10:523
3265199442,7cyclictest7950irq/56-dwc_otg_18:00:513
32651994416,5cyclictest26716-21sh21:23:213
32651994416,5cyclictest26716-21sh21:23:213
3265099446,4cyclictest7950irq/56-dwc_otg_18:15:512
3264999447,23cyclictest0-21swapper/116:50:511
32649994410,11cyclictest0-21swapper/121:45:511
32645994412,22cyclictest0-21swapper/016:38:500
32645994323,5cyclictest7850irq/56-dwc_otg_16:51:030
32645994320,7cyclictest7850irq/56-dwc_otg_21:10:380
3264599431,21cyclictest0-21swapper/018:11:070
3265199427,23cyclictest0-21swapper/317:05:523
3265199427,17cyclictest3539-21ssh20:55:503
32651994216,9cyclictest7950irq/56-dwc_otg_19:07:553
3265199421,5cyclictest7950irq/56-dwc_otg_19:00:513
3264999427,23cyclictest0-21swapper/117:50:511
312272427,20sleep10-21swapper/116:25:581
89442410,5sleep13264999cyclictest19:05:481
3264999417,23cyclictest0-21swapper/119:10:441
32649994123,6cyclictest11437-21fschecks_count20:25:551
32649994121,4cyclictest908-21runrttasks20:46:001
3265199406,21cyclictest19672-21awk18:40:383
3265199401,18cyclictest7850irq/56-dwc_otg_17:15:523
3265199401,17cyclictest7950irq/56-dwc_otg_19:40:543
3264999403,7cyclictest6357-21ssh19:40:511
3265199398,22cyclictest0-21swapper/319:10:523
3265199397,19cyclictest37-21rcuc/320:20:493
3265199394,12cyclictest0-21swapper/320:15:523
3265199391,23cyclictest0-21swapper/318:20:443
32651993911,14cyclictest7850irq/56-dwc_otg_21:52:443
3264999397,4cyclictest7850irq/56-dwc_otg_20:10:551
32649993927,8cyclictest221ktimersoftd/119:50:491
310462396,20sleep20-21swapper/216:25:552
3265199385,19cyclictest30466-21ssh19:30:493
3265199385,19cyclictest30466-21ssh19:30:493
3265199385,17cyclictest39-21ksoftirqd/319:24:243
32651993821,4cyclictest7950irq/56-dwc_otg_20:00:543
32651993820,5cyclictest7950irq/56-dwc_otg_19:29:523
32651993814,5cyclictest23814-21fschecks_count20:40:533
3264999382,4cyclictest0-21swapper/120:05:501
3264999381,7cyclictest25577-21systemd-journal17:03:211
3265199378,15cyclictest7950irq/56-dwc_otg_20:05:553
3265199378,13cyclictest7950irq/56-dwc_otg_18:46:003
3265199377,18cyclictest37-21rcuc/317:26:373
32651993715,11cyclictest381ktimersoftd/317:10:503
32651993715,11cyclictest381ktimersoftd/317:10:503
32651993712,6cyclictest381ktimersoftd/320:35:493
3264999377,16cyclictest0-21swapper/119:30:491
3264999377,16cyclictest0-21swapper/119:30:491
3264999375,23cyclictest0-21swapper/117:35:491
3264999371,28cyclictest7950irq/56-dwc_otg_18:55:501
234592370,2sleep30-21swapper/321:19:573
3265199369,13cyclictest381ktimersoftd/320:50:153
3265199365,13cyclictest7950irq/56-dwc_otg_21:55:593
3265199365,13cyclictest7850irq/56-dwc_otg_17:00:513
3265199363,27cyclictest0-21swapper/317:40:433
3265199363,27cyclictest0-21swapper/317:40:433
3265199362,20cyclictest9773-21uniq18:25:543
3265199362,17cyclictest7950irq/56-dwc_otg_20:55:383
3265199361,20cyclictest5915-21fschecks_count16:45:553
3265199361,20cyclictest37-21rcuc/319:55:113
3264999364,5cyclictest0-21swapper/118:38:291
32649993617,4cyclictest20353-21sh19:18:391
32649993616,10cyclictest908-21runrttasks17:40:431
32649993616,10cyclictest908-21runrttasks17:40:431
3264999361,26cyclictest0-21swapper/116:36:421
32649993611,4cyclictest26279-21aten_rbpower_en19:25:531
3265199357,13cyclictest7750irq/56-dwc_otg18:54:333
3265199354,14cyclictest39-21ksoftirqd/319:18:243
32651993514,9cyclictest7950irq/56-dwc_otg_20:12:133
3265199351,16cyclictest7950irq/56-dwc_otg_18:30:573
32651993510,9cyclictest7950irq/56-dwc_otg_21:35:423
32651993510,14cyclictest0-21swapper/321:45:533
32651993510,11cyclictest0-21swapper/319:56:063
3264999355,7cyclictest7750irq/56-dwc_otg20:56:051
32649993529,4cyclictest11578-21aten_rbpower_vo18:30:521
3264999352,22cyclictest14350-21ls19:50:381
3264999352,15cyclictest7750irq/56-dwc_otg19:36:051
3265199348,13cyclictest7950irq/56-dwc_otg_21:35:383
3265199345,19cyclictest15301-21ssh20:30:513
32651993410,8cyclictest14283-21idleruntime-cro19:50:383
3264999347,15cyclictest0-21swapper/117:21:011
3264999346,6cyclictest7850irq/56-dwc_otg_20:31:001
3264999346,16cyclictest7950irq/56-dwc_otg_16:41:031
3264999345,7cyclictest7850irq/56-dwc_otg_21:50:551
3264999345,20cyclictest7028-21ssh20:20:521
3264999345,17cyclictest23-21ksoftirqd/121:35:531
32649993426,6cyclictest23-21ksoftirqd/120:36:201
32649993414,5cyclictest3311-21/usr/sbin/munin20:15:581
3264999341,20cyclictest23996-21ls20:01:051
3264999341,14cyclictest12177-21ssh21:45:361
3265199337,16cyclictest0-21swapper/320:25:523
3265199336,11cyclictest7950irq/56-dwc_otg_16:42:343
3265199335,19cyclictest11797-21ssh21:05:513
3264999336,15cyclictest0-21swapper/117:45:511
3264999335,6cyclictest0-21swapper/119:59:181
32649993313,5cyclictest18042-21latency_hist17:20:381
89122320,2sleep1221ktimersoftd/118:21:121
3265199329,6cyclictest7850irq/56-dwc_otg_16:36:033
3265199327,15cyclictest0-21swapper/316:55:513
3265199323,3cyclictest7750irq/56-dwc_otg16:30:493
3265199322,24cyclictest7950irq/56-dwc_otg_17:35:513
3265199322,13cyclictest39-21ksoftirqd/321:40:493
32651993213,7cyclictest7850irq/56-dwc_otg_17:55:533
3264999327,6cyclictest7750irq/56-dwc_otg19:00:591
3264999327,22cyclictest0-21swapper/117:05:521
3264999324,4cyclictest7750irq/56-dwc_otg17:55:481
3264999321,5cyclictest7750irq/56-dwc_otg21:11:001
32649993215,7cyclictest31914-21ssh18:54:431
32651993110,4cyclictest0-21swapper/318:15:543
3265099313,5cyclictest3196-21sed16:36:072
3264999315,7cyclictest25765-21apt-get19:25:381
3264999315,6cyclictest7750irq/56-dwc_otg21:15:551
3264999314,11cyclictest0-21swapper/117:26:061
3264999312,5cyclictest7850irq/56-dwc_otg_16:56:041
32649993122,7cyclictest8294-21cat21:00:591
3264999311,4cyclictest7950irq/56-dwc_otg_21:55:481
3264999311,23cyclictest469-21grep16:30:551
3264999311,11cyclictest9543-21wget18:25:501
3265199308,4cyclictest0-21swapper/319:35:523
3265099305,12cyclictest7950irq/56-dwc_otg_17:16:012
3265099301,18cyclictest27743-21cut17:45:552
3264999306,15cyclictest0-21swapper/120:40:501
3264999304,8cyclictest7750irq/56-dwc_otg18:40:481
3264999301,4cyclictest7750irq/56-dwc_otg18:16:021
32649993011,4cyclictest23-21ksoftirqd/117:11:031
32649993011,4cyclictest23-21ksoftirqd/117:11:031
3265199295,10cyclictest7850irq/56-dwc_otg_18:06:063
3265199291,7cyclictest0-21swapper/317:32:133
3265099292,4cyclictest0-21swapper/218:10:532
3264999293,8cyclictest7850irq/56-dwc_otg_17:31:051
3264999292,18cyclictest0-21swapper/121:34:101
3264999292,17cyclictest7850irq/56-dwc_otg_16:46:021
3265199287,8cyclictest39-21ksoftirqd/317:47:423
3265199281,21cyclictest0-21swapper/317:21:513
32649992822,4cyclictest23-21ksoftirqd/118:00:501
322942281,20sleep30-21swapper/316:29:373
3265099271,5cyclictest0-21swapper/217:30:492
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional