You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-24 - 23:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack7slot3s.osadl.org (updated Wed Jun 24, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
248722840,2sleep10-21swapper/108:00:221
32362820,3sleep10-21swapper/108:30:211
270232820,2sleep00-21swapper/011:15:050
236592800,2sleep30-21swapper/311:48:423
194502780,3sleep119444-21ssh11:05:281
265232760,2sleep326526-21latency_hist12:30:083
189732750,4sleep0653799cyclictest07:45:070
6537997315,36cyclictest0-21swapper/007:10:350
6537997150,14cyclictest727-21runrttasks12:30:210
6539997018,4cyclictest12986-21fschecks_count10:20:242
160202700,1sleep10-21swapper/109:05:221
653799691,45cyclictest17530-21sed11:40:360
303322690,2sleep0653799cyclictest08:15:220
6537996737,16cyclictest18324-21cat09:10:260
653799671,52cyclictest20101-21sed11:05:360
264832670,2sleep30-21swapper/311:14:073
6540996610,14cyclictest7850irq/56-dwc_otg12:35:183
118982660,4sleep123-21ksoftirqd/110:56:021
653999655,12cyclictest0-21swapper/212:10:182
6539996318,36cyclictest27632-21sh11:15:232
6539996318,36cyclictest27632-21sh11:15:232
653999631,13cyclictest7850irq/56-dwc_otg07:35:072
653799631,48cyclictest19165-21sh09:50:070
303912630,1sleep10-21swapper/112:34:371
653999623,4cyclictest7950irq/56-dwc_otg_11:50:232
6537996245,5cyclictest7850irq/56-dwc_otg09:20:370
6537996242,10cyclictest101ktimersoftd/011:20:350
6537996235,9cyclictest101ktimersoftd/011:50:140
653799618,38cyclictest0-21swapper/011:25:260
6537996123,21cyclictest22096-21timerwakeupswit07:50:330
6537996117,26cyclictest13-21rcuc/012:15:300
6537996033,16cyclictest20662-21ssh11:45:210
653999592,12cyclictest0-21swapper/211:26:332
653799591,42cyclictest11586-21grep10:55:340
653999584,13cyclictest8050irq/56-dwc_otg_09:26:212
653999583,3cyclictest8050irq/56-dwc_otg_09:40:292
653999582,3cyclictest7950irq/56-dwc_otg_10:00:302
653999581,6cyclictest13866-21aten_rbpower_cu12:15:202
6537995833,13cyclictest0-21swapper/010:40:280
653799581,36cyclictest9693-1kworker/0:0H09:55:080
653999579,5cyclictest7850irq/56-dwc_otg12:05:082
653999574,5cyclictest0-21swapper/211:00:312
653999571,6cyclictest10595-21cron09:40:072
653999571,4cyclictest0-21swapper/210:25:302
653999571,14cyclictest0-21swapper/208:55:202
6539995710,4cyclictest0-21swapper/209:57:062
653799571,43cyclictest22504-21unixbench-2d10:30:360
653799571,43cyclictest22504-21unixbench-2d10:30:360
248372570,2sleep30-21swapper/310:34:263
248372570,2sleep30-21swapper/310:34:263
653999563,8cyclictest7850irq/56-dwc_otg09:20:412
653999563,5cyclictest16512-21unixbench_singl09:45:362
653999563,10cyclictest30709-21ps10:40:322
653999562,6cyclictest10636-21fschecks_count10:55:222
653999562,5cyclictest7950irq/56-dwc_otg_07:35:272
653999562,5cyclictest30246-21wget08:15:222
653999562,3cyclictest0-21swapper/211:55:352
653999561,5cyclictest27552-21ntp_states12:30:312
653999561,5cyclictest18311-21ls12:20:222
653999561,4cyclictest19496-21apt-get09:50:212
653999561,3cyclictest7850irq/56-dwc_otg08:05:232
653999561,10cyclictest0-21swapper/211:21:122
653899567,14cyclictest0-21swapper/110:50:211
653899567,14cyclictest0-21swapper/110:50:211
653799566,37cyclictest13-21rcuc/008:24:180
6537995635,7cyclictest7950irq/56-dwc_otg_11:55:220
6537995631,7cyclictest3788-21munin-plugin-st10:10:070
6537995631,5cyclictest7850irq/56-dwc_otg08:35:080
6537995620,29cyclictest0-21swapper/007:15:240
6537995620,29cyclictest0-21swapper/007:15:240
653799561,37cyclictest11750-21latency_hist07:25:070
263462560,3sleep0101ktimersoftd/008:05:080
653999554,9cyclictest8050irq/56-dwc_otg_10:45:192
653999553,3cyclictest7950irq/56-dwc_otg_07:55:302
653999553,3cyclictest7850irq/56-dwc_otg12:35:352
6539995519,4cyclictest10362-21sh10:16:442
653999551,5cyclictest18073-21/usr/sbin/munin09:10:242
653999551,12cyclictest8050irq/56-dwc_otg_11:35:362
653799553,37cyclictest0-21swapper/011:31:300
653799552,41cyclictest0-21swapper/010:50:170
653799552,41cyclictest0-21swapper/010:50:170
6537995520,18cyclictest9-21ksoftirqd/007:45:350
6537995516,20cyclictest0-21swapper/010:00:180
6537995515,16cyclictest22562-21cpu12:25:210
653999549,4cyclictest0-21swapper/210:51:192
653999549,4cyclictest0-21swapper/210:51:192
653999548,4cyclictest11247-21grep07:20:342
653999546,5cyclictest22973-21taskset10:31:122
653999546,5cyclictest22973-21taskset10:31:122
653999541,6cyclictest2535-21ssh09:30:222
653999541,3cyclictest7850irq/56-dwc_otg09:15:252
653999541,3cyclictest7850irq/56-dwc_otg09:15:252
6537995427,13cyclictest6779-21latency_hist08:40:080
653799541,39cyclictest0-21swapper/009:25:190
653999535,4cyclictest0-21swapper/211:32:192
653999531,8cyclictest8050irq/56-dwc_otg_08:45:182
653999531,8cyclictest8050irq/56-dwc_otg_08:45:182
653999531,5cyclictest8050irq/56-dwc_otg_12:05:322
653999531,5cyclictest32579-21ls08:20:282
6537995327,15cyclictest101ktimersoftd/008:10:240
653799531,6cyclictest727-21runrttasks10:15:470
653799531,40cyclictest0-21swapper/010:35:260
653799531,36cyclictest17799-21ntpq10:25:300
653999521,6cyclictest18082-21grep07:40:312
653799529,25cyclictest12881-21ssh11:35:330
653799526,41cyclictest0-21swapper/007:35:210
6537995229,3cyclictest0-21swapper/010:20:240
6537995224,4cyclictest0-21swapper/007:25:180
653799522,38cyclictest0-21swapper/009:44:570
653799521,36cyclictest32266-21grep12:35:340
653799521,36cyclictest0-21swapper/011:16:140
653799521,36cyclictest0-21swapper/011:16:140
653799521,35cyclictest0-21swapper/010:10:360
653999515,5cyclictest31-21ksoftirqd/211:40:312
653999511,5cyclictest22414-21ssh11:09:272
653999511,4cyclictest0-21swapper/207:19:142
653999511,4cyclictest0-21swapper/207:19:142
6537995131,11cyclictest17443-21ssh09:10:070
653799512,39cyclictest0-21swapper/008:25:380
653799512,37cyclictest0-21swapper/007:58:090
6537995116,11cyclictest0-21swapper/009:30:180
6537995114,22cyclictest727-21runrttasks10:48:320
653999501,4cyclictest0-21swapper/210:36:182
653799503,35cyclictest0-21swapper/009:15:180
653799503,35cyclictest0-21swapper/009:15:180
653799503,33cyclictest9-21ksoftirqd/012:10:260
6537995031,10cyclictest9-21ksoftirqd/012:25:070
653799502,39cyclictest0-21swapper/009:55:350
653799502,33cyclictest5665-21fschecks_time12:05:260
653999495,9cyclictest8050irq/56-dwc_otg_08:10:322
653999495,4cyclictest7850irq/56-dwc_otg11:50:082
653999491,9cyclictest0-21swapper/208:30:072
653999491,4cyclictest0-21swapper/210:08:212
653899497,25cyclictest0-21swapper/108:35:121
6537994927,14cyclictest101ktimersoftd/009:00:190
653799492,37cyclictest0-21swapper/008:06:560
653799491,37cyclictest0-21swapper/012:00:390
653999483,3cyclictest7850irq/56-dwc_otg10:11:342
653899482,21cyclictest0-21swapper/108:45:181
653899482,21cyclictest0-21swapper/108:45:181
6537994831,4cyclictest0-21swapper/008:45:080
6537994827,13cyclictest14535-21ps07:30:310
653799482,32cyclictest0-21swapper/009:37:200
653799481,33cyclictest0-21swapper/011:00:240
653999472,14cyclictest0-21swapper/209:09:222
653999471,6cyclictest5030-21apt-get08:35:222
653899477,25cyclictest0-21swapper/108:10:211
653899477,25cyclictest0-21swapper/107:50:141
653899477,25cyclictest0-21swapper/107:40:221
6538994720,6cyclictest5533-21sh12:05:231
6537994735,5cyclictest7850irq/56-dwc_otg08:45:250
6537994735,5cyclictest7850irq/56-dwc_otg08:45:250
653799471,38cyclictest0-21swapper/008:50:180
654099467,25cyclictest0-21swapper/311:50:133
653899469,22cyclictest0-21swapper/109:45:211
61752463,34sleep00-21swapper/007:08:570
654099459,15cyclictest27434-21ls09:20:363
654099457,24cyclictest0-21swapper/307:50:133
653899457,26cyclictest0-21swapper/110:30:221
653899457,26cyclictest0-21swapper/110:30:221
653899457,23cyclictest0-21swapper/109:00:191
654099447,23cyclictest0-21swapper/312:30:133
654099442,18cyclictest17485-21aten_rbpower_po07:40:223
6540994417,4cyclictest8050irq/56-dwc_otg_10:00:233
653899446,11cyclictest8050irq/56-dwc_otg_10:00:181
6538994417,18cyclictest18185-21aten_rbpower_en12:20:211
653799441,30cyclictest0-21swapper/009:00:040
6540994321,4cyclictest8050irq/56-dwc_otg_09:26:113
6538994323,5cyclictest29078-21seq11:16:141
6538994323,5cyclictest29078-21seq11:16:141
6540994213,13cyclictest7850irq/56-dwc_otg11:35:263
653999416,32cyclictest23508-21cut11:10:242
653899417,24cyclictest0-21swapper/111:50:181
6538994119,20cyclictest10962-21ssh09:40:201
654099407,23cyclictest0-21swapper/309:45:213
653999407,20cyclictest0-21swapper/207:25:202
312482400,1sleep30-21swapper/311:56:513
84342390,4sleep3654099cyclictest08:45:083
654099396,22cyclictest23773-21ssh09:55:203
654099392,5cyclictest8050irq/56-dwc_otg_07:35:213
6540993916,12cyclictest29855-21apt-get10:40:183
6539993910,13cyclictest8050irq/56-dwc_otg_12:30:082
6538993918,4cyclictest5583-21sh10:50:041
6538993916,5cyclictest29142-1kworker/u9:112:35:351
6538993914,5cyclictest3798-21idleruntime-cro10:10:071
653899391,13cyclictest14880-21grep07:30:341
98112380,1sleep30-21swapper/310:54:593
98112380,1sleep30-21swapper/310:54:593
654099386,22cyclictest0-21swapper/312:20:203
6540993822,4cyclictest8050irq/56-dwc_otg_10:05:453
6540993816,5cyclictest31295-21unixbench_singl08:15:353
6540993815,8cyclictest8050irq/56-dwc_otg_09:40:223
6540993814,7cyclictest7950irq/56-dwc_otg_09:10:253
654099381,15cyclictest27396-21apt-get11:15:193
654099381,15cyclictest27396-21apt-get11:15:193
6538993816,5cyclictest32627-21sh10:43:071
6538993815,5cyclictest20583-21taskset11:45:191
653899381,28cyclictest3889-21ssh11:25:241
653899381,27cyclictest22441-21ls09:15:261
653899381,27cyclictest22441-21ls09:15:261
104402380,5sleep1653899cyclictest10:16:521
654099377,24cyclictest0-21swapper/312:00:213
654099377,15cyclictest7950irq/56-dwc_otg_12:15:073
6540993720,6cyclictest7850irq/56-dwc_otg11:23:543
6540993719,4cyclictest8050irq/56-dwc_otg_10:45:533
653899373,5cyclictest14891-21ssh10:22:101
653899372,10cyclictest0-21swapper/108:05:211
6538993717,5cyclictest13930-21aten_rbpower_vo12:15:201
6538993717,4cyclictest4801-21sed10:10:281
6538993717,4cyclictest21-21rcuc/110:25:291
6538993717,11cyclictest17702-21ssh09:10:131
6540993616,8cyclictest8050irq/56-dwc_otg_09:31:333
654099361,4cyclictest0-21swapper/311:25:193
6540993614,8cyclictest381ktimersoftd/310:23:213
6540993613,10cyclictest8050irq/56-dwc_otg_09:00:303
6540993611,4cyclictest8050irq/56-dwc_otg_12:05:253
6540993610,10cyclictest8050irq/56-dwc_otg_09:17:453
6540993610,10cyclictest8050irq/56-dwc_otg_09:17:453
6539993626,6cyclictest301ktimersoftd/208:40:202
6539993619,5cyclictest21915-21rt-features07:50:312
653899366,25cyclictest8050irq/56-dwc_otg_09:35:201
653899365,21cyclictest7785-21ssh11:30:201
653899362,4cyclictest23-21ksoftirqd/111:20:351
6538993618,5cyclictest23-21ksoftirqd/109:20:241
6538993612,5cyclictest23-21ksoftirqd/111:15:081
162322360,3sleep339-21ksoftirqd/311:01:073
654099357,15cyclictest0-21swapper/310:55:133
654099356,17cyclictest0-21swapper/310:15:203
654099356,16cyclictest0-21swapper/310:39:453
6540993520,3cyclictest8050irq/56-dwc_otg_11:44:193
6540993517,4cyclictest7850irq/56-dwc_otg12:16:583
6540993512,12cyclictest381ktimersoftd/310:11:213
654099351,12cyclictest8050irq/56-dwc_otg_09:36:353
653899356,8cyclictest9650irq/80-mmc011:40:081
653899355,6cyclictest8050irq/56-dwc_otg_11:00:241
653899352,3cyclictest7850irq/56-dwc_otg11:40:311
6538993518,10cyclictest19882-21ntp_kernel_pll_07:45:281
6538993512,10cyclictest0-21swapper/111:59:001
6540993416,8cyclictest8050irq/56-dwc_otg_10:28:333
6540993413,6cyclictest0-21swapper/308:55:203
6540993412,6cyclictest15934-21cut09:05:223
6539993416,9cyclictest4805-21cat08:35:082
653899348,7cyclictest26874-21ssh10:35:361
653899341,3cyclictest0-21swapper/109:33:271
6538993413,4cyclictest221ktimersoftd/109:57:201
6538993410,6cyclictest125-21systemd-journal08:23:251
6538993410,5cyclictest11578-21grep08:50:351
54482345,18sleep35526-21/usr/sbin/munin07:05:323
6540993316,7cyclictest7850irq/56-dwc_otg08:10:243
6540993316,10cyclictest7950irq/56-dwc_otg_09:54:183
6540993311,11cyclictest10156-21chrt08:49:393
6540993311,11cyclictest10156-21chrt08:49:393
6540993311,10cyclictest0-21swapper/311:31:253
6539993314,5cyclictest662350wget07:10:212
653899338,15cyclictest0-21swapper/108:55:191
653899336,24cyclictest0-21swapper/107:35:211
6538993315,9cyclictest221ktimersoftd/108:15:361
6538993312,5cyclictest22801-21cat12:25:251
654099328,15cyclictest9550irq/48-DMA15:26:473
654099323,4cyclictest8050irq/56-dwc_otg_08:35:373
654099323,11cyclictest7950irq/56-dwc_otg_11:05:363
654099321,5cyclictest8050irq/56-dwc_otg_08:26:393
653999324,15cyclictest0-21swapper/208:50:182
653999324,14cyclictest7950irq/56-dwc_otg_09:00:232
653899329,10cyclictest20262-21ntp_kernel_pll_09:50:301
653899329,10cyclictest0-21swapper/112:13:461
653899326,7cyclictest0-21swapper/109:25:301
6538993215,5cyclictest9949-21latency_hist07:20:081
6538993215,5cyclictest9949-21latency_hist07:20:081
654099311,19cyclictest8196-21ls07:15:083
6540993110,8cyclictest8050irq/56-dwc_otg_07:56:423
654099310,15cyclictest0-21swapper/308:30:263
653899315,10cyclictest0-21swapper/112:00:231
653899313,9cyclictest7950irq/56-dwc_otg_07:25:301
653899311,3cyclictest7850irq/56-dwc_otg07:10:251
60152313,20sleep10-21swapper/107:06:591
654099296,14cyclictest0-21swapper/307:30:203
654099295,5cyclictest381ktimersoftd/307:20:283
654099294,6cyclictest7850irq/56-dwc_otg08:50:203
654099291,11cyclictest7850irq/56-dwc_otg07:25:343
653899291,7cyclictest7850irq/56-dwc_otg08:30:071
653899291,3cyclictest7950irq/56-dwc_otg_07:55:171
654099285,10cyclictest8050irq/56-dwc_otg_08:05:163
654099281,6cyclictest0-21swapper/307:15:173
654099281,6cyclictest0-21swapper/307:15:173
653999284,4cyclictest8050irq/56-dwc_otg_07:45:242
653999282,19cyclictest0-21swapper/208:04:282
653899287,4cyclictest8050irq/56-dwc_otg_08:43:301
654099277,17cyclictest0-21swapper/308:00:213
654099272,22cyclictest0-21swapper/308:20:243
653899278,6cyclictest21-21rcuc/107:20:201
619422710,11sleep20-21swapper/207:09:112
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional