You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-30 - 14:42

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Tue Jun 30, 2026 12:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3042124770,6sleep229-21rcuc/207:05:392
1229821020,3sleep229-21rcuc/211:48:572
3119699883,65cyclictest0-21swapper/011:05:210
31196998224,29cyclictest0-21swapper/012:25:240
70742810,2sleep20-21swapper/207:30:372
91492790,3sleep10-21swapper/112:24:071
39252760,2sleep13924-21ssh12:17:191
39252760,2sleep13924-21ssh12:17:191
3119799743,54cyclictest26803-21apt-get09:30:201
3119699743,31cyclictest4682-21kworker/u8:411:45:230
3119699742,27cyclictest0-21swapper/007:10:210
78982730,5sleep33119999cyclictest11:04:583
78982730,5sleep33119999cyclictest11:04:583
31196997117,28cyclictest10009-21fschecks_time07:40:280
3119699693,51cyclictest0-21swapper/008:10:190
204002680,1sleep10-21swapper/109:21:381
3119899674,38cyclictest4234-21chrt11:00:222
3119899674,38cyclictest4234-21chrt11:00:222
3119699676,43cyclictest19179-21ssh11:56:240
3119699676,39cyclictest20444-21cron11:20:100
3119699673,50cyclictest0-21swapper/011:14:360
31196996713,51cyclictest101ktimersoftd/009:25:100
31197996623,6cyclictest7850irq/56-dwc_otg09:50:231
3119799661,47cyclictest22627-21ssh09:25:171
3119699667,48cyclictest14214-21grep07:50:370
3119699665,49cyclictest2930-21head12:15:370
3119699665,49cyclictest2930-21head12:15:370
3119799651,50cyclictest5289-21ls07:25:371
3119799641,44cyclictest14498-21grep07:50:391
3119699647,41cyclictest1906-21ssh09:39:250
3119799631,42cyclictest8050irq/56-dwc_otg_10:35:351
3119699634,35cyclictest0-21swapper/008:35:220
3119699634,35cyclictest0-21swapper/008:35:220
3119699633,49cyclictest5310-21grep11:00:390
3119699633,49cyclictest5310-21grep11:00:390
3119699631,47cyclictest4988-21ntp_kernel_pll_07:25:330
3119799629,40cyclictest21670-21ls08:10:351
3119799621,49cyclictest2529-21aten_rbpower_cu07:20:241
3119799621,49cyclictest11572-21ssh11:09:061
3119699628,51cyclictest0-21swapper/012:35:240
3119699628,51cyclictest0-21swapper/012:35:240
3119699624,47cyclictest7758-21rm12:21:340
31196996239,16cyclictest101ktimersoftd/010:55:220
31196996238,10cyclictest0-21swapper/010:35:270
3119799617,43cyclictest8050irq/56-dwc_otg_12:35:341
3119799617,43cyclictest8050irq/56-dwc_otg_12:35:341
3119799612,47cyclictest2303-21ssh10:18:511
3119799612,47cyclictest2303-21ssh10:18:511
31197996112,6cyclictest8050irq/56-dwc_otg_08:30:211
3119699613,46cyclictest0-21swapper/007:55:230
3119699613,39cyclictest0-21swapper/011:20:300
3119799607,38cyclictest23007-21ssh10:05:081
3119799604,38cyclictest719-21latency_hist08:45:101
3119799603,45cyclictest28444-21ssh12:08:001
3119799602,39cyclictest0-21swapper/110:47:231
3119799602,39cyclictest0-21swapper/110:47:231
3119799601,6cyclictest14092-21ssh11:11:091
3119799601,50cyclictest0-21swapper/107:45:291
3119699608,44cyclictest30224-21ssh10:13:120
3119699603,48cyclictest25805-21ntp_states11:25:340
3119699602,42cyclictest0-21swapper/009:10:330
3119799593,37cyclictest25687-21latency_hist12:05:111
3119799592,37cyclictest0-21swapper/111:28:511
3119799591,5cyclictest15242-21cut09:55:271
3119799591,46cyclictest13292-21sh09:13:541
3119799591,39cyclictest7850irq/56-dwc_otg08:25:281
3119799590,49cyclictest7850irq/56-dwc_otg09:05:231
71132580,6sleep23119899cyclictest10:24:592
3119799584,44cyclictest8050irq/56-dwc_otg_11:20:151
3119799584,36cyclictest9768-21diskmemload10:30:211
31197995816,39cyclictest15674-21if_wlan007:55:291
3119799581,46cyclictest14868-21ssh11:51:061
3119799581,44cyclictest0-21swapper/110:57:501
3119799581,36cyclictest0-21swapper/111:35:291
3119799581,33cyclictest18235-21ntp_states11:55:351
3119699584,19cyclictest24419-21cut10:45:290
3119699584,19cyclictest24419-21cut10:45:290
31196995822,20cyclictest0-21swapper/010:21:310
31196995810,46cyclictest101ktimersoftd/008:00:380
31199995714,6cyclictest8050irq/56-dwc_otg_12:05:213
3119799578,37cyclictest8050irq/56-dwc_otg_09:45:111
3119799575,36cyclictest23-21ksoftirqd/111:45:261
3119799574,36cyclictest7850irq/56-dwc_otg12:10:161
3119799572,44cyclictest0-21swapper/111:42:511
3119799572,38cyclictest0-21swapper/108:45:261
3119799571,6cyclictest12013-21rm12:26:471
3119799571,41cyclictest7850irq/56-dwc_otg10:10:291
31196995737,8cyclictest0-21swapper/012:10:220
3119699572,38cyclictest8323-21ntp_kernel_pll_10:25:340
31196995714,23cyclictest14972-21latency_hist09:55:110
3119699571,41cyclictest32002-21sh10:55:020
3119699571,29cyclictest1194-21cut11:35:270
3119799568,41cyclictest321-21taskset09:36:341
3119799561,44cyclictest23102-21ssh10:43:551
3119699568,35cyclictest5341-21fschecks_count11:40:280
3119699566,43cyclictest23475-21rm09:25:330
31196995615,21cyclictest14471-21/usr/sbin/munin09:15:250
31196995615,21cyclictest14471-21/usr/sbin/munin09:15:250
3119699561,35cyclictest0-21swapper/007:24:090
3119799553,39cyclictest0-21swapper/108:51:151
3119799551,5cyclictest27184-21munin-run10:10:101
3119799551,3cyclictest8050irq/56-dwc_otg_08:20:341
31196995538,4cyclictest101ktimersoftd/009:30:240
31196995537,8cyclictest0-21swapper/009:45:260
31196995535,4cyclictest13941-21missed_timers11:50:320
3119699552,37cyclictest0-21swapper/008:45:270
31196995510,31cyclictest25269-21ssh12:04:460
3119799543,39cyclictest8050irq/56-dwc_otg_09:17:061
3119799543,39cyclictest8050irq/56-dwc_otg_09:17:061
3119799541,4cyclictest17597-21ls08:00:301
3119799541,40cyclictest7387-21latency09:45:301
3119799541,3cyclictest8050irq/56-dwc_otg_08:05:341
3119799541,37cyclictest5209-21ssh10:21:351
3119699548,25cyclictest0-21swapper/009:00:230
3119699546,44cyclictest101ktimersoftd/008:30:100
3119699546,32cyclictest11558-21aten_rbpower_cu07:45:240
3119699545,41cyclictest0-21swapper/011:30:270
3119699542,37cyclictest0-21swapper/008:17:260
3119699541,38cyclictest0-21swapper/009:05:390
3119699541,29cyclictest2971-21fschecks_count09:40:280
3119799533,41cyclictest9922-21sh10:27:331
3119799533,39cyclictest0-21swapper/111:00:401
3119799533,39cyclictest0-21swapper/111:00:401
3119799532,36cyclictest9768-21diskmemload11:17:251
3119799531,41cyclictest31189-21runrttasks08:39:261
3119799531,41cyclictest31189-21runrttasks08:39:261
3119799531,39cyclictest30862-21ssh11:31:221
3119799531,30cyclictest0-21swapper/110:53:001
31196995335,8cyclictest23025-21cron10:05:100
3119699533,33cyclictest0-21swapper/010:19:070
3119699533,33cyclictest0-21swapper/010:19:070
31196995330,14cyclictest727-21runrttasks08:45:050
31196995311,21cyclictest727-21runrttasks12:30:250
3119799521,4cyclictest7850irq/56-dwc_otg08:55:281
31196995238,4cyclictest101ktimersoftd/009:56:190
31196995223,20cyclictest0-21swapper/010:30:240
3119699521,37cyclictest4482-21cat08:55:110
3119699521,34cyclictest0-21swapper/010:40:210
3119699520,41cyclictest25758-21ssh10:07:360
3119799512,45cyclictest750-21snmpd07:18:581
3119799511,39cyclictest0-21swapper/112:30:191
3119699511,37cyclictest0-21swapper/007:30:170
3119699511,36cyclictest8009-21tr07:35:240
3119799501,4cyclictest9786-21aten_rbpower_en07:40:251
3119799501,45cyclictest8050irq/56-dwc_otg_07:15:101
3119799491,45cyclictest6502-21wget09:00:241
3119799491,45cyclictest0-21swapper/107:30:241
3119699497,24cyclictest0-21swapper/007:15:160
3119699492,37cyclictest0-21swapper/012:05:360
3119999483,20cyclictest1076-21df_inode08:45:253
3119799482,43cyclictest0-21swapper/108:15:281
3119699482,34cyclictest0-21swapper/008:56:390
3119699481,37cyclictest0-21swapper/008:30:280
3119999477,25cyclictest0-21swapper/308:50:163
3119999476,25cyclictest0-21swapper/312:20:243
3119999473,6cyclictest8050irq/56-dwc_otg_12:00:223
3119799472,42cyclictest9015-21unixbench_multi07:35:391
3119999464,21cyclictest8050irq/56-dwc_otg_11:48:283
31199994622,11cyclictest8050irq/56-dwc_otg_12:10:253
3119999461,5cyclictest0-21swapper/308:35:223
3119999461,5cyclictest0-21swapper/308:35:223
3119899467,24cyclictest0-21swapper/208:50:242
3119899466,8cyclictest21671-21ssh12:00:212
31196994627,3cyclictest0-21swapper/008:20:210
306972463,35sleep00-21swapper/007:07:120
3119999457,24cyclictest0-21swapper/308:20:243
3119999456,31cyclictest8050irq/56-dwc_otg_09:50:233
3119999447,23cyclictest0-21swapper/310:00:233
3119999447,23cyclictest0-21swapper/309:55:263
3119999447,18cyclictest8050irq/56-dwc_otg_10:35:333
31199994410,19cyclictest8050irq/56-dwc_otg_11:23:203
3119999437,22cyclictest0-21swapper/308:55:253
3119999437,17cyclictest11749-21taskset07:45:273
3119999433,12cyclictest14345-21timerwakeupswit07:50:383
3119899439,18cyclictest0-21swapper/207:10:232
3119899436,14cyclictest7950irq/56-dwc_otg_09:15:232
3119899436,14cyclictest7950irq/56-dwc_otg_09:15:232
31198994318,9cyclictest11415-21unixbench_singl09:10:392
31196994316,5cyclictest18912-21wget08:05:250
299462435,25sleep330039-21/usr/sbin/munin07:05:333
3119999428,16cyclictest0-21swapper/307:30:243
3119999427,21cyclictest0-21swapper/311:40:243
3119999425,23cyclictest18989-21ssh12:35:313
3119999425,23cyclictest18989-21ssh12:35:313
3119999424,17cyclictest23707-21ls09:25:363
31199994223,8cyclictest8050irq/56-dwc_otg_10:55:253
31199994221,8cyclictest8050irq/56-dwc_otg_09:05:413
31199994218,13cyclictest11565-21ssh11:09:053
3119999418,4cyclictest7950irq/56-dwc_otg_10:50:213
3119999417,22cyclictest0-21swapper/312:15:223
3119999417,22cyclictest0-21swapper/312:15:223
3119999417,22cyclictest0-21swapper/307:15:163
3119999417,20cyclictest0-21swapper/307:35:243
31199994127,7cyclictest7850irq/56-dwc_otg10:26:163
31199994116,7cyclictest7850irq/56-dwc_otg12:30:143
3119999411,22cyclictest8050irq/56-dwc_otg_09:20:283
31199994111,6cyclictest381ktimersoftd/307:25:343
3119899416,23cyclictest0-21swapper/207:15:172
31199994031,6cyclictest381ktimersoftd/310:05:213
31199994024,8cyclictest7850irq/56-dwc_otg11:31:193
3119999402,13cyclictest20466-21munin-run11:20:103
3119899407,25cyclictest0-21swapper/209:25:232
3119899407,23cyclictest0-21swapper/207:20:242
3119899405,18cyclictest0-21swapper/210:25:222
31199993919,10cyclictest7950irq/56-dwc_otg_09:19:153
31199993919,10cyclictest7950irq/56-dwc_otg_09:19:153
31199993917,8cyclictest8050irq/56-dwc_otg_09:14:143
31199993917,12cyclictest7950irq/56-dwc_otg_10:18:483
31199993917,12cyclictest7950irq/56-dwc_otg_10:18:483
31199993915,15cyclictest7950irq/56-dwc_otg_11:39:403
31199993912,7cyclictest8050irq/56-dwc_otg_11:59:323
3119999383,5cyclictest27746-21awk10:10:263
3119999383,10cyclictest39-21ksoftirqd/311:14:563
31199993816,9cyclictest8050irq/56-dwc_otg_10:30:183
31199993814,6cyclictest7850irq/56-dwc_otg08:05:123
31199993813,4cyclictest7850irq/56-dwc_otg09:48:153
31199993812,16cyclictest21576-21seq10:41:083
3119899386,6cyclictest8364-21ssh11:05:222
3119899383,6cyclictest8050irq/56-dwc_otg_11:40:232
31198993813,4cyclictest0-21swapper/211:34:472
3119899381,25cyclictest8157-21cut07:35:272
3119999377,23cyclictest0-21swapper/308:00:233
3119999377,23cyclictest0-21swapper/307:40:243
3119999376,15cyclictest26294-21sh08:25:253
3119999375,11cyclictest16437-21ssh11:53:593
3119999374,15cyclictest8050irq/56-dwc_otg_11:30:103
31199993715,10cyclictest31254-21wget07:10:243
3119999371,22cyclictest0-21swapper/307:55:163
3119899376,7cyclictest7950irq/56-dwc_otg_10:10:402
3119899372,24cyclictest0-21swapper/207:40:242
3119899371,24cyclictest13532-21ls07:50:262
3119899371,19cyclictest0-21swapper/210:15:252
3119899371,19cyclictest0-21swapper/210:15:252
31199993624,4cyclictest8050irq/56-dwc_otg_09:39:263
31199993619,7cyclictest8050irq/56-dwc_otg_07:20:223
31199993614,12cyclictest23740-21runrttasks08:16:483
31199993611,9cyclictest6443-21ssh09:45:083
3119899369,4cyclictest0-21swapper/211:27:332
3119899366,19cyclictest2686-21ssh09:40:242
3119899362,9cyclictest31260-21grep12:10:392
31198993613,5cyclictest31281-21idleruntime-cro08:40:112
31198993613,5cyclictest31281-21idleruntime-cro08:40:112
3119899361,15cyclictest11210-21ssh12:25:392
31199993516,12cyclictest8050irq/56-dwc_otg_10:47:043
31199993516,12cyclictest8050irq/56-dwc_otg_10:47:043
31199993515,7cyclictest8050irq/56-dwc_otg_12:27:303
31199993510,15cyclictest381ktimersoftd/310:21:373
3119899358,11cyclictest7850irq/56-dwc_otg12:35:242
3119899358,11cyclictest7850irq/56-dwc_otg12:35:242
3119899357,19cyclictest16488-21ssh11:15:112
31198993514,5cyclictest1597750wget10:35:242
3119899351,26cyclictest0-21swapper/210:30:372
3119899351,21cyclictest24837-21missed_timers08:20:312
187462350,3sleep211-21rcu_preempt11:17:052
3119999346,15cyclictest0-21swapper/308:30:233
31199993420,4cyclictest8050irq/56-dwc_otg_09:30:533
3119899349,6cyclictest7950irq/56-dwc_otg_08:15:302
3119899347,15cyclictest0-21swapper/211:35:232
3119899347,14cyclictest0-21swapper/207:55:162
3119899345,20cyclictest17475-21ssh11:55:242
3119899342,24cyclictest3009-21rm12:15:402
3119899342,24cyclictest3009-21rm12:15:402
3119899341,21cyclictest23582-21ls10:05:242
31198993410,17cyclictest0-21swapper/211:22:582
3119999337,14cyclictest0-21swapper/308:40:243
3119899331,27cyclictest19203-21ls08:05:302
31198993312,6cyclictest13810-21ssh11:50:302
31198993312,4cyclictest0-21swapper/209:55:392
3119899331,22cyclictest11343-21ssh09:50:292
3119999321,15cyclictest0-21swapper/309:00:233
3119899327,15cyclictest0-21swapper/212:30:252
3119899327,15cyclictest0-21swapper/209:45:232
3119899327,12cyclictest7950irq/56-dwc_otg_12:05:362
3119899322,19cyclictest0-21swapper/210:00:222
3119899321,15cyclictest8050irq/56-dwc_otg_07:50:112
31199993110,4cyclictest21603-21ls08:10:343
3119899318,5cyclictest7950irq/56-dwc_otg_09:20:342
3119899317,15cyclictest0-21swapper/210:45:252
3119899317,15cyclictest0-21swapper/210:45:252
3119899316,4cyclictest7850irq/56-dwc_otg10:55:382
3119899314,5cyclictest7850irq/56-dwc_otg08:05:102
3119899313,13cyclictest0-21swapper/209:30:222
3119899312,24cyclictest8050irq/56-dwc_otg_12:20:222
3119899311,6cyclictest31714-21ssh09:35:332
3119899311,24cyclictest0-21swapper/210:52:162
3119899306,14cyclictest0-21swapper/208:10:222
3119899304,4cyclictest7950irq/56-dwc_otg_08:30:282
3119899301,4cyclictest20228-21df10:40:252
3119899301,3cyclictest7950irq/56-dwc_otg_09:00:222
298352305,13sleep10-21swapper/107:05:311
3119899291,14cyclictest7950irq/56-dwc_otg_07:25:162
3119899286,4cyclictest7850irq/56-dwc_otg08:45:202
3119899281,6cyclictest6144-21sh09:00:102
3119899281,18cyclictest7950irq/56-dwc_otg_08:45:102
3119899272,8cyclictest8578-21if_err_eth009:05:312
3119899251,5cyclictest26280-21awk08:25:252
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional