You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-04 - 00:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Wed Jun 03, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2558922430,2sleep30-21swapper/307:05:333
2558922430,2sleep30-21swapper/307:05:333
2643121480,5sleep02658899cyclictest09:34:510
2674821060,2sleep10-21swapper/112:10:331
794521020,2sleep10-21swapper/111:48:071
231582980,1sleep00-21swapper/011:26:520
165902850,1sleep30-21swapper/310:40:253
299272790,8sleep00-21swapper/010:55:360
26588997539,22cyclictest0-21swapper/007:40:220
2659299737,51cyclictest8050irq/56-dwc_otg_12:00:081
2659299722,3cyclictest7950irq/56-dwc_otg_09:25:191
2658899703,49cyclictest0-21swapper/009:50:170
2659299698,29cyclictest0-21swapper/109:46:561
2659299681,6cyclictest26326-21cron07:10:091
2658899684,11cyclictest1795-21ssh12:20:190
2659299664,47cyclictest8050irq/56-dwc_otg_12:00:281
2659299661,54cyclictest8245-21ssh09:12:521
2658899665,37cyclictest8488-21rm11:10:090
2659299654,45cyclictest8050irq/56-dwc_otg_10:48:451
2659299653,45cyclictest8050irq/56-dwc_otg_10:25:331
2659299651,54cyclictest30661-21latency_hist08:50:091
2658899652,30cyclictest0-21swapper/011:20:210
194472650,2sleep2301ktimersoftd/211:22:392
2659299642,42cyclictest24033-21missed_timers08:30:301
2659299642,41cyclictest26236-21timerwakeupswit08:35:361
2659299641,4cyclictest8050irq/56-dwc_otg_10:40:191
2659299641,49cyclictest7038-21aten_rbpower_vo07:45:231
26592996413,40cyclictest26661-21sh11:30:421
2659299634,41cyclictest8050irq/56-dwc_otg_10:55:361
2659299631,46cyclictest0-21swapper/110:05:191
2659299631,46cyclictest0-21swapper/110:05:191
26597996220,17cyclictest24879-21sed10:10:353
26597996219,17cyclictest9481-21ps07:50:343
2659299624,46cyclictest0-21swapper/110:11:181
2659299621,5cyclictest9423-21ntp_states07:50:321
2659299621,47cyclictest28348-21ssh09:35:441
2658899629,29cyclictest0-21swapper/012:05:210
2658899623,37cyclictest0-21swapper/007:45:200
2659299616,37cyclictest0-21swapper/112:31:471
2659299611,51cyclictest0-21swapper/111:13:491
2659299611,51cyclictest0-21swapper/111:13:491
2659299611,4cyclictest3410-21ls07:35:231
2659299611,47cyclictest0-21swapper/111:40:311
2659299611,45cyclictest423-21ssh10:20:301
26592996114,33cyclictest17411-21taskset08:11:341
2659299604,34cyclictest7850irq/56-dwc_otg10:50:301
2659299603,39cyclictest10358-21/usr/sbin/munin09:15:291
26588996038,14cyclictest0-21swapper/010:20:230
26597995916,12cyclictest23830-21ssh10:49:213
2659299595,37cyclictest6188-21ssh12:25:251
2659299595,37cyclictest6188-21ssh12:25:251
2659299594,38cyclictest8050irq/56-dwc_otg_09:32:591
2659299591,4cyclictest11388-21/usr/sbin/munin09:55:391
2659299591,44cyclictest0-21swapper/111:08:331
2658899597,29cyclictest0-21swapper/009:45:090
26588995933,5cyclictest7950irq/56-dwc_otg_10:50:360
26588995933,3cyclictest0-21swapper/011:30:200
26588995929,8cyclictest30862-21latency_hist09:40:080
26597995822,12cyclictest17883-21df12:00:233
26597995820,18cyclictest398-21ssh11:39:293
26597995819,12cyclictest1615-21cat12:20:093
2659299584,40cyclictest7850irq/56-dwc_otg09:43:441
2659299583,37cyclictest0-21swapper/112:20:331
2659299582,48cyclictest663-21ssh11:39:571
2659299582,35cyclictest0-21swapper/109:21:091
2659299581,7cyclictest28455-21wget07:15:211
2659299581,4cyclictest30089-21apt-get12:15:191
2659299581,3cyclictest0-21swapper/110:37:331
260572583,12sleep10-21swapper/107:06:411
260572583,12sleep10-21swapper/107:06:411
26597995719,22cyclictest26252-21cat08:35:363
26597995718,11cyclictest32759-21df08:55:233
26597995718,11cyclictest32759-21df08:55:233
2659299577,33cyclictest8050irq/56-dwc_otg_09:04:021
2659299573,42cyclictest5289-21diskmemload10:34:201
2659299573,41cyclictest22352-21kworker/u8:209:53:021
2659299573,37cyclictest0-21swapper/111:25:331
2659299571,49cyclictest30246-21apt-get07:20:191
2659299571,46cyclictest0-21swapper/110:19:491
2659299571,3cyclictest7950irq/56-dwc_otg_07:30:231
2658899578,27cyclictest0-21swapper/009:45:180
26597995617,18cyclictest12669-21sh11:54:123
26597995615,23cyclictest8050irq/56-dwc_otg_10:55:353
2659299562,41cyclictest0-21swapper/111:04:051
26592995617,36cyclictest22058-21/usr/sbin/munin08:25:281
2659299561,4cyclictest32556-21apt-get08:55:221
2659299561,4cyclictest32556-21apt-get08:55:221
2659299561,45cyclictest16033-21ssh11:18:571
2659299561,3cyclictest0-21swapper/111:53:131
26588995630,6cyclictest31802-21latency_hist07:25:080
26588995630,5cyclictest21376-21idleruntime-cro08:25:070
26588995630,5cyclictest21376-21idleruntime-cro08:25:070
26588995629,6cyclictest7950irq/56-dwc_otg_11:50:210
26588995620,16cyclictest29511-21aten_rbpower_po11:35:210
2658899561,26cyclictest0-21swapper/011:55:340
26597995525,23cyclictest3456-21ssh11:42:283
26597995520,18cyclictest28355-21ssh10:55:043
2659299552,41cyclictest8050irq/56-dwc_otg_08:19:401
2659299551,3cyclictest0-21swapper/110:01:401
2659299551,38cyclictest8050irq/56-dwc_otg_09:10:081
26588995529,6cyclictest7850irq/56-dwc_otg11:20:070
26588995527,6cyclictest29247-21unixbench_singl10:15:370
26588995526,12cyclictest7850irq/56-dwc_otg08:30:260
26588995525,14cyclictest7950irq/56-dwc_otg_09:25:230
2658899551,25cyclictest2274-21idleruntime09:00:260
23372550,4sleep337-21rcuc/311:01:383
26597995421,11cyclictest11285-21ssh11:12:523
26597995421,11cyclictest11285-21ssh11:12:523
26597995414,18cyclictest7950irq/56-dwc_otg_10:02:033
2659299545,35cyclictest0-21swapper/112:06:151
2659299543,3cyclictest8050irq/56-dwc_otg_12:37:331
2659299543,3cyclictest8050irq/56-dwc_otg_12:37:331
26588995421,20cyclictest0-21swapper/012:25:310
26588995421,20cyclictest0-21swapper/012:25:310
26597995322,17cyclictest14551-21rm09:58:573
26597995316,21cyclictest16213-21ssh11:19:173
26597995315,13cyclictest15649-21ssh11:57:063
2659799531,22cyclictest0-21swapper/310:25:153
2658899538,32cyclictest0-21swapper/009:15:230
2658899531,6cyclictest18236-21ssh12:40:090
2658899531,6cyclictest18236-21ssh12:40:090
26588995315,19cyclictest14473-21/usr/sbin/munin08:05:250
26597995221,20cyclictest26965-21fschecks_time07:10:273
26597995221,16cyclictest8256-21ssh09:12:533
26597995221,13cyclictest9912-21apt09:15:203
26597995220,18cyclictest2960-21cron07:35:083
26597995220,17cyclictest1688-21ssh12:20:093
26597995217,22cyclictest27187-21ssh09:35:233
2659299521,4cyclictest0-21swapper/107:27:301
26588995233,6cyclictest8050irq/56-dwc_otg_08:45:260
2658899523,25cyclictest0-21swapper/008:00:090
26588995226,3cyclictest0-21swapper/012:30:350
26588995225,5cyclictest0-21swapper/008:15:370
26588995214,25cyclictest0-21swapper/010:30:290
2658899521,28cyclictest4935-21idleruntime-cro11:45:080
26597995119,12cyclictest27776-21ssh12:11:323
26597995118,17cyclictest30028-21ssh10:16:583
26597995116,25cyclictest8060-21ssh11:48:193
2659299512,45cyclictest20935-21unixbench_multi08:20:371
2659299512,45cyclictest20935-21unixbench_multi08:20:371
2659299511,5cyclictest4784-21apt-get07:40:101
26592995110,39cyclictest0-21swapper/111:20:191
2658899517,4cyclictest0-21swapper/007:50:200
26588995126,8cyclictest0-21swapper/009:10:180
26588995118,6cyclictest16745-21grep10:00:360
26597995019,12cyclictest23304-21sed08:30:083
26597995018,15cyclictest5289-21diskmemload12:30:583
2659299502,33cyclictest0-21swapper/108:01:201
26592995011,36cyclictest28196-21grep08:40:361
26588995023,8cyclictest16628-21fschecks_count10:40:250
26588995023,7cyclictest27196-21aten_rbpower_en08:40:220
2658899502,26cyclictest0-21swapper/010:30:080
2658899501,30cyclictest750-21unixbench_singl07:25:370
2658899501,24cyclictest0-21swapper/010:37:200
26597994922,13cyclictest8303-21ssh11:09:593
26597994921,18cyclictest0-21swapper/307:15:193
26597994921,12cyclictest17668-21chrt09:24:233
26597994918,14cyclictest11354-21ssh10:34:153
26597994917,20cyclictest22121-21ssh10:07:393
26597994917,20cyclictest22121-21ssh10:07:393
26597994915,20cyclictest922-21dhclient-script07:27:313
2659299491,5cyclictest14230-21/usr/sbin/munin08:05:371
2659299491,45cyclictest10865-21fschecks_time07:55:261
2658899494,4cyclictest0-21swapper/012:00:200
26588994930,3cyclictest0-21swapper/011:10:370
26588994930,3cyclictest0-21swapper/011:10:370
26588994922,4cyclictest0-21swapper/009:05:190
26588994922,14cyclictest10980-21kworker/0:209:55:230
26588994917,16cyclictest15583-21sh09:20:440
2658899491,27cyclictest20013-21fschecks_count10:05:260
2658899491,27cyclictest20013-21fschecks_count10:05:260
2658899491,24cyclictest31229-21cat08:50:290
26597994820,12cyclictest20449-21ssh09:26:493
26597994819,14cyclictest6915-21/usr/sbin/munin07:45:193
26597994817,20cyclictest3432-21/usr/sbin/munin07:35:253
26597994817,18cyclictest1932-21ssh09:43:503
26597994813,17cyclictest7950irq/56-dwc_otg_11:31:063
26597994813,13cyclictest815250ssh12:27:153
26597994813,13cyclictest815250ssh12:27:153
26597994812,22cyclictest7950irq/56-dwc_otg_12:09:093
2658899488,20cyclictest0-21swapper/011:03:360
26588994815,16cyclictest27779-21grep07:10:370
26597994721,11cyclictest21063-21ssh11:25:113
26597994711,20cyclictest8050irq/56-dwc_otg_09:50:093
2659699475,5cyclictest13519-21sh11:55:192
2659299471,5cyclictest30997-21fschecks_count08:50:271
2658899478,18cyclictest0-21swapper/011:45:310
26588994733,8cyclictest0-21swapper/008:10:350
2658899472,8cyclictest20788-21fschecks_time10:45:250
2658899472,37cyclictest0-21swapper/012:20:090
26597994617,15cyclictest60-21kswapd007:40:143
26597994616,13cyclictest16661-21ssh12:37:303
26597994616,13cyclictest16661-21ssh12:37:303
26597994615,12cyclictest7009-21cut09:50:083
26597994615,10cyclictest8050irq/56-dwc_otg_08:52:363
26597994613,17cyclictest7950irq/56-dwc_otg_08:30:363
26588994616,6cyclictest7950irq/56-dwc_otg_08:40:080
2658899461,25cyclictest1133-21runrttasks12:12:230
2658899461,22cyclictest0-21swapper/010:10:300
2659799457,25cyclictest0-21swapper/308:45:223
2659799457,24cyclictest0-21swapper/307:55:223
26597994517,7cyclictest14338-21ssh10:37:073
26597994517,11cyclictest20613-21ssh11:24:463
2659699457,24cyclictest0-21swapper/209:55:222
260772453,34sleep00-21swapper/007:06:570
260772453,34sleep00-21swapper/007:06:570
130942450,1sleep20-21swapper/210:35:332
26597994414,19cyclictest0-21swapper/309:34:183
2659699447,25cyclictest0-21swapper/212:35:222
2659699447,25cyclictest0-21swapper/212:35:222
2659699447,23cyclictest0-21swapper/210:30:212
2659699447,23cyclictest0-21swapper/209:05:222
2659699447,23cyclictest0-21swapper/208:40:132
2658899448,21cyclictest141-21systemd-journal07:33:430
26588994419,17cyclictest0-21swapper/008:00:100
2659799437,24cyclictest0-21swapper/309:05:223
26597994319,9cyclictest8050irq/56-dwc_otg_07:20:193
2658899432,22cyclictest21898-21fschecks_time08:25:260
26597994216,12cyclictest555-21awk10:20:323
26597994212,21cyclictest15525-21seq08:06:433
2659699427,25cyclictest0-21swapper/208:30:222
2659699427,24cyclictest0-21swapper/207:25:222
2659699427,21cyclictest0-21swapper/208:00:142
26596994218,12cyclictest31-21ksoftirqd/210:25:332
2659699421,33cyclictest13844-21kworker/u8:112:30:372
2658899421,6cyclictest4983-21apt-key07:40:090
2658899421,22cyclictest0-21swapper/008:55:370
2658899421,22cyclictest0-21swapper/008:55:370
2659699417,21cyclictest0-21swapper/209:45:202
2659699414,25cyclictest29434-21ssh11:35:202
26588994115,14cyclictest0-21swapper/007:15:320
66822400,3sleep26671-21cron07:45:082
2659799407,24cyclictest0-21swapper/308:00:213
2659799407,18cyclictest7950irq/56-dwc_otg_08:22:373
2659799407,18cyclictest7950irq/56-dwc_otg_08:22:373
26597994018,10cyclictest17670-21apt-config08:14:183
2659699407,23cyclictest0-21swapper/207:35:222
2659699406,24cyclictest0-21swapper/212:25:232
2659699406,24cyclictest0-21swapper/212:25:232
2659699406,20cyclictest29-21rcuc/209:01:022
2659699404,19cyclictest301ktimersoftd/211:10:272
2659699404,19cyclictest301ktimersoftd/211:10:272
26596994018,5cyclictest25283-21sh11:30:182
2659699401,13cyclictest29-21rcuc/209:35:222
2659799391,25cyclictest0-21swapper/309:00:223
2659699397,22cyclictest0-21swapper/208:05:222
2659699396,17cyclictest301ktimersoftd/212:20:272
26597993813,9cyclictest8050irq/56-dwc_otg_08:44:293
2659699381,26cyclictest7283-21ls07:45:272
2659699381,25cyclictest19006-21timerwakeupswit08:15:362
2659699381,21cyclictest301ktimersoftd/212:00:252
40532370,5sleep22659699cyclictest11:43:332
2659799378,16cyclictest0-21swapper/308:17:183
2659699377,23cyclictest0-21swapper/207:55:222
2659699375,19cyclictest60-21kswapd010:10:222
2659699371,22cyclictest32411-21ls08:55:092
2659699367,17cyclictest0-21swapper/208:10:142
2659699365,21cyclictest0-21swapper/207:15:212
2659699364,22cyclictest0-21swapper/208:55:192
2659699364,22cyclictest0-21swapper/208:55:192
2659699362,14cyclictest3145250ssh09:40:242
26596993615,8cyclictest301ktimersoftd/211:45:232
2659699356,13cyclictest8050irq/56-dwc_otg_10:00:242
2659699354,13cyclictest29-21rcuc/211:28:062
2659699353,11cyclictest31-21ksoftirqd/209:51:442
26596993518,4cyclictest7850irq/56-dwc_otg09:15:242
26596993515,4cyclictest4563-21/usr/sbin/munin11:05:232
26596993510,5cyclictest7850irq/56-dwc_otg10:20:082
246522350,1sleep20-21swapper/212:08:252
2659699341,4cyclictest7950irq/56-dwc_otg_11:00:272
2659699341,4cyclictest0-21swapper/210:50:312
26596993413,8cyclictest0-21swapper/207:50:272
2659699341,15cyclictest8050irq/56-dwc_otg_08:25:232
2659699338,5cyclictest31-21ksoftirqd/210:49:282
2659699338,4cyclictest7850irq/56-dwc_otg12:15:212
2659699336,8cyclictest8050irq/56-dwc_otg_10:55:342
2659699335,20cyclictest14195-21ssh09:20:202
2659699331,8cyclictest18740-21ssh09:25:272
26596993314,5cyclictest10349-21switchtime11:50:342
2659699331,15cyclictest19820-21apt-get08:20:222
2659699331,15cyclictest19820-21apt-get08:20:222
26596993311,10cyclictest26612-21/usr/sbin/munin07:10:292
2659699327,5cyclictest7850irq/56-dwc_otg12:10:232
2659699327,15cyclictest0-21swapper/209:10:212
2659699325,4cyclictest7950irq/56-dwc_otg_09:35:082
26596993216,4cyclictest32119-21ssh10:20:202
2659699321,11cyclictest0-21swapper/210:05:302
2659699321,11cyclictest0-21swapper/210:05:302
2659699321,10cyclictest165892forks10:40:252
2659699316,5cyclictest29-21rcuc/208:35:322
2659699308,6cyclictest31-21ksoftirqd/211:15:532
2659699305,17cyclictest301ktimersoftd/207:30:202
2659699291,3cyclictest7950irq/56-dwc_otg_07:20:192
26596992818,3cyclictest301ktimersoftd/208:47:242
262412274,14sleep20-21swapper/207:09:052
262412274,14sleep20-21swapper/207:09:052
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional