You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-02 - 20:05

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Tue Jun 02, 2026 12:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
25905991026,89cyclictest0-21swapper/007:45:140
25905999632,25cyclictest0-21swapper/012:10:210
9442940,2sleep00-21swapper/011:40:350
25905998918,36cyclictest0-21swapper/010:20:210
2590599867,42cyclictest0-21swapper/007:15:200
2590599801,29cyclictest17874-21grep09:25:240
248262800,5sleep22591699cyclictest11:30:302
261822780,3sleep20-21swapper/208:40:092
25905997528,9cyclictest0-21swapper/009:50:500
2590599751,32cyclictest16340-21grep08:10:320
286092740,3sleep32591999cyclictest12:15:083
25905997413,18cyclictest8050irq/56-dwc_otg_10:36:020
2590599726,34cyclictest0-21swapper/007:25:210
2590599717,26cyclictest11325-21latency_hist11:15:080
2590599696,22cyclictest0-21swapper/009:55:210
2590599671,45cyclictest0-21swapper/008:00:180
2590599663,8cyclictest13-21rcuc/011:55:200
289202650,2sleep00-21swapper/010:55:420
2591699656,44cyclictest13903-21ssh11:56:012
170822650,2sleep10-21swapper/110:03:171
2591699635,10cyclictest8050irq/56-dwc_otg_08:10:322
2591699622,14cyclictest7950irq/56-dwc_otg_09:45:282
2591699621,15cyclictest31432-21cut07:25:212
2591699612,4cyclictest0-21swapper/211:25:072
2591699611,15cyclictest0-21swapper/212:10:212
25905996128,16cyclictest1785-21latency_hist09:45:080
2591999603,25cyclictest0-21swapper/309:20:183
2591699601,8cyclictest8074-21latency_hist11:50:092
2591699601,8cyclictest8074-21latency_hist11:50:092
2591699601,14cyclictest26361-21ssh10:15:072
25905996012,23cyclictest22199-21fschecks_time09:30:250
2591699593,15cyclictest8050irq/56-dwc_otg_09:00:082
25905995941,3cyclictest0-21swapper/012:25:190
2591699585,9cyclictest0-21swapper/212:31:242
2591699583,4cyclictest7950irq/56-dwc_otg_08:00:072
2591699582,4cyclictest29179-21fschecks_count12:15:242
2591699582,4cyclictest29179-21fschecks_count12:15:242
2591699581,5cyclictest8583-21fschecks_time11:50:252
2590599581,39cyclictest13349-21wget09:20:210
2591699576,9cyclictest7950irq/56-dwc_otg_10:44:212
2591699576,10cyclictest7950irq/56-dwc_otg_09:45:072
2591699572,3cyclictest7850irq/56-dwc_otg10:50:362
2591699571,5cyclictest3674-21grep07:35:362
2591699571,5cyclictest11423-21ssh11:15:082
2591699571,10cyclictest0-21swapper/210:24:412
2590599578,25cyclictest9450irq/48-DMA10:20:150
25905995735,5cyclictest5330-21/usr/sbin/munin11:45:360
25905995735,5cyclictest5330-21/usr/sbin/munin11:45:360
2590599573,39cyclictest9-21ksoftirqd/010:40:270
2590599571,46cyclictest0-21swapper/011:24:390
2590599571,44cyclictest0-21swapper/009:10:270
2590599571,38cyclictest26034-21aten_rbpower_po07:10:220
2590599571,38cyclictest0-21swapper/010:10:080
2590599571,38cyclictest0-21swapper/010:10:080
2590599571,31cyclictest29490-21ssh11:35:370
2591699562,4cyclictest17911-21fschecks_time09:25:242
2591699562,4cyclictest0-21swapper/210:17:122
2591699561,4cyclictest7850irq/56-dwc_otg10:30:232
2591699561,3cyclictest0-21swapper/208:05:282
2591699561,11cyclictest0-21swapper/210:55:302
25905995644,7cyclictest7850irq/56-dwc_otg12:30:270
2590599562,13cyclictest10147-21fschecks_time07:55:260
66202550,2sleep30-21swapper/311:47:503
66202550,2sleep30-21swapper/311:47:503
2591699553,6cyclictest8050irq/56-dwc_otg_12:20:342
2591699551,6cyclictest1471-21latency09:00:282
2590599558,26cyclictest0-21swapper/011:05:270
25905995537,4cyclictest7950irq/56-dwc_otg_09:35:200
25905995537,4cyclictest7950irq/56-dwc_otg_09:35:200
25905995533,5cyclictest1708-21ls12:20:340
2590599552,29cyclictest0-21swapper/012:10:080
2591699541,4cyclictest7169-21ssh09:50:342
2591699541,4cyclictest6248-21ssh11:08:252
2591699541,45cyclictest0-21swapper/212:09:572
2591699541,13cyclictest0-21swapper/209:20:082
2590599541,36cyclictest20150-21ssh11:25:230
2590599541,35cyclictest22346-21sh08:30:070
2591999533,8cyclictest24096-21ssh11:30:213
2591699537,4cyclictest7950irq/56-dwc_otg_12:40:072
2591699535,10cyclictest19745-21sh12:04:082
2591699533,3cyclictest8050irq/56-dwc_otg_10:27:452
2591699532,9cyclictest0-21swapper/208:21:502
2591699532,14cyclictest0-21swapper/210:35:292
2591699531,6cyclictest0-21swapper/211:38:012
2591699531,5cyclictest10832-21rm09:55:292
2591699531,4cyclictest7850irq/56-dwc_otg10:47:092
2591699531,4cyclictest28015-21apt-get08:45:222
2591699531,4cyclictest28015-21apt-get08:45:222
2591699531,11cyclictest11547-21sh11:15:092
2591699531,11cyclictest11547-21sh11:15:092
2590599535,26cyclictest28981-21aten_rbpower_en12:15:200
2590599535,26cyclictest28981-21aten_rbpower_en12:15:200
25905995325,14cyclictest0-21swapper/008:43:050
2590599531,41cyclictest0-21swapper/010:33:370
25905995314,19cyclictest797-21wc09:00:070
2590599531,38cyclictest4581-21fschecks_count07:40:260
2590599531,37cyclictest19138-21ssh12:03:010
2591699528,7cyclictest26032-21wget07:10:222
2591699525,3cyclictest7950irq/56-dwc_otg_12:29:022
2591699523,7cyclictest8050irq/56-dwc_otg_10:07:522
2591699523,7cyclictest8050irq/56-dwc_otg_10:07:522
2591699521,9cyclictest7950irq/56-dwc_otg_10:02:112
2591699521,5cyclictest13209-21cron08:05:072
2591699521,11cyclictest6625-21sh09:11:392
2591699521,10cyclictest0-21swapper/211:45:022
2590599529,22cyclictest0-21swapper/010:25:210
2590599528,2cyclictest0-21swapper/008:25:070
25905995234,3cyclictest0-21swapper/007:40:080
25905995230,5cyclictest13037-21ssh12:35:200
2590599522,32cyclictest2547-21idleruntime-cro09:05:070
2590599522,28cyclictest8202-21/usr/sbin/munin11:50:280
25905995222,20cyclictest0-21swapper/009:17:330
2590599521,15cyclictest0-21swapper/008:55:070
2591699514,10cyclictest7950irq/56-dwc_otg_07:30:192
2591699512,12cyclictest7950irq/56-dwc_otg_09:34:092
2591699512,12cyclictest0-21swapper/209:37:512
2591699512,12cyclictest0-21swapper/209:37:512
2591699511,3cyclictest0-21swapper/208:30:072
25911995129,12cyclictest6032-21rm09:10:381
25905995141,5cyclictest0-21swapper/009:48:340
25905995134,5cyclictest32479-21/usr/sbin/munin11:00:310
25905995123,18cyclictest0-21swapper/010:03:220
2590599511,35cyclictest4361-21modprobe09:10:070
2591699501,4cyclictest0-21swapper/209:20:282
25916995013,3cyclictest7950irq/56-dwc_otg_11:03:352
2591699501,12cyclictest22846-21taskset11:28:302
25905995028,7cyclictest0-21swapper/010:19:210
25905995019,18cyclictest0-21swapper/007:20:180
2590599501,8cyclictest9108-21grep07:50:350
2590599501,36cyclictest17663-21missed_timers08:15:280
2590599501,36cyclictest17663-21missed_timers08:15:280
2590599501,26cyclictest11734-21cut11:15:220
2590599501,26cyclictest11734-21cut11:15:220
239322502,14sleep00-21swapper/007:05:090
2591999495,11cyclictest11658-21ssh11:15:193
2591999495,11cyclictest11658-21ssh11:15:193
25905994937,4cyclictest7850irq/56-dwc_otg10:45:370
25905994930,7cyclictest0-21swapper/008:30:220
2590599491,36cyclictest0-21swapper/008:45:350
2590599491,36cyclictest0-21swapper/008:45:350
2591999488,26cyclictest0-21swapper/309:05:203
2591699483,5cyclictest0-21swapper/207:20:072
2591699481,3cyclictest7950irq/56-dwc_otg_08:43:342
2590599489,20cyclictest23690-21rm10:50:260
2591699474,11cyclictest7950irq/56-dwc_otg_07:52:002
2591199477,26cyclictest0-21swapper/107:45:141
25905994721,12cyclictest0-21swapper/007:32:270
2591999468,25cyclictest0-21swapper/308:35:213
2591199468,25cyclictest0-21swapper/110:55:221
2591199467,25cyclictest0-21swapper/110:40:211
2590599461,35cyclictest0-21swapper/010:10:190
2591999457,24cyclictest0-21swapper/307:40:223
2591999447,23cyclictest0-21swapper/307:15:203
2591199443,5cyclictest8050irq/56-dwc_otg_11:50:201
2590599442,27cyclictest0-21swapper/008:35:180
2591999438,6cyclictest8050irq/56-dwc_otg_10:05:203
2591999438,6cyclictest8050irq/56-dwc_otg_10:05:203
2591999437,24cyclictest0-21swapper/310:15:223
25919994323,5cyclictest1355150wget08:05:213
2591199439,15cyclictest7850irq/56-dwc_otg11:25:071
2591199434,9cyclictest2480450ssh10:12:161
25905994327,5cyclictest14789-21dhclient-script08:07:200
2591999424,23cyclictest0-21swapper/312:35:203
25911994222,5cyclictest17495-21sh09:25:121
25911994218,5cyclictest2617-21tr10:25:221
25911994213,11cyclictest4360-21diskmemload11:33:521
25911994212,4cyclictest4360-21diskmemload12:10:211
25919994017,6cyclictest24532-21unixbench_multi10:50:363
2591699401,9cyclictest0-21swapper/207:46:412
2591699401,6cyclictest0-21swapper/207:24:592
2591199402,31cyclictest0-21swapper/111:12:081
25911994016,5cyclictest30947-21grep08:50:361
2591199401,5cyclictest0-21swapper/111:35:221
2591199393,5cyclictest8050irq/56-dwc_otg_11:05:211
25911993918,10cyclictest11394-21sh09:17:331
25911993910,4cyclictest0-21swapper/111:55:321
2591999381,23cyclictest8615-21latency_hist09:15:083
2591699382,3cyclictest7850irq/56-dwc_otg08:33:502
2591699381,21cyclictest17261-21ls08:15:222
2591699381,21cyclictest17261-21ls08:15:222
2591199388,5cyclictest8050irq/56-dwc_otg_08:30:251
2591199386,24cyclictest0-21swapper/107:55:221
2591199382,23cyclictest31103-21ssh10:20:241
25911993821,9cyclictest23316-21sh10:50:201
25911993818,5cyclictest221ktimersoftd/108:25:221
2591199381,24cyclictest16508-21rm12:00:201
2591999371,16cyclictest28884-21/usr/sbin/munin12:15:253
2591999371,16cyclictest28884-21/usr/sbin/munin12:15:253
25916993716,5cyclictest4484-21latency_hist09:10:082
2591699371,26cyclictest7850irq/56-dwc_otg08:50:452
2591199379,19cyclictest4766-21ssh12:25:191
2591199374,15cyclictest7950irq/56-dwc_otg_08:05:341
2591199374,12cyclictest8050irq/56-dwc_otg_08:00:251
2591199374,11cyclictest0-21swapper/111:40:461
220832370,1sleep10-21swapper/109:30:241
2591999364,23cyclictest8050irq/56-dwc_otg_09:50:183
2591999362,9cyclictest0-21swapper/312:30:233
2591999361,23cyclictest26659-21ls09:35:273
2591999361,23cyclictest26659-21ls09:35:273
25919993610,7cyclictest8050irq/56-dwc_otg_12:25:073
2591199369,17cyclictest0-21swapper/111:00:211
2591199362,3cyclictest8050irq/56-dwc_otg_08:45:211
2591199362,3cyclictest8050irq/56-dwc_otg_08:45:211
25911993617,9cyclictest19770-21sh10:05:381
25911993617,9cyclictest19770-21sh10:05:381
25911993613,5cyclictest13090-21hostname12:35:221
2591199361,29cyclictest24679-21grep08:35:251
39082351,30sleep10-21swapper/112:24:131
25919993529,4cyclictest3237-21latency_hist11:05:083
25919993526,7cyclictest12406-21ssh09:57:163
2591999351,5cyclictest8050irq/56-dwc_otg_11:40:193
2591199355,5cyclictest15464-21cron11:20:081
2591199355,5cyclictest15464-21cron11:20:081
2591199352,14cyclictest0-21swapper/107:10:261
25911993517,5cyclictest21230-21grep11:25:371
2591199351,18cyclictest32320-21ntp_states08:55:321
241162357,18sleep30-21swapper/307:05:203
237062350,3sleep323705-21unixbench_multi08:30:363
2591999345,4cyclictest0-21swapper/311:35:253
2591999345,13cyclictest8050irq/56-dwc_otg_09:35:083
2591999344,24cyclictest4360-21diskmemload10:25:203
2591999343,6cyclictest7850irq/56-dwc_otg09:15:263
2591999342,15cyclictest7850irq/56-dwc_otg10:10:213
2591999341,4cyclictest8050irq/56-dwc_otg_09:45:193
2591999341,13cyclictest7850irq/56-dwc_otg10:34:283
2591699341,11cyclictest0-21swapper/207:43:392
2591199344,21cyclictest26366-21ssh09:35:241
2591199344,21cyclictest26366-21ssh09:35:241
2591199343,10cyclictest8050irq/56-dwc_otg_07:20:211
25911993410,11cyclictest0-21swapper/110:15:211
205052341,2sleep30-21swapper/309:28:253
2591999337,23cyclictest0-21swapper/308:15:213
2591999337,23cyclictest0-21swapper/308:15:213
2591999337,15cyclictest0-21swapper/308:50:213
2591999335,14cyclictest8050irq/56-dwc_otg_11:30:083
2591999334,7cyclictest7950irq/56-dwc_otg_10:45:263
2591999331,21cyclictest0-21swapper/308:20:183
2591199337,11cyclictest7850irq/56-dwc_otg09:55:431
2591199336,4cyclictest0-21swapper/112:10:081
2591199334,5cyclictest29425-21ssh12:15:261
2591199334,5cyclictest29425-21ssh12:15:261
2591199332,5cyclictest6256-21ssh09:50:211
2591199330,22cyclictest0-21swapper/110:45:311
251592339,13sleep20-21swapper/207:05:362
2591999327,13cyclictest17582-21timerandwakeup12:00:343
2591999322,5cyclictest0-21swapper/309:00:193
2591999321,5cyclictest20932-21fschecks_count12:05:253
2591199328,11cyclictest7950irq/56-dwc_otg_09:40:371
2591199322,6cyclictest7950irq/56-dwc_otg_07:30:241
2591199322,12cyclictest7850irq/56-dwc_otg08:20:331
2591199321,5cyclictest4360-21diskmemload09:45:211
2591199321,17cyclictest7950irq/56-dwc_otg_09:20:241
2591999316,7cyclictest7950irq/56-dwc_otg_10:20:293
2591999316,12cyclictest4742-21ssh12:25:163
2591999314,6cyclictest7950irq/56-dwc_otg_11:25:073
2591999313,14cyclictest10870-21ssh10:35:223
2591999312,19cyclictest0-21swapper/308:04:373
2591999312,17cyclictest26556-21ls08:40:263
2591999312,15cyclictest777650ssh11:10:233
2591999311,6cyclictest15102-21ssh10:40:213
2591199316,12cyclictest7950irq/56-dwc_otg_08:10:251
2591199315,5cyclictest4333-21/usr/sbin/munin07:40:291
2591199314,10cyclictest7950irq/56-dwc_otg_10:35:081
2591199313,11cyclictest11386-21/usr/sbin/munin10:35:291
25911993110,3cyclictest0-21swapper/112:31:101
2591999309,11cyclictest39-21ksoftirqd/310:55:273
2591999305,12cyclictest8050irq/56-dwc_otg_09:43:503
2591999303,18cyclictest0-21swapper/307:56:293
25919993024,4cyclictest725-21sh09:00:073
2591999302,20cyclictest0-21swapper/310:04:593
2591999302,19cyclictest0-21swapper/307:38:263
2591999302,17cyclictest6235-21/usr/sbin/munin07:45:243
2591999302,17cyclictest20785-21/usr/sbin/munin08:25:203
2591999301,7cyclictest141-21systemd-journal11:54:453
2591199304,5cyclictest8050irq/56-dwc_otg_08:15:331
2591199304,5cyclictest8050irq/56-dwc_otg_08:15:331
2591199303,15cyclictest0-21swapper/107:27:441
2591199302,6cyclictest8578-21grep07:50:281
25911993011,9cyclictest292432chrt07:19:171
253082303,21sleep10-21swapper/107:05:431
2591999298,5cyclictest8050irq/56-dwc_otg_11:55:323
2591999293,18cyclictest1133-21runrttasks08:11:023
2591999293,12cyclictest8050irq/56-dwc_otg_11:05:263
25919992914,5cyclictest1133-21runrttasks07:29:213
2591999291,3cyclictest0-21swapper/307:30:373
2591999291,13cyclictest0-21swapper/308:49:023
2591999291,13cyclictest0-21swapper/308:49:023
2591199299,9cyclictest1717-21proc_pri09:00:321
2591199292,6cyclictest4367-21grep11:45:241
2591199292,6cyclictest4367-21grep11:45:241
25911992913,5cyclictest3515-21/usr/sbin/munin09:05:301
2591199291,21cyclictest0-21swapper/108:40:201
25919992824,2cyclictest0-21swapper/307:50:333
2591199282,4cyclictest8050irq/56-dwc_otg_07:38:541
2591999263,13cyclictest8050irq/56-dwc_otg_07:11:343
2591999251,5cyclictest0-21swapper/307:20:303
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional