You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-25 - 14:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Thu Jun 25, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2978621080,5sleep22611799cyclictest11:35:312
2423421020,5sleep12611699cyclictest12:08:151
248922950,20sleep08050irq/56-dwc_otg_11:30:210
26115998921,23cyclictest0-21swapper/007:35:190
2611899879,38cyclictest8050irq/56-dwc_otg_12:35:213
118072850,8sleep00-21swapper/011:14:470
2611599841,45cyclictest0-21swapper/007:50:210
33122830,3sleep10-21swapper/111:04:341
33122830,3sleep10-21swapper/111:04:341
26115998016,50cyclictest5298-21latency_hist12:25:080
126592800,3sleep111-21rcu_preempt12:33:351
272682790,6sleep22611799cyclictest09:35:292
206322780,4sleep09-21ksoftirqd/009:27:500
26115997752,15cyclictest0-21swapper/009:32:050
26115997535,13cyclictest28166-21ssh10:55:220
28682730,2sleep00-21swapper/011:42:090
320132720,5sleep32611899cyclictest08:55:093
26116997112,5cyclictest8050irq/56-dwc_otg_11:35:211
2611599716,42cyclictest0-21swapper/009:10:200
2611599692,6cyclictest4841-21sshd11:45:180
26115996744,14cyclictest101ktimersoftd/011:55:070
2611599671,50cyclictest21215-21sshd08:25:190
2611699665,6cyclictest7850irq/56-dwc_otg11:55:221
2611599661,34cyclictest10441-21ssh09:15:340
2611699649,5cyclictest8050irq/56-dwc_otg_07:55:081
2611699649,10cyclictest0-21swapper/110:29:031
2611699643,6cyclictest0-21swapper/110:35:311
26116996420,25cyclictest26114-21cyclictest08:35:181
26115996436,9cyclictest2970-21kworker/u8:210:50:190
2611599641,53cyclictest11906-21cut10:35:240
263072630,3sleep3381ktimersoftd/310:13:393
2611699637,5cyclictest13249-21unixbench_singl08:00:371
2611699637,5cyclictest13249-21unixbench_singl08:00:371
2611599634,5cyclictest101ktimersoftd/008:55:360
26115996329,15cyclictest7950irq/56-dwc_otg_08:50:070
295372620,3sleep22611799cyclictest07:20:082
2611699622,14cyclictest7950irq/56-dwc_otg_09:12:301
2611599621,42cyclictest24560-21unixbench_multi10:10:360
26115996213,25cyclictest10458-21fschecks_time07:55:250
2611699617,6cyclictest26114-21cyclictest07:30:271
2611699611,7cyclictest4890-21diskmemload09:20:211
2611599608,27cyclictest0-21swapper/009:50:310
2611599606,39cyclictest101ktimersoftd/010:30:080
26115996042,7cyclictest0-21swapper/012:00:580
26115996042,7cyclictest0-21swapper/012:00:580
2611599599,28cyclictest30207-21ssh11:35:360
26115995941,11cyclictest0-21swapper/012:12:220
2611599593,5cyclictest0-21swapper/009:05:210
2611599593,5cyclictest0-21swapper/009:05:210
91302580,2sleep20-21swapper/212:29:422
2611599581,32cyclictest13636-21latency_hist08:05:090
2611599581,32cyclictest13636-21latency_hist08:05:090
77122570,1sleep00-21swapper/012:27:060
2611899573,13cyclictest7950irq/56-dwc_otg_11:10:183
26115995736,10cyclictest0-21swapper/009:45:370
26115995733,6cyclictest7850irq/56-dwc_otg09:20:350
26115995727,12cyclictest5879-21ssh11:06:400
2611599571,32cyclictest13909-21aten_rbpower_cu08:05:210
2611599571,29cyclictest0-21swapper/008:15:350
2611599571,15cyclictest0-21swapper/008:35:080
2611599571,15cyclictest0-21swapper/008:35:080
2611699569,4cyclictest29337-21unixbench-2d10:55:381
26116995618,5cyclictest727-21runrttasks10:33:031
26116995618,5cyclictest727-21runrttasks10:33:031
2611599562,28cyclictest2577-21sed09:00:360
26115995621,25cyclictest28327-21latency_hist08:45:080
2611899557,29cyclictest0-21swapper/310:15:213
2611699557,4cyclictest0-21swapper/111:32:161
2611699552,15cyclictest0-21swapper/112:15:281
2611599557,31cyclictest101ktimersoftd/012:35:360
26115995539,6cyclictest101ktimersoftd/012:30:110
2611599552,9cyclictest26389-21apt08:40:070
2611599552,36cyclictest0-21swapper/007:35:080
26115995510,30cyclictest8083-21ssh10:30:290
26115995510,30cyclictest8083-21ssh10:30:290
259832550,2sleep20-21swapper/211:30:362
2611699548,4cyclictest0-21swapper/111:23:511
2611699548,11cyclictest7850irq/56-dwc_otg10:50:191
2611599543,32cyclictest23783-21latency_hist10:50:080
26115995432,8cyclictest0-21swapper/010:15:280
26115995430,11cyclictest0-21swapper/010:21:460
26115995429,5cyclictest0-21swapper/007:40:370
26115995429,5cyclictest0-21swapper/007:40:370
26115995420,11cyclictest0-21swapper/009:40:230
2611599541,25cyclictest2200750ssh12:05:280
26115995331,8cyclictest0-21swapper/009:59:480
26115995330,8cyclictest0-21swapper/010:05:210
26115995312,23cyclictest0-21swapper/008:10:200
171732530,4sleep2301ktimersoftd/210:40:512
26117995230,13cyclictest6109-21ssh11:07:062
2611699525,11cyclictest19208-21ssh10:05:191
2611599524,24cyclictest16531-21apt-get11:20:140
26115995235,5cyclictest0-21swapper/011:15:130
81792510,2sleep30-21swapper/307:50:083
2611899518,26cyclictest0-21swapper/309:05:133
2611899518,26cyclictest0-21swapper/309:05:133
26117995127,4cyclictest8050irq/56-dwc_otg_10:55:222
26115995131,8cyclictest0-21swapper/011:55:340
26115995131,6cyclictest7950irq/56-dwc_otg_11:00:250
26115995131,6cyclictest7950irq/56-dwc_otg_11:00:250
26115995130,8cyclictest30933-21ntpq08:50:310
2611599512,29cyclictest518-21rs:main0
2611599511,40cyclictest30982-21head12:15:380
26115995029,12cyclictest0-21swapper/010:02:160
2611599501,4cyclictest31608-21aten_rbpower_cu07:25:210
2611599501,29cyclictest20847-21aten_rbpower_po11:25:230
26117994932,6cyclictest29-21rcuc/209:15:192
2611699497,27cyclictest0-21swapper/107:10:221
2611699497,13cyclictest0-21swapper/109:40:211
2611699496,11cyclictest3111-21uniq07:35:231
2611699495,12cyclictest7950irq/56-dwc_otg_11:15:081
2611599494,25cyclictest0-21swapper/009:35:180
26115994917,6cyclictest0-21swapper/007:10:210
26118994832,8cyclictest3177-21ssh09:45:283
2611599481,33cyclictest30459-21ntpq07:20:290
2611599481,33cyclictest30459-21ntpq07:20:290
26115994812,4cyclictest0-21swapper/008:20:190
2611599471,25cyclictest7403-21switchtime07:45:330
26117994624,12cyclictest301ktimersoftd/211:25:212
2611699468,18cyclictest7850irq/56-dwc_otg12:00:131
2611699468,18cyclictest7850irq/56-dwc_otg12:00:131
2611899457,23cyclictest0-21swapper/308:05:213
2611899454,8cyclictest0-21swapper/309:00:193
2611699457,24cyclictest0-21swapper/107:20:201
2611699457,24cyclictest0-21swapper/107:20:201
254932452,36sleep00-21swapper/007:05:390
2611899446,23cyclictest0-21swapper/311:50:223
2611699446,26cyclictest0-21swapper/112:10:201
2611699443,25cyclictest0-21swapper/107:45:181
26116994414,12cyclictest7850irq/56-dwc_otg09:30:351
2611899437,25cyclictest0-21swapper/308:10:143
2611899435,9cyclictest7850irq/56-dwc_otg09:50:243
2611899434,7cyclictest11563-21ssh10:35:173
26117994318,5cyclictest6981-21if_wlan007:45:262
2611699438,23cyclictest0-21swapper/108:40:221
172862430,2sleep30-21swapper/310:02:163
2611899428,23cyclictest0-21swapper/307:55:213
2611899427,25cyclictest0-21swapper/308:25:213
2611899414,30cyclictest8050irq/56-dwc_otg_11:15:193
36582400,4sleep2301ktimersoftd/211:43:362
26118994029,4cyclictest7950irq/56-dwc_otg_12:20:253
2611799407,20cyclictest5675-21ls07:40:362
2611799407,20cyclictest5675-21ls07:40:362
26117994013,18cyclictest31-21ksoftirqd/211:20:202
2611699402,5cyclictest7950irq/56-dwc_otg_08:00:081
2611799399,8cyclictest0-21swapper/210:22:432
2611799397,20cyclictest0-21swapper/209:00:202
2611799396,21cyclictest0-21swapper/208:10:142
2611699396,26cyclictest0-21swapper/109:05:131
2611699396,26cyclictest0-21swapper/109:05:131
2611699393,15cyclictest0-21swapper/109:49:361
26116993915,5cyclictest21597-21processes11:25:331
2611599391,23cyclictest0-21swapper/007:15:260
2611899386,22cyclictest0-21swapper/307:35:143
26118993830,5cyclictest381ktimersoftd/310:25:193
2611799384,5cyclictest7950irq/56-dwc_otg_10:15:182
26117993823,5cyclictest4945-21wget11:45:212
26117993817,6cyclictest7950irq/56-dwc_otg_11:10:182
2611699381,7cyclictest1026-21cut11:40:251
214702380,22sleep28050irq/56-dwc_otg_08:25:252
268602370,1sleep30-21swapper/310:53:253
2611899371,4cyclictest8050irq/56-dwc_otg_10:20:293
2611799377,5cyclictest0-21swapper/210:50:192
26116993717,5cyclictest3168750wget10:20:221
2611699371,26cyclictest7011-21ls09:50:221
102572370,1sleep20-21swapper/210:33:192
102572370,1sleep20-21swapper/210:33:192
2611899364,8cyclictest7850irq/56-dwc_otg08:50:363
2611899363,24cyclictest0-21swapper/309:41:323
2611799367,19cyclictest0-21swapper/207:35:192
2611799364,20cyclictest7850irq/56-dwc_otg09:56:222
2611799361,3cyclictest0-21swapper/212:05:192
26117993611,4cyclictest0-21swapper/210:25:272
2611699368,21cyclictest0-21swapper/110:15:211
2611699366,15cyclictest18051-21ssh09:25:201
26116993616,5cyclictest5823-21/usr/sbin/munin11:45:331
26116993615,5cyclictest4890-21diskmemload10:05:081
26116993613,15cyclictest5247-21ssh12:25:081
26116993612,6cyclictest0-21swapper/110:45:261
2611699361,14cyclictest0-21swapper/107:15:201
226882360,2sleep20-21swapper/209:30:262
2611899352,16cyclictest0-21swapper/311:30:193
2611799359,13cyclictest0-21swapper/211:00:182
2611799359,13cyclictest0-21swapper/211:00:182
2611799356,6cyclictest31-21ksoftirqd/207:30:222
2611799354,16cyclictest7950irq/56-dwc_otg_10:05:182
26117993518,6cyclictest12956-21ssh10:35:422
26117993516,5cyclictest31-21ksoftirqd/212:35:372
2611799351,16cyclictest29-21rcuc/210:49:522
26117993510,11cyclictest301ktimersoftd/207:27:402
2611699356,16cyclictest0-21swapper/108:45:211
26116993520,8cyclictest5706-21unixbench-2d07:40:361
26116993520,8cyclictest5706-21unixbench-2d07:40:361
2611899345,20cyclictest16608-21ssh11:20:203
2611899345,15cyclictest8050irq/56-dwc_otg_07:15:353
26118993415,10cyclictest4890-21diskmemload12:15:283
2611899341,20cyclictest26468-21cut07:10:273
26118993410,4cyclictest0-21swapper/309:30:373
2611799349,12cyclictest0-21swapper/209:55:012
2611799345,9cyclictest0-21swapper/208:01:292
2611799345,9cyclictest0-21swapper/208:01:292
2611799342,15cyclictest7950irq/56-dwc_otg_08:20:342
2611799342,10cyclictest0-21swapper/209:11:122
26117993412,4cyclictest727-21runrttasks11:15:362
2611699345,6cyclictest7850irq/56-dwc_otg10:10:341
2611699345,15cyclictest8050irq/56-dwc_otg_11:15:241
2611699341,7cyclictest1474050ssh12:35:341
2611699341,5cyclictest16073-21sh10:40:241
26116993412,6cyclictest4387-21if_err_wlan011:05:241
26116993412,11cyclictest0-21swapper/111:54:371
2611899339,4cyclictest5176-21fschecks_time11:45:243
2611899336,12cyclictest8050irq/56-dwc_otg_08:25:093
2611899333,16cyclictest0-21swapper/311:35:363
26118993318,9cyclictest17321-21/usr/sbin/munin12:00:313
26118993318,9cyclictest17321-21/usr/sbin/munin12:00:313
26118993313,5cyclictest39-21ksoftirqd/310:05:253
2611899331,22cyclictest8858-21latency07:50:283
26117993325,5cyclictest5416-21latency_hist12:25:082
26117993323,7cyclictest26865-21fschecks_count08:40:252
2611799332,12cyclictest7950irq/56-dwc_otg_08:55:252
2611799331,20cyclictest29-21rcuc/208:34:012
2611799331,20cyclictest29-21rcuc/208:34:012
2611699339,4cyclictest0-21swapper/109:16:121
2611699331,18cyclictest15549-21ls08:10:081
193572330,2sleep121-21rcuc/108:20:091
2611899329,5cyclictest32347-21wget11:00:223
2611899329,5cyclictest32347-21wget11:00:223
2611899329,13cyclictest10491-21switchtime09:15:343
2611899327,5cyclictest8050irq/56-dwc_otg_11:55:363
2611899327,15cyclictest0-21swapper/310:30:213
2611899327,15cyclictest0-21swapper/310:30:213
2611899327,13cyclictest0-21swapper/308:15:223
2611899326,14cyclictest0-21swapper/312:25:213
2611899326,14cyclictest0-21swapper/311:25:213
2611899325,6cyclictest20357-21ssh10:45:273
2611899321,3cyclictest0-21swapper/309:10:103
26118993212,5cyclictest727-21runrttasks12:08:343
2611899321,21cyclictest26530-21ssh12:10:323
26118993212,12cyclictest37-21rcuc/311:05:183
2611799324,17cyclictest7850irq/56-dwc_otg10:10:312
2611799324,14cyclictest7950irq/56-dwc_otg_12:00:252
2611799324,14cyclictest7950irq/56-dwc_otg_12:00:252
2611799323,21cyclictest7850irq/56-dwc_otg09:44:222
2611799323,20cyclictest7850irq/56-dwc_otg12:15:342
2611799322,22cyclictest750-21snmpd07:53:002
2611799322,22cyclictest31-21ksoftirqd/211:55:212
26117993216,8cyclictest0-21swapper/208:50:192
26117993212,12cyclictest0-21swapper/212:12:382
26117993210,5cyclictest0-21swapper/211:50:212
26117993210,4cyclictest0-21swapper/212:30:332
2611699323,4cyclictest7850irq/56-dwc_otg09:35:251
2611699322,11cyclictest7950irq/56-dwc_otg_07:25:251
2611899315,15cyclictest8050irq/56-dwc_otg_08:40:253
2611899314,11cyclictest8050irq/56-dwc_otg_09:56:313
2611899311,5cyclictest0-21swapper/312:30:193
2611799315,4cyclictest0-21swapper/209:29:492
2611799314,19cyclictest7850irq/56-dwc_otg07:25:082
2611799314,19cyclictest7850irq/56-dwc_otg07:25:082
2611799313,15cyclictest7950irq/56-dwc_otg_07:10:362
26117993123,6cyclictest10259-21aten_rbpower_po07:55:222
2611799311,21cyclictest0-21swapper/210:01:252
2611799311,20cyclictest0-21swapper/208:10:072
26117993110,5cyclictest7950irq/56-dwc_otg_09:05:362
26117993110,5cyclictest7950irq/56-dwc_otg_09:05:362
2611699317,14cyclictest0-21swapper/112:25:211
2611699315,13cyclictest21380-21cpuspeed08:25:231
26116993114,5cyclictest505-21cron08:35:081
26116993114,5cyclictest505-21cron08:35:081
2611699311,22cyclictest1692-21uniq09:00:241
2611899308,11cyclictest7950irq/56-dwc_otg_09:35:313
2611899304,18cyclictest7950irq/56-dwc_otg_07:20:263
2611899304,18cyclictest7950irq/56-dwc_otg_07:20:263
2611899303,20cyclictest8050irq/56-dwc_otg_09:20:293
26118993023,5cyclictest39-21ksoftirqd/308:35:183
26118993021,3cyclictest8050irq/56-dwc_otg_09:29:183
26118993015,5cyclictest7850irq/56-dwc_otg08:00:223
26118993015,5cyclictest7850irq/56-dwc_otg08:00:223
26118993014,5cyclictest23414-21if_eth008:30:253
26118993014,5cyclictest23414-21if_eth008:30:253
26118993013,4cyclictest31574-21sh10:59:303
26118993012,5cyclictest32556-21/usr/sbin/munin07:25:343
26118993010,12cyclictest0-21swapper/310:42:263
2611799304,18cyclictest7950irq/56-dwc_otg_08:35:292
2611799303,10cyclictest8050irq/56-dwc_otg_09:45:342
2611799301,5cyclictest0-21swapper/209:20:202
2611699304,10cyclictest0-21swapper/108:20:191
2611699303,6cyclictest0-21swapper/108:50:191
2611699302,6cyclictest23-21ksoftirqd/108:10:271
2611699301,20cyclictest11957-21ssh09:55:351
255042303,20sleep10-21swapper/107:05:491
9332290,3sleep3932-21df_inode11:40:233
2611899294,11cyclictest39-21ksoftirqd/307:30:213
26118992923,4cyclictest28513-21aten_rbpower_po08:45:213
2611799295,6cyclictest31-21ksoftirqd/208:50:072
2611799291,6cyclictest7950irq/56-dwc_otg_08:15:362
2611699291,7cyclictest7850irq/56-dwc_otg08:55:221
245572297,10sleep20-21swapper/207:05:252
2611899287,11cyclictest5773-21grep07:40:373
2611899287,11cyclictest5773-21grep07:40:373
256822272,14sleep30-21swapper/307:08:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional