You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-24 - 06:06

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Mon Aug 24, 2026 00:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3028221860,5sleep01421399cyclictest23:52:040
2581921140,1sleep30-21swapper/322:28:413
243821140,6sleep31421699cyclictest23:19:103
751021000,3sleep20-21swapper/221:26:362
14213999826,60cyclictest0-21swapper/000:20:320
14213999630,45cyclictest3970-21/usr/sbin/munin00:00:410
14213999627,65cyclictest350-21grep23:15:380
14213999329,53cyclictest32021-21taskset19:58:470
14213999324,47cyclictest28228-21sed22:30:370
14213999236,40cyclictest0-21swapper/019:10:100
14213999229,44cyclictest16708-21ntpq19:15:320
14213999024,54cyclictest7604-21taskset20:20:250
14213998924,51cyclictest7244-21ssh21:26:070
14216998848,21cyclictest6314-21rm21:25:313
14213998826,43cyclictest19294-21aten_rbpower_cu23:00:240
14213998825,49cyclictest15961-21ssh00:14:520
14213998824,52cyclictest0-21swapper/022:05:240
14213998824,48cyclictest0-21swapper/021:37:210
14213998728,56cyclictest2297-21ssh21:20:330
14213998728,46cyclictest1754-21modprobe22:00:090
14213998723,53cyclictest0-21swapper/023:35:390
14213998631,41cyclictest28004-21ssh21:51:200
14213998626,48cyclictest0-21swapper/021:15:280
14213998626,48cyclictest0-21swapper/021:15:280
14213998626,45cyclictest18343-21aten_rbpower_vo20:50:250
14213998625,50cyclictest0-21swapper/000:29:190
14213998625,50cyclictest0-21swapper/000:29:190
14213998625,47cyclictest24415-21tune2fs23:45:260
14213998534,35cyclictest22827-21apt-get22:25:200
14213998527,48cyclictest21122-21grep23:40:360
14213998424,46cyclictest0-21swapper/022:50:160
14213998423,53cyclictest29446-21cron21:15:100
105202840,2sleep110521-21aten_rbpower_en22:10:231
14213998327,45cyclictest0-21swapper/020:31:170
14213998325,47cyclictest0-21swapper/022:47:280
14213998324,43cyclictest0-21swapper/020:04:110
14213998324,42cyclictest0-21swapper/022:14:490
14213998323,43cyclictest0-21swapper/021:31:450
14213998321,46cyclictest0-21swapper/023:57:540
1421399826,40cyclictest0-21swapper/019:20:230
14213998234,38cyclictest4961-21ssh22:42:170
14213998233,45cyclictest13934-21ssh23:32:330
14213998233,39cyclictest18130-21ssh22:58:430
14213998230,31cyclictest29883-21tail19:50:380
14213998227,42cyclictest25098-21sh21:48:340
14213998227,42cyclictest25098-21sh21:48:340
14213998226,47cyclictest0-21swapper/000:35:310
14213998226,43cyclictest0-21swapper/023:26:500
14213998225,50cyclictest0-21swapper/021:09:380
14213998225,41cyclictest0-21swapper/000:31:470
14213998222,45cyclictest0-21swapper/023:09:590
14213998128,38cyclictest25102-21latency_hist19:40:100
14213998126,43cyclictest0-21swapper/023:13:110
14213998124,45cyclictest27737-21proc_pri19:45:350
14213998124,44cyclictest0-21swapper/022:22:100
14213998124,38cyclictest18899-21ssh00:17:390
14213998123,48cyclictest0-21swapper/022:16:320
1421399810,59cyclictest0-21swapper/022:35:280
14213998024,48cyclictest0-21swapper/020:39:350
14213998024,48cyclictest0-21swapper/020:39:350
14213998023,46cyclictest1180-21runrttasks20:42:140
14213998020,49cyclictest0-21swapper/021:40:290
14213997926,42cyclictest0-21swapper/020:06:540
14213997924,46cyclictest0-21swapper/020:25:530
14213997923,43cyclictest5203-21chrt20:15:010
14213997835,33cyclictest22693-21awk19:30:380
14213997822,33cyclictest0-21swapper/020:15:220
1421499773,56cyclictest0-21swapper/122:35:251
14213997723,46cyclictest1180-21runrttasks21:04:080
14213997723,40cyclictest5159-21ssh23:21:350
14213997719,45cyclictest0-21swapper/022:02:550
1421499768,15cyclictest15040-21ssh21:35:391
14213997527,45cyclictest177792sleep020:47:460
14213997521,43cyclictest11463-21seq00:09:110
1421499723,47cyclictest0-21swapper/121:25:321
14213997224,37cyclictest0-21swapper/019:40:100
14215997116,37cyclictest7750irq/56-dwc_otg21:35:392
14213997022,36cyclictest21118-21taskset19:29:000
14215996931,17cyclictest301ktimersoftd/222:35:272
14213996924,7cyclictest21252-21chrt20:55:590
245462670,3sleep2301ktimersoftd/221:47:342
245462670,3sleep2301ktimersoftd/221:47:342
29082660,3sleep32907-21unixbench_singl20:05:383
14216996411,12cyclictest37-21rcuc/321:35:373
131202620,5sleep30-21swapper/319:05:343
1421699599,13cyclictest7950irq/56-dwc_otg_22:35:283
1421599503,6cyclictest7850irq/56-dwc_otg_23:10:202
1421699487,7cyclictest0-21swapper/319:25:243
1421499487,27cyclictest0-21swapper/120:15:151
1421499487,26cyclictest0-21swapper/120:20:231
1421599464,5cyclictest7950irq/56-dwc_otg_21:30:242
1421599456,20cyclictest301ktimersoftd/221:57:232
1421499452,15cyclictest7850irq/56-dwc_otg_21:30:371
138702453,35sleep00-21swapper/019:09:130
240922440,3sleep121-21rcuc/122:25:371
1421699447,22cyclictest0-21swapper/320:10:153
1421599444,22cyclictest29-21rcuc/220:50:302
14215994412,3cyclictest7750irq/56-dwc_otg22:10:162
1421499447,25cyclictest0-21swapper/122:50:211
1421499447,22cyclictest0-21swapper/119:15:221
14214994416,16cyclictest0-21swapper/122:00:371
14214994414,9cyclictest0-21swapper/121:05:371
14214994414,15cyclictest23-21ksoftirqd/122:30:221
263372430,2sleep10-21swapper/100:26:111
263372430,2sleep10-21swapper/100:26:111
1421599432,30cyclictest29478-21sh21:15:102
14215994317,11cyclictest301ktimersoftd/223:15:372
1421499438,23cyclictest0-21swapper/120:10:221
1421499436,24cyclictest0-21swapper/121:55:231
1421699427,24cyclictest0-21swapper/321:55:233
14215994214,14cyclictest301ktimersoftd/200:20:362
14215994213,5cyclictest7950irq/56-dwc_otg_23:50:212
1421499426,26cyclictest0-21swapper/100:15:231
1421499424,23cyclictest7850irq/56-dwc_otg_19:45:391
1421599419,8cyclictest29-21rcuc/221:20:322
1421599418,13cyclictest301ktimersoftd/200:34:452
14215994124,4cyclictest7750irq/56-dwc_otg00:30:102
14215994124,4cyclictest7750irq/56-dwc_otg00:30:102
1421599412,14cyclictest0-21swapper/220:10:222
1421499418,20cyclictest0-21swapper/121:00:221
1421499416,25cyclictest0-21swapper/123:55:241
1421599407,25cyclictest0-21swapper/222:40:232
1421699394,23cyclictest7750irq/56-dwc_otg00:15:103
1421599397,24cyclictest0-21swapper/220:55:232
1421599392,16cyclictest7950irq/56-dwc_otg_22:05:282
14215993917,9cyclictest301ktimersoftd/222:25:372
1421499391,8cyclictest7850irq/56-dwc_otg_19:35:211
1421499391,28cyclictest0-21swapper/122:15:381
1421699382,20cyclictest7950irq/56-dwc_otg_00:05:223
1421599384,16cyclictest7850irq/56-dwc_otg_21:15:282
1421599384,16cyclictest7850irq/56-dwc_otg_21:15:282
14215993812,13cyclictest7950irq/56-dwc_otg_23:35:252
1421499386,22cyclictest1565-21ssh21:20:241
1421499384,24cyclictest23955-21ls23:05:301
1421499382,4cyclictest7750irq/56-dwc_otg00:10:221
322412370,1sleep20-21swapper/220:00:102
1421699376,22cyclictest60-21kswapd022:50:183
1421699371,4cyclictest24648-21grep23:05:383
1421599377,27cyclictest9204-21sshd20:25:232
1421599377,24cyclictest0-21swapper/219:25:242
1421599376,17cyclictest7850irq/56-dwc_otg_20:20:282
1421499371,25cyclictest7150-21ls23:25:101
1421699365,10cyclictest7750irq/56-dwc_otg19:30:213
14216993629,5cyclictest37-21rcuc/321:40:213
14216993613,15cyclictest0-21swapper/300:24:203
1421699361,17cyclictest7850irq/56-dwc_otg_23:47:403
1421599367,16cyclictest31-21ksoftirqd/219:15:352
1421599365,17cyclictest29-21rcuc/223:07:202
1421599362,8cyclictest0-21swapper/219:40:232
1421599362,7cyclictest20442-21grep23:00:392
14215993617,4cyclictest29-21rcuc/200:00:582
1421599361,5cyclictest31-21ksoftirqd/200:37:492
1421599361,14cyclictest25210-21diskmemload22:20:212
1421499365,22cyclictest4014-21ssh00:00:241
14214993612,5cyclictest0-21swapper/123:33:531
1421499361,25cyclictest0-21swapper/119:30:241
279642350,1sleep30-21swapper/300:29:113
279642350,1sleep30-21swapper/300:29:113
1421699357,7cyclictest7950irq/56-dwc_otg_23:20:363
1421699354,17cyclictest7950irq/56-dwc_otg_20:35:383
1421699354,17cyclictest7950irq/56-dwc_otg_20:35:383
1421599359,17cyclictest31-21ksoftirqd/222:16:542
1421599358,14cyclictest7950irq/56-dwc_otg_22:50:242
1421599358,14cyclictest29-21rcuc/200:12:022
1421599357,5cyclictest31-21ksoftirqd/223:57:572
1421599356,22cyclictest0-21swapper/219:50:232
1421599355,8cyclictest29-21rcuc/222:55:542
1421599352,13cyclictest301ktimersoftd/219:45:372
1421599351,6cyclictest301ktimersoftd/219:37:112
14215993510,12cyclictest7750irq/56-dwc_otg21:54:352
1421499358,6cyclictest7750irq/56-dwc_otg20:30:371
1421499357,8cyclictest23-21ksoftirqd/100:25:101
1421499357,16cyclictest7850irq/56-dwc_otg_21:15:301
1421499357,16cyclictest7850irq/56-dwc_otg_21:15:301
1421499355,6cyclictest7950irq/56-dwc_otg_21:50:291
14214993524,8cyclictest19520-21sh23:40:091
14214993518,4cyclictest1180-21runrttasks23:40:131
14214993517,4cyclictest23-21ksoftirqd/119:30:101
1421499351,6cyclictest4365-21rm00:40:051
14214993516,5cyclictest23125-21sh21:45:361
14214993516,5cyclictest23125-21sh21:45:361
1421499351,4cyclictest0-21swapper/123:25:211
1421499351,25cyclictest32622-21switchtime23:15:361
14214993510,4cyclictest27521-21basename23:10:231
304552341,29sleep330462-21sh23:52:253
1421699346,15cyclictest0-21swapper/320:15:153
14216993428,4cyclictest381ktimersoftd/319:10:203
1421699341,21cyclictest7950irq/56-dwc_otg_00:05:103
14216993411,10cyclictest0-21swapper/323:00:333
1421599347,8cyclictest29-21rcuc/223:40:572
1421599347,5cyclictest0-21swapper/219:20:232
1421599347,15cyclictest0-21swapper/220:15:142
1421599346,13cyclictest31-21ksoftirqd/219:30:322
14215993421,5cyclictest19271-21grep21:40:372
14215993416,8cyclictest7950irq/56-dwc_otg_00:06:272
14215993410,10cyclictest7750irq/56-dwc_otg20:31:242
1421499347,14cyclictest7850irq/56-dwc_otg_00:05:381
1421499347,13cyclictest7850irq/56-dwc_otg_21:00:091
1421499341,28cyclictest0-21swapper/122:20:231
1421499341,22cyclictest14970-21ls20:40:281
14214993412,14cyclictest0-21swapper/122:05:241
1421499341,18cyclictest0-21swapper/119:41:021
1421699339,5cyclictest27042-21aten_rbpower_en22:30:233
1421699339,12cyclictest0-21swapper/321:34:533
1421699338,14cyclictest7950irq/56-dwc_otg_21:15:353
1421699338,14cyclictest7950irq/56-dwc_otg_21:15:353
14216993322,5cyclictest15850-21unixbench_singl22:15:383
1421699331,7cyclictest12546-21dhclient-script20:35:103
14216993312,5cyclictest0-21swapper/323:40:523
14216993311,5cyclictest2311-21cpuspeed22:00:243
1421599337,23cyclictest0-21swapper/221:05:222
1421599332,15cyclictest7950irq/56-dwc_otg_20:10:102
1421599331,17cyclictest26967-21ssh22:30:202
1421499339,7cyclictest0-21swapper/120:45:331
1421499334,14cyclictest7850irq/56-dwc_otg_23:50:241
14214993315,5cyclictest8057-21sh22:45:381
1421499331,18cyclictest25210-21diskmemload21:10:331
1421699329,5cyclictest23320-1kworker/u9:121:10:273
1421699329,12cyclictest0-21swapper/322:48:103
1421699328,13cyclictest39-21ksoftirqd/319:18:183
1421699328,13cyclictest0-21swapper/322:56:043
1421699328,13cyclictest0-21swapper/322:07:213
1421699323,20cyclictest7850irq/56-dwc_otg_23:32:273
1421699322,6cyclictest0-21swapper/321:10:103
14216993224,6cyclictest15734-21grep20:40:383
14216993224,5cyclictest1517-21sh20:05:093
1421699321,5cyclictest7750irq/56-dwc_otg19:50:383
1421699321,5cyclictest28825-21/usr/sbin/munin00:30:373
14216993215,9cyclictest7950irq/56-dwc_otg_22:40:363
14216993212,8cyclictest7750irq/56-dwc_otg19:45:363
1421599329,15cyclictest31-21ksoftirqd/220:45:212
1421599326,9cyclictest31-21ksoftirqd/219:10:312
1421599325,16cyclictest6897-21ssh22:45:232
1421599324,21cyclictest7850irq/56-dwc_otg_00:15:272
1421599323,21cyclictest7850irq/56-dwc_otg_23:30:142
1421599323,19cyclictest7750irq/56-dwc_otg23:24:012
1421599323,14cyclictest7950irq/56-dwc_otg_20:40:382
1421599322,20cyclictest0-21swapper/222:00:242
1421499328,5cyclictest3613-21ps22:40:351
1421499325,8cyclictest0-21swapper/100:30:251
1421499324,10cyclictest7950irq/56-dwc_otg_21:40:201
1421499321,24cyclictest7950irq/56-dwc_otg_19:55:221
1421699318,4cyclictest0-21swapper/322:23:573
1421699316,7cyclictest7950irq/56-dwc_otg_19:25:103
1421699316,6cyclictest7850irq/56-dwc_otg_20:50:243
1421699315,5cyclictest7950irq/56-dwc_otg_20:45:273
1421699314,4cyclictest7850irq/56-dwc_otg_21:54:063
1421699312,20cyclictest39-21ksoftirqd/323:55:253
1421699311,13cyclictest22825-21ssh21:45:313
1421699311,13cyclictest22825-21ssh21:45:313
1421699311,10cyclictest27825-21sh23:10:263
1421599316,6cyclictest7850irq/56-dwc_otg_20:37:112
1421599316,6cyclictest7850irq/56-dwc_otg_20:37:112
1421599311,3cyclictest0-21swapper/221:05:102
1421599311,13cyclictest301ktimersoftd/223:49:262
1421499316,15cyclictest0-21swapper/123:45:221
1421499315,5cyclictest7850irq/56-dwc_otg_20:05:091
1421499311,22cyclictest1955-21cpuspeed20:05:251
1421499311,14cyclictest7750irq/56-dwc_otg23:00:371
1421699309,4cyclictest7750irq/56-dwc_otg00:15:243
1421699309,4cyclictest0-21swapper/322:13:213
1421699305,17cyclictest0-21swapper/323:27:313
1421699301,20cyclictest15722-21ssh23:35:243
14216993011,12cyclictest0-21swapper/321:21:203
1421599308,5cyclictest7750irq/56-dwc_otg23:25:242
1421599303,14cyclictest32634-21fschecks_count20:00:262
1421499301,5cyclictest0-21swapper/122:55:331
14216992912,5cyclictest1685-21cat00:35:383
1421699291,19cyclictest32155-21latency_hist20:00:103
1421699291,19cyclictest0-21swapper/320:59:273
1421699291,17cyclictest9553-21ls20:25:283
14214992915,11cyclictest0-21swapper/119:50:381
1421499291,16cyclictest13131-21grep20:35:271
1421499291,16cyclictest13131-21grep20:35:271
1421699285,5cyclictest2529550wget19:40:253
1421699282,8cyclictest39-21ksoftirqd/319:40:053
1421499289,6cyclictest14241-21apt-get19:10:201
130972286,11sleep20-21swapper/219:05:342
1421699271,9cyclictest0-21swapper/320:20:213
1421499272,7cyclictest7950irq/56-dwc_otg_20:50:381
1421499272,4cyclictest7750irq/56-dwc_otg19:20:201
132622270,2sleep10-21swapper/119:05:361
1421699261,12cyclictest7950irq/56-dwc_otg_21:00:363
14214992616,7cyclictest9207-21aten_rbpower_cu20:25:231
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional