You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-10 - 02:46

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Thu Sep 10, 2026 00:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
681421530,4sleep21448199cyclictest22:42:372
144699911519,76cyclictest20935-21cat22:20:380
75482920,2sleep00-21swapper/022:05:190
1448199852,20cyclictest7750irq/56-dwc_otg22:20:382
1446999846,65cyclictest0-21swapper/020:45:240
1446999791,41cyclictest0-21swapper/019:10:310
1446999787,51cyclictest10400-21unixbench-2d23:25:460
1446999762,64cyclictest0-21swapper/022:30:070
1446999747,47cyclictest25812-21aten_rbpower_vo23:45:310
87852730,5sleep21448199cyclictest21:27:482
1446999732,44cyclictest0-21swapper/022:40:320
14469997323,14cyclictest0-21swapper/020:25:300
14469997311,7cyclictest15874-21munin-plugin-st22:15:190
1446999727,45cyclictest20160-21sort22:20:190
14469997234,3cyclictest0-21swapper/022:05:300
14469997229,24cyclictest0-21swapper/000:15:280
1446999721,43cyclictest0-21swapper/023:10:290
122682720,6sleep21448199cyclictest21:31:272
1448199716,12cyclictest7750irq/56-dwc_otg22:50:312
1448699703,23cyclictest37-21rcuc/322:20:393
1446999702,52cyclictest7510-21unixbench-2d21:25:460
40722690,2sleep11447599cyclictest22:40:101
14469996917,26cyclictest17748-21fschecks_count23:35:360
1446999689,38cyclictest32692-21grep21:55:420
1446999686,39cyclictest30586-21aten_rbpower_en00:30:360
1446999685,59cyclictest8028-21sshd20:20:380
14469996811,39cyclictest20705-21latency_hist23:00:180
14469996810,5cyclictest0-21swapper/019:40:290
14469996810,5cyclictest0-21swapper/019:40:290
1448199677,7cyclictest7750irq/56-dwc_otg21:20:312
1446999679,54cyclictest21753-21grep23:00:400
1446999674,52cyclictest0-21swapper/021:47:480
14469996713,37cyclictest9630-21ssh00:05:190
1446999668,39cyclictest32637-21ssh21:17:380
90312650,3sleep29002-21ssh22:05:452
1446999654,39cyclictest0-21swapper/021:50:370
1446999654,35cyclictest32451-21cron22:35:180
1446999646,42cyclictest26217-21latency_hist00:25:190
14469996428,10cyclictest0-21swapper/019:55:290
1448199633,6cyclictest7750irq/56-dwc_otg23:00:352
1448199631,24cyclictest20788-21ls23:00:182
1446999639,34cyclictest9776-21rm00:05:230
1446999632,46cyclictest0-21swapper/021:35:370
1446999632,46cyclictest0-21swapper/021:35:370
1446999632,41cyclictest17180-21sed23:35:180
1446999631,9cyclictest10922-21fschecks_time21:30:350
14469996312,31cyclictest0-21swapper/019:50:290
1448699629,14cyclictest22257-21ssh00:20:313
1448699624,9cyclictest7750irq/56-dwc_otg21:55:323
1446999627,41cyclictest0-21swapper/021:12:140
1446999627,40cyclictest3156-21ssh23:56:230
1446999624,36cyclictest0-21swapper/023:50:420
1446999624,36cyclictest0-21swapper/023:50:420
1446999622,44cyclictest0-21swapper/020:01:330
14469996211,35cyclictest25421-21date23:45:190
14475996124,15cyclictest7750irq/56-dwc_otg22:20:391
1446999616,27cyclictest2870-21ssh21:20:420
14469996116,22cyclictest5861-21cpu20:15:340
246362600,2sleep20-21swapper/221:05:382
246362600,2sleep20-21swapper/221:05:382
1446999606,40cyclictest4157-21sh22:40:180
14469996010,34cyclictest0-21swapper/020:50:290
1447599594,10cyclictest0-21swapper/120:55:301
1446999598,42cyclictest0-21swapper/000:39:120
1446999594,42cyclictest0-21swapper/021:06:480
1446999594,42cyclictest0-21swapper/021:06:480
1446999586,37cyclictest13383-21ssh22:50:410
14469995827,7cyclictest9810-21ssh22:45:460
14469995812,9cyclictest7850irq/56-dwc_otg_21:40:290
14469995812,11cyclictest0-21swapper/023:05:290
1448199571,13cyclictest7750irq/56-dwc_otg00:30:522
1447599576,24cyclictest25644-21diskmemload21:55:321
1446999579,30cyclictest3290-21ssh23:17:390
1446999576,36cyclictest0-21swapper/000:30:190
1446999576,36cyclictest0-21swapper/000:30:190
14469995717,7cyclictest0-21swapper/019:15:330
1446999567,36cyclictest5090-21ssh23:20:300
1446999565,35cyclictest19383-21grep19:20:450
1446999563,41cyclictest0-21swapper/021:01:270
173102550,2sleep30-21swapper/300:14:263
1448199552,10cyclictest13340-21ssh23:30:302
1448199550,13cyclictest7750irq/56-dwc_otg20:45:362
1447599554,12cyclictest22229-21ssh00:20:291
1446999557,42cyclictest0-21swapper/020:40:300
1446999555,37cyclictest16989-21ssh00:13:500
1446999552,30cyclictest20443-21apt-get20:55:250
1448199542,10cyclictest7850irq/56-dwc_otg_00:00:282
1447599546,19cyclictest7850irq/56-dwc_otg_20:15:321
1446999544,7cyclictest27432-21wget19:45:320
1448699534,13cyclictest0-21swapper/323:00:303
1446999533,37cyclictest12924-21/usr/sbin/munin20:35:430
1446999533,26cyclictest0-21swapper/019:35:300
1446999532,7cyclictest5020-21grep20:10:460
1446999532,32cyclictest22992-21tail19:30:470
1448199526,28cyclictest0-21swapper/223:10:322
14475995211,26cyclictest0-21swapper/119:10:241
73972510,1sleep30-21swapper/320:20:193
14475995128,4cyclictest23-21ksoftirqd/123:00:181
1446999513,36cyclictest0-21swapper/020:34:080
1446999513,36cyclictest0-21swapper/020:34:080
1448699507,30cyclictest0-21swapper/323:40:323
1447599508,28cyclictest0-21swapper/122:10:351
194182490,3sleep339-21ksoftirqd/322:19:153
1448199497,30cyclictest0-21swapper/219:20:312
1447599499,31cyclictest7750irq/56-dwc_otg00:05:181
1447599492,5cyclictest0-21swapper/100:30:351
1446999492,36cyclictest0-21swapper/019:25:320
1446999492,33cyclictest2082-21/usr/sbin/munin20:05:360
1448199487,26cyclictest0-21swapper/222:30:242
1448699477,25cyclictest0-21swapper/320:30:313
1448699477,25cyclictest0-21swapper/320:30:313
1448699477,25cyclictest0-21swapper/320:25:323
1448199477,6cyclictest21083-21timerwakeupswit19:25:452
1448199462,6cyclictest0-21swapper/221:45:312
1447599467,27cyclictest0-21swapper/120:40:241
1448699457,25cyclictest0-21swapper/319:10:243
1448199456,25cyclictest0-21swapper/219:35:302
1447599452,23cyclictest24497-21ssh22:25:311
1448699447,25cyclictest0-21swapper/322:30:373
1448699446,25cyclictest0-21swapper/300:05:243
1448699442,9cyclictest0-21swapper/323:30:293
166602430,2sleep10-21swapper/100:13:151
1448699432,8cyclictest7850irq/56-dwc_otg_20:45:293
1448699432,20cyclictest7950irq/56-dwc_otg_23:25:383
1448699432,11cyclictest0-21swapper/321:00:313
1448199438,24cyclictest0-21swapper/221:40:322
1447599437,28cyclictest0-21swapper/119:55:291
1447599434,11cyclictest7750irq/56-dwc_otg22:06:371
14475994311,23cyclictest0-21swapper/119:25:311
1446999431,21cyclictest14460-21cyclictest19:10:200
1448199428,4cyclictest0-21swapper/223:25:292
1447599424,27cyclictest0-21swapper/122:15:281
1447599422,11cyclictest8618-21ssh22:45:301
14475994219,13cyclictest221ktimersoftd/123:56:571
14475994213,12cyclictest221ktimersoftd/122:40:471
139262422,34sleep00-21swapper/019:07:140
166302411,34sleep20-21swapper/221:36:392
166302411,34sleep20-21swapper/221:36:392
14486994125,4cyclictest12479-21latency_hist22:50:193
1448199417,25cyclictest0-21swapper/220:00:312
1447599414,27cyclictest7750irq/56-dwc_otg22:50:461
1447599413,19cyclictest0-21swapper/120:25:311
1447599412,4cyclictest7750irq/56-dwc_otg22:30:351
14475994118,12cyclictest7950irq/56-dwc_otg_23:00:461
14475994114,14cyclictest221ktimersoftd/120:50:321
1448699407,7cyclictest0-21swapper/320:40:303
1448199406,27cyclictest362-21ssh22:35:332
14481994017,13cyclictest29-21rcuc/200:25:432
14481994017,13cyclictest29-21rcuc/200:25:432
1447599409,22cyclictest7750irq/56-dwc_otg21:30:341
1447599408,18cyclictest221ktimersoftd/100:05:241
1447599407,24cyclictest0-21swapper/121:00:321
14475994013,11cyclictest221ktimersoftd/120:15:181
1447599401,27cyclictest25912-21ls23:45:321
1448699397,22cyclictest0-21swapper/321:50:253
14486993930,7cyclictest7950irq/56-dwc_otg_23:15:293
14486993913,6cyclictest31146-21forks19:55:353
1448699391,22cyclictest18933-21rm21:40:203
1448699391,22cyclictest18933-21rm21:40:203
14481993931,5cyclictest301ktimersoftd/220:20:312
14481993919,5cyclictest2988750wget23:50:302
14481993919,5cyclictest2988750wget23:50:302
1447599396,23cyclictest0-21swapper/119:15:241
1447599394,18cyclictest26006-21runrttasks21:10:311
1447599393,24cyclictest7750irq/56-dwc_otg23:25:431
1447599393,20cyclictest19069-21ssh21:40:291
14475993920,5cyclictest21-21rcuc/123:17:311
14475993916,14cyclictest0-21swapper/121:45:461
1447599391,25cyclictest7750irq/56-dwc_otg23:36:281
14475993912,11cyclictest7750irq/56-dwc_otg20:20:371
114702390,2sleep20-21swapper/222:48:372
1448199381,6cyclictest0-21swapper/222:25:292
1447599387,4cyclictest21-21rcuc/121:25:451
1447599386,5cyclictest7950irq/56-dwc_otg_00:15:281
1447599386,23cyclictest7750irq/56-dwc_otg23:50:361
1447599386,23cyclictest7750irq/56-dwc_otg23:50:361
1447599384,8cyclictest0-21swapper/123:10:291
1447599384,11cyclictest0-21swapper/120:00:301
14475993819,4cyclictest21-21rcuc/121:52:091
1447599381,10cyclictest0-21swapper/123:24:341
1448699371,25cyclictest9465-21gpgv00:05:183
1448699371,23cyclictest26020-21latency19:40:373
1448699371,23cyclictest26020-21latency19:40:373
14481993713,6cyclictest23455-21modprobe19:35:182
14481993711,6cyclictest2709-21unixbench-2d23:55:472
1447599373,26cyclictest7750irq/56-dwc_otg20:45:341
1447599373,24cyclictest7750irq/56-dwc_otg23:31:441
14475993715,13cyclictest0-21swapper/119:40:291
14475993715,13cyclictest0-21swapper/119:40:291
14475993712,4cyclictest7750irq/56-dwc_otg19:50:321
14486993627,6cyclictest381ktimersoftd/322:50:323
1448199367,5cyclictest32676-21/usr/sbin/munin21:55:422
14481993630,4cyclictest2185-21aten_rbpower_po20:05:322
1447599363,24cyclictest7850irq/56-dwc_otg_19:20:431
1447599362,8cyclictest0-21swapper/123:40:311
1447599362,7cyclictest0-21swapper/123:05:301
1447599362,25cyclictest22909-21timerwakeupswit19:30:461
1447599362,23cyclictest7750irq/56-dwc_otg00:25:321
1447599362,23cyclictest7750irq/56-dwc_otg00:25:321
1447599361,8cyclictest27405-21aten_rbpower_po19:45:321
1447599361,24cyclictest7750irq/56-dwc_otg21:08:221
1447599361,24cyclictest7750irq/56-dwc_otg21:08:221
1447599361,22cyclictest7750irq/56-dwc_otg20:05:191
1448699354,4cyclictest7850irq/56-dwc_otg_22:55:423
1448699352,5cyclictest6901-21cat21:25:383
1448699352,4cyclictest7850irq/56-dwc_otg_22:25:303
1448199355,3cyclictest0-21swapper/200:22:032
1448199351,8cyclictest20711-21sort20:55:362
14481993518,10cyclictest25114-21/usr/sbin/munin23:05:372
14481993514,5cyclictest15801-21sh00:11:402
1448199351,20cyclictest0-21swapper/222:00:332
1447599353,21cyclictest7750irq/56-dwc_otg21:15:351
1447599351,8cyclictest13923-21grep20:35:451
14475993512,5cyclictest23-21ksoftirqd/121:20:341
1448699347,15cyclictest0-21swapper/320:55:253
1448699346,4cyclictest7850irq/56-dwc_otg_00:25:463
1448699346,4cyclictest7850irq/56-dwc_otg_00:25:463
1448699343,7cyclictest0-21swapper/319:25:313
1448699341,8cyclictest12119-21ssh22:10:353
1448699341,23cyclictest1425-21timerandwakeup22:35:473
14486993410,7cyclictest0-21swapper/321:11:583
14486993410,4cyclictest0-21swapper/323:55:393
1448199349,7cyclictest7850irq/56-dwc_otg_19:10:442
1448199349,6cyclictest29-21rcuc/223:20:452
1448199347,6cyclictest7950irq/56-dwc_otg_23:20:192
1448199341,4cyclictest7750irq/56-dwc_otg20:10:302
1448199341,26cyclictest29359-21cut19:50:352
1448199341,21cyclictest13131-21ls20:35:332
14481993410,4cyclictest0-21swapper/221:15:442
1447599344,20cyclictest7750irq/56-dwc_otg19:39:291
1447599344,20cyclictest7750irq/56-dwc_otg00:35:411
1447599343,22cyclictest0-21swapper/122:05:191
1447599343,21cyclictest7750irq/56-dwc_otg21:35:281
1447599343,21cyclictest7750irq/56-dwc_otg21:35:281
130852346,11sleep20-21swapper/219:05:382
130852346,11sleep20-21swapper/219:05:382
1448699339,5cyclictest1933-21latency_hist21:20:193
1448699333,7cyclictest7750irq/56-dwc_otg21:30:283
1448699332,6cyclictest0-21swapper/323:37:423
14486993323,7cyclictest8269-21fschecks_time22:05:363
14486993316,5cyclictest30750-21ssh00:30:383
1448699331,15cyclictest7750irq/56-dwc_otg22:04:143
1448199337,20cyclictest0-21swapper/221:10:332
1448199332,14cyclictest7750irq/56-dwc_otg21:50:452
1448199331,6cyclictest17542-21aten_rbpower_en23:35:332
14481993312,5cyclictest2875-21/usr/sbin/munin00:35:402
1448199331,22cyclictest10191-21uniq00:05:362
1448199331,21cyclictest31936-21ls19:55:452
1447599334,9cyclictest7950irq/56-dwc_otg_20:35:191
1447599334,9cyclictest7950irq/56-dwc_otg_20:35:191
1448699324,4cyclictest7950irq/56-dwc_otg_19:55:193
1448699323,17cyclictest7950irq/56-dwc_otg_23:10:363
14486993222,8cyclictest28958-21latency_hist23:10:183
1448199325,6cyclictest7750irq/56-dwc_otg20:35:192
1448199325,6cyclictest7750irq/56-dwc_otg20:35:192
1448199322,22cyclictest0-21swapper/219:49:372
14481993212,3cyclictest0-21swapper/222:15:312
14481993211,5cyclictest10990-21latency_hist20:30:192
14481993210,4cyclictest7750irq/56-dwc_otg23:49:252
1448699315,12cyclictest7950irq/56-dwc_otg_00:35:363
1448699312,9cyclictest0-21swapper/323:20:293
1448699312,5cyclictest7750irq/56-dwc_otg20:35:403
1448699312,12cyclictest7850irq/56-dwc_otg_21:40:363
1448699311,5cyclictest25547-21ssh21:47:233
14486993115,5cyclictest1087-21/usr/sbin/munin20:00:453
1448699311,3cyclictest0-21swapper/323:45:443
1448199316,12cyclictest0-21swapper/200:15:442
1448199314,7cyclictest12175-21wget22:10:362
1448199313,13cyclictest7850irq/56-dwc_otg_19:40:412
1448199313,13cyclictest7850irq/56-dwc_otg_19:40:412
1448199311,18cyclictest6063-21ls20:15:372
1448699309,5cyclictest3386-21ssh21:20:483
1448699309,4cyclictest0-21swapper/322:41:353
1448699305,16cyclictest28404-21tail19:45:463
1448699304,15cyclictest8611-21grep20:20:463
1448699303,19cyclictest0-21swapper/319:20:353
1448199306,5cyclictest7850irq/56-dwc_otg_20:50:432
14481993010,10cyclictest0-21swapper/223:40:452
1448699292,5cyclictest7950irq/56-dwc_otg_23:50:343
1448699292,5cyclictest7950irq/56-dwc_otg_23:50:343
1448699292,19cyclictest0-21swapper/319:36:593
1448699292,11cyclictest0-21swapper/300:19:183
1448699291,9cyclictest16967-21grep19:15:393
1448699291,19cyclictest0-21swapper/319:33:423
1448199293,5cyclictest7950irq/56-dwc_otg_21:00:332
1447599296,11cyclictest14480-21apt-config19:10:201
133822295,10sleep30-21swapper/319:05:433
133822295,10sleep30-21swapper/319:05:433
1448699281,5cyclictest7750irq/56-dwc_otg20:10:413
1448699281,13cyclictest7950irq/56-dwc_otg_20:55:203
1448199282,17cyclictest0-21swapper/220:41:582
140732284,15sleep10-21swapper/119:09:091
1448699276,5cyclictest7850irq/56-dwc_otg_20:05:463
1448699276,4cyclictest7950irq/56-dwc_otg_21:05:343
1448699276,4cyclictest7950irq/56-dwc_otg_21:05:343
14481992714,5cyclictest16588-21cut19:15:342
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional