You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-12 - 15:40

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Mon Jan 12, 2026 12:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
31032780,6sleep1575499cyclictest11:30:321
5753997711,22cyclictest0-21swapper/008:50:300
575399736,61cyclictest0-21swapper/011:05:300
282502730,3sleep229-21rcuc/208:10:392
575499706,34cyclictest0-21swapper/109:40:301
287072690,2sleep20-21swapper/209:40:442
5753996750,8cyclictest468-21rs:main0
575699666,25cyclictest0-21swapper/309:40:303
575399666,15cyclictest0-21swapper/008:35:280
575399657,44cyclictest0-21swapper/009:00:300
575399657,44cyclictest0-21swapper/009:00:300
5753996415,26cyclictest0-21swapper/009:40:300
575399639,26cyclictest0-21swapper/008:05:290
5753996338,10cyclictest101ktimersoftd/011:10:310
5753996333,13cyclictest613-21aten_rbpower_po08:25:300
575399616,9cyclictest0-21swapper/007:25:280
5753996142,13cyclictest0-21swapper/010:25:240
5753996046,5cyclictest17601-21aten_rbpower_po12:10:300
5753996035,11cyclictest7850irq/56-dwc_otg_09:10:170
575399602,42cyclictest0-21swapper/010:50:300
575699592,8cyclictest7950irq/56-dwc_otg_12:00:303
575499597,32cyclictest0-21swapper/107:50:301
575499597,32cyclictest0-21swapper/107:50:301
5753995944,5cyclictest101ktimersoftd/008:45:380
5753995928,5cyclictest101ktimersoftd/011:35:370
5753995928,5cyclictest101ktimersoftd/011:35:370
5753995835,5cyclictest7750irq/56-dwc_otg12:00:170
5753995829,13cyclictest7850irq/56-dwc_otg_07:40:170
5753995823,20cyclictest0-21swapper/007:25:170
575399581,52cyclictest101ktimersoftd/011:40:440
5753995732,12cyclictest0-21swapper/012:25:280
5754995528,11cyclictest221ktimersoftd/110:45:291
5753995541,5cyclictest101ktimersoftd/007:15:170
575399552,31cyclictest0-21swapper/007:15:280
575399544,5cyclictest101ktimersoftd/007:40:460
5753995434,10cyclictest101ktimersoftd/011:35:180
5753995422,4cyclictest7850irq/56-dwc_otg_09:35:180
223292540,2sleep10-21swapper/107:55:331
178572540,2sleep20-21swapper/212:10:342
575699536,32cyclictest0-21swapper/310:15:303
575699536,32cyclictest0-21swapper/310:15:303
575699536,27cyclictest0-21swapper/308:50:303
575399539,25cyclictest0-21swapper/010:55:300
5753995337,6cyclictest101ktimersoftd/009:35:340
5753995327,4cyclictest0-21swapper/009:55:310
575399532,29cyclictest24531-21aten_rbpower_cu11:00:310
5753995322,21cyclictest17212-21grep09:10:330
575399531,29cyclictest21868-21cron07:55:180
575399531,29cyclictest21868-21cron07:55:180
575699527,31cyclictest0-21swapper/310:55:303
575499527,29cyclictest0-21swapper/109:00:301
575499527,29cyclictest0-21swapper/109:00:301
5754995216,10cyclictest7950irq/56-dwc_otg_09:30:391
5753995224,6cyclictest13771-21wget10:30:320
575699517,26cyclictest0-21swapper/307:55:303
575399514,29cyclictest0-21swapper/010:05:280
5753995141,3cyclictest0-21swapper/010:10:330
5753995135,5cyclictest101ktimersoftd/010:40:430
575399513,26cyclictest0-21swapper/009:20:450
5753995131,5cyclictest101ktimersoftd/008:25:170
5753995130,3cyclictest0-21swapper/009:25:270
5753995128,11cyclictest101ktimersoftd/007:30:320
5754995010,25cyclictest0-21swapper/110:55:301
5753995026,6cyclictest11060-21unixbench_multi10:20:450
5753995022,12cyclictest30124-21aten_rbpower_po11:15:300
575699491,7cyclictest7850irq/56-dwc_otg_11:25:303
575599493,5cyclictest7750irq/56-dwc_otg07:25:292
575499497,24cyclictest0-21swapper/108:35:281
575499494,11cyclictest23939-21munin-run09:30:171
5753994926,4cyclictest0-21swapper/009:15:320
5753994924,12cyclictest101ktimersoftd/011:52:030
575699487,25cyclictest0-21swapper/311:35:303
575699487,25cyclictest0-21swapper/311:35:303
575699486,25cyclictest0-21swapper/308:10:293
575699484,7cyclictest7950irq/56-dwc_otg_10:45:293
5754994819,12cyclictest7950irq/56-dwc_otg_10:05:181
5753994836,4cyclictest7750irq/56-dwc_otg09:00:180
5753994836,4cyclictest7750irq/56-dwc_otg09:00:180
5753994829,9cyclictest101ktimersoftd/010:02:280
5753994815,30cyclictest101ktimersoftd/008:40:410
575399481,4cyclictest30636-21timerwakeupswit09:45:450
575399481,4cyclictest30636-21timerwakeupswit09:45:450
5753994814,4cyclictest16020-21fschecks_time12:05:340
575399481,25cyclictest31930-21latency09:50:360
575499477,26cyclictest0-21swapper/110:15:301
575499477,26cyclictest0-21swapper/110:15:301
5754994741,4cyclictest221ktimersoftd/108:05:301
5754994716,4cyclictest7850irq/56-dwc_otg_08:00:341
575399476,25cyclictest0-21swapper/007:55:300
5753994724,12cyclictest0-21swapper/007:45:310
5753994717,14cyclictest19316-21/usr/sbin/munin10:45:340
575699467,25cyclictest0-21swapper/307:45:313
575699466,28cyclictest0-21swapper/310:00:223
5756994621,8cyclictest7950irq/56-dwc_otg_12:05:343
575599462,10cyclictest7750irq/56-dwc_otg08:50:282
575499467,25cyclictest0-21swapper/107:40:301
575399463,21cyclictest0-21swapper/010:15:440
575399463,21cyclictest0-21swapper/010:15:440
5753994622,7cyclictest1125-21runrttasks11:45:410
5753994619,17cyclictest27462sleep011:29:500
5753994615,22cyclictest0-21swapper/008:01:320
51992462,36sleep00-21swapper/007:06:360
5756994515,8cyclictest7850irq/56-dwc_otg_11:10:353
575499456,25cyclictest0-21swapper/108:50:301
5754994519,4cyclictest3126450wget08:20:301
5753994526,7cyclictest101ktimersoftd/008:14:530
5753994521,4cyclictest20768-21chrt12:20:380
5753994521,4cyclictest20768-21chrt12:20:380
5753994515,18cyclictest0-21swapper/011:20:280
5753994515,15cyclictest0-21swapper/008:15:270
575399451,33cyclictest9-21ksoftirqd/012:18:480
575599448,12cyclictest7850irq/56-dwc_otg_11:10:182
575599447,23cyclictest0-21swapper/210:25:252
575499445,7cyclictest7850irq/56-dwc_otg_08:10:291
575499442,11cyclictest12113-21sed07:25:431
5754994420,8cyclictest7850irq/56-dwc_otg_08:59:071
5754994420,8cyclictest7850irq/56-dwc_otg_08:59:071
5754994415,5cyclictest7950irq/56-dwc_otg_12:10:361
5753994418,15cyclictest0-21swapper/012:34:010
575699437,24cyclictest0-21swapper/310:25:313
575699436,22cyclictest0-21swapper/307:50:303
575699436,22cyclictest0-21swapper/307:50:303
5756994315,13cyclictest7950irq/56-dwc_otg_08:35:433
575599437,24cyclictest0-21swapper/212:05:302
575499432,4cyclictest0-21swapper/109:35:281
5754994324,6cyclictest7750irq/56-dwc_otg10:35:181
5754994310,20cyclictest0-21swapper/110:05:351
5753994326,5cyclictest15225-21chrt12:02:310
5753994318,7cyclictest25968-21wc12:35:380
575399431,10cyclictest0-21swapper/010:40:180
39462435,25sleep33985-21aten_rbpower_en07:05:303
575699427,21cyclictest0-21swapper/312:30:293
5756994216,11cyclictest7950irq/56-dwc_otg_08:40:343
5755994215,5cyclictest0-21swapper/210:20:302
575499427,25cyclictest0-21swapper/110:25:311
575499427,22cyclictest0-21swapper/107:45:311
575499426,4cyclictest5948-21ls07:10:311
5754994220,8cyclictest7850irq/56-dwc_otg_12:05:341
5754994218,8cyclictest7950irq/56-dwc_otg_07:20:401
5754994218,5cyclictest564-21aten_rbpower_en08:25:301
575499421,4cyclictest7950irq/56-dwc_otg_10:40:291
575699417,24cyclictest0-21swapper/307:15:303
575599412,21cyclictest7950irq/56-dwc_otg_09:00:342
575599412,21cyclictest7950irq/56-dwc_otg_09:00:342
575499417,22cyclictest0-21swapper/111:35:301
575499417,22cyclictest0-21swapper/111:35:301
575499415,22cyclictest0-21swapper/111:10:381
575499411,5cyclictest0-21swapper/108:15:291
575699406,17cyclictest0-21swapper/307:35:313
575499403,7cyclictest0-21swapper/111:25:291
5754994011,5cyclictest7950irq/56-dwc_otg_07:35:451
575699397,22cyclictest0-21swapper/311:05:303
575699392,30cyclictest7950irq/56-dwc_otg_09:20:273
575599392,20cyclictest7950irq/56-dwc_otg_10:35:282
575499397,24cyclictest0-21swapper/110:50:311
575499391,23cyclictest2574-21ls10:00:181
575699387,21cyclictest0-21swapper/311:30:313
575699387,15cyclictest24740-21/usr/sbin/munin09:30:383
5756993826,3cyclictest0-21swapper/308:45:353
575699381,6cyclictest0-21swapper/307:28:203
5756993812,7cyclictest7750irq/56-dwc_otg07:20:373
5756993810,11cyclictest39-21ksoftirqd/310:10:413
575599381,22cyclictest11157-21ls07:25:182
575499387,9cyclictest1124-21snmpd12:25:281
575499385,6cyclictest7850irq/56-dwc_otg_12:00:461
575499382,6cyclictest0-21swapper/108:40:301
575499382,4cyclictest7872-21/usr/sbin/munin08:45:421
5754993815,8cyclictest7750irq/56-dwc_otg09:15:481
5754993810,12cyclictest7950irq/56-dwc_otg_08:30:331
301672380,5sleep1575499cyclictest09:45:381
301672380,5sleep1575499cyclictest09:45:381
575699378,12cyclictest7850irq/56-dwc_otg_09:35:403
575699377,27cyclictest0-21swapper/310:50:313
575599377,7cyclictest7750irq/56-dwc_otg11:00:182
575599375,16cyclictest7950irq/56-dwc_otg_07:15:172
5755993715,4cyclictest29-21rcuc/211:15:412
575499375,4cyclictest7850irq/56-dwc_otg_10:38:061
575499372,3cyclictest7750irq/56-dwc_otg11:05:301
575499371,17cyclictest7850irq/56-dwc_otg_07:15:381
575699364,7cyclictest0-21swapper/311:20:303
5756993623,8cyclictest381ktimersoftd/308:20:273
575699361,31cyclictest4856-21ls10:05:343
575699361,20cyclictest16809-21cpuspeed07:40:323
5755993616,4cyclictest6175-21latency_hist10:10:182
575499368,4cyclictest7950irq/56-dwc_otg_11:50:411
5754993611,13cyclictest221ktimersoftd/107:30:311
575699358,12cyclictest7950irq/56-dwc_otg_10:00:173
575699357,18cyclictest381ktimersoftd/310:35:183
575699351,25cyclictest0-21swapper/309:25:303
575599357,6cyclictest7750irq/56-dwc_otg11:05:182
575599355,6cyclictest7850irq/56-dwc_otg_07:45:472
575599354,15cyclictest7850irq/56-dwc_otg_07:40:352
575599351,26cyclictest14513-21ls10:30:432
575599351,21cyclictest14890-21ls12:00:452
5754993516,8cyclictest7750irq/56-dwc_otg12:37:401
575499351,4cyclictest26303-21apt-config11:05:191
5754993510,6cyclictest6652-21grep10:10:341
5756993416,10cyclictest12277-21cpuspeed11:55:313
5756993410,9cyclictest7950irq/56-dwc_otg_10:40:463
575599345,5cyclictest7750irq/56-dwc_otg07:30:462
575599344,8cyclictest6766-21aten_rbpower_vo11:40:302
575599341,4cyclictest0-21swapper/208:15:422
575499349,15cyclictest7950irq/56-dwc_otg_11:55:321
575499344,7cyclictest31298-21runrttasks11:16:291
575499341,18cyclictest7950irq/56-dwc_otg_11:40:551
575699338,10cyclictest7950irq/56-dwc_otg_09:09:193
575699336,15cyclictest0-21swapper/312:20:273
575699336,15cyclictest0-21swapper/312:20:273
5756993316,4cyclictest7750irq/56-dwc_otg12:10:323
575699331,5cyclictest612-21grep08:25:303
575599333,8cyclictest23995-21if_eth012:30:332
575599333,14cyclictest7950irq/56-dwc_otg_09:50:442
575599331,3cyclictest0-21swapper/207:55:282
575499337,14cyclictest0-21swapper/112:20:271
575499337,14cyclictest0-21swapper/112:20:271
575499336,15cyclictest0-21swapper/112:30:291
575499335,12cyclictest31443-21aten_rbpower_cu09:50:291
575499331,6cyclictest16693-21taskset09:10:171
575699329,9cyclictest7950irq/56-dwc_otg_08:30:303
575699326,14cyclictest0-21swapper/309:00:303
575699326,14cyclictest0-21swapper/309:00:303
5756993213,4cyclictest7850irq/56-dwc_otg_07:30:323
575699321,23cyclictest0-21swapper/309:50:273
575599328,5cyclictest7850irq/56-dwc_otg_10:15:412
575599328,5cyclictest7850irq/56-dwc_otg_10:15:412
575599327,5cyclictest7950irq/56-dwc_otg_09:15:472
575599327,5cyclictest7850irq/56-dwc_otg_09:20:302
575599327,5cyclictest7850irq/56-dwc_otg_08:35:322
575599326,16cyclictest0-21swapper/207:51:332
575599326,16cyclictest0-21swapper/207:51:332
575599321,24cyclictest4358-21ls10:05:182
575599321,22cyclictest0-21swapper/209:05:352
575599321,13cyclictest7850irq/56-dwc_otg_09:15:172
575499326,4cyclictest7750irq/56-dwc_otg11:22:371
575499321,5cyclictest17197-21fschecks_count09:10:331
5754993211,5cyclictest0-21swapper/111:45:311
575699318,9cyclictest381ktimersoftd/311:49:023
575699318,15cyclictest381ktimersoftd/307:10:293
575699316,5cyclictest7950irq/56-dwc_otg_09:45:463
575699316,5cyclictest7950irq/56-dwc_otg_09:45:463
575699314,4cyclictest7950irq/56-dwc_otg_08:55:293
575699314,4cyclictest7950irq/56-dwc_otg_08:55:293
575699312,16cyclictest7950irq/56-dwc_otg_12:27:073
575699311,16cyclictest7950irq/56-dwc_otg_10:38:083
575699310,20cyclictest7950irq/56-dwc_otg_12:15:593
575599315,12cyclictest7850irq/56-dwc_otg_11:20:452
575599313,6cyclictest22921-21unixbench_singl12:25:442
575599312,17cyclictest0-21swapper/211:55:352
5755993112,4cyclictest1914-21unixbench_singl09:55:462
575599311,20cyclictest8751-21cut11:45:352
575599311,13cyclictest7750irq/56-dwc_otg11:10:372
575499317,3cyclictest0-21swapper/109:25:171
575699302,5cyclictest7950irq/56-dwc_otg_08:15:453
575699302,3cyclictest7950irq/56-dwc_otg_11:15:283
5756993015,4cyclictest24014-21aten_rbpower_vo08:00:313
575699301,4cyclictest18768-21wget09:15:323
575599307,5cyclictest7850irq/56-dwc_otg_08:30:232
575599304,4cyclictest7850irq/56-dwc_otg_11:25:422
575599304,12cyclictest7850irq/56-dwc_otg_09:45:332
575599304,12cyclictest7850irq/56-dwc_otg_09:45:332
575599301,6cyclictest5168-21sort11:35:342
575599301,6cyclictest5168-21sort11:35:342
575599301,5cyclictest25931-21latency_hist09:35:182
575599301,3cyclictest7750irq/56-dwc_otg10:50:302
575499303,6cyclictest19743-21idleruntime-cro12:20:181
575499301,5cyclictest10807-21sed10:20:431
575599296,5cyclictest7850irq/56-dwc_otg_10:40:412
575599294,11cyclictest7850irq/56-dwc_otg_11:30:392
575599292,7cyclictest23463-21grep09:25:452
575599292,18cyclictest0-21swapper/208:57:552
575599292,18cyclictest0-21swapper/208:57:552
575599291,8cyclictest1688-21grep08:25:452
5755992910,4cyclictest0-21swapper/212:20:412
5755992910,4cyclictest0-21swapper/212:20:412
575699281,3cyclictest7950irq/56-dwc_otg_11:41:163
575699281,18cyclictest0-21swapper/311:51:003
5756992811,4cyclictest24893-21if_err_eth011:00:353
575599285,11cyclictest7850irq/56-dwc_otg_07:18:002
575599282,9cyclictest10273-21/usr/sbin/munin11:50:412
575599282,7cyclictest31165-21/usr/sbin/munin08:20:362
575599282,5cyclictest0-21swapper/207:35:342
575599282,16cyclictest26681-21ntp_offset09:35:392
575599282,12cyclictest7850irq/56-dwc_otg_10:45:302
54532285,15sleep10-21swapper/107:09:571
575699277,7cyclictest7950irq/56-dwc_otg_09:14:343
575699272,15cyclictest0-21swapper/312:35:283
575699271,13cyclictest7950irq/56-dwc_otg_08:06:193
575599275,5cyclictest7950irq/56-dwc_otg_08:09:582
5755992717,4cyclictest8689-21rt-features08:45:422
575599271,6cyclictest6809-21/usr/sbin/munin08:40:432
575599271,5cyclictest7950irq/56-dwc_otg_08:00:382
575599271,16cyclictest25681-21cut12:35:342
575599263,4cyclictest7750irq/56-dwc_otg10:10:382
52012263,15sleep20-21swapper/207:06:382
5756992519,4cyclictest1125-21runrttasks10:20:413
575599231,5cyclictest7850irq/56-dwc_otg_12:15:352
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional