You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-15 - 00:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Tue Jul 14, 2026 12:43:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1612721780,4sleep02624199cyclictest10:40:310
1281421450,5sleep32624499cyclictest12:33:163
26241991336,101cyclictest0-21swapper/011:40:350
262419911533,8cyclictest7950irq/56-dwc_otg_11:55:470
262419911312,73cyclictest12322-21ls09:55:480
2534021050,4sleep020553-21kworker/0:007:05:450
26241991042,12cyclictest30409-21df_inode12:15:350
262419910239,23cyclictest7193-21fschecks_count09:50:340
205222940,10sleep1221ktimersoftd/109:27:531
86632920,2sleep20-21swapper/209:14:342
2624399873,11cyclictest0-21swapper/211:40:352
2624199852,27cyclictest11447-21head07:55:450
2624199841,30cyclictest778-21rm11:40:170
300262830,1sleep20-21swapper/212:15:192
2624399833,15cyclictest14731-21ls11:55:462
2624399794,16cyclictest0-21swapper/209:55:482
26242997918,33cyclictest221ktimersoftd/111:40:361
2624399783,14cyclictest30418-21taskset12:15:362
26241997627,6cyclictest7850irq/56-dwc_otg09:30:180
258702760,3sleep125677-21latency_hist12:10:191
233032750,3sleep339-21ksoftirqd/309:30:453
26244997434,13cyclictest7850irq/56-dwc_otg09:55:483
2624199742,57cyclictest26427-21ssh11:30:460
322642730,2sleep12624299cyclictest07:25:411
2624199737,34cyclictest0-21swapper/010:30:310
26241997327,27cyclictest21197-21aten_rbpower_en08:25:330
218312730,2sleep0101ktimersoftd/010:46:150
2624199717,37cyclictest0-21swapper/008:00:300
26241997112,45cyclictest9616-21grep07:50:470
2624199697,50cyclictest29623-21unixbench_singl08:45:460
2624199688,9cyclictest0-21swapper/008:15:300
2624199681,47cyclictest4532-21wget11:05:310
2624399671,29cyclictest0-21swapper/212:35:312
2624399671,29cyclictest0-21swapper/212:35:312
2624499656,20cyclictest8050irq/56-dwc_otg_11:55:323
2624499653,44cyclictest0-21swapper/311:40:363
26242996516,16cyclictest7850irq/56-dwc_otg09:55:491
307222640,1sleep00-21swapper/008:50:370
267302640,2sleep00-21swapper/010:14:060
2624199642,32cyclictest8915-21fschecks_count11:10:350
297422630,2sleep20-21swapper/207:20:182
291142630,2sleep10-21swapper/112:14:011
291142630,2sleep10-21swapper/112:14:011
26243996310,4cyclictest0-21swapper/209:38:572
2624399621,5cyclictest11440-21grep07:55:452
26242996212,31cyclictest14792-21ssh11:55:481
2624199621,6cyclictest22771-21irqstats09:30:370
26244996110,17cyclictest381ktimersoftd/308:20:273
2624399616,14cyclictest10382-21/usr/sbin/munin12:30:342
26243996022,36cyclictest8050irq/56-dwc_otg_11:00:282
2624399601,15cyclictest8840-21grep07:50:372
2624399601,11cyclictest0-21swapper/211:15:292
2624199602,10cyclictest9109-21ssh11:50:170
303592590,2sleep330360-21wget08:50:323
275752590,2sleep30-21swapper/308:40:463
2624399598,3cyclictest0-21swapper/211:23:022
26241995924,23cyclictest31919-21wget10:20:310
26241995922,8cyclictest10114-21/usr/sbin/munin12:30:360
2624199591,36cyclictest31784-21wget07:25:330
2624199591,33cyclictest0-21swapper/009:15:180
26241995911,13cyclictest0-21swapper/011:15:300
128202590,3sleep22624399cyclictest09:19:212
2624499582,9cyclictest7950irq/56-dwc_otg_09:10:303
2624199588,21cyclictest0-21swapper/008:20:290
26241995837,5cyclictest7850irq/56-dwc_otg11:25:470
26241995825,4cyclictest0-21swapper/010:25:290
26241995814,7cyclictest27895-21latency_hist07:15:180
26241995811,22cyclictest4929-21latency_hist09:10:190
188932580,5sleep32624499cyclictest12:00:473
311812570,2sleep30-21swapper/309:40:363
2624199571,34cyclictest0-21swapper/012:25:320
245682570,5sleep20-21swapper/207:05:302
2624399561,16cyclictest0-21swapper/210:55:212
2624199564,28cyclictest10722-21ssh11:50:480
2624199561,30cyclictest4074-21unixbench_multi07:35:460
2624499556,16cyclictest0-21swapper/311:05:233
2624299557,17cyclictest0-21swapper/112:15:371
2624199557,6cyclictest3111-21latency_hist09:05:180
26241995525,18cyclictest0-21swapper/012:35:310
26241995525,18cyclictest0-21swapper/012:35:310
2624499543,12cyclictest23570-21ssh10:10:293
171412540,2sleep00-21swapper/011:20:330
2624399538,3cyclictest0-21swapper/209:44:562
2624399531,6cyclictest0-21swapper/212:00:322
26242995331,4cyclictest8050irq/56-dwc_otg_10:10:301
26242995316,8cyclictest6879-21ssh09:50:271
2624199534,22cyclictest13-21rcuc/010:35:280
26241995323,17cyclictest0-21swapper/010:05:290
26241995316,8cyclictest0-21swapper/009:20:280
2624199531,4cyclictest26004-21unixbench_singl08:35:440
2624199531,30cyclictest30554-21latency_hist09:40:180
2624499529,11cyclictest8050irq/56-dwc_otg_12:15:363
2624399527,13cyclictest0-21swapper/207:35:452
26243995214,22cyclictest18013-21ssh09:25:312
2624199524,39cyclictest61-21kswapd007:30:230
2624499516,15cyclictest0-21swapper/310:35:243
26244995110,9cyclictest7950irq/56-dwc_otg_07:20:303
26244995110,9cyclictest7950irq/56-dwc_otg_07:20:303
26242995128,4cyclictest31728-21latency_hist10:20:181
26241995129,4cyclictest8266-21modprobe07:50:180
26241995129,4cyclictest8266-21modprobe07:50:180
2624199508,4cyclictest0-21swapper/008:10:180
2624199499,5cyclictest28961-21grep10:15:480
26241994923,11cyclictest0-21swapper/008:10:390
2624199491,4cyclictest15260-21/usr/sbin/munin10:00:360
2624199491,4cyclictest15260-21/usr/sbin/munin10:00:360
2624399486,14cyclictest16465-21ls10:00:462
2624399486,14cyclictest16465-21ls10:00:462
2624299487,27cyclictest0-21swapper/108:45:311
2624199485,5cyclictest0-21swapper/009:00:180
2624199482,6cyclictest4055-21apt-get11:05:170
26241994812,8cyclictest7950irq/56-dwc_otg_12:00:290
2624499471,6cyclictest0-21swapper/307:35:313
2624199471,9cyclictest5085-21fschecks_time07:40:350
2624199471,7cyclictest727-21runrttasks12:20:280
2624199471,25cyclictest0-21swapper/012:07:200
2624499467,25cyclictest0-21swapper/307:15:313
2624499467,24cyclictest0-21swapper/308:30:233
2624499461,7cyclictest0-21swapper/309:15:283
2624199462,27cyclictest750-21snmpd12:14:190
2624199462,27cyclictest750-21snmpd12:14:190
26241994620,18cyclictest0-21swapper/009:15:430
2624199461,41cyclictest3883-21unixbench_singl09:45:460
26241994613,14cyclictest24937-21kernelversion10:50:390
2624199461,29cyclictest0-21swapper/008:40:450
2624199461,24cyclictest29880-21/usr/sbin/munin07:20:430
2624199461,24cyclictest29880-21/usr/sbin/munin07:20:430
2624499457,26cyclictest0-21swapper/307:45:233
2624499457,26cyclictest0-21swapper/307:45:233
2624299458,25cyclictest0-21swapper/107:15:311
2624199457,16cyclictest9-21ksoftirqd/010:55:360
2624199451,26cyclictest0-21swapper/009:40:330
197702450,5sleep32624499cyclictest11:23:303
2624399447,23cyclictest0-21swapper/207:25:322
2624399443,8cyclictest0-21swapper/209:20:292
2624299447,25cyclictest0-21swapper/112:20:321
2624299447,25cyclictest0-21swapper/108:40:311
2624299447,25cyclictest0-21swapper/107:20:321
2624299447,25cyclictest0-21swapper/107:20:321
2624499434,24cyclictest29406-21ssh11:35:323
2624399434,15cyclictest0-21swapper/212:05:292
26242994323,4cyclictest505-21cron11:40:171
26243994214,4cyclictest28369-21latency_hist10:55:182
2624399421,18cyclictest8050irq/56-dwc_otg_11:05:192
2624299427,25cyclictest0-21swapper/108:35:291
2624299427,25cyclictest0-21swapper/107:35:321
2624299423,5cyclictest0-21swapper/112:30:291
2624299423,33cyclictest8050irq/56-dwc_otg_11:50:311
2624199428,18cyclictest0-21swapper/008:30:300
26244994115,7cyclictest4820-21diskmemload10:45:303
2624399411,25cyclictest7303-21ssh12:25:482
2624299417,24cyclictest0-21swapper/111:20:321
2624299417,14cyclictest0-21swapper/109:10:301
2624299414,9cyclictest0-21swapper/110:40:301
2624299413,28cyclictest0-21swapper/107:45:231
2624299413,28cyclictest0-21swapper/107:45:231
26241994111,4cyclictest28665-21/usr/sbin/munin07:15:380
248912416,22sleep124988-21/usr/sbin/munin07:05:381
2624499406,21cyclictest0-21swapper/309:45:293
26244994023,5cyclictest5663-21idleruntime-cro12:25:173
2624499401,3cyclictest0-21swapper/308:35:293
2624399405,24cyclictest7850irq/56-dwc_otg10:20:382
2624299402,5cyclictest8050irq/56-dwc_otg_07:50:311
2624299401,24cyclictest0-21swapper/107:30:301
2624499392,7cyclictest8050irq/56-dwc_otg_11:50:303
26244993917,12cyclictest37-21rcuc/311:26:223
2624499391,18cyclictest39-21ksoftirqd/311:45:403
26243993917,5cyclictest12266-21fschecks_count10:35:342
2624499383,4cyclictest0-21swapper/310:40:303
26244993816,7cyclictest0-21swapper/310:05:293
2624399388,6cyclictest0-21swapper/209:05:292
2624399388,19cyclictest0-21swapper/209:50:342
2624399384,30cyclictest8050irq/56-dwc_otg_12:10:302
2624399383,9cyclictest7850irq/56-dwc_otg10:25:292
2624399381,5cyclictest8050irq/56-dwc_otg_07:30:282
2624399381,24cyclictest30511-21cut08:50:352
2624399381,23cyclictest24747-21ls08:35:182
2624299389,6cyclictest23-21ksoftirqd/108:30:181
26242993820,4cyclictest669-21sh09:42:321
26242993815,5cyclictest7950irq/56-dwc_otg_11:45:341
63542370,2sleep30-21swapper/310:28:273
2624499375,23cyclictest6901-21ssh09:50:303
2624399374,11cyclictest7950irq/56-dwc_otg_07:20:432
2624399374,11cyclictest7950irq/56-dwc_otg_07:20:432
2624299371,8cyclictest2025850ssh10:45:301
26242993718,4cyclictest18528-21sh12:00:431
26242993715,4cyclictest26998-21if_eth009:35:361
26242993712,11cyclictest7850irq/56-dwc_otg10:55:491
200022370,1sleep30-21swapper/309:26:593
2624499369,14cyclictest37-21rcuc/307:28:543
2624499364,18cyclictest7950irq/56-dwc_otg_10:52:433
2624499361,17cyclictest29093-21ssh10:55:403
26243993615,5cyclictest26517-21grep11:30:472
26243993614,12cyclictest21222-21aten_rbpower_vo11:25:332
2624299366,16cyclictest0-21swapper/108:30:231
26242993620,9cyclictest23-21ksoftirqd/109:30:381
26242993618,11cyclictest23-21ksoftirqd/109:45:291
94362350,2sleep19428-21apt-get09:15:291
2624499359,8cyclictest1834-21grep07:30:403
2624499357,25cyclictest0-21swapper/309:05:323
2624499355,9cyclictest8050irq/56-dwc_otg_11:01:083
2624399357,15cyclictest0-21swapper/208:10:312
2624399351,23cyclictest25199-21ls08:35:342
2624299356,4cyclictest7850irq/56-dwc_otg11:05:461
2624299355,23cyclictest0-21swapper/111:10:431
26242993520,5cyclictest23-21ksoftirqd/110:21:291
26242993519,11cyclictest0-21swapper/109:00:181
2624299351,29cyclictest0-21swapper/110:00:281
2624299351,29cyclictest0-21swapper/110:00:281
248022351,30sleep30-21swapper/312:08:453
2624499343,6cyclictest7850irq/56-dwc_otg11:30:323
2624499342,6cyclictest3265550ssh10:20:413
26244993423,5cyclictest39-21ksoftirqd/312:30:183
2624499341,25cyclictest14169-21cut08:05:343
2624399347,6cyclictest28701-21fschecks_count08:45:352
2624399345,4cyclictest7950irq/56-dwc_otg_11:35:372
2624399342,5cyclictest7850irq/56-dwc_otg12:20:292
26243993413,5cyclictest26681-21aten_rbpower_cu08:40:322
2624399341,23cyclictest8270-21ssh10:30:382
2624399341,21cyclictest5685-21cut11:45:342
2624299344,4cyclictest7950irq/56-dwc_otg_09:00:351
2624299344,17cyclictest21-21rcuc/112:30:171
2624299343,18cyclictest32675-21awk11:00:281
2624299341,20cyclictest21-21rcuc/109:07:541
2624299341,19cyclictest11976-21ls08:00:181
2624499332,8cyclictest1972-21cat09:00:373
2624499332,5cyclictest7950irq/56-dwc_otg_08:45:353
2624499331,8cyclictest10413-21grep07:55:313
2624499331,13cyclictest7950irq/56-dwc_otg_09:20:313
2624499331,11cyclictest8050irq/56-dwc_otg_12:35:283
2624499331,11cyclictest8050irq/56-dwc_otg_12:35:283
2624399337,15cyclictest0-21swapper/211:10:312
26243993321,6cyclictest584950ssh09:49:062
2624399331,25cyclictest8050irq/56-dwc_otg_08:00:302
2624299339,6cyclictest0-21swapper/110:50:441
2624299331,21cyclictest21-21rcuc/110:10:171
2624499328,13cyclictest13072-21fschecks_count11:15:343
2624499326,15cyclictest8050irq/56-dwc_otg_09:35:323
26244993216,5cyclictest727-21runrttasks11:10:503
2624499321,5cyclictest381ktimersoftd/312:10:463
2624499321,5cyclictest381ktimersoftd/312:10:463
26244993211,3cyclictest0-21swapper/310:02:293
26244993211,3cyclictest0-21swapper/310:02:293
2624399323,5cyclictest27363-21grep07:10:442
2624399322,16cyclictest7850irq/56-dwc_otg10:10:422
26243993215,9cyclictest2116-21ntpq09:00:402
26243993215,3cyclictest9798-21ssh11:50:372
26243993213,4cyclictest4820-21diskmemload10:45:132
26243993212,4cyclictest0-21swapper/210:05:292
2624299327,6cyclictest8050irq/56-dwc_otg_11:15:201
2624299322,11cyclictest25592-21fschecks_time11:30:351
26242993219,10cyclictest7950irq/56-dwc_otg_10:35:241
26242993218,4cyclictest31842-21idleruntime-cro08:55:181
26242993216,9cyclictest15394-21seq08:09:311
2624299321,22cyclictest4944-21cpuspeed07:40:321
2624499312,17cyclictest0-21swapper/310:32:003
2624499312,14cyclictest37-21rcuc/310:15:373
2624499311,17cyclictest16059-21ls08:10:353
2624399312,9cyclictest7950irq/56-dwc_otg_10:15:362
2624399312,7cyclictest0-21swapper/208:56:012
26243993114,9cyclictest750-21snmpd07:48:302
26243993114,9cyclictest750-21snmpd07:48:302
26243993112,5cyclictest20558-21fschecks_count10:45:342
2624399311,15cyclictest0-21swapper/207:42:332
2624299311,4cyclictest13730-21ssh09:20:301
2624299311,24cyclictest15402-21timerwakeupswit12:35:451
2624299311,24cyclictest15402-21timerwakeupswit12:35:451
2624499306,14cyclictest0-21swapper/308:15:323
2624499304,14cyclictest7950irq/56-dwc_otg_07:50:373
2624499302,12cyclictest7950irq/56-dwc_otg_07:45:123
2624399309,10cyclictest0-21swapper/209:31:382
2624399301,21cyclictest0-21swapper/208:26:332
2624299307,5cyclictest7850irq/56-dwc_otg10:30:481
2624299302,20cyclictest0-21swapper/107:11:231
26242993011,4cyclictest0-21swapper/111:25:551
2624499291,6cyclictest7950irq/56-dwc_otg_07:10:443
2624499291,6cyclictest32419-21fschecks_time08:55:363
2624499291,4cyclictest8050irq/56-dwc_otg_08:00:283
2624299299,4cyclictest0-21swapper/110:28:231
2624299296,14cyclictest0-21swapper/108:15:321
2624499282,18cyclictest0-21swapper/308:29:083
2624399286,12cyclictest0-21swapper/208:18:352
2624399284,5cyclictest7850irq/56-dwc_otg08:05:382
2624399282,17cyclictest0-21swapper/208:20:382
26242992820,5cyclictest23-21ksoftirqd/108:00:331
2624299281,7cyclictest8050irq/56-dwc_otg_08:20:341
26242992611,5cyclictest7950irq/56-dwc_otg_08:10:401
256672264,15sleep30-21swapper/307:06:293
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional