You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-28 - 04:47

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Fri Aug 28, 2026 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1753321790,5sleep23119899cyclictest22:35:462
311959912338,53cyclictest11992-21wc21:50:330
311959911059,25cyclictest0-21swapper/022:05:420
311959910641,34cyclictest13291-21sed22:30:410
31195991004,68cyclictest4306-21grep21:40:420
3119599933,71cyclictest0-21swapper/022:20:450
119702880,2sleep1221ktimersoftd/123:09:181
275782870,2sleep10-21swapper/122:49:011
304092840,12sleep37950irq/56-dwc_otg_20:35:343
31195998256,10cyclictest7850irq/56-dwc_otg_23:30:250
31195998215,49cyclictest26479-21sh00:05:310
3119599813,6cyclictest15554-21ssh21:55:230
3119599811,8cyclictest4642-21aten_rbpower_vo23:00:270
3119599811,7cyclictest21048-21latency_hist23:20:120
3119599811,64cyclictest9922-21runrttasks23:45:310
31195998023,42cyclictest7850irq/56-dwc_otg_23:23:040
187052800,5sleep33119999cyclictest21:59:033
66622790,5sleep23119899cyclictest23:40:442
31195997928,39cyclictest7850irq/56-dwc_otg_22:15:220
3119599772,7cyclictest2727-21latency_hist20:50:120
31195997625,13cyclictest1756-21rm00:15:230
31195997610,13cyclictest0-21swapper/020:50:240
196672760,5sleep23119899cyclictest00:35:432
31195997517,26cyclictest0-21swapper/019:40:230
3119599751,59cyclictest16271-21ssh23:14:360
3119599751,36cyclictest0-21swapper/020:10:220
31195997414,42cyclictest15511-21wc21:15:410
3119599732,8cyclictest7265-21grep19:30:470
3119599732,8cyclictest7265-21grep19:30:470
3119599732,7cyclictest21587-21grep22:40:400
31195997317,36cyclictest17577-21/usr/sbin/munin20:00:310
31195997314,47cyclictest24102-21ssh00:02:260
31195997312,5cyclictest19991-21fschecks_count22:00:290
31195997312,52cyclictest16959-21ssh00:33:190
59702720,2sleep20-21swapper/223:00:542
3119599721,53cyclictest25308-21/usr/sbin/munin23:25:330
3119599721,49cyclictest0-21swapper/023:50:380
31195997213,43cyclictest2479-21ssh22:57:160
3119599719,4cyclictest29127-21kworker/u8:021:21:170
3119599717,52cyclictest16525-21fschecks_time22:35:310
3119599711,49cyclictest31502-21runrttasks21:35:260
61572700,6sleep33119999cyclictest21:43:573
31195997013,41cyclictest27307-21grep20:25:390
31198996937,17cyclictest7750irq/56-dwc_otg21:50:382
3119599696,49cyclictest0-21swapper/021:45:190
3119599691,8cyclictest0-21swapper/023:39:530
3119599691,8cyclictest0-21swapper/023:39:530
31195996916,30cyclictest0-21swapper/000:10:310
177662690,1sleep30-21swapper/321:19:093
3119599681,11cyclictest0-21swapper/022:46:390
31195996810,35cyclictest6627-21cpuspeed21:00:260
3119999672,52cyclictest12022-21ls21:50:333
3119699677,15cyclictest31194-21cyclictest21:50:331
3119599671,50cyclictest0-21swapper/021:32:360
3119599671,35cyclictest0-21swapper/000:20:230
3119599668,2cyclictest0-21swapper/022:10:330
31195996612,38cyclictest0-21swapper/021:26:500
31198996526,19cyclictest7750irq/56-dwc_otg22:30:432
31198996526,14cyclictest0-21swapper/222:20:432
31196996528,21cyclictest7750irq/56-dwc_otg22:20:431
31196996511,22cyclictest7950irq/56-dwc_otg_22:05:421
3119599656,33cyclictest0-21swapper/022:25:170
3119599651,51cyclictest0-21swapper/023:59:360
3119599651,48cyclictest0-21swapper/022:54:530
31195996513,39cyclictest7950irq/56-dwc_otg_21:10:230
31195996511,46cyclictest0-21swapper/023:06:320
31199996420,10cyclictest9833-21diskmemload22:05:443
3119599647,4cyclictest7739-21ssh23:42:430
3119599641,38cyclictest0-21swapper/019:35:240
31195996411,39cyclictest5677-21chrt19:27:480
31195996313,42cyclictest7850irq/56-dwc_otg_00:27:420
31195996310,39cyclictest0-21swapper/000:36:070
31199996223,13cyclictest39-21ksoftirqd/322:20:433
3119599624,34cyclictest0-21swapper/019:50:390
3119599621,47cyclictest29180-21taskset20:30:520
31195996214,35cyclictest15243-21aten_rbpower_cu19:55:240
31195996211,40cyclictest6116-21taskset20:59:010
31195996211,40cyclictest6116-21taskset20:59:010
3119699619,28cyclictest7850irq/56-dwc_otg_22:30:421
31198995911,40cyclictest7850irq/56-dwc_otg_21:55:252
31195995930,8cyclictest0-21swapper/020:15:220
3119599592,43cyclictest0-21swapper/020:39:340
31195995917,8cyclictest0-21swapper/020:40:230
3119599591,45cyclictest0-21swapper/019:46:510
31195995912,37cyclictest0-21swapper/019:17:220
3119899583,39cyclictest4333-21grep21:40:432
3119599589,38cyclictest3740-21chrt19:22:250
31196995714,26cyclictest7850irq/56-dwc_otg_21:40:431
31195995732,5cyclictest19024-21wget20:05:260
196402570,2sleep10-21swapper/123:56:491
3119899563,34cyclictest0-21swapper/222:05:422
3119599551,41cyclictest0-21swapper/021:07:100
3119599551,40cyclictest32705-21taskset19:14:190
31195995414,32cyclictest0-21swapper/020:22:310
3119699531,30cyclictest0-21swapper/122:55:251
31199995233,15cyclictest7950irq/56-dwc_otg_22:50:233
31199995026,5cyclictest1180-21runrttasks19:30:433
31199995026,5cyclictest1180-21runrttasks19:30:433
3119599501,12cyclictest0-21swapper/020:47:540
31199994913,9cyclictest7850irq/56-dwc_otg_22:30:433
231022490,1sleep20-21swapper/222:04:332
3119899473,8cyclictest7750irq/56-dwc_otg22:25:272
3119899472,9cyclictest7950irq/56-dwc_otg_20:05:232
3119899471,16cyclictest0-21swapper/219:30:232
3119899471,16cyclictest0-21swapper/219:30:232
3119899467,25cyclictest0-21swapper/220:00:172
309092463,35sleep00-21swapper/019:09:580
327602450,2sleep331194-21cyclictest23:34:163
31199994518,6cyclictest41082awk23:00:123
31198994530,8cyclictest7850irq/56-dwc_otg_23:35:232
31198994530,8cyclictest7850irq/56-dwc_otg_23:35:232
3119699457,23cyclictest0-21swapper/119:25:171
221552451,3sleep10-21swapper/121:24:231
3119999441,3cyclictest0-21swapper/323:55:263
3119899448,22cyclictest0-21swapper/219:50:172
3119899447,8cyclictest7750irq/56-dwc_otg21:30:242
3119699446,25cyclictest0-21swapper/119:40:251
180652440,10sleep229-21rcuc/223:15:392
3119999431,6cyclictest7950irq/56-dwc_otg_00:35:243
3119899437,23cyclictest0-21swapper/221:05:262
31198994312,4cyclictest7950irq/56-dwc_otg_00:30:242
3119699432,5cyclictest7950irq/56-dwc_otg_00:00:261
31196994316,17cyclictest0-21swapper/123:35:401
31196994316,17cyclictest0-21swapper/123:35:401
3119699431,4cyclictest0-21swapper/122:35:271
3119999421,3cyclictest0-21swapper/300:30:223
3119899422,25cyclictest0-21swapper/223:45:232
31196994223,15cyclictest0-21swapper/120:35:231
79402410,2sleep30-21swapper/322:25:283
67452410,2sleep339-21ksoftirqd/323:40:533
31312410,2sleep30-21swapper/319:20:353
3119999417,22cyclictest0-21swapper/319:25:173
3119899417,24cyclictest0-21swapper/219:25:242
3119899417,22cyclictest13607-21ssh23:50:262
31198994113,15cyclictest7850irq/56-dwc_otg_20:50:232
31196994121,5cyclictest287350wget20:50:251
3119899408,17cyclictest301ktimersoftd/200:21:582
3119899404,18cyclictest29-21rcuc/221:15:352
240852400,3sleep224073-21ssh22:45:122
3119999391,24cyclictest5136-21ls23:40:133
3119999391,24cyclictest5136-21ls23:40:133
3119899394,19cyclictest7850irq/56-dwc_otg_22:12:232
3119899392,19cyclictest0-21swapper/223:30:242
3119699391,5cyclictest18321-21/usr/sbin/munin00:35:371
31196993910,7cyclictest7750irq/56-dwc_otg20:10:381
294562391,5sleep129466-21ssh22:11:061
98582380,2sleep39859-21ssh21:10:113
86712380,1sleep30-21swapper/300:23:203
3119999385,20cyclictest30114-21ssh00:10:253
31199993819,6cyclictest7950irq/56-dwc_otg_22:40:303
31199993812,16cyclictest0-21swapper/323:08:353
3119899387,24cyclictest0-21swapper/220:45:262
3119899387,24cyclictest0-21swapper/220:45:262
3119899383,19cyclictest29-21rcuc/200:05:072
3119899381,6cyclictest0-21swapper/222:50:232
3119699388,13cyclictest7950irq/56-dwc_otg_23:15:271
31196993820,5cyclictest1206-21sort20:45:291
31196993820,5cyclictest1206-21sort20:45:291
3119699381,3cyclictest7950irq/56-dwc_otg_19:20:221
3119999375,14cyclictest0-21swapper/321:12:133
31199993728,6cyclictest39-21ksoftirqd/322:35:253
3119899377,25cyclictest0-21swapper/220:10:252
31198993722,4cyclictest31202-21sh00:10:392
3119699372,4cyclictest0-21swapper/120:40:251
31196993721,4cyclictest21528-21grep23:20:291
3119999367,13cyclictest7950irq/56-dwc_otg_23:10:253
3119899366,7cyclictest7850irq/56-dwc_otg_20:45:122
3119699369,6cyclictest0-21swapper/100:30:271
3119699367,6cyclictest7950irq/56-dwc_otg_19:50:221
3119699366,16cyclictest7950irq/56-dwc_otg_00:05:281
31196993618,11cyclictest7950irq/56-dwc_otg_21:15:421
31196993613,4cyclictest10982-21swap00:25:381
3119699361,24cyclictest32272-21ls22:15:261
3119699361,24cyclictest28918-21timerandwakeup20:30:391
3119699361,14cyclictest21-21rcuc/120:00:121
3119999356,6cyclictest7750irq/56-dwc_otg22:15:383
3119899357,23cyclictest0-21swapper/200:15:252
3119899356,6cyclictest7950irq/56-dwc_otg_20:40:132
3119899354,19cyclictest301ktimersoftd/223:06:022
3119899352,4cyclictest7950irq/56-dwc_otg_21:20:252
3119899352,22cyclictest7950irq/56-dwc_otg_19:55:282
3119899352,20cyclictest29-21rcuc/221:46:492
3119899351,23cyclictest31719-21cut21:35:302
31198993510,5cyclictest509-21cron23:25:112
3119699359,4cyclictest0-21swapper/100:16:561
3119699356,13cyclictest7950irq/56-dwc_otg_19:35:401
3119699355,20cyclictest0-21swapper/123:44:221
3119699355,15cyclictest7750irq/56-dwc_otg21:30:361
3119699353,19cyclictest7406-21aten_rbpower_vo21:45:271
31196993524,7cyclictest7950irq/56-dwc_otg_23:25:221
3119999348,12cyclictest7950irq/56-dwc_otg_21:20:303
31199993415,4cyclictest0-21swapper/323:20:123
31199993414,6cyclictest1706850ssh23:54:393
3119999341,26cyclictest27893-21ssh23:27:573
3119999341,23cyclictest28303-21timerandwakeup21:30:403
3119899348,6cyclictest7950irq/56-dwc_otg_20:20:122
3119899348,5cyclictest7850irq/56-dwc_otg_21:30:132
3119899346,8cyclictest29-21rcuc/221:01:262
3119899344,19cyclictest301ktimersoftd/219:10:362
3119899344,12cyclictest7950irq/56-dwc_otg_21:15:112
3119899343,4cyclictest0-21swapper/219:45:372
3119699348,12cyclictest0-21swapper/121:35:261
3119699347,7cyclictest7950irq/56-dwc_otg_00:20:391
3119699347,10cyclictest7950irq/56-dwc_otg_22:40:291
3119699345,14cyclictest4750irq/17-3f00b88020:28:441
31196993416,9cyclictest22896-21sh21:25:161
3119999336,15cyclictest2095-21fschecks_time00:15:293
3119999334,14cyclictest7850irq/56-dwc_otg_20:06:143
3119999331,20cyclictest25091-21ssh23:25:123
3119999331,13cyclictest32514-21ls20:40:393
3119899338,9cyclictest7850irq/56-dwc_otg_23:28:372
3119899337,9cyclictest7950irq/56-dwc_otg_22:55:312
3119899337,23cyclictest0-21swapper/220:55:172
3119899337,23cyclictest0-21swapper/220:55:172
3119899336,10cyclictest7750irq/56-dwc_otg23:10:372
3119899335,10cyclictest7750irq/56-dwc_otg22:15:392
3119899334,20cyclictest301ktimersoftd/200:27:542
3119899334,14cyclictest7950irq/56-dwc_otg_19:40:112
3119899333,4cyclictest7750irq/56-dwc_otg23:55:322
3119899333,13cyclictest301ktimersoftd/200:05:312
3119699337,15cyclictest0-21swapper/100:10:251
3119699336,4cyclictest7750irq/56-dwc_otg23:35:121
3119699333,16cyclictest0-21swapper/123:11:241
31196993327,4cyclictest5096-21ls23:00:321
31196993319,5cyclictest6914-21processes19:30:431
31196993319,5cyclictest6914-21processes19:30:431
3119699331,4cyclictest0-21swapper/122:50:371
3119699331,21cyclictest0-21swapper/119:16:331
31196993312,10cyclictest0-21swapper/122:02:201
3119999328,4cyclictest0-21swapper/322:00:543
3119999327,15cyclictest0-21swapper/321:45:183
3119999327,12cyclictest0-21swapper/321:36:203
3119999326,7cyclictest7950irq/56-dwc_otg_20:15:393
3119999325,12cyclictest7950irq/56-dwc_otg_20:05:113
3119999323,13cyclictest0-21swapper/300:07:373
3119999321,16cyclictest29646-21ls20:35:123
31199993211,4cyclictest7784-21taskset21:02:173
3119899324,8cyclictest7850irq/56-dwc_otg_20:35:122
31198993224,5cyclictest25925-21sh20:25:112
3119699327,11cyclictest8532-21fschecks_count21:05:301
3119699322,19cyclictest0-21swapper/123:47:301
3119699322,18cyclictest13118-21latency_hist19:50:111
31196993218,4cyclictest14573-21cat23:50:391
3119699321,21cyclictest16508-21ssh21:55:381
3119999318,12cyclictest7950irq/56-dwc_otg_20:20:353
3119999313,18cyclictest0-21swapper/323:00:503
31199993124,5cyclictest9817-21fschecks_time23:45:303
31199993123,5cyclictest39-21ksoftirqd/320:55:383
31199993123,5cyclictest39-21ksoftirqd/320:55:383
31199993121,6cyclictest2390150ssh21:25:383
3119999311,8cyclictest13544-21aten_rbpower_vo19:50:253
31199993115,4cyclictest10021-21/usr/sbin/munin00:25:373
3119999311,15cyclictest7950irq/56-dwc_otg_20:50:383
3119899311,4cyclictest0-21swapper/219:15:362
3119699318,11cyclictest0-21swapper/122:28:521
3119699312,9cyclictest23-21ksoftirqd/121:14:091
3119699311,22cyclictest0-21swapper/120:01:051
3119699311,21cyclictest0-21swapper/121:01:101
3119699311,14cyclictest0-21swapper/119:14:561
3119999308,11cyclictest0-21swapper/322:47:123
3119999306,10cyclictest0-21swapper/322:11:073
3119899307,12cyclictest7950irq/56-dwc_otg_22:45:302
3119699307,5cyclictest7950irq/56-dwc_otg_20:05:411
3119699302,13cyclictest0-21swapper/120:20:221
3119699301,19cyclictest0-21swapper/120:59:141
3119699301,19cyclictest0-21swapper/120:59:141
3119699301,17cyclictest23299-21ps20:15:351
3119999299,6cyclictest0-21swapper/300:04:153
3119999295,5cyclictest32308-21unixbench_multi19:10:393
3119899295,5cyclictest7750irq/56-dwc_otg19:20:392
3119899294,4cyclictest7950irq/56-dwc_otg_20:25:352
3119899292,9cyclictest31-21ksoftirqd/219:44:022
3119999282,6cyclictest7850irq/56-dwc_otg_19:45:313
3119999281,14cyclictest7950irq/56-dwc_otg_19:43:413
309202286,14sleep10-21swapper/119:10:071
307492284,15sleep30-21swapper/319:07:593
3119999273,6cyclictest7850irq/56-dwc_otg_20:25:353
3119999272,16cyclictest0-21swapper/319:55:403
3119999272,14cyclictest0-21swapper/320:47:163
3119999272,14cyclictest0-21swapper/320:47:163
3119999266,4cyclictest7750irq/56-dwc_otg20:10:293
3119999265,5cyclictest7950irq/56-dwc_otg_19:40:113
307082263,14sleep20-21swapper/219:07:252
3119999243,10cyclictest7950irq/56-dwc_otg_19:15:373
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional