You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-26 - 12:38

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Thu Mar 26, 2026 00:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3009422410,5sleep10-21swapper/119:05:241
2990322140,8sleep3381ktimersoftd/319:05:223
3170299872,62cyclictest0-21swapper/019:30:210
6442810,1sleep00-21swapper/023:34:290
3170499794,39cyclictest7850irq/56-dwc_otg_19:46:521
31702997945,5cyclictest0-21swapper/000:05:200
82352720,1sleep10-21swapper/123:04:381
3170299714,47cyclictest0-21swapper/023:00:220
202092710,5sleep23170599cyclictest21:20:362
93492700,2sleep33170699cyclictest19:35:353
3170299671,37cyclictest0-21swapper/019:10:230
81672660,3sleep337-21rcuc/322:25:193
31705996630,9cyclictest10305-21diskmemload21:25:232
3170299666,52cyclictest0-21swapper/021:15:230
3170299666,52cyclictest0-21swapper/021:15:230
31702996511,7cyclictest0-21swapper/019:35:210
31705996318,13cyclictest7950irq/56-dwc_otg_23:15:192
3170299638,10cyclictest7950irq/56-dwc_otg_19:45:200
3170299632,48cyclictest591-21aten_rbpower_cu22:55:220
31702996322,34cyclictest0-21swapper/023:40:150
3170299626,9cyclictest0-21swapper/022:05:200
314492620,2sleep20-21swapper/221:35:132
153852620,2sleep10-21swapper/123:12:231
31702996129,14cyclictest7850irq/56-dwc_otg_22:35:090
3170599606,5cyclictest7750irq/56-dwc_otg23:05:202
31702996019,20cyclictest5273-21grep22:20:360
3170299601,45cyclictest7736-21head00:20:390
3170299601,39cyclictest14767-21grep23:50:340
246722600,2sleep10-21swapper/121:25:501
31702995837,5cyclictest7950irq/56-dwc_otg_22:35:270
3170299581,30cyclictest10398-21latency_hist21:10:100
3170299574,39cyclictest9-21ksoftirqd/023:55:230
31702995740,4cyclictest7750irq/56-dwc_otg20:10:370
31702995732,12cyclictest101ktimersoftd/021:50:280
31702995710,30cyclictest9-21ksoftirqd/020:30:100
3170599564,4cyclictest0-21swapper/219:50:202
31702995632,3cyclictest7750irq/56-dwc_otg23:05:210
31702995629,4cyclictest7750irq/56-dwc_otg21:45:200
31702995629,4cyclictest7750irq/56-dwc_otg21:45:200
3170299561,51cyclictest101ktimersoftd/021:30:380
3170299561,48cyclictest0-21swapper/022:50:300
3170299561,47cyclictest0-21swapper/021:44:520
3170299561,43cyclictest0-21swapper/023:24:370
3170299561,41cyclictest0-21swapper/022:15:230
3170299561,41cyclictest0-21swapper/022:15:230
3170299561,3cyclictest0-21swapper/000:10:230
3170299556,35cyclictest3093-21ls21:40:100
31702995523,15cyclictest7850irq/56-dwc_otg_22:00:340
3170299551,43cyclictest0-21swapper/022:50:100
3170299551,42cyclictest0-21swapper/023:14:550
3170299551,41cyclictest0-21swapper/023:15:290
31705995412,18cyclictest7750irq/56-dwc_otg00:30:162
3170499543,9cyclictest7750irq/56-dwc_otg21:55:221
31702995439,4cyclictest7750irq/56-dwc_otg22:30:090
31702995433,5cyclictest26180-21wc00:05:100
31702995426,12cyclictest7850irq/56-dwc_otg_00:15:290
3170299541,41cyclictest32012-21apt22:15:090
3170299541,39cyclictest0-21swapper/021:10:330
165012540,5sleep23170599cyclictest19:55:352
3170699537,27cyclictest0-21swapper/319:55:233
3170599534,3cyclictest0-21swapper/222:45:212
3170299534,46cyclictest0-21swapper/020:30:230
3170299532,43cyclictest0-21swapper/000:29:190
3170299532,38cyclictest0-21swapper/021:00:100
3170299531,45cyclictest0-21swapper/000:35:100
3170299531,42cyclictest0-21swapper/021:55:280
3170299531,40cyclictest25907-21cut23:25:270
3170499528,19cyclictest0-21swapper/123:35:221
31704995218,5cyclictest7850irq/56-dwc_otg_21:30:201
3170499521,4cyclictest7850irq/56-dwc_otg_21:05:221
3170299523,26cyclictest5137-21fschecks_time19:25:260
3170299522,38cyclictest0-21swapper/023:36:470
31702995220,6cyclictest0-21swapper/020:15:220
31702995219,15cyclictest7850irq/56-dwc_otg_20:50:340
3170299519,3cyclictest0-21swapper/000:40:110
3170299516,25cyclictest9-21ksoftirqd/020:00:340
3170299516,25cyclictest9-21ksoftirqd/020:00:340
3170299514,33cyclictest9-21ksoftirqd/023:45:320
3170299513,37cyclictest1990-21grep20:45:270
3170299512,36cyclictest0-21swapper/020:45:060
3170299512,36cyclictest0-21swapper/020:45:060
31702995123,15cyclictest0-21swapper/019:17:150
3170299511,42cyclictest0-21swapper/020:05:490
3170299511,39cyclictest0-21swapper/021:25:360
3170699505,7cyclictest7950irq/56-dwc_otg_00:10:213
31702995030,6cyclictest7950irq/56-dwc_otg_19:50:310
3170299501,4cyclictest31869-21munin-run20:40:100
3170299492,37cyclictest0-21swapper/019:58:570
66942481,3sleep30-21swapper/319:30:173
3170499487,26cyclictest0-21swapper/119:20:231
3170499485,8cyclictest7850irq/56-dwc_otg_00:30:231
3170299482,35cyclictest0-21swapper/022:43:350
3170299482,35cyclictest0-21swapper/019:45:030
3170699473,26cyclictest10305-21diskmemload22:30:203
3170599477,25cyclictest0-21swapper/220:50:222
31702994727,4cyclictest7116-21cut21:00:260
3170299471,35cyclictest0-21swapper/019:20:360
3170299471,34cyclictest0-21swapper/020:20:370
3170299471,30cyclictest0-21swapper/021:25:100
311842473,10sleep00-21swapper/019:07:010
31706994617,11cyclictest7850irq/56-dwc_otg_23:35:293
31706994611,11cyclictest7850irq/56-dwc_otg_22:50:213
31704994614,7cyclictest9614-21unixbench_multi19:35:381
3170699457,25cyclictest0-21swapper/322:35:233
3170699457,23cyclictest0-21swapper/322:40:273
3170599457,24cyclictest0-21swapper/220:10:232
31705994519,13cyclictest27380-21apt21:30:202
3170499455,4cyclictest28211-21ssh22:10:231
3170499454,6cyclictest0-21swapper/120:25:231
3170699447,27cyclictest0-21swapper/320:05:233
3170699446,5cyclictest7950irq/56-dwc_otg_23:30:203
3170699442,12cyclictest0-21swapper/322:05:203
3170599449,5cyclictest0-21swapper/220:15:392
3170699438,3cyclictest7750irq/56-dwc_otg21:45:223
3170699438,3cyclictest7750irq/56-dwc_otg21:45:223
3170699432,7cyclictest7950irq/56-dwc_otg_23:55:213
3170699431,26cyclictest0-21swapper/323:10:153
31705994319,4cyclictest31761-21aten_rbpower_cu19:10:232
3170499434,7cyclictest7950irq/56-dwc_otg_20:20:211
31704994325,9cyclictest25213-21idleruntime-cro23:25:101
121052430,3sleep337-21rcuc/300:26:013
3170699425,24cyclictest28120-21ssh22:10:153
31706994221,4cyclictest39-21ksoftirqd/321:05:243
31706994215,12cyclictest7950irq/56-dwc_otg_21:55:243
3170599422,10cyclictest0-21swapper/222:00:212
3170499427,14cyclictest7950irq/56-dwc_otg_22:25:091
3170499422,8cyclictest0-21swapper/122:30:211
3170499421,21cyclictest12339-21ssh21:50:331
3170699419,9cyclictest7950irq/56-dwc_otg_23:25:233
3170699416,14cyclictest26440-21ssh00:05:203
3170699412,5cyclictest7950irq/56-dwc_otg_23:40:223
3170499416,24cyclictest0-21swapper/119:30:211
242092410,1sleep20-21swapper/222:44:512
171032410,2sleep20-21swapper/223:15:102
3170699407,25cyclictest0-21swapper/321:20:223
3170699406,17cyclictest0-21swapper/319:25:153
3170699404,9cyclictest7850irq/56-dwc_otg_19:45:203
31706994021,5cyclictest37-21rcuc/321:50:223
31706994020,6cyclictest39-21ksoftirqd/322:56:183
3170599407,22cyclictest0-21swapper/222:05:222
3170599406,25cyclictest0-21swapper/219:45:222
3170599406,24cyclictest0-21swapper/223:55:222
3170599403,5cyclictest7750irq/56-dwc_otg00:20:212
31705994015,11cyclictest7750irq/56-dwc_otg23:50:222
3170499402,11cyclictest0-21swapper/100:15:221
31704994017,5cyclictest65550wget22:55:231
3170499401,5cyclictest7750irq/56-dwc_otg21:01:271
3170699396,5cyclictest0-21swapper/323:05:223
3170699392,8cyclictest7950irq/56-dwc_otg_21:00:213
3170699391,29cyclictest19300-21apt-key20:05:103
3170699391,29cyclictest19300-21apt-key20:05:103
3170599398,14cyclictest7850irq/56-dwc_otg_20:05:372
31705993917,13cyclictest11695-21ssh22:29:382
3170599391,5cyclictest4508-21ls19:25:102
31705993913,8cyclictest0-21swapper/222:55:212
3170499397,22cyclictest0-21swapper/123:45:231
31704993929,4cyclictest7750irq/56-dwc_otg00:10:231
311572391,30sleep10-21swapper/120:35:361
298912399,18sleep229901-21aten_rbpower_cu19:05:222
3170699389,7cyclictest0-21swapper/300:22:303
3170699385,19cyclictest18974-21ssh00:35:223
31706993816,5cyclictest908-21runrttasks19:50:313
3170699381,19cyclictest37-21rcuc/323:25:103
3170599389,14cyclictest7950irq/56-dwc_otg_22:20:322
3170599381,21cyclictest5403-21cut20:55:272
26532381,32sleep20-21swapper/219:20:092
13972380,2sleep20-21swapper/220:45:102
13972380,2sleep20-21swapper/220:45:102
3170699379,4cyclictest0-21swapper/321:15:233
3170699379,4cyclictest0-21swapper/321:15:233
3170699373,24cyclictest0-21swapper/320:30:233
3170599379,5cyclictest0-21swapper/220:35:372
31705993718,4cyclictest5599-21sh21:42:332
3170499374,11cyclictest12669-21apt-get23:10:091
3170499371,26cyclictest0-21swapper/100:02:141
3170499371,24cyclictest16764-21ls19:55:371
31706993619,4cyclictest25872-21sh00:04:453
31706993615,5cyclictest24176-21sensors21:25:363
3170699361,4cyclictest865650ssh23:05:103
31706993614,6cyclictest39-21ksoftirqd/323:50:333
3170699361,26cyclictest23632-21ssh22:05:103
31706993612,5cyclictest1643-21/usr/sbin/munin19:15:303
3170599369,7cyclictest5746-21aten_rbpower_vo23:40:242
3170599366,14cyclictest7850irq/56-dwc_otg_00:25:222
3170599365,7cyclictest2963850ssh22:50:322
3170599362,7cyclictest22148-21grep23:20:312
3170499368,21cyclictest7750irq/56-dwc_otg21:45:221
3170499368,21cyclictest7750irq/56-dwc_otg21:45:221
3170499366,19cyclictest24332-21ls22:05:261
3170499363,11cyclictest21609-21ssh22:01:301
31704993625,8cyclictest31813-21fschecks_count21:35:261
3170499362,4cyclictest4945-21latency_hist20:55:101
3170499361,28cyclictest0-21swapper/121:21:231
3170499361,24cyclictest6410-21ls19:30:091
3170499361,20cyclictest0-21swapper/100:25:221
3170699351,23cyclictest6176-21ls00:20:103
3170699351,20cyclictest39-21ksoftirqd/320:35:283
3170599354,23cyclictest7950irq/56-dwc_otg_00:15:212
3170599353,5cyclictest7950irq/56-dwc_otg_22:35:512
3170599351,25cyclictest1811-21ls20:45:252
3170599351,25cyclictest16726-21timerandwakeup21:55:382
3170499357,14cyclictest7750irq/56-dwc_otg22:25:201
3170499354,14cyclictest7950irq/56-dwc_otg_22:35:381
3170499352,20cyclictest0-21swapper/119:54:071
315532350,1sleep10-21swapper/122:53:071
3170699347,16cyclictest0-21swapper/321:35:233
3170699345,7cyclictest7850irq/56-dwc_otg_20:15:253
3170699343,5cyclictest0-21swapper/323:45:273
3170699341,17cyclictest0-21swapper/321:11:003
31706993410,5cyclictest39-21ksoftirqd/300:30:283
3170599345,20cyclictest26464-21ssh00:05:232
3170599345,13cyclictest7850irq/56-dwc_otg_22:10:272
31704993414,5cyclictest19206-21latency_hist20:05:101
31704993414,5cyclictest19206-21latency_hist20:05:101
31704993414,5cyclictest157550wget20:45:221
3170499341,22cyclictest29337-21switchtime20:30:361
3170699337,23cyclictest0-21swapper/320:25:233
3170699332,5cyclictest7950irq/56-dwc_otg_23:15:223
3170699331,23cyclictest32456-21idleruntime20:40:263
3170699331,23cyclictest32456-21idleruntime20:40:263
3170599339,11cyclictest7950irq/56-dwc_otg_21:50:102
3170599339,11cyclictest7950irq/56-dwc_otg_21:50:102
3170599337,17cyclictest0-21swapper/220:30:232
3170599336,12cyclictest7850irq/56-dwc_otg_22:15:302
3170599336,12cyclictest7850irq/56-dwc_otg_22:15:302
3170599335,5cyclictest0-21swapper/223:45:242
3170599334,4cyclictest0-21swapper/220:00:232
3170599334,4cyclictest0-21swapper/220:00:232
3170599333,14cyclictest7850irq/56-dwc_otg_19:25:142
3170599331,6cyclictest0-21swapper/222:30:212
3170599331,5cyclictest7950irq/56-dwc_otg_00:00:252
31705993312,4cyclictest30238-21cron00:10:102
3170499338,4cyclictest0-21swapper/123:29:571
3170499337,14cyclictest0-21swapper/123:15:231
3170499334,5cyclictest7750irq/56-dwc_otg19:40:251
3170499333,19cyclictest221ktimersoftd/123:50:221
3170499333,12cyclictest7850irq/56-dwc_otg_23:40:291
3170499332,3cyclictest0-21swapper/123:32:451
3170499331,15cyclictest7750irq/56-dwc_otg19:15:371
3170699329,3cyclictest0-21swapper/322:22:083
3170699326,18cyclictest39-21ksoftirqd/321:42:003
3170699321,17cyclictest31197-21latency_hist21:35:103
3170599322,4cyclictest7850irq/56-dwc_otg_19:40:202
3170599322,14cyclictest7750irq/56-dwc_otg23:30:372
31705993212,4cyclictest24989-21cut20:20:242
3170599321,22cyclictest26646-21ssh23:25:372
3170599321,20cyclictest7874-21head19:30:382
3170599321,20cyclictest26946-21cut20:25:272
3170599321,13cyclictest4710-21apt-get23:00:212
31705993210,4cyclictest0-21swapper/221:10:222
3170499328,9cyclictest0-21swapper/100:35:221
3170499327,6cyclictest7850irq/56-dwc_otg_21:15:211
3170499327,6cyclictest7850irq/56-dwc_otg_21:15:211
3170499326,14cyclictest0-21swapper/122:15:231
3170499326,14cyclictest0-21swapper/122:15:231
3170499324,3cyclictest0-21swapper/120:15:221
3170499322,21cyclictest0-21swapper/122:46:371
3170699314,17cyclictest7950irq/56-dwc_otg_22:47:213
3170699313,5cyclictest7950irq/56-dwc_otg_19:40:363
3170699312,6cyclictest7950irq/56-dwc_otg_20:55:313
3170699312,14cyclictest0-21swapper/322:15:293
3170699312,14cyclictest0-21swapper/322:15:293
31706993112,4cyclictest4017-21awk19:20:383
3170599317,11cyclictest7850irq/56-dwc_otg_23:35:252
3170599311,21cyclictest7722-21switchtime21:00:342
3170499316,22cyclictest0-21swapper/123:55:151
3170499315,13cyclictest7950irq/56-dwc_otg_19:10:311
31704993120,9cyclictest0-21swapper/120:55:231
3170499311,6cyclictest3278-21ssh21:40:231
31704993115,4cyclictest10305-21diskmemload21:12:311
3170699303,3cyclictest7750irq/56-dwc_otg20:20:303
3170599308,10cyclictest7950irq/56-dwc_otg_00:35:302
3170599302,8cyclictest149-21systemd-journal21:06:462
31705993011,4cyclictest11959-21if_err_wlan021:50:272
3170499307,21cyclictest0-21swapper/120:05:151
3170499307,13cyclictest7950irq/56-dwc_otg_00:20:261
3170499304,4cyclictest7850irq/56-dwc_otg_22:40:281
3170499293,14cyclictest0-21swapper/100:05:321
3170699281,7cyclictest7950irq/56-dwc_otg_20:49:183
3170699281,5cyclictest7850irq/56-dwc_otg_19:10:583
3170599286,4cyclictest7750irq/56-dwc_otg21:15:232
3170599286,4cyclictest7750irq/56-dwc_otg21:15:232
3170599285,5cyclictest7850irq/56-dwc_otg_19:40:092
3170699275,4cyclictest7950irq/56-dwc_otg_20:53:183
3170699263,6cyclictest7850irq/56-dwc_otg_20:10:263
3170499265,10cyclictest7950irq/56-dwc_otg_20:10:301
3170499251,7cyclictest0-21swapper/120:40:211
3170499251,7cyclictest0-21swapper/120:40:211
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional