You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-27 - 10:42

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot3s.osadl.org (updated Sat Jun 27, 2026 00:43:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
5724991043,14cyclictest0-21swapper/222:00:162
5723991033,14cyclictest0-21swapper/123:35:301
572299966,84cyclictest101ktimersoftd/022:00:160
572399933,17cyclictest26842-21ssh22:00:171
194062850,2sleep10-21swapper/123:09:451
286952800,2sleep30-21swapper/322:01:313
572299792,7cyclictest0-21swapper/023:35:290
40282780,5sleep0572299cyclictest20:35:090
166542770,4sleep0572299cyclictest23:05:330
5722997652,8cyclictest7950irq/56-dwc_otg_23:25:250
5722997652,8cyclictest7950irq/56-dwc_otg_23:25:250
207662740,1sleep00-21swapper/023:10:320
572299736,37cyclictest0-21swapper/021:35:230
160922720,2sleep20-21swapper/221:46:202
572599713,42cyclictest3903-21kworker/3:223:35:293
572499716,41cyclictest7950irq/56-dwc_otg_23:25:252
572499716,41cyclictest7950irq/56-dwc_otg_23:25:252
226182700,1sleep30-21swapper/321:15:413
5722996945,5cyclictest7950irq/56-dwc_otg_22:30:190
5722996945,5cyclictest7950irq/56-dwc_otg_22:30:190
572299667,23cyclictest31681-21ssh22:45:150
572399653,33cyclictest7850irq/56-dwc_otg23:25:251
572399653,33cyclictest7850irq/56-dwc_otg23:25:251
5722996414,29cyclictest24596-21latency_hist23:55:080
572499632,40cyclictest9048-21ntpq23:35:322
5722996315,21cyclictest0-21swapper/022:05:190
572299631,45cyclictest0-21swapper/021:40:260
205142630,2sleep20-21swapper/200:28:532
5722996242,3cyclictest0-21swapper/021:45:200
5722996218,25cyclictest9-21ksoftirqd/022:55:300
299952620,4sleep229-21rcuc/222:42:442
572299594,34cyclictest0-21swapper/021:50:180
572299591,55cyclictest8954-21latency_hist00:15:090
572399582,28cyclictest0-21swapper/121:35:231
572299589,2cyclictest0-21swapper/020:55:360
5722995633,4cyclictest8050irq/56-dwc_otg_21:20:210
5722995612,8cyclictest0-21swapper/020:40:200
317822550,2sleep10-21swapper/122:05:311
572299546,27cyclictest0-21swapper/020:10:090
572299543,12cyclictest0-21swapper/022:25:210
572299533,43cyclictest13-21rcuc/019:25:210
5722995328,6cyclictest7950irq/56-dwc_otg_00:16:180
5722995327,9cyclictest7950irq/56-dwc_otg_22:35:310
572299532,26cyclictest0-21swapper/019:40:210
5722995322,5cyclictest8050irq/56-dwc_otg_21:15:080
154542530,2sleep015455-21ssh23:05:050
572399521,6cyclictest0-21swapper/120:30:221
5722995227,10cyclictest23191-21grep19:55:380
5722995226,11cyclictest101ktimersoftd/021:25:270
5722995217,16cyclictest0-21swapper/000:30:220
5722995217,16cyclictest0-21swapper/000:30:220
5723995119,21cyclictest0-21swapper/120:40:221
572299519,25cyclictest0-21swapper/000:00:190
572299518,25cyclictest0-21swapper/022:40:180
572299514,8cyclictest0-21swapper/020:20:210
572299512,8cyclictest26518-21apt-config22:00:080
572299512,36cyclictest0-21swapper/020:00:220
572299512,24cyclictest0-21swapper/020:45:200
572299512,24cyclictest0-21swapper/020:45:200
5722995117,6cyclictest7950irq/56-dwc_otg_22:20:200
572299511,26cyclictest10650-21cron22:20:080
5722995019,8cyclictest0-21swapper/023:45:200
572599494,24cyclictest7950irq/56-dwc_otg_23:25:253
572599494,24cyclictest7950irq/56-dwc_otg_23:25:253
572299499,13cyclictest0-21swapper/019:15:200
5722994924,5cyclictest6915-21unixbench_singl19:10:360
572299492,34cyclictest0-21swapper/000:30:090
5722994922,15cyclictest0-21swapper/020:25:190
572299491,29cyclictest3241-21grep22:10:290
572299491,28cyclictest7866-21apt-get23:35:080
572299491,23cyclictest9-21ksoftirqd/022:50:190
572299483,32cyclictest9420-21aten_rbpower_en19:20:220
5722994826,6cyclictest9-21ksoftirqd/000:05:380
5722994823,11cyclictest26080-21ls00:35:260
5722994822,18cyclictest9-21ksoftirqd/000:20:200
5722994816,25cyclictest0-21swapper/020:10:190
572299481,23cyclictest0-21swapper/023:55:190
572499479,24cyclictest0-21swapper/220:40:222
5722994727,6cyclictest125-21systemd-journal20:55:080
5722994724,6cyclictest13-21rcuc/019:30:350
5722994722,5cyclictest12405-21acpi23:40:170
572299471,3cyclictest0-21swapper/023:15:250
572299471,25cyclictest32038-21modprobe23:25:090
572299471,24cyclictest1835-21sh21:30:240
572299471,24cyclictest0-21swapper/019:35:310
572399461,14cyclictest0-21swapper/122:40:211
572499457,25cyclictest0-21swapper/221:00:212
572399451,32cyclictest0-21swapper/123:19:401
572299452,31cyclictest0-21swapper/021:16:220
572299451,32cyclictest30105-21ps20:15:330
572299451,32cyclictest0-21swapper/020:37:280
572399447,26cyclictest0-21swapper/120:10:211
5722994420,13cyclictest0-21swapper/021:05:350
572299431,33cyclictest13-21rcuc/021:00:310
572399421,6cyclictest22704-21aten_rbpower_cu21:55:231
5722994223,3cyclictest0-21swapper/019:45:310
5722994223,3cyclictest0-21swapper/019:45:310
572299422,19cyclictest0-21swapper/019:50:250
533224222,14sleep00-21swapper/019:08:350
74112410,1sleep30-21swapper/323:34:193
572599411,6cyclictest17032-21ssh21:10:223
572499412,4cyclictest8050irq/56-dwc_otg_20:55:212
572499411,5cyclictest8050irq/56-dwc_otg_23:50:192
572399411,36cyclictest0-21swapper/100:05:371
5723994113,15cyclictest64150wget20:25:231
317662412,4sleep10-21swapper/122:45:221
162432410,3sleep339-21ksoftirqd/321:46:373
5723994016,16cyclictest0-21swapper/100:30:311
5723994016,16cyclictest0-21swapper/100:30:311
572399391,25cyclictest7961-21ls22:55:241
5723993910,21cyclictest0-21swapper/100:37:361
238902390,1sleep10-21swapper/122:35:271
572499386,17cyclictest0-21swapper/219:25:232
5724993819,5cyclictest5812-21aten_rbpower_po19:10:222
572399382,5cyclictest2985-21ssh22:10:271
572399381,10cyclictest25177-21ssh21:20:091
572599372,5cyclictest0-21swapper/323:59:373
572599371,26cyclictest18301-21ls19:45:093
572399376,20cyclictest0-21swapper/121:29:181
5723993720,7cyclictest8050irq/56-dwc_otg_23:30:241
5723993717,11cyclictest0-21swapper/122:33:231
5723993717,11cyclictest0-21swapper/122:33:231
572399371,5cyclictest20623-21apt-config23:50:101
5723993715,4cyclictest11698-21/usr/sbin/munin23:00:391
5723993714,16cyclictest2040150ssh21:14:161
213602370,4sleep3572599cyclictest19:50:363
572599368,15cyclictest0-21swapper/320:45:223
572599368,15cyclictest0-21swapper/320:45:223
572499363,6cyclictest7950irq/56-dwc_otg_21:20:092
5724993616,11cyclictest28432-21ssh23:59:372
5724993615,10cyclictest9526-21sh22:56:462
572399365,8cyclictest23-21ksoftirqd/123:14:141
572399363,13cyclictest0-21swapper/122:25:111
5723993617,4cyclictest5695-21ls00:10:301
5723993617,4cyclictest15244-21ssh23:43:211
572399361,5cyclictest16632-21apt-get19:40:211
5723993612,5cyclictest221ktimersoftd/121:55:061
572599352,14cyclictest7950irq/56-dwc_otg_00:10:213
572599351,5cyclictest19650-21modprobe23:10:083
5725993514,5cyclictest15222-21sh23:04:383
572499357,4cyclictest7850irq/56-dwc_otg23:30:332
572499356,17cyclictest0-21swapper/220:30:232
572499351,5cyclictest1198-21fschecks_time00:05:272
5724993510,18cyclictest0-21swapper/223:42:372
572499350,4cyclictest8050irq/56-dwc_otg_00:15:202
572399355,4cyclictest1066-1kworker/u9:022:51:021
5723993525,7cyclictest12957-21sh00:20:081
5723993514,4cyclictest15099-21aten_rbpower_cu21:05:221
5723993512,9cyclictest9390-21sh22:17:501
5723993512,12cyclictest0-21swapper/122:23:341
5723993510,11cyclictest0-21swapper/121:40:211
50122355,20sleep25085-21/usr/sbin/munin19:05:372
572599345,19cyclictest21559-21ssh00:30:223
572599345,19cyclictest21559-21ssh00:30:223
5725993425,6cyclictest39-21ksoftirqd/323:45:363
5725993411,4cyclictest0-21swapper/321:50:373
572599340,22cyclictest0-21swapper/321:37:213
572499349,4cyclictest0-21swapper/223:20:202
572499346,16cyclictest0-21swapper/200:30:222
572499346,16cyclictest0-21swapper/200:30:222
572499341,23cyclictest15275-21cpuspeed21:05:232
572399345,9cyclictest8050irq/56-dwc_otg_19:55:271
572399343,5cyclictest0-21swapper/120:00:211
572399342,22cyclictest28065-21rm23:58:571
572399342,14cyclictest30023-21awk20:15:311
572399341,24cyclictest19362-21ssh00:26:461
48892345,18sleep15010-21tail19:05:361
172392340,2sleep117182-21ssh00:25:091
572599339,14cyclictest0-21swapper/300:20:223
572599337,7cyclictest7850irq/56-dwc_otg19:45:243
572599337,7cyclictest7850irq/56-dwc_otg19:45:243
572499337,14cyclictest8050irq/56-dwc_otg_23:13:582
572499337,13cyclictest8050irq/56-dwc_otg_23:15:292
572499336,13cyclictest8050irq/56-dwc_otg_20:47:372
572499336,13cyclictest8050irq/56-dwc_otg_20:47:372
572499335,19cyclictest29080-21ssh00:00:212
572499334,18cyclictest0-21swapper/223:45:452
572499333,15cyclictest8050irq/56-dwc_otg_20:15:222
5724993327,4cyclictest2726-21ssh22:10:222
5724993314,6cyclictest31435-21fschecks_count20:20:242
5724993313,14cyclictest301ktimersoftd/200:40:032
5724993313,13cyclictest0-21swapper/222:30:372
5724993313,13cyclictest0-21swapper/222:30:372
5724993313,11cyclictest30329-21grep21:25:302
5724993311,5cyclictest17171-21latency_hist00:25:092
572399337,5cyclictest28570-21/usr/sbin/munin23:20:251
572399334,18cyclictest0-21swapper/123:50:311
572399331,5cyclictest9436-21aten_rbpower_en19:20:221
5723993315,5cyclictest26036-21fschecks_time20:05:251
572399331,23cyclictest1899-21grep21:30:251
572599327,12cyclictest8050irq/56-dwc_otg_00:15:363
572599324,13cyclictest7850irq/56-dwc_otg21:20:373
572599323,7cyclictest0-21swapper/323:15:203
572599322,20cyclictest8050irq/56-dwc_otg_21:29:143
5725993211,4cyclictest0-21swapper/300:35:203
5725993211,13cyclictest727-21runrttasks21:57:273
572499323,8cyclictest0-21swapper/222:05:202
572499322,6cyclictest32266-21irqstats22:45:282
572499322,5cyclictest7850irq/56-dwc_otg21:20:262
572499321,5cyclictest12007-21fschecks_count23:00:272
5724993213,4cyclictest8033-21grep22:15:352
572399328,15cyclictest0-21swapper/121:00:211
572399327,15cyclictest0-21swapper/100:00:211
572399326,15cyclictest0-21swapper/119:25:231
572399326,14cyclictest0-21swapper/120:55:221
572399324,7cyclictest29456-21awk21:25:091
572399321,24cyclictest0-21swapper/119:15:221
5723993211,6cyclictest21-21rcuc/121:46:061
572599318,5cyclictest7850irq/56-dwc_otg00:05:273
572599317,6cyclictest8050irq/56-dwc_otg_20:25:333
572599316,16cyclictest0-21swapper/323:20:333
572599315,13cyclictest8050irq/56-dwc_otg_22:40:253
572599311,17cyclictest6053-21cut19:10:253
5725993111,4cyclictest0-21swapper/322:34:043
5725993111,4cyclictest0-21swapper/322:34:043
5725993110,4cyclictest0-21swapper/322:45:363
572499319,9cyclictest5450-21if_eth000:10:272
572499319,3cyclictest0-21swapper/221:50:242
572499317,15cyclictest0-21swapper/222:20:222
572499315,16cyclictest0-21swapper/221:55:382
572499315,14cyclictest8050irq/56-dwc_otg_22:50:222
572499314,6cyclictest7950irq/56-dwc_otg_19:15:242
572499312,23cyclictest0-21swapper/222:26:572
5724993111,5cyclictest29-21rcuc/221:40:212
572499311,12cyclictest8050irq/56-dwc_otg_19:45:092
5724993110,6cyclictest0-21swapper/219:50:362
572399312,13cyclictest8050irq/56-dwc_otg_20:40:101
242882310,1sleep30-21swapper/323:54:363
572599308,5cyclictest7850irq/56-dwc_otg00:25:383
572599308,5cyclictest0-21swapper/322:10:333
572599308,10cyclictest0-21swapper/322:07:413
572599307,5cyclictest0-21swapper/322:50:313
572599306,5cyclictest0-21swapper/322:55:303
572599304,6cyclictest7850irq/56-dwc_otg23:10:313
572599304,15cyclictest8050irq/56-dwc_otg_19:30:253
572599303,7cyclictest8050irq/56-dwc_otg_20:10:363
572599303,13cyclictest7950irq/56-dwc_otg_23:42:463
572599302,21cyclictest0-21swapper/319:24:063
5725993012,4cyclictest16648-21diskmemload22:22:013
5725993011,6cyclictest19916-1kworker/u9:222:17:453
5725993011,4cyclictest0-21swapper/321:32:403
572499301,7cyclictest23823-21latency_hist20:00:092
572499301,7cyclictest18267-21unixbench_singl21:10:372
572499301,5cyclictest2288-21latency_hist20:30:092
572499301,18cyclictest0-21swapper/221:30:232
572399302,6cyclictest7875-21apt-get20:45:201
572399302,6cyclictest7875-21apt-get20:45:201
572399302,5cyclictest0-21swapper/120:20:361
5723993015,4cyclictest5811-21aten_rbpower_po19:10:221
572599296,4cyclictest7850irq/56-dwc_otg21:10:093
572599296,12cyclictest39-21ksoftirqd/321:40:373
572599293,5cyclictest7950irq/56-dwc_otg_22:35:253
5725992910,4cyclictest0-21swapper/322:25:323
572499299,4cyclictest5182-21timerandwakeup20:35:352
572499298,4cyclictest7850irq/56-dwc_otg20:00:232
572499298,12cyclictest0-21swapper/223:08:172
572499296,14cyclictest0-21swapper/220:10:212
572499295,22cyclictest13534-21latency19:30:282
572499292,3cyclictest8050irq/56-dwc_otg_22:38:472
5724992914,5cyclictest26215-21uname20:05:282
572499291,3cyclictest0-21swapper/221:35:272
5724992913,9cyclictest727-21runrttasks19:47:512
5724992913,9cyclictest727-21runrttasks19:47:512
572399295,4cyclictest7850irq/56-dwc_otg20:50:161
572399294,6cyclictest8050irq/56-dwc_otg_19:45:221
572399294,6cyclictest8050irq/56-dwc_otg_19:45:221
572599288,5cyclictest7850irq/56-dwc_otg00:00:233
572599288,4cyclictest7850irq/56-dwc_otg19:15:263
572599283,5cyclictest7850irq/56-dwc_otg20:50:293
572599282,5cyclictest7950irq/56-dwc_otg_19:25:273
5725992810,6cyclictest0-21swapper/321:00:253
572499284,4cyclictest7850irq/56-dwc_otg19:25:082
572499281,5cyclictest16394-21munin-run19:40:092
572399283,6cyclictest8050irq/56-dwc_otg_19:35:221
572399281,4cyclictest7950irq/56-dwc_otg_19:30:211
51142284,15sleep30-21swapper/319:05:513
572599274,20cyclictest31344-21ls20:20:223
572599273,5cyclictest7850irq/56-dwc_otg20:55:333
572599272,11cyclictest7850irq/56-dwc_otg19:55:383
572599271,2cyclictest0-21swapper/320:05:193
572599271,20cyclictest0-21swapper/320:31:443
572499271,8cyclictest9913-21fschecks_count20:50:242
572399271,6cyclictest0-21swapper/119:50:181
572599262,5cyclictest16528-21latency_hist19:40:093
5725992618,5cyclictest5263-21timerwakeupswit20:35:353
572599261,7cyclictest30532-21users20:15:373
572599252,6cyclictest8050irq/56-dwc_otg_20:40:223
572599252,4cyclictest7850irq/56-dwc_otg20:00:373
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional