You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-17 - 05:39

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Mon Aug 17, 2026 00:43:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
25764991562,118cyclictest4231-21diskmemload00:15:290
25764991562,118cyclictest4231-21diskmemload00:15:290
1138921380,1sleep00-21swapper/022:35:330
25764991233,87cyclictest7273-21fschecks_time23:10:280
257649911810,28cyclictest16600-21ssh00:00:330
2191121090,2sleep10-21swapper/122:10:061
25764991005,69cyclictest0-21swapper/021:25:110
25764998824,13cyclictest0-21swapper/022:05:210
2576499849,44cyclictest60-21kswapd022:55:190
2576499822,39cyclictest0-21swapper/020:35:170
2576599814,9cyclictest7850irq/56-dwc_otg_00:00:381
2576499813,13cyclictest0-21swapper/022:50:170
2576499798,26cyclictest21554-21ssh21:30:210
25764997921,13cyclictest7850irq/56-dwc_otg_21:20:270
2576499791,24cyclictest0-21swapper/020:20:200
25764997817,19cyclictest0-21swapper/020:30:210
287172770,4sleep231-21ksoftirqd/219:15:332
25767997734,9cyclictest7750irq/56-dwc_otg00:15:243
25767997734,9cyclictest7750irq/56-dwc_otg00:15:243
25764997627,4cyclictest7950irq/56-dwc_otg_20:50:060
25764997622,4cyclictest11734-21fschecks_time20:00:260
25764997622,4cyclictest11734-21fschecks_time20:00:260
25764997616,32cyclictest0-21swapper/000:10:300
2576499751,6cyclictest15521-21fschecks_time23:20:220
2576499751,40cyclictest19365-21ssh23:25:220
25764997512,20cyclictest31255-21aten_rbpower_cu19:25:210
2576599743,35cyclictest0-21swapper/123:10:321
2576499745,43cyclictest0-21swapper/000:30:200
2576499744,31cyclictest16187-21ssh00:40:070
25764997436,5cyclictest0-21swapper/021:40:190
25766997313,39cyclictest16814-21timerandwakeup00:00:372
2576499736,43cyclictest0-21swapper/020:40:120
2576499721,18cyclictest0-21swapper/000:05:320
127472720,4sleep212746-21ssh23:55:352
2576599713,12cyclictest10882-21ls22:35:261
2576699695,29cyclictest31710-21ssh23:40:192
52822670,4sleep22576699cyclictest23:07:482
25764996719,8cyclictest0-21swapper/023:35:200
25764996719,8cyclictest0-21swapper/023:35:200
2576499671,62cyclictest0-21swapper/019:50:060
2576699663,40cyclictest7750irq/56-dwc_otg23:10:262
2576499657,15cyclictest0-21swapper/023:55:210
2576499633,17cyclictest0-21swapper/021:10:180
2576799623,37cyclictest0-21swapper/321:25:113
2576599623,12cyclictest3945-21kworker/u8:022:20:181
25765996116,20cyclictest7950irq/56-dwc_otg_00:15:261
25765996116,20cyclictest7950irq/56-dwc_otg_00:15:261
25767995913,22cyclictest381ktimersoftd/300:00:323
2576499591,4cyclictest27461-21latency_hist19:15:070
2576499591,4cyclictest27461-21latency_hist19:15:070
2576799585,16cyclictest0-21swapper/323:10:323
2576799584,26cyclictest7850irq/56-dwc_otg_22:35:233
25766995818,15cyclictest10776-21sort22:35:242
25766995720,11cyclictest28566-21/usr/sbin/munin00:15:262
25766995720,11cyclictest28566-21/usr/sbin/munin00:15:262
2576499571,24cyclictest21564-21grep20:25:350
149742560,2sleep10-21swapper/120:10:061
146292560,2sleep20-21swapper/200:37:342
2576499553,39cyclictest0-21swapper/019:55:180
25764995517,35cyclictest101ktimersoftd/022:15:220
253222553,44sleep10-21swapper/119:07:591
2576499541,16cyclictest4022-21latency_hist19:40:060
2576799532,33cyclictest0-21swapper/319:55:203
25766995314,13cyclictest17338-21ssh21:25:122
25765995313,21cyclictest7850irq/56-dwc_otg_21:25:101
25764995330,12cyclictest7750irq/56-dwc_otg00:25:250
309972520,1sleep30-21swapper/323:00:123
270652520,2sleep10-21swapper/122:15:291
2576499527,25cyclictest9-21ksoftirqd/023:00:250
252992523,42sleep30-21swapper/319:07:413
2576499511,46cyclictest31203-21missed_timers22:20:280
2576499511,32cyclictest29446-21kworker/u8:021:40:060
2576799501,22cyclictest0-21swapper/300:35:213
25764995026,6cyclictest29718-21wget20:50:190
25764995023,8cyclictest9376-21latency21:15:260
2576499502,23cyclictest9831-21ssh21:55:190
2576499502,23cyclictest0-21swapper/023:05:290
2576499501,46cyclictest0-21swapper/022:40:310
2576499501,3cyclictest5241-21ssh21:50:060
2576499501,28cyclictest0-21swapper/019:40:220
2576499501,27cyclictest23006-21ssh22:10:310
25764995010,37cyclictest101ktimersoftd/000:20:250
2576499491,36cyclictest0-21swapper/022:33:060
2576499491,30cyclictest0-21swapper/021:05:060
2576599487,27cyclictest0-21swapper/119:10:201
2576599487,27cyclictest0-21swapper/119:10:201
2576499487,25cyclictest8654-21timerwakeupswit23:50:350
25764994831,10cyclictest7950irq/56-dwc_otg_23:45:280
25764994826,7cyclictest7750irq/56-dwc_otg22:45:330
2576799477,25cyclictest0-21swapper/320:35:203
2576799477,25cyclictest0-21swapper/320:05:203
2576799475,6cyclictest7950irq/56-dwc_otg_20:10:183
2576599477,24cyclictest0-21swapper/119:35:181
25764994726,3cyclictest0-21swapper/023:40:170
2576499472,27cyclictest0-21swapper/019:25:050
25764994716,27cyclictest101ktimersoftd/023:33:040
2576499471,24cyclictest13211-21ssh23:17:050
2576799462,5cyclictest7950irq/56-dwc_otg_21:20:193
2576599467,22cyclictest0-21swapper/121:40:191
2576499466,19cyclictest0-21swapper/022:00:350
25764994622,4cyclictest0-21swapper/021:05:240
25764994622,4cyclictest0-21swapper/021:05:240
25764994617,20cyclictest0-21swapper/021:54:390
2576499461,29cyclictest2975-21rm22:25:300
2576499461,25cyclictest17886-21unixbench-2d20:15:340
2576799457,24cyclictest0-21swapper/320:45:113
2576599458,20cyclictest0-21swapper/123:40:191
2576599457,25cyclictest0-21swapper/122:45:201
2576499451,22cyclictest13-21rcuc/019:50:340
253322453,14sleep00-21swapper/019:08:070
2576799447,25cyclictest0-21swapper/320:55:213
2576799447,24cyclictest0-21swapper/321:50:203
2576799447,11cyclictest7850irq/56-dwc_otg_21:45:243
25764994423,5cyclictest7850irq/56-dwc_otg_20:15:050
2576499441,17cyclictest29298-21latency_hist19:20:060
251062440,5sleep32576799cyclictest22:52:233
2576799432,3cyclictest7950irq/56-dwc_otg_23:50:193
2576799431,8cyclictest7750irq/56-dwc_otg22:15:183
2576699436,24cyclictest0-21swapper/220:10:202
2576699431,25cyclictest0-21swapper/221:45:252
25765994310,5cyclictest0-21swapper/100:30:201
115462430,5sleep32576799cyclictest21:18:033
2576799427,22cyclictest0-21swapper/321:00:213
25765994218,12cyclictest32310-21ssh00:20:191
2576499424,21cyclictest31523-21aten_rbpower_cu20:55:210
2576499421,17cyclictest63350wget19:30:200
134042420,2sleep10-21swapper/123:17:251
25767994115,6cyclictest39-21ksoftirqd/320:55:063
176602410,1sleep20-21swapper/222:05:042
153302410,5sleep115309-21ssh23:20:191
2576799407,24cyclictest0-21swapper/320:25:203
2576799407,23cyclictest0-21swapper/319:15:183
2576799407,21cyclictest0-21swapper/321:35:203
2576799403,5cyclictest7950irq/56-dwc_otg_22:30:193
2576599407,23cyclictest0-21swapper/120:45:201
25765994013,12cyclictest11279-21ssh23:55:061
2576799398,5cyclictest7950irq/56-dwc_otg_23:40:343
2576799395,20cyclictest30453-21ssh22:20:123
2576699392,3cyclictest0-21swapper/221:30:332
25766993914,14cyclictest4231-21diskmemload22:14:262
25766993912,20cyclictest11421-21runrttasks20:00:202
25766993912,20cyclictest11421-21runrttasks20:00:202
2576499391,35cyclictest0-21swapper/020:05:170
151922390,2sleep30-21swapper/323:59:423
2576799386,18cyclictest4805-21ssh23:45:453
2576799386,13cyclictest39-21ksoftirqd/321:44:523
2576799383,23cyclictest39-21ksoftirqd/319:25:063
2576599388,4cyclictest0-21swapper/123:55:201
2576599381,27cyclictest0-21swapper/123:26:311
2576599381,25cyclictest0-21swapper/121:15:331
2576799377,21cyclictest0-21swapper/323:20:183
25767993718,5cyclictest39-21ksoftirqd/320:00:273
25767993718,5cyclictest39-21ksoftirqd/320:00:273
25767993718,5cyclictest23495-21/usr/sbin/munin23:30:223
2576799371,24cyclictest2673-21cut19:35:223
2576799371,21cyclictest0-21swapper/321:05:203
2576799371,21cyclictest0-21swapper/321:05:203
25767993710,14cyclictest39-21ksoftirqd/300:10:063
2576699375,6cyclictest7850irq/56-dwc_otg_21:55:222
2576699371,26cyclictest31721-21ls19:25:282
2576699371,22cyclictest2332-21ls19:35:072
25766993710,15cyclictest0-21swapper/223:45:272
2576599379,7cyclictest7950irq/56-dwc_otg_23:00:371
2576599374,16cyclictest7750irq/56-dwc_otg21:10:311
2576599373,6cyclictest0-21swapper/121:55:181
25765993716,7cyclictest11882-21kernelversion20:00:281
25765993716,7cyclictest11882-21kernelversion20:00:281
2576599371,27cyclictest23735-21latency_hist00:10:071
81902360,2sleep30-21swapper/300:30:223
2576799361,6cyclictest39-21ksoftirqd/322:05:063
2576799361,25cyclictest4231-21diskmemload23:00:063
25767993610,12cyclictest7950irq/56-dwc_otg_23:30:063
2576599366,23cyclictest0-21swapper/119:20:211
2576599362,30cyclictest26297-21cut20:40:241
2576599362,10cyclictest3393-21ssh23:45:171
2576799356,5cyclictest20204-21sh20:25:063
2576799353,9cyclictest7950irq/56-dwc_otg_23:15:073
2576799351,20cyclictest0-21swapper/320:40:113
2576699354,17cyclictest7950irq/56-dwc_otg_19:45:262
2576599357,5cyclictest7950irq/56-dwc_otg_19:55:071
2576599353,8cyclictest0-21swapper/119:45:191
25765993517,5cyclictest23540-21aten_rbpower_po23:30:221
25765993514,5cyclictest6425-21aten_rbpower_vo22:30:221
147662350,3sleep114769-21processes22:00:321
259722341,29sleep10-21swapper/122:53:591
25767993420,4cyclictest649-21sh00:20:313
2576799341,21cyclictest23847-21ls20:35:063
2576799341,16cyclictest7950irq/56-dwc_otg_21:55:343
2576699348,5cyclictest7750irq/56-dwc_otg21:50:212
2576699348,13cyclictest7950irq/56-dwc_otg_21:15:352
2576699343,17cyclictest7950irq/56-dwc_otg_19:40:342
2576699341,21cyclictest18886-21ls22:45:222
25766993411,7cyclictest0-21swapper/200:25:222
25766993410,14cyclictest4231-21diskmemload22:27:182
2576599349,11cyclictest0-21swapper/122:40:191
2576599348,14cyclictest8925-21ssh21:54:101
2576599347,4cyclictest0-21swapper/100:37:261
2576599346,7cyclictest7750irq/56-dwc_otg20:20:321
2576599346,16cyclictest0-21swapper/120:15:271
2576599346,16cyclictest0-21swapper/120:10:201
2576599345,17cyclictest7950irq/56-dwc_otg_23:35:241
2576599345,17cyclictest7950irq/56-dwc_otg_23:35:241
2576799337,16cyclictest0-21swapper/300:10:203
2576799337,15cyclictest0-21swapper/322:05:203
2576799334,9cyclictest37-21rcuc/319:25:243
2576799332,16cyclictest0-21swapper/322:40:173
25767993319,10cyclictest4231-21diskmemload21:30:323
2576699338,6cyclictest7950irq/56-dwc_otg_22:20:062
2576699337,22cyclictest0-21swapper/220:40:112
2576699336,6cyclictest7850irq/56-dwc_otg_00:30:302
2576699332,8cyclictest26910-21tail19:10:342
2576699332,8cyclictest26910-21tail19:10:342
2576699332,7cyclictest18510-21ssh22:05:262
2576699331,16cyclictest0-21swapper/223:15:322
2576699331,14cyclictest7850irq/56-dwc_otg_21:40:072
25766993310,4cyclictest7850irq/56-dwc_otg_19:50:182
2576599336,5cyclictest0-21swapper/122:25:191
2576599335,5cyclictest31755-21fschecks_count20:55:251
2576599335,12cyclictest0-21swapper/122:58:321
2576599333,6cyclictest4750irq/17-3f00b88000:28:301
25765993315,5cyclictest22420-21/usr/sbin/munin20:30:221
25765993311,4cyclictest24151-21aten_rbpower_po00:10:211
2576799329,12cyclictest0-21swapper/322:45:253
2576799328,6cyclictest7750irq/56-dwc_otg22:26:373
2576799327,6cyclictest37-21rcuc/319:11:453
2576799327,6cyclictest37-21rcuc/319:11:453
2576799326,5cyclictest7850irq/56-dwc_otg_23:35:363
2576799326,5cyclictest7850irq/56-dwc_otg_23:35:363
2576799325,4cyclictest7950irq/56-dwc_otg_19:55:063
2576799323,12cyclictest7850irq/56-dwc_otg_22:13:523
2576799322,5cyclictest0-21swapper/323:05:153
2576799321,7cyclictest7773-21ssh00:30:063
2576799321,3cyclictest0-21swapper/321:13:063
2576699328,4cyclictest7950irq/56-dwc_otg_20:35:282
2576699324,6cyclictest7850irq/56-dwc_otg_23:25:332
2576699324,5cyclictest7750irq/56-dwc_otg23:05:062
2576699324,5cyclictest7750irq/56-dwc_otg00:05:132
2576699322,20cyclictest0-21swapper/222:45:072
2576699321,6cyclictest8548-21grep23:50:342
25766993213,4cyclictest2546-21sh00:23:062
2576699321,21cyclictest30557-21switchtime20:50:322
25766993211,4cyclictest4231-21diskmemload22:54:332
2576599329,4cyclictest0-21swapper/121:34:351
2576599324,7cyclictest7750irq/56-dwc_otg19:25:251
25765993210,4cyclictest0-21swapper/122:10:171
2576799316,5cyclictest0-21swapper/320:15:343
2576799311,4cyclictest7850irq/56-dwc_otg_19:45:223
25767993114,6cyclictest7950irq/56-dwc_otg_19:33:103
2576699318,12cyclictest0-21swapper/223:23:572
2576699316,5cyclictest7950irq/56-dwc_otg_21:10:072
2576699316,5cyclictest7950irq/56-dwc_otg_21:10:072
2576699315,4cyclictest7750irq/56-dwc_otg21:20:212
2576699312,4cyclictest7750irq/56-dwc_otg22:25:062
2576699311,4cyclictest7850irq/56-dwc_otg_20:05:172
2576599318,6cyclictest0-21swapper/119:15:321
2576599317,15cyclictest0-21swapper/119:30:191
2576599317,14cyclictest0-21swapper/121:20:191
2576599315,11cyclictest7750irq/56-dwc_otg20:35:241
2576599314,5cyclictest7750irq/56-dwc_otg21:05:281
2576599314,5cyclictest7750irq/56-dwc_otg21:05:281
2576599314,4cyclictest0-21swapper/121:36:171
2576599312,6cyclictest3079-21fschecks_time23:05:221
2576699309,4cyclictest29-21rcuc/220:55:192
2576699306,14cyclictest0-21swapper/219:20:212
2576699304,13cyclictest7950irq/56-dwc_otg_20:45:272
2576699303,20cyclictest17770-21timerandwakeup20:15:332
2576699303,17cyclictest0-21swapper/221:00:322
2576699302,7cyclictest23445-21/usr/sbin/munin23:30:282
2576699301,9cyclictest11178-21munin-run20:00:062
25766993011,4cyclictest5578-21cat21:10:342
25766993010,4cyclictest24754-21cat00:10:282
2576599305,10cyclictest7950irq/56-dwc_otg_21:45:291
2576599303,11cyclictest7950irq/56-dwc_otg_20:50:261
25765993012,7cyclictest4430-21fschecks_count19:40:231
2576699299,4cyclictest0-21swapper/222:31:522
2576699293,6cyclictest7850irq/56-dwc_otg_23:35:272
2576699293,6cyclictest7850irq/56-dwc_otg_23:35:272
2576699292,19cyclictest0-21swapper/219:36:002
25766992912,8cyclictest27304-21ssh22:55:262
2576599297,11cyclictest7850irq/56-dwc_otg_19:56:071
2576599295,13cyclictest7750irq/56-dwc_otg20:25:351
2576699285,14cyclictest0-21swapper/221:42:422
2576699281,3cyclictest7750irq/56-dwc_otg20:25:292
2576599285,8cyclictest0-21swapper/121:01:521
2576699279,4cyclictest2228450wget20:30:212
2576699272,13cyclictest7850irq/56-dwc_otg_20:20:252
251522273,15sleep20-21swapper/219:05:462
25767992619,5cyclictest37-21rcuc/319:40:213
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional