You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-26 - 06:56

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack7slot3s.osadl.org (updated Fri Dec 26, 2025 00:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3017823030,1sleep10-21swapper/119:05:261
3161999996,66cyclictest0-21swapper/022:25:220
31619998741,9cyclictest26752-21seq21:55:220
3161999851,37cyclictest0-21swapper/022:30:200
86792830,5sleep03161999cyclictest21:05:190
3161999811,42cyclictest0-21swapper/019:25:190
3162099763,54cyclictest15642-21aten_rbpower_vo19:55:211
3162099763,54cyclictest15642-21aten_rbpower_vo19:55:211
61562710,1sleep30-21swapper/323:55:323
3161999695,10cyclictest0-21swapper/019:20:190
3162099681,50cyclictest25015-21munin-run23:20:081
3162099671,5cyclictest18369-21grep20:00:351
3162099652,51cyclictest11447-21cat00:10:321
3162199643,8cyclictest0-21swapper/221:15:222
3162299627,33cyclictest0-21swapper/322:25:223
31619996240,4cyclictest0-21swapper/023:45:220
3161999623,41cyclictest13-21rcuc/023:00:390
31619996226,6cyclictest0-21swapper/022:35:200
31619996226,6cyclictest0-21swapper/022:35:200
3161999612,34cyclictest12217-21latency_hist21:15:090
3162199605,7cyclictest0-21swapper/223:00:212
3162099603,5cyclictest0-21swapper/121:25:391
3162099602,5cyclictest7850irq/56-dwc_otg_00:35:351
3162099602,5cyclictest7850irq/56-dwc_otg_00:35:351
31619996011,11cyclictest0-21swapper/000:30:210
3162099591,8cyclictest7950irq/56-dwc_otg_20:45:271
3162099591,5cyclictest7033-21/usr/sbin/munin22:30:341
3162099583,47cyclictest7950irq/56-dwc_otg_00:30:221
3162099581,6cyclictest5403-21fschecks_count22:25:261
3162099581,6cyclictest16351-21fschecks_count22:55:271
3161999581,43cyclictest20759-21cat23:05:360
3162199574,10cyclictest7850irq/56-dwc_otg_00:05:242
31621995720,17cyclictest2183-21/usr/sbin/munin23:45:272
3162099575,35cyclictest7750irq/56-dwc_otg23:00:331
3162099572,40cyclictest7850irq/56-dwc_otg_22:25:091
3162099571,6cyclictest31781-21awk20:40:071
3161999575,27cyclictest24704-21idleruntime-cro21:50:080
3162099561,6cyclictest29870-21http20:35:081
3161999563,14cyclictest0-21swapper/020:30:210
31619995628,5cyclictest2588-21apt19:20:080
31619995628,5cyclictest2588-21apt19:20:080
3161999561,32cyclictest855-21grep22:10:370
3162199559,8cyclictest7850irq/56-dwc_otg_19:45:202
3162099554,39cyclictest7850irq/56-dwc_otg_23:45:391
3162099554,37cyclictest7950irq/56-dwc_otg_23:20:311
3162099553,4cyclictest0-21swapper/123:12:101
3162099552,4cyclictest7850irq/56-dwc_otg_20:40:281
3162099551,41cyclictest7750irq/56-dwc_otg23:26:071
31619995551,2cyclictest0-21swapper/020:05:210
3161999551,42cyclictest15972-21wc22:55:080
3161999551,39cyclictest21563-21fschecks_count21:40:250
3161999551,31cyclictest23175-21fschecks_time20:15:290
3161999543,10cyclictest8329-21unixbench_multi00:00:370
3162099536,44cyclictest13601-21latency_hist19:50:091
3162099532,7cyclictest1449-21latency_hist22:15:081
31619995325,13cyclictest7750irq/56-dwc_otg23:00:080
3161999531,36cyclictest27410-21ls23:25:270
3161999531,35cyclictest13371-21grep21:15:410
3161999531,33cyclictest28626-21aten_rbpower_po22:00:220
31621995211,15cyclictest7750irq/56-dwc_otg19:55:182
31621995211,15cyclictest7750irq/56-dwc_otg19:55:182
3162099524,6cyclictest0-21swapper/123:37:151
3162099524,40cyclictest7950irq/56-dwc_otg_22:42:001
3162099524,40cyclictest7950irq/56-dwc_otg_22:42:001
3162099523,4cyclictest12563-21cut22:45:241
3162099523,39cyclictest7750irq/56-dwc_otg21:55:371
3162099522,8cyclictest128-21systemd-journal19:55:091
3162099522,7cyclictest13255-21timerandwakeup21:15:401
3162099522,4cyclictest0-21swapper/120:05:141
3162099521,3cyclictest7750irq/56-dwc_otg00:25:091
3161999521,37cyclictest13-21rcuc/023:50:330
3161999521,37cyclictest13-21rcuc/023:50:330
3161999521,30cyclictest31342-21ntpq23:35:310
3161999521,26cyclictest13825-21wget19:50:210
310402523,12sleep00-21swapper/019:06:070
31621995117,10cyclictest25253-21apt-get23:20:202
3162099513,4cyclictest0-21swapper/121:20:341
3162099511,8cyclictest5032-21latency_hist20:55:091
3162099511,5cyclictest0-21swapper/121:00:271
3162099511,46cyclictest29872-21timerwakeupswit23:30:381
31620995111,35cyclictest0-21swapper/123:40:371
3161999513,30cyclictest32123-21wget20:40:230
31619995130,4cyclictest10377-21fschecks_count19:40:260
3161999511,29cyclictest16682-21unixbench_singl19:55:350
3161999511,29cyclictest16682-21unixbench_singl19:55:350
31621995013,20cyclictest22858-21/usr/sbin/munin20:15:222
3162099509,39cyclictest10581-21date22:40:091
3162099509,39cyclictest10581-21date22:40:091
3162099503,3cyclictest7750irq/56-dwc_otg20:30:081
3162099502,7cyclictest0-21swapper/120:55:211
3162099502,7cyclictest0-21swapper/119:11:031
3162099502,6cyclictest459-21avahi-daemon00:00:081
3162099502,6cyclictest0-21swapper/119:40:211
3162099502,5cyclictest24342-21taskset20:19:131
3162099501,45cyclictest8327-21unixbench_multi00:00:371
31620995011,36cyclictest15249-21ls22:50:381
31620995010,36cyclictest25057-21cpu21:50:231
3161999503,9cyclictest0-21swapper/022:40:200
3161999503,9cyclictest0-21swapper/022:40:200
31619995027,13cyclictest25560-21tune2fs23:20:260
31619995026,5cyclictest7850irq/56-dwc_otg_23:55:360
31619995024,7cyclictest29341-21taskset23:30:310
3161999502,36cyclictest0-21swapper/000:25:160
3161999502,26cyclictest0-21swapper/020:35:360
31619995013,24cyclictest7949-21grep21:00:370
31621994912,20cyclictest29613-21unixbench-2d22:00:372
3162099495,34cyclictest0-21swapper/119:18:511
3162099495,34cyclictest0-21swapper/119:18:511
3162099492,8cyclictest0-21swapper/122:03:201
3162099492,44cyclictest0-21swapper/121:35:191
3162099491,7cyclictest2954-21aten_rbpower_cu19:20:211
3162099491,6cyclictest6641-21aten_rbpower_vo19:30:221
31620994910,36cyclictest118432chrt21:12:361
3161999492,36cyclictest0-21swapper/000:10:470
31619994920,16cyclictest892-21grep23:40:340
31619994914,4cyclictest0-21swapper/020:10:200
3162199483,7cyclictest7850irq/56-dwc_otg_20:45:242
31621994818,16cyclictest14749-21ls21:20:302
3162099482,9cyclictest0-21swapper/100:27:141
3162099482,5cyclictest8764-21wget21:05:221
3162099481,5cyclictest25345-21ntpq20:20:301
31620994811,34cyclictest9105-21aten_rbpower_po00:05:261
3161999486,23cyclictest0-21swapper/000:35:240
3161999486,23cyclictest0-21swapper/000:35:240
3161999482,22cyclictest0-21swapper/022:15:200
3161999481,27cyclictest14790-21ntpq21:20:310
3162299477,25cyclictest0-21swapper/322:30:223
3162299473,6cyclictest0-21swapper/319:25:193
3162199477,26cyclictest0-21swapper/222:45:242
3162199476,26cyclictest0-21swapper/219:10:212
31621994710,20cyclictest16677-21ps21:25:352
3162099472,7cyclictest8888-21ls19:35:301
3162099472,5cyclictest31511-21unixbench_singl22:05:381
3162099472,5cyclictest31511-21unixbench_singl22:05:381
3162099472,5cyclictest0-21swapper/121:30:271
3162099472,41cyclictest21045-21/usr/sbin/munin20:10:351
3162099471,6cyclictest4986-21fschecks_count19:25:251
3162099471,5cyclictest2648-21unixbench_singl22:15:371
31620994714,30cyclictest22197-21switchtime21:40:341
3161999478,5cyclictest7850irq/56-dwc_otg_23:15:200
3161999475,24cyclictest9-21ksoftirqd/021:25:220
3161999472,6cyclictest2504-21sed20:45:410
3161999471,24cyclictest20369-21/usr/sbin/munin21:35:330
3162199467,25cyclictest0-21swapper/223:05:132
3162199467,25cyclictest0-21swapper/220:25:222
3162199467,25cyclictest0-21swapper/220:05:142
3162199467,24cyclictest0-21swapper/223:10:242
3162199466,30cyclictest31937-21sshd23:36:362
31621994614,11cyclictest0-21swapper/220:40:202
3162099461,7cyclictest20099-21fschecks_time23:05:261
3162099461,6cyclictest23393-21fschecks_count21:45:261
3162099461,6cyclictest12909-21fschecks_count00:15:271
31620994612,31cyclictest4198-21/usr/sbin/munin23:50:321
31620994612,31cyclictest4198-21/usr/sbin/munin23:50:321
3161999462,33cyclictest0-21swapper/000:20:480
3161999462,27cyclictest3793-21wc20:50:290
3161999461,28cyclictest18712-21timerwakeupswit21:30:360
3161999461,24cyclictest0-21swapper/019:30:300
3162199459,13cyclictest13816-21aten_rbpower_po19:50:212
3162199457,24cyclictest0-21swapper/223:55:222
3162199457,24cyclictest0-21swapper/222:30:132
31621994511,12cyclictest1986050/usr/sbin/munin00:35:292
31621994511,12cyclictest1986050/usr/sbin/munin00:35:292
3161999456,25cyclictest0-21swapper/022:05:230
3161999456,25cyclictest0-21swapper/022:05:230
3161999452,22cyclictest0-21swapper/022:20:290
31619994516,15cyclictest9564-21latency00:05:320
3161999451,32cyclictest26915-21iwlist20:25:270
3161999451,25cyclictest22243-21grep23:10:330
3161999451,22cyclictest5135-21aten_rbpower_en20:55:240
3162299448,21cyclictest0-21swapper/323:05:133
3162199447,24cyclictest0-21swapper/222:55:242
3162199447,23cyclictest0-21swapper/222:35:222
3162199447,23cyclictest0-21swapper/222:35:222
31621994417,10cyclictest4179-21ls20:50:352
31621994411,15cyclictest838-21unixbench_singl22:10:372
3161999441,24cyclictest0-21swapper/019:46:090
170002440,22sleep37950irq/56-dwc_otg_21:25:393
3162199437,25cyclictest0-21swapper/200:30:212
31619994320,13cyclictest31633-21/usr/sbin/munin19:10:180
3162299427,24cyclictest0-21swapper/320:35:133
3162299426,21cyclictest0-21swapper/320:15:223
3162299423,3cyclictest7950irq/56-dwc_otg_19:30:283
3162199428,12cyclictest11223-21/usr/sbin/munin00:10:292
3162199427,25cyclictest0-21swapper/223:40:222
3162199426,21cyclictest0-21swapper/220:55:242
3162199424,7cyclictest7850irq/56-dwc_otg_00:00:202
3162199423,24cyclictest0-21swapper/223:50:242
3162199423,24cyclictest0-21swapper/223:50:242
31621994217,13cyclictest0-21swapper/221:50:222
31621994212,13cyclictest18047-21ntp_states20:00:312
31621994210,4cyclictest1327-21cut19:15:272
31621994210,4cyclictest1327-21cut19:15:272
3161999429,15cyclictest18419-21grep20:00:360
3162299417,24cyclictest0-21swapper/319:55:203
3162299417,24cyclictest0-21swapper/319:55:203
3162299412,13cyclictest0-21swapper/320:40:213
3162199417,22cyclictest0-21swapper/221:35:212
31621994114,11cyclictest27427-21/usr/sbin/munin21:55:312
3161999416,17cyclictest0-21swapper/019:35:310
31619994115,19cyclictest0-21swapper/021:53:250
3162299407,24cyclictest0-21swapper/322:20:223
3162299407,23cyclictest0-21swapper/321:15:253
3162299407,19cyclictest0-21swapper/323:00:233
3162199409,20cyclictest27043-21/usr/sbin/munin23:25:382
3162199407,24cyclictest0-21swapper/223:15:222
3162199407,20cyclictest0-21swapper/219:20:142
31621994025,7cyclictest301ktimersoftd/221:40:212
31621994012,18cyclictest157342sleep200:21:392
3161999403,21cyclictest0-21swapper/000:15:370
31619994015,14cyclictest24742-21wget20:20:220
3161999401,22cyclictest0-21swapper/022:47:580
3162299397,22cyclictest0-21swapper/320:45:253
3162299391,26cyclictest20105-21ls20:05:343
3162299391,26cyclictest16497-21cut00:25:263
3162199395,25cyclictest7950irq/56-dwc_otg_19:42:342
3162199393,24cyclictest315332sleep220:37:272
76922380,2sleep33162299cyclictest00:00:273
3162299386,18cyclictest0-21swapper/321:00:203
3162299381,25cyclictest12960-21ls22:45:303
31622993811,4cyclictest0-21swapper/322:55:393
3162199388,13cyclictest26262-21latency_hist20:25:082
3162199388,12cyclictest3187-21sed22:20:082
3162199387,22cyclictest8339-21chrt21:04:042
3162199384,17cyclictest12257-21sed21:15:092
31622993730,4cyclictest27170-21cut23:25:243
3162299371,25cyclictest3189-21cut19:20:253
3162199377,21cyclictest22483-21sshd20:13:352
3162199377,21cyclictest0-21swapper/222:50:242
3162299367,19cyclictest0-21swapper/300:05:263
3162299361,4cyclictest7950irq/56-dwc_otg_21:55:203
3162299361,22cyclictest14704-21uniq00:20:263
3162199364,12cyclictest10203-21taskset21:09:472
3162199362,10cyclictest0-21swapper/219:26:342
3162199361,5cyclictest112450snmpd00:25:282
3162299357,6cyclictest7850irq/56-dwc_otg_23:40:313
3162299356,6cyclictest7850irq/56-dwc_otg_23:20:223
3162299351,6cyclictest0-21swapper/322:00:213
3162299351,19cyclictest32489-21switchtime19:10:333
3162199359,11cyclictest24769-21latency_hist21:50:082
3162199353,9cyclictest7950irq/56-dwc_otg_23:34:292
3162199352,5cyclictest7850irq/56-dwc_otg_21:30:252
31621993513,15cyclictest5341-21df22:25:242
3162299347,21cyclictest0-21swapper/323:16:203
3162299347,17cyclictest0-21swapper/320:50:223
3162299342,15cyclictest7850irq/56-dwc_otg_21:05:243
31622993417,5cyclictest5567-21latency20:55:303
31622993417,4cyclictest11247-21if_eth000:10:293
3162299341,17cyclictest15827-21ls21:25:083
31622993410,6cyclictest128-21systemd-journal20:31:403
3162199347,15cyclictest0-21swapper/220:30:232
3162199346,17cyclictest11919-21seq22:41:352
3162199346,17cyclictest11919-21seq22:41:352
3162199345,11cyclictest4665-21taskset22:22:202
307932344,20sleep230863-21unixbench-2d19:05:362
3162299337,14cyclictest0-21swapper/322:05:233
3162299337,14cyclictest0-21swapper/322:05:233
3162299336,14cyclictest0-21swapper/319:40:233
31622993325,6cyclictest26504-21idleruntime-cro21:55:083
3162299332,16cyclictest0-21swapper/322:55:083
3162199333,12cyclictest0-21swapper/219:37:002
3162299326,14cyclictest0-21swapper/320:10:233
3162299322,5cyclictest0-21swapper/322:15:293
3162299322,5cyclictest0-21swapper/320:25:263
3162299322,17cyclictest0-21swapper/322:42:583
3162299322,17cyclictest0-21swapper/322:42:583
3162299321,14cyclictest7850irq/56-dwc_otg_21:15:083
3162199329,4cyclictest7950irq/56-dwc_otg_22:05:272
3162199329,4cyclictest7950irq/56-dwc_otg_22:05:272
3162199323,12cyclictest8043-21chrt19:34:402
31621993222,7cyclictest12650-21apt-get00:15:202
3162299319,4cyclictest0-21swapper/321:45:333
3162299317,14cyclictest0-21swapper/319:50:203
3162299314,13cyclictest0-21swapper/323:53:183
3162299314,13cyclictest0-21swapper/323:53:183
31622993121,7cyclictest19388-21latency_hist21:35:083
3162299311,25cyclictest10483-21ls22:40:093
3162299311,25cyclictest10483-21ls22:40:093
3162299304,14cyclictest7950irq/56-dwc_otg_23:45:313
3162299302,23cyclictest19559-21wget21:35:213
3162299302,16cyclictest0-21swapper/321:40:233
3162299301,8cyclictest13041-21unixbench_multi19:45:353
3162299293,12cyclictest7950irq/56-dwc_otg_00:31:083
3162299291,5cyclictest439-21wc22:10:333
3162299291,5cyclictest29124-21fschecks_count23:30:283
31622992911,8cyclictest7950irq/56-dwc_otg_19:35:323
305292294,14sleep330611-21/usr/sbin/munin19:05:333
3162299287,19cyclictest0-21swapper/323:10:243
3162299287,12cyclictest0-21swapper/300:35:243
3162299287,12cyclictest0-21swapper/300:35:243
31622992812,4cyclictest18058-21open_files20:00:323
3162299281,17cyclictest0-21swapper/323:36:353
3162299271,12cyclictest7850irq/56-dwc_otg_19:15:253
3162299271,12cyclictest7850irq/56-dwc_otg_19:15:253
3162299263,6cyclictest7850irq/56-dwc_otg_00:15:343
3162299251,5cyclictest7850irq/56-dwc_otg_20:20:303
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional