You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-23 - 20:34

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6s.osadl.org (updated Sun Nov 23, 2025 12:44:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
328764099801,50cyclictest15-21rcuc/008:30:010
328764099661,53cyclictest0-21swapper/011:50:150
328764299644,19cyclictest22-21rcuc/108:05:011
3287640996257,3cyclictest24150irq/422-mmc111:45:010
3287640996210,44cyclictest0-21swapper/009:10:180
3287640996155,4cyclictest0-21swapper/010:45:010
3287640996155,4cyclictest0-21swapper/010:45:010
328764099611,4cyclictest0-21swapper/007:30:110
3287640995815,20cyclictest12-21ksoftirqd/008:40:020
3287645995749,5cyclictest3293042-21sendmail07:40:002
328764099559,38cyclictest0-21swapper/011:35:170
3287640995541,9cyclictest3317713-21munin-plugin-st10:05:000
328764099552,45cyclictest15-21rcuc/012:20:010
328764099552,45cyclictest15-21rcuc/012:20:010
328764099552,45cyclictest12-21ksoftirqd/011:05:210
3287640995521,28cyclictest131ktimers/010:45:170
3287640995521,28cyclictest131ktimers/010:45:170
328764099547,42cyclictest131ktimers/010:20:230
3287640995442,7cyclictest3326128-21grep10:50:290
328764099542,44cyclictest0-21swapper/011:15:210
328764099542,44cyclictest0-21swapper/011:10:270
328764099541,20cyclictest0-21swapper/008:20:010
3287645995345,5cyclictest3340585-21munin-plugin-st12:20:012
3287645995345,5cyclictest3340585-21munin-plugin-st12:20:002
3287645995242,5cyclictest3320244-21sendmail10:20:002
328764099529,35cyclictest3297157-21unixbench_multi08:00:270
328764099522,43cyclictest15-21rcuc/009:00:000
328764099521,47cyclictest12-21ksoftirqd/011:00:000
3287640995211,8cyclictest3287635-21cyclictest07:15:010
328764599511,30cyclictest0-21swapper/210:40:012
328764099511,44cyclictest0-21swapper/007:40:010
328764599506,30cyclictest30-21rcuc/210:55:002
3287645995039,7cyclictest3338898-21munin-plugin-st12:09:592
328764099505,37cyclictest131ktimers/009:55:200
3287642994941,5cyclictest3336366-21munin-plugin-st11:55:001
328764299492,19cyclictest22-21rcuc/110:55:001
328764099499,34cyclictest0-21swapper/009:15:200
328764099496,36cyclictest0-21swapper/007:10:010
328764099496,36cyclictest0-21swapper/007:10:010
3287645994835,8cyclictest3314163-21grep09:40:282
3287642994834,9cyclictest0-21swapper/108:35:281
3287642994834,7cyclictest3305728-21grep08:50:281
3287642994834,7cyclictest3305728-21grep08:50:281
3287642994833,7cyclictest0-21swapper/111:00:301
3287642994833,7cyclictest0-21swapper/111:00:291
328764099488,34cyclictest0-21swapper/009:45:290
3287640994840,5cyclictest0-21swapper/011:35:000
3287640994840,5cyclictest0-21swapper/011:35:000
328764099482,40cyclictest15-21rcuc/007:20:010
3287640994820,22cyclictest131ktimers/007:55:010
328764099481,43cyclictest0-21swapper/009:25:240
3287640994810,32cyclictest0-21swapper/010:15:260
328764599473,23cyclictest30-21rcuc/208:45:002
3287642994729,13cyclictest0-21swapper/112:09:591
328764099478,37cyclictest131ktimers/012:10:010
3287640994739,5cyclictest3343971-21sendmail12:39:590
3287640994734,9cyclictest3308282-21grep09:05:290
3287640994734,9cyclictest3308282-21grep09:05:290
3287640994734,9cyclictest131ktimers/010:05:240
3287642994633,8cyclictest0-21swapper/108:45:301
328764099464,36cyclictest15-21rcuc/008:15:010
3287640994634,8cyclictest3299751-21grep08:15:300
328764099463,38cyclictest12-21ksoftirqd/011:55:200
328764599455,29cyclictest30-21rcuc/211:05:012
328764599455,29cyclictest30-21rcuc/211:05:012
3287642994536,5cyclictest3296413-21munin-plugin-st08:00:001
3287642994528,13cyclictest0-21swapper/112:35:281
3287640994523,15cyclictest15-21rcuc/011:25:010
328764099443,35cyclictest131ktimers/012:30:180
328764099443,25cyclictest12-21ksoftirqd/012:25:000
328764099441,39cyclictest3315875-21mailstats09:50:330
328764099441,37cyclictest15-21rcuc/010:30:160
328764099441,37cyclictest0-21swapper/009:40:130
328764099441,36cyclictest0-21swapper/009:30:120
3287645994334,6cyclictest3299796-21munin-plugin-st08:20:002
3287642994337,3cyclictest3306632-21sendmail09:00:001
3287642994331,9cyclictest0-21swapper/110:40:001
3287642994331,8cyclictest3290357-21grep07:20:271
3287642994331,7cyclictest0-21swapper/112:05:001
3287642994331,7cyclictest0-21swapper/112:05:001
328764099434,36cyclictest15-21rcuc/010:25:310
328764099432,3cyclictest3294326-21if_eth007:45:230
328764099432,39cyclictest0-21swapper/008:50:000
328764099432,35cyclictest0-21swapper/008:50:180
328764099432,35cyclictest0-21swapper/008:50:180
328764099431,40cyclictest0-21swapper/007:25:270
328764099431,38cyclictest15-21rcuc/007:55:210
328764099431,37cyclictest0-21swapper/010:10:230
328764099431,36cyclictest12-21ksoftirqd/012:25:090
328764099431,36cyclictest0-21swapper/009:20:150
328764099431,36cyclictest0-21swapper/009:20:140
3287642994234,4cyclictest0-21swapper/108:40:281
3287642994230,8cyclictest3324397-21grep10:40:291
3287642994230,8cyclictest3324397-21grep10:40:291
328764099425,31cyclictest0-21swapper/012:10:300
3287640994238,2cyclictest0-21swapper/007:20:100
328764099421,39cyclictest0-21swapper/009:35:210
3287645994131,7cyclictest3295566-21sh07:55:002
3287645994129,8cyclictest0-21swapper/210:40:292
3287645994129,8cyclictest0-21swapper/210:40:292
3287645994128,8cyclictest0-21swapper/207:20:272
3287642994133,3cyclictest0-21swapper/111:10:291
328764099413,35cyclictest15-21rcuc/007:40:190
328764099411,38cyclictest15-21rcuc/011:45:210
328764099411,38cyclictest15-21rcuc/011:45:210
328764099411,34cyclictest0-21swapper/011:00:150
328764099411,34cyclictest0-21swapper/011:00:150
3287640994111,5cyclictest15-21rcuc/010:35:230
3287645994032,4cyclictest168450irq/134-8000000.ethernet-tx211:50:302
3287645994030,7cyclictest3293854-21grep07:40:302
3287645994029,7cyclictest0-21swapper/212:00:002
3287645994029,6cyclictest0-21swapper/211:35:292
328764299405,7cyclictest0-21swapper/107:35:011
3287642994033,4cyclictest3340580-21sendmail12:20:001
3287642994033,4cyclictest3340580-21sendmail12:20:001
328764099404,34cyclictest0-21swapper/008:40:160
328764099401,36cyclictest131ktimers/008:05:200
3287645993932,4cyclictest3315078-21cron09:50:002
3287645993930,5cyclictest0-21swapper/210:10:302
3287645993927,8cyclictest0-21swapper/210:05:002
3287645993924,7cyclictest0-21swapper/209:50:342
3287642993930,5cyclictest3297272-21cut08:05:001
3287642993925,9cyclictest0-21swapper/109:00:201
328764099391,36cyclictest0-21swapper/012:00:300
328764099391,36cyclictest0-21swapper/012:00:300
328764099391,33cyclictest0-21swapper/011:20:160
3287645993831,4cyclictest168450irq/134-8000000.ethernet-tx210:30:252
3287645993827,7cyclictest0-21swapper/212:25:232
3287645993826,8cyclictest0-21swapper/207:55:302
3287645993826,7cyclictest0-21swapper/208:35:282
3287645993824,9cyclictest0-21swapper/211:25:272
328764599382,28cyclictest3335317-21ptp4l-jitter11:45:272
328764599382,28cyclictest3335317-21ptp4l-jitter11:45:272
3287645993819,11cyclictest0-21swapper/210:45:202
3287645993819,11cyclictest0-21swapper/210:45:202
3287642993831,3cyclictest168350irq/126-8000000.ethernet-tx111:30:271
3287642993831,3cyclictest168350irq/126-8000000.ethernet-tx111:30:271
3287642993830,4cyclictest168350irq/126-8000000.ethernet-tx110:25:011
3287642993830,4cyclictest168350irq/126-8000000.ethernet-tx107:45:301
3287642993830,4cyclictest0-21swapper/109:40:201
328764299381,30cyclictest3328705-21unixbench_singl11:05:291
328764299381,30cyclictest0-21swapper/111:40:241
3287645993730,4cyclictest0-21swapper/207:25:212
3287645993728,6cyclictest0-21swapper/209:25:312
3287645993727,5cyclictest0-21swapper/208:15:002
3287645993725,8cyclictest0-21swapper/211:05:292
328764599371,30cyclictest0-21swapper/212:30:262
3287645993712,5cyclictest8371systemd-network09:20:212
3287645993712,5cyclictest8371systemd-network09:20:212
3287642993730,3cyclictest168350irq/126-8000000.ethernet-tx112:20:261
3287642993726,7cyclictest0-21swapper/112:25:261
3287642993724,8cyclictest0-21swapper/111:15:291
3287642993720,11cyclictest3324464-21apt-get10:45:051
3287642993720,11cyclictest3324464-21apt-get10:45:051
328764299371,2cyclictest0-21swapper/108:20:001
328764099370,3cyclictest3300648-21apt-get08:25:020
328764099370,33cyclictest275-21systemd-journal09:00:170
3287645993630,4cyclictest168450irq/134-8000000.ethernet-tx209:15:222
3287645993627,6cyclictest3327067-21cron11:00:002
3287645993627,4cyclictest0-21swapper/209:00:012
3287645993621,10cyclictest0-21swapper/208:20:232
3287642993628,4cyclictest168350irq/126-8000000.ethernet-tx107:15:301
3287642993627,4cyclictest14-21rcu_preempt08:35:011
3287642993625,7cyclictest0-21swapper/109:20:281
3287642993625,7cyclictest0-21swapper/109:20:281
3287642993624,8cyclictest0-21swapper/109:55:281
3287642993624,7cyclictest0-21swapper/111:25:281
3287645993526,4cyclictest0-21swapper/211:40:222
3287645993524,7cyclictest0-21swapper/208:30:272
3287645993523,7cyclictest0-21swapper/211:30:282
3287645993523,7cyclictest0-21swapper/211:30:282
328764299356,4cyclictest0-21swapper/110:55:211
3287642993527,4cyclictest3342912-21ptp4l-jitter12:30:301
3287642993527,4cyclictest168350irq/126-8000000.ethernet-tx112:10:211
3287642993526,5cyclictest3300569-21tail08:20:301
3287642993520,11cyclictest0-21swapper/111:50:021
3287642993520,11cyclictest0-21swapper/111:50:011
3287645993425,5cyclictest0-21swapper/207:45:202
3287645993424,5cyclictest0-21swapper/209:05:202
3287645993424,5cyclictest0-21swapper/209:05:202
3287645993422,8cyclictest0-21swapper/212:00:282
3287645993422,8cyclictest0-21swapper/212:00:282
3287642993429,2cyclictest0-21swapper/108:25:271
3287642993421,8cyclictest0-21swapper/109:05:201
3287642993421,8cyclictest0-21swapper/109:05:201
3287642993420,9cyclictest0-21swapper/107:10:221
328764299341,25cyclictest3333185-21/usr/sbin/munin11:35:121
3287645993323,4cyclictest0-21swapper/212:25:012
328764599331,27cyclictest0-21swapper/208:45:242
328764599331,26cyclictest0-21swapper/207:15:042
3287642993326,4cyclictest168350irq/126-8000000.ethernet-tx107:50:251
3287642993321,8cyclictest0-21swapper/109:10:291
3287645993225,3cyclictest0-21swapper/211:10:262
3287645993223,5cyclictest0-21swapper/212:35:272
3287645993223,4cyclictest0-21swapper/211:25:002
3287642993225,4cyclictest168350irq/126-8000000.ethernet-tx110:10:171
3287642993225,4cyclictest0-21swapper/110:15:251
328764299322,3cyclictest3336810-21if_eth111:55:221
328764299322,27cyclictest3293431-21fschecks_time07:40:231
3287645993125,4cyclictest3330052-21if_eth111:15:232
3287645993123,5cyclictest3321832-21grep10:25:292
328764599311,26cyclictest3318157-21if_eth110:05:212
3287642993126,4cyclictest0-21swapper/107:30:221
328764299311,27cyclictest3312439-21unixbench_multi09:30:281
3287645993023,4cyclictest168450irq/134-8000000.ethernet-tx210:00:002
3287645993022,4cyclictest3288354-21grep07:10:292
3287645993021,6cyclictest3298056-21grep08:05:292
3287645993020,5cyclictest0-21swapper/209:10:202
328764599301,8cyclictest0-21swapper/208:30:002
3287645993017,8cyclictest0-21swapper/207:30:262
3287645993010,15cyclictest168450irq/134-8000000.ethernet-tx209:04:222
3287642993022,4cyclictest0-21swapper/109:25:301
3287642993020,7cyclictest3310002-21cron09:20:001
328764299301,27cyclictest0-21swapper/111:23:481
3287645992917,7cyclictest0-21swapper/209:35:192
328764599291,26cyclictest3339714-21sshd12:10:482
3287645992910,16cyclictest311ktimers/208:50:122
3287645992910,16cyclictest311ktimers/208:50:122
3287642992922,5cyclictest3287644-21date07:10:011
3287642992922,5cyclictest3287644-21date07:10:011
3287642992916,9cyclictest0-21swapper/109:45:281
328764299291,3cyclictest3321293-21apt-get10:25:141
3287645992820,5cyclictest0-21swapper/208:00:272
3287642992819,6cyclictest3315910-21grep09:50:331
3287642992819,6cyclictest0-21swapper/110:05:281
328764299281,3cyclictest3290718-21apt-get07:25:131
328764299281,2cyclictest3317075-21apt-get10:00:121
328764599271,20cyclictest0-21swapper/210:20:022
328764599261,23cyclictest0-21swapper/209:32:382
3287642992615,7cyclictest3298893-21unixbench_singl08:10:301
328764299261,23cyclictest3313300-21awk09:35:301
3287645992417,5cyclictest311ktimers/207:10:012
3287645992417,5cyclictest311ktimers/207:10:012
328764299241,18cyclictest0-21swapper/110:30:051
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional