You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-07 - 21:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot6s.osadl.org (updated Mon Jul 07, 2025 12:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
251138299681,44cyclictest0-21swapper/211:40:022
251138099671,59cyclictest1666-21snmpd10:55:521
251138099662,55cyclictest2514375-21apt-get07:25:161
2511380996020,34cyclictest2540688-21tail09:55:301
251138099594,45cyclictest2532494-21sh09:10:201
251138099582,49cyclictest2561916-21grep12:00:291
251138099582,47cyclictest2517755-21apt-get07:45:161
251138099582,47cyclictest2517755-21apt-get07:45:161
2511380995823,29cyclictest2516648-21grep07:35:301
2511380995822,29cyclictest2541572-21grep10:00:321
2511380995822,29cyclictest2541572-21grep10:00:321
251138099572,47cyclictest2552076-21apt-get11:05:171
251138099572,47cyclictest2527140-21apt-get08:40:161
2511380995722,29cyclictest0-21swapper/108:50:281
2511380995719,31cyclictest0-21swapper/111:45:221
2511380995718,31cyclictest0-21swapper/110:50:241
2511380995629,23cyclictest0-21swapper/110:30:281
251138099557,36cyclictest0-21swapper/107:20:271
251138099557,36cyclictest0-21swapper/107:20:271
2511380995547,5cyclictest2547647-21sendmail10:39:591
2511380995526,21cyclictest0-21swapper/110:40:221
2511377995546,5cyclictest2538274-21munin-plugin-st09:45:000
2511380995426,22cyclictest0-21swapper/109:25:281
251138099542,44cyclictest2525439-21apt-get08:30:171
251138099542,42cyclictest2556612-21/usr/sbin/munin11:30:261
2511380995420,29cyclictest0-21swapper/109:00:001
2511380995419,29cyclictest2521127-21/usr/sbin/munin08:05:271
2511380995419,29cyclictest2521127-21/usr/sbin/munin08:05:271
2511380995414,34cyclictest2539095-21sshd09:46:221
2511380995412,34cyclictest0-21swapper/110:05:201
251138099538,37cyclictest2517017-21fschecks_count07:40:211
251138099533,42cyclictest2545872-21grep10:25:311
2511380995326,22cyclictest0-21swapper/107:10:291
251138099532,44cyclictest2566531-21apt-get12:30:161
251138099532,44cyclictest2566531-21apt-get12:30:151
251138099532,44cyclictest2518594-21apt-get07:50:161
2511380995323,20cyclictest0-21swapper/112:10:211
251137799534,25cyclictest0-21swapper/009:30:010
251138099527,35cyclictest0-21swapper/111:25:151
251138099524,40cyclictest0-21swapper/108:10:291
251138099523,42cyclictest2564771-21cat12:20:021
251138099523,42cyclictest2564771-21cat12:20:011
2511380995226,20cyclictest0-21swapper/108:20:221
251138099522,42cyclictest2515817-21grep07:30:291
251138099521,42cyclictest2530854-21sh09:00:221
251138099515,37cyclictest2539884-21unixbench_singl09:50:311
251138099513,41cyclictest2562382-21sh12:05:201
251138099513,41cyclictest2562382-21sh12:05:201
251138099513,36cyclictest2522900-21fschecks_count08:15:211
251138099512,4cyclictest2536844-21/usr/sbin/munin09:35:191
2511380995124,23cyclictest2527977-21/usr/sbin/munin08:45:251
251138099512,41cyclictest2543226-21unixbench_multi10:10:281
251138099512,41cyclictest2543226-21unixbench_multi10:10:281
251138099512,40cyclictest2559862-21fschecks_time11:50:211
251138099512,40cyclictest2524596-21/usr/sbin/munin08:25:291
251138099511,43cyclictest2552913-21/usr/sbin/munin11:10:281
251138099511,43cyclictest2552913-21/usr/sbin/munin11:10:271
2511377995131,15cyclictest131ktimers/012:30:160
2511377995131,15cyclictest131ktimers/012:30:160
2511377995127,16cyclictest0-21swapper/012:10:250
251138099506,35cyclictest0-21swapper/109:40:181
2511380995027,20cyclictest0-21swapper/112:39:591
2511380995027,19cyclictest2554343-21grep11:15:301
2511380995025,20cyclictest0-21swapper/107:15:291
251138099502,38cyclictest2545071-21grep10:20:311
251138099502,38cyclictest2511491-21latency_hist07:10:011
2511380995017,29cyclictest0-21swapper/111:25:011
251138099501,42cyclictest2533738-21unixbench_multi09:15:311
251138099501,42cyclictest0-21swapper/111:55:211
251138099501,41cyclictest2557747-21head11:35:301
251138099501,41cyclictest2534255-21fschecks_count09:20:201
2511377995044,4cyclictest51-21kcompactd011:55:270
251138099493,36cyclictest2520636-21phc2sys-jitter08:00:271
251138099492,39cyclictest2531695-21lsblk09:05:231
2511380994923,22cyclictest2536076-21sh09:30:221
2511380994913,29cyclictest0-21swapper/111:40:301
251137799491,38cyclictest0-21swapper/011:05:150
251138099482,39cyclictest2551812-21grep11:00:281
2511380994823,20cyclictest0-21swapper/110:20:011
2511380994823,20cyclictest0-21swapper/110:20:011
251138099481,7cyclictest2519737-21/usr/sbin/munin07:55:251
2511380994811,33cyclictest0-21swapper/112:20:281
251137799486,21cyclictest14-21rcu_preempt10:35:020
251138099474,37cyclictest2566416-21latency_hist12:30:011
251138299465,31cyclictest0-21swapper/207:35:012
251138099462,36cyclictest0-21swapper/110:45:121
251138099461,8cyclictest2526384-21/usr/sbin/munin08:35:191
2511377994636,7cyclictest2512106-21grep07:10:290
2511377994634,9cyclictest2568019-21sendmail12:40:000
251138299457,11cyclictest2530613-21apt-config09:00:012
2511382994535,6cyclictest0-21swapper/207:45:002
2511377994533,7cyclictest2564496-21grep12:15:300
2511377994533,7cyclictest2564496-21grep12:15:300
251137799451,9cyclictest0-21swapper/011:45:010
251137799451,13cyclictest0-21swapper/008:40:010
251138299446,3cyclictest0-21swapper/211:30:012
2511382994432,7cyclictest2539058-21grep09:45:322
2511382994430,9cyclictest0-21swapper/208:30:292
251137799443,6cyclictest2526077-21apt08:35:000
2511377994434,5cyclictest20950irq/209-8000000.ethernet09:00:280
2511377994431,7cyclictest2516594-21grep07:35:290
2511377994416,7cyclictest27250irq/343-wl18xx09:10:280
2511382994335,4cyclictest0-21swapper/210:10:232
2511382994335,4cyclictest0-21swapper/210:10:222
2511382994329,8cyclictest2564730-21latency_hist12:20:022
2511382994329,8cyclictest2564730-21latency_hist12:20:022
251138299431,4cyclictest0-21swapper/207:40:012
2511377994336,4cyclictest0-21swapper/010:10:180
2511377994336,4cyclictest0-21swapper/010:10:180
2511377994321,19cyclictest20750irq/251-8000000.ethernet07:15:140
251137799431,4cyclictest0-21swapper/011:50:010
251137799431,36cyclictest0-21swapper/008:55:200
251138299423,5cyclictest0-21swapper/210:25:002
2511377994236,4cyclictest0-21swapper/011:10:160
2511377994236,4cyclictest0-21swapper/011:10:150
2511377994234,5cyclictest20950irq/209-8000000.ethernet10:35:240
2511377994232,6cyclictest2549809-21uname10:50:270
2511377994231,7cyclictest2528582-21grep08:45:300
2511382994127,7cyclictest0-21swapper/209:10:292
2511377994130,8cyclictest0-21swapper/009:20:010
2511382994029,4cyclictest168450irq/135-8000000.ethernet-tx212:20:182
2511377994036,2cyclictest0-21swapper/009:55:010
2511377994031,6cyclictest0-21swapper/010:00:000
2511377994030,6cyclictest0-21swapper/011:25:190
251137799402,9cyclictest0-21swapper/008:25:020
2511377994027,9cyclictest0-21swapper/007:40:290
2511377994027,8cyclictest0-21swapper/010:50:000
2511377994025,3cyclictest0-21swapper/011:00:250
2511377994024,11cyclictest0-21swapper/007:10:010
251137799401,2cyclictest0-21swapper/011:40:010
251137799401,2cyclictest0-21swapper/010:10:000
2511382993928,8cyclictest2533876-21sendmail-msp09:20:002
2511382993927,7cyclictest0-21swapper/208:45:192
2511382993925,8cyclictest0-21swapper/211:00:022
251138299392,32cyclictest2536536-21grep09:30:302
251137799399,4cyclictest2524769-21dropbear08:25:240
251137799395,4cyclictest0-21swapper/008:05:010
251137799393,4cyclictest2565373-21grep12:20:280
2511377993928,7cyclictest0-21swapper/011:50:250
251138299384,12cyclictest0-21swapper/207:30:002
2511382993830,4cyclictest2519174-21unixbench_singl07:50:292
2511382993829,5cyclictest168450irq/135-8000000.ethernet-tx210:40:302
2511382993825,8cyclictest0-21swapper/207:15:012
2511382993824,9cyclictest0-21swapper/212:25:192
2511382993824,7cyclictest0-21swapper/208:25:312
2511382993822,13cyclictest0-21swapper/208:25:002
2511382993819,9cyclictest311ktimers/207:20:132
2511382993819,9cyclictest311ktimers/207:20:122
2511377993817,16cyclictest0-21swapper/008:05:120
2511377993817,16cyclictest0-21swapper/008:05:120
251138299371,30cyclictest0-21swapper/207:55:192
251137799373,21cyclictest2515210-21/usr/sbin/munin07:30:190
2511377993730,3cyclictest0-21swapper/007:55:120
2511377993730,3cyclictest0-21swapper/007:20:150
2511377993730,3cyclictest0-21swapper/007:20:150
2511377993727,6cyclictest2539161-21latency_hist09:50:010
2511377993727,6cyclictest0-21swapper/012:05:280
2511377993727,6cyclictest0-21swapper/012:05:280
251137799372,2cyclictest0-21swapper/010:20:010
251137799371,34cyclictest2548209-21phc2sys-jitter10:40:290
2511382993627,5cyclictest168450irq/135-8000000.ethernet-tx210:05:002
2511382993627,5cyclictest168450irq/135-8000000.ethernet-tx210:05:002
2511382993623,5cyclictest0-21swapper/208:50:302
251138299362,28cyclictest0-21swapper/208:05:162
251138299362,28cyclictest0-21swapper/208:05:152
2511382993621,6cyclictest2523644-21apt-key08:20:012
251138299361,30cyclictest0-21swapper/209:35:212
2511377993630,4cyclictest2527776-21apt08:45:000
2511377993630,4cyclictest20950irq/209-8000000.ethernet08:10:220
2511377993630,3cyclictest0-21swapper/010:55:190
2511377993626,6cyclictest0-21swapper/008:55:000
2511377993623,7cyclictest0-21swapper/011:30:290
2511377993614,18cyclictest0-21swapper/009:10:020
251137799361,33cyclictest0-21swapper/007:45:260
251137799361,33cyclictest0-21swapper/007:45:250
2511382993523,7cyclictest0-21swapper/208:10:292
251138299351,8cyclictest2561558-21/usr/sbin/munin12:00:222
251138299351,28cyclictest0-21swapper/211:55:182
251137799354,16cyclictest27250irq/343-wl18xx08:15:420
251137799352,6cyclictest2566221-21grep12:25:280
2511377993526,5cyclictest0-21swapper/010:25:180
2511377993526,5cyclictest0-21swapper/009:35:290
251137799351,3cyclictest0-21swapper/009:30:310
2511382993427,4cyclictest168450irq/135-8000000.ethernet-tx210:25:152
2511382993424,6cyclictest2560248-21grep11:50:282
2511382993424,6cyclictest2534699-21grep09:20:292
2511382993424,6cyclictest0-21swapper/212:05:292
2511382993424,6cyclictest0-21swapper/212:05:282
2511382993423,4cyclictest168450irq/135-8000000.ethernet-tx210:45:222
2511382993421,7cyclictest0-21swapper/210:55:012
251138299341,27cyclictest0-21swapper/207:15:192
251137799344,5cyclictest14-21rcu_preempt07:55:010
2511377993416,4cyclictest27250irq/343-wl18xx10:15:150
2511377993416,4cyclictest27250irq/343-wl18xx10:15:150
251137799341,4cyclictest2541656-21cut10:05:010
251137799341,4cyclictest2541656-21cut10:05:010
251138299339,4cyclictest27350irq/343-s-wl18xx10:30:252
251138299336,21cyclictest311ktimers/211:20:162
2511382993326,4cyclictest0-21swapper/211:35:002
251138299332,4cyclictest293-21systemd-journal08:00:252
2511382993323,7cyclictest0-21swapper/211:00:282
2511382993318,11cyclictest0-21swapper/211:10:312
2511382993318,11cyclictest0-21swapper/211:10:312
2511382993317,9cyclictest0-21swapper/208:55:312
251138299331,26cyclictest0-21swapper/209:50:132
251138299331,24cyclictest0-21swapper/211:40:232
2511377993326,4cyclictest20750irq/251-8000000.ethernet11:15:170
251137799331,3cyclictest0-21swapper/007:25:280
2511382993226,2cyclictest0-21swapper/208:40:242
2511382993224,3cyclictest0-21swapper/209:05:202
2511382993223,5cyclictest2567959-21unixbench_singl12:35:282
2511382993222,5cyclictest0-21swapper/211:45:302
2511382993221,5cyclictest2554372-21sshd11:15:462
251138299321,3cyclictest0-21swapper/211:10:002
251138299321,24cyclictest2538085-21grep09:40:302
2511377993226,4cyclictest20950irq/209-8000000.ethernet12:00:230
251137799321,29cyclictest0-21swapper/009:20:050
2511382993122,6cyclictest0-21swapper/209:25:292
2511382993121,6cyclictest2540695-21unixbench_multi09:55:292
2511382993121,4cyclictest0-21swapper/208:35:192
2511382993114,9cyclictest0-21swapper/212:10:292
251138299311,24cyclictest0-21swapper/210:35:212
251138299311,24cyclictest0-21swapper/210:15:182
251138299311,24cyclictest0-21swapper/210:15:182
2511377993125,4cyclictest20950irq/209-8000000.ethernet11:20:240
2511382993021,6cyclictest2518391-21munin-plugin-st07:50:002
2511382993021,6cyclictest2518391-21munin-plugin-st07:50:002
2511382993020,5cyclictest0-21swapper/210:05:202
2511382992719,4cyclictest0-21swapper/212:30:272
2511382992719,4cyclictest0-21swapper/212:30:272
2511382992112,7cyclictest0-21swapper/207:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional