You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-06-13 - 19:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot6s.osadl.org (updated Fri Jun 13, 2025 12:44:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2218485991018,3cyclictest0-21swapper/007:20:010
2218486999487,5cyclictest0-21swapper/107:35:011
2218486999487,5cyclictest0-21swapper/107:35:011
2218485997331,36cyclictest0-21swapper/010:45:320
2218488996915,20cyclictest30-21rcuc/211:35:012
2218485996931,6cyclictest2249023-21dropbear10:05:200
2218485996923,6cyclictest0-21swapper/007:55:210
2218485996726,6cyclictest0-21swapper/009:25:270
2218485996458,5cyclictest0-21swapper/011:40:130
2218485996423,10cyclictest0-21swapper/010:15:000
2218485996228,27cyclictest0-21swapper/012:25:020
221848599607,25cyclictest20950irq/209-8000000.ethernet08:20:010
2218488995910,30cyclictest32-21ksoftirqd/209:20:012
2218485995952,4cyclictest0-21swapper/009:35:110
2218485995916,35cyclictest0-21swapper/007:25:020
221848599585,8cyclictest0-21swapper/011:15:200
2218488995744,9cyclictest2260741-21munin-plugin-st11:15:012
2218488995744,9cyclictest2260741-21munin-plugin-st11:15:002
221848899563,26cyclictest30-21rcuc/210:10:012
2218486995348,3cyclictest231ktimers/107:45:011
2218486995347,4cyclictest231ktimers/108:50:011
2218485995337,5cyclictest0-21swapper/007:45:010
2218486995224,25cyclictest22-21rcuc/111:35:001
2218486995221,14cyclictest22-21rcuc/110:45:021
2218485995019,6cyclictest2243155-1kworker/0:0H+mmc_complete12:10:010
2218486994818,28cyclictest0-21swapper/112:10:271
2218486994730,13cyclictest231ktimers/107:10:121
2218486994728,13cyclictest0-21swapper/111:25:311
2218485994738,6cyclictest20950irq/209-8000000.ethernet09:45:300
2218488994635,7cyclictest2256394-21grep10:45:332
2218488994633,8cyclictest2254666-21sendmail10:40:002
2218488994631,10cyclictest0-21swapper/207:35:282
2218488994631,10cyclictest0-21swapper/207:35:282
2218486994632,11cyclictest231ktimers/109:25:161
2218486994628,13cyclictest231ktimers/111:15:131
221848599469,4cyclictest2226424-21apt-get07:55:010
2218485994624,19cyclictest20750irq/251-8000000.ethernet07:30:240
2218488994534,6cyclictest2259784-21grep11:05:302
2218486994532,8cyclictest0-21swapper/108:20:301
2218485994536,7cyclictest2254662-21sendmail10:40:000
221848599451,35cyclictest0-21swapper/010:25:130
2218488994437,4cyclictest2237491-21munin-plugin-st09:00:002
2218488994431,8cyclictest2243592-21latency_hist09:35:012
2218488994430,7cyclictest2223007-21grep07:30:312
2218488994429,9cyclictest0-21swapper/211:50:282
2218486994436,5cyclictest22-21rcuc/109:35:011
2218486994431,8cyclictest0-21swapper/107:15:241
2218488994336,5cyclictest311ktimers/209:55:122
2218488994332,7cyclictest2255441-21grep10:40:292
221848599433,5cyclictest0-21swapper/009:10:150
2218485994328,9cyclictest0-21swapper/007:40:010
2218485994328,9cyclictest0-21swapper/007:40:010
2218485994316,15cyclictest2221568-21/usr/sbin/munin07:25:200
221848599431,5cyclictest0-21swapper/012:15:000
221848599431,23cyclictest0-21swapper/010:45:000
221848899429,27cyclictest2267787-21/usr/sbin/munin11:55:202
2218488994233,6cyclictest311ktimers/207:20:222
2218488994228,9cyclictest0-21swapper/209:25:212
221848699421,4cyclictest0-21swapper/111:45:011
221848599421,8cyclictest0-21swapper/008:10:010
221848599421,8cyclictest0-21swapper/008:10:010
221848599421,3cyclictest0-21swapper/008:30:010
221848599421,2cyclictest0-21swapper/007:15:000
2218488994133,4cyclictest2269288-21munin-plugin-st12:05:012
221848699419,26cyclictest24-21ksoftirqd/111:35:181
2218486994131,5cyclictest0-21swapper/111:50:011
2218486994128,9cyclictest231ktimers/109:00:141
221848699411,3cyclictest0-21swapper/107:35:011
2218485994124,4cyclictest27250irq/343-wl18xx11:20:160
221848899409,20cyclictest2218479-21cyclictest09:00:152
2218488994028,9cyclictest0-21swapper/212:05:132
2218488994028,7cyclictest2253722-21grep10:30:302
2218488994023,9cyclictest0-21swapper/211:45:292
221848899401,31cyclictest2232086-21kernelversion08:25:272
2218488994012,13cyclictest2257562-21/usr/sbin/munin10:55:232
2218488994012,13cyclictest2257562-21/usr/sbin/munin10:55:232
2218486994025,11cyclictest231ktimers/107:45:131
2218486994023,13cyclictest24-21ksoftirqd/107:10:011
221848599401,8cyclictest0-21swapper/009:45:010
221848599401,8cyclictest0-21swapper/009:45:010
2218488993930,5cyclictest311ktimers/211:00:272
2218488993926,8cyclictest2230663-21grep08:15:292
2218488993925,9cyclictest0-21swapper/207:55:322
2218488993922,9cyclictest2244427-21munin-plugin-st09:40:012
2218486993926,9cyclictest0-21swapper/109:20:211
221848599395,30cyclictest0-21swapper/009:35:010
2218485993930,5cyclictest2231581-21kworker/u8:3+events_power_efficient08:30:300
2218485993926,9cyclictest0-21swapper/011:45:290
221848599391,5cyclictest0-21swapper/010:35:010
2218486993827,8cyclictest0-21swapper/110:50:281
2218486993825,9cyclictest231ktimers/108:55:171
2218486993825,7cyclictest231ktimers/111:05:181
2218486993823,10cyclictest0-21swapper/107:50:261
2218486993822,8cyclictest0-21swapper/110:30:281
221848599381,35cyclictest0-21swapper/011:50:250
221848899374,27cyclictest32-21ksoftirqd/208:25:022
2218488993729,4cyclictest0-21swapper/211:40:002
2218488993725,7cyclictest0-21swapper/208:50:222
2218488993715,17cyclictest2228412-21/usr/sbin/munin08:05:202
2218488993715,17cyclictest2228412-21/usr/sbin/munin08:05:202
2218486993727,7cyclictest231ktimers/110:05:121
2218486993726,9cyclictest231ktimers/108:25:131
2218486993725,8cyclictest0-21swapper/107:30:011
2218486993724,9cyclictest0-21swapper/110:25:291
2218486993724,9cyclictest0-21swapper/110:10:281
2218486993723,9cyclictest231ktimers/111:00:121
2218486993722,12cyclictest231ktimers/112:30:151
221848599372,4cyclictest2264743-21/usr/sbin/munin11:35:270
2218488993628,5cyclictest311ktimers/210:50:232
2218488993627,6cyclictest311ktimers/207:45:272
2218488993625,7cyclictest311ktimers/209:20:152
2218488993624,7cyclictest0-21swapper/208:40:232
221848899362,28cyclictest0-21swapper/207:40:182
221848899361,29cyclictest2233471-21/usr/sbin/munin08:35:172
2218486993620,10cyclictest0-21swapper/108:05:301
2218486993620,10cyclictest0-21swapper/108:05:301
2218485993630,4cyclictest0-21swapper/010:15:260
2218485993630,2cyclictest0-21swapper/012:00:010
2218485993629,4cyclictest20950irq/209-8000000.ethernet10:50:180
2218485993624,7cyclictest2246856-21grep09:50:280
2218485993624,10cyclictest1263-21cron11:15:000
2218485993624,10cyclictest1263-21cron11:15:000
221848599361,33cyclictest0-21swapper/011:27:490
221848599361,32cyclictest2235799-21cron08:50:000
221848599361,21cyclictest0-21swapper/008:10:300
2218488993527,5cyclictest311ktimers/211:41:202
2218488993525,5cyclictest311ktimers/207:30:012
2218488993525,5cyclictest0-21swapper/212:20:262
2218488993522,7cyclictest0-21swapper/212:35:292
2218486993525,6cyclictest0-21swapper/109:45:321
2218486993525,5cyclictest0-21swapper/110:00:011
2218486993523,5cyclictest0-21swapper/109:40:201
2218486993523,5cyclictest0-21swapper/109:40:201
2218486993522,8cyclictest0-21swapper/110:35:201
221848699351,19cyclictest0-21swapper/109:20:011
2218485993524,7cyclictest25450irq/423-mmc209:09:590
2218485993524,7cyclictest15-21rcuc/009:00:500
221848599351,4cyclictest0-21swapper/012:05:010
221848599351,3cyclictest0-21swapper/008:00:270
221848599351,32cyclictest0-21swapper/011:05:230
221848599351,32cyclictest0-21swapper/009:55:300
2218488993429,3cyclictest311ktimers/209:40:282
2218488993429,3cyclictest311ktimers/209:40:282
2218488993426,5cyclictest311ktimers/208:45:262
2218488993423,6cyclictest311ktimers/209:10:152
2218488993421,6cyclictest311ktimers/207:10:192
2218488993420,5cyclictest0-21swapper/210:15:222
221848899341,5cyclictest2261010-21diskstats11:15:192
221848699343,25cyclictest24-21ksoftirqd/109:10:151
2218486993423,5cyclictest0-21swapper/110:15:211
2218486993421,9cyclictest0-21swapper/108:35:011
2218486993420,9cyclictest0-21swapper/107:55:261
2218486993419,11cyclictest231ktimers/111:55:111
221848699341,2cyclictest0-21swapper/109:10:001
2218485993429,3cyclictest20950irq/209-8000000.ethernet10:55:170
2218485993429,3cyclictest20950irq/209-8000000.ethernet10:55:170
2218485993428,4cyclictest20950irq/209-8000000.ethernet11:30:210
2218485993426,5cyclictest0-21swapper/011:00:160
221848599341,3cyclictest0-21swapper/010:00:280
221848599341,31cyclictest0-21swapper/010:20:140
2218488993325,5cyclictest311ktimers/211:25:182
221848899332,4cyclictest2246655-21grep09:50:262
2218488993324,6cyclictest311ktimers/212:10:272
2218488993319,6cyclictest0-21swapper/211:20:212
221848899331,5cyclictest2232932-21meminfo08:30:262
221848899331,26cyclictest0-21swapper/212:30:212
221848899331,26cyclictest0-21swapper/209:45:152
221848899330,27cyclictest2252328-21/usr/sbin/munin10:25:302
221848699335,4cyclictest231ktimers/112:15:311
2218486993325,4cyclictest0-21swapper/112:05:001
2218486993317,9cyclictest22-21rcuc/112:05:181
221848699331,2cyclictest0-21swapper/109:40:011
221848699331,23cyclictest24-21ksoftirqd/107:20:181
2218485993325,4cyclictest2236103-21fschecks_count08:50:210
2218485993325,3cyclictest2231759-21latency_hist08:25:020
2218485993324,5cyclictest0-21swapper/008:55:300
2218485993321,8cyclictest0-21swapper/007:10:010
2218488993225,5cyclictest311ktimers/212:25:272
2218488993224,5cyclictest311ktimers/207:55:012
2218488993222,6cyclictest0-21swapper/207:15:222
2218488993219,5cyclictest0-21swapper/210:20:302
2218486993222,7cyclictest2261868-21sh11:20:201
2218486993222,6cyclictest0-21swapper/111:10:311
2218486993222,6cyclictest0-21swapper/111:10:311
2218486993221,5cyclictest0-21swapper/110:50:011
221848699321,26cyclictest0-21swapper/108:10:181
2218485993226,3cyclictest0-21swapper/009:20:180
2218485993225,3cyclictest2240820-21grep09:15:320
2218485993224,5cyclictest0-21swapper/008:40:250
221848599322,27cyclictest0-21swapper/012:30:190
2218485993221,8cyclictest0-21swapper/012:15:240
2218485993219,9cyclictest0-21swapper/008:35:200
221848599321,7cyclictest2275086-21grep12:35:280
2218488993123,6cyclictest311ktimers/210:10:172
2218488993122,4cyclictest0-21swapper/209:05:132
2218488993120,7cyclictest0-21swapper/212:15:332
2218488993119,9cyclictest311ktimers/208:00:162
221848899311,24cyclictest2248107-21/usr/sbin/munin10:00:202
2218486993123,4cyclictest0-21swapper/110:05:001
2218486993122,6cyclictest2233530-21df08:35:171
2218486993121,7cyclictest0-21swapper/109:50:271
2218486993118,9cyclictest0-21swapper/110:20:291
2218486993117,9cyclictest0-21swapper/108:00:211
221848699311,13cyclictest14-21rcu_preempt12:30:001
2218488993021,6cyclictest311ktimers/208:10:202
2218486993022,6cyclictest0-21swapper/108:45:001
2218486993021,6cyclictest2258192-21sshd10:59:201
2218486993021,6cyclictest2258192-21sshd10:59:201
2218486993018,6cyclictest22-21rcuc/108:50:201
2218486993017,9cyclictest0-21swapper/112:35:211
2218486993010,4cyclictest27350irq/343-s-wl18xx12:21:091
2218486993010,3cyclictest27350irq/343-s-wl18xx11:50:411
221848599301,17cyclictest0-21swapper/012:28:190
221848699291,3cyclictest0-21swapper/108:15:191
2218485992823,3cyclictest20950irq/209-8000000.ethernet07:45:120
2218488992619,4cyclictest311ktimers/207:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional