You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-05 - 15:58

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot6s.osadl.org (updated Fri Dec 05, 2025 12:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1297615996417,12cyclictest0-21swapper/208:55:012
1297615995848,5cyclictest1337354-21unixbench_multi11:55:282
129761199561,21cyclictest0-21swapper/012:35:000
1297614995539,12cyclictest231ktimers/109:15:101
1297611995444,7cyclictest131ktimers/010:10:110
1297611995428,13cyclictest15-21rcuc/010:05:000
1297614995036,9cyclictest1339971-21grep12:10:291
1297614995029,16cyclictest231ktimers/109:10:121
1297611995040,6cyclictest0-21swapper/010:05:290
1297611995030,12cyclictest131ktimers/007:25:010
129761199501,2cyclictest0-21swapper/009:20:010
129761599499,15cyclictest30-21rcuc/207:50:012
129761599499,15cyclictest30-21rcuc/207:50:012
1297615994940,5cyclictest1301412-21munin-plugin-st07:45:002
129761499495,20cyclictest24-21ksoftirqd/112:10:021
129761499495,20cyclictest24-21ksoftirqd/112:10:011
1297614994929,15cyclictest0-21swapper/109:35:171
1297611994941,4cyclictest1309226-21grep09:10:250
129761199486,34cyclictest0-21swapper/011:20:010
1297611994841,5cyclictest1338315-21munin-plugin-st12:05:000
1297611994840,5cyclictest0-21swapper/008:55:000
1297611994836,8cyclictest1344398-21sendmail12:40:000
1297611994836,8cyclictest1344398-21sendmail12:40:000
129761499479,25cyclictest24-21ksoftirqd/111:00:011
129761499479,25cyclictest24-21ksoftirqd/111:00:011
1297614994731,12cyclictest0-21swapper/110:25:301
1297614994729,12cyclictest0-21swapper/108:40:271
1297614994722,11cyclictest231ktimers/108:45:051
1297614994624,16cyclictest231ktimers/108:25:111
129761199467,10cyclictest15-21rcuc/007:50:010
1297614994529,9cyclictest0-21swapper/107:25:281
1297614994528,13cyclictest231ktimers/110:30:121
1297614994527,12cyclictest231ktimers/107:55:111
1297611994537,4cyclictest1335779-21munin-plugin-st11:50:000
1297615994435,5cyclictest1313554-21tr09:40:002
1297615994429,8cyclictest0-21swapper/210:20:282
1297614994432,5cyclictest231ktimers/111:20:051
1297614994431,9cyclictest1316103-21grep09:50:271
1297614994412,4cyclictest0-21swapper/107:20:011
1297611994431,10cyclictest0-21swapper/008:20:000
1297615994333,6cyclictest0-21swapper/208:55:212
1297614994333,5cyclictest0-21swapper/111:35:181
1297611994335,4cyclictest21250irq/208-8000000.ethernet10:15:270
1297611994327,12cyclictest131ktimers/007:25:110
1297614994234,3cyclictest1333146-21grep11:30:291
1297614994233,5cyclictest1321133-21grep10:20:281
1297614994232,6cyclictest1330661-21grep11:20:001
1297614994231,7cyclictest1317770-21grep10:00:311
1297614994230,6cyclictest0-21swapper/111:00:281
129761499422,33cyclictest0-21swapper/112:25:261
129761199427,8cyclictest0-21swapper/009:40:010
1297611994235,4cyclictest0-21swapper/011:00:110
1297611994229,8cyclictest0-21swapper/010:45:290
1297611994223,16cyclictest1303609-21/usr/sbin/munin08:10:220
1297611994217,19cyclictest0-21swapper/011:05:180
1297615994124,9cyclictest0-21swapper/212:25:312
129761499418,28cyclictest231ktimers/110:40:011
129761499417,11cyclictest1340926-21apt-get12:20:011
129761499417,11cyclictest1340926-21apt-get12:20:011
1297614994137,2cyclictest0-21swapper/110:50:001
1297614994127,9cyclictest0-21swapper/109:45:281
1297615994032,6cyclictest1343542-21cron12:35:012
1297615994030,7cyclictest1334941-21munin-plugin-st11:45:012
1297615994026,10cyclictest0-21swapper/212:00:272
1297614994028,6cyclictest0-21swapper/112:35:181
1297614994028,6cyclictest0-21swapper/112:35:171
1297614994026,6cyclictest0-21swapper/112:20:201
129761499401,8cyclictest0-21swapper/108:55:011
1297611994033,5cyclictest1332404-21munin-plugin-st11:30:010
1297611994018,16cyclictest24150irq/422-mmc107:15:000
1297615993932,4cyclictest1320385-21cron10:20:002
1297615993927,7cyclictest0-21swapper/212:15:292
1297615993927,7cyclictest0-21swapper/212:15:292
1297614993929,6cyclictest0-21swapper/109:40:281
1297614993928,7cyclictest1312639-21grep09:30:301
1297614993921,11cyclictest0-21swapper/107:40:271
129761499391,5cyclictest0-21swapper/108:25:011
129761499391,5cyclictest0-21swapper/108:25:011
1297611993931,5cyclictest21250irq/208-8000000.ethernet11:30:290
1297611993926,8cyclictest0-21swapper/009:20:260
129761199391,3cyclictest1336049-21diskstats11:50:190
1297615993831,4cyclictest1319451-21unixbench_multi10:10:302
1297615993828,6cyclictest0-21swapper/208:40:282
1297615993827,7cyclictest0-21swapper/209:45:012
1297615993825,8cyclictest0-21swapper/211:35:262
1297615993825,7cyclictest0-21swapper/209:55:302
1297615993823,9cyclictest0-21swapper/209:25:292
129761499384,17cyclictest1303369-21/usr/sbin/munin08:10:181
1297614993828,6cyclictest0-21swapper/112:00:151
1297614993826,7cyclictest1298607-21latency_hist07:15:011
1297614993822,12cyclictest0-21swapper/110:05:291
1297614993820,10cyclictest0-21swapper/109:25:291
1297614993817,12cyclictest22-21rcuc/110:50:251
129761499381,30cyclictest0-21swapper/111:55:181
129761199389,27cyclictest0-21swapper/008:50:000
1297611993830,6cyclictest1340927-21latency_hist12:20:010
1297611993830,6cyclictest1340927-21latency_hist12:20:000
1297611993827,7cyclictest1321179-21grep10:20:280
1297611993825,9cyclictest0-21swapper/009:25:290
1297611993825,8cyclictest0-21swapper/009:55:290
1297611993815,17cyclictest1329679-21latency_hist11:15:010
1297615993727,7cyclictest1336574-21grep11:50:292
1297615993727,7cyclictest1327034-21grep10:55:302
1297615993727,7cyclictest1327034-21grep10:55:292
1297615993726,8cyclictest0-21swapper/207:25:282
1297615993726,7cyclictest0-21swapper/211:30:292
1297615993725,9cyclictest0-21swapper/210:00:292
1297615993725,8cyclictest0-21swapper/211:45:302
1297615993723,9cyclictest0-21swapper/211:10:272
1297614993730,4cyclictest14-21rcu_preempt12:30:211
1297614993730,4cyclictest1304234-21cron08:20:001
1297614993725,8cyclictest1300239-21munin-plugin-st07:35:011
1297614993725,8cyclictest1300239-21munin-plugin-st07:35:011
1297614993724,9cyclictest231ktimers/109:55:141
1297611993730,4cyclictest0-21swapper/012:15:000
1297611993729,5cyclictest21250irq/208-8000000.ethernet11:20:230
129761199371,34cyclictest0-21swapper/011:40:170
129761199371,30cyclictest1300442-21sed07:35:010
129761199371,30cyclictest1300442-21sed07:35:010
1297615993628,5cyclictest275-21systemd-journal12:10:002
1297615993628,5cyclictest275-21systemd-journal12:10:002
1297614993627,5cyclictest0-21swapper/110:15:261
1297614993623,9cyclictest1336508-21grep11:50:291
129761499361,8cyclictest0-21swapper/111:45:011
1297611993627,6cyclictest1305991-21/usr/sbin/munin08:40:110
129761199361,3cyclictest0-21swapper/010:55:210
129761199361,3cyclictest0-21swapper/010:55:210
129761199361,2cyclictest1307375-21apt-get08:55:110
1297615993526,5cyclictest1339443-21/usr/sbin/munin12:10:202
1297615993522,9cyclictest0-21swapper/210:35:292
1297615993522,8cyclictest0-21swapper/209:15:282
1297615993522,7cyclictest1312673-21grep09:30:302
1297615993521,9cyclictest0-21swapper/211:25:282
129761499355,21cyclictest1335700-21sed11:45:291
129761499354,19cyclictest1332333-21sed11:25:281
1297614993525,6cyclictest1305780-21munin-plugin-st08:40:011
1297614993522,7cyclictest0-21swapper/109:20:271
1297614993519,11cyclictest0-21swapper/111:05:281
1297611993528,4cyclictest20050irq/27-20000000.i2c11:35:180
1297611993528,4cyclictest1301863-21munin-run07:55:000
1297611993528,4cyclictest1301863-21munin-run07:55:000
1297611993527,6cyclictest1314551-21apt-key09:45:010
1297611993527,4cyclictest20050irq/27-20000000.i2c09:10:010
1297611993527,4cyclictest0-21swapper/010:35:010
1297611993519,4cyclictest1308985-1kworker/0:1H+mmc_complete09:50:020
1297611993515,15cyclictest131ktimers/007:40:100
1297615993423,7cyclictest0-21swapper/210:05:302
129761599342,29cyclictest0-21swapper/209:10:242
1297615993422,8cyclictest0-21swapper/210:45:292
1297615993422,8cyclictest0-21swapper/209:45:282
1297615993422,8cyclictest0-21swapper/207:10:262
129761599341,7cyclictest1322045-21unixbench_singl10:25:292
129761599341,27cyclictest0-21swapper/207:55:152
129761499343,23cyclictest1324572-21grep10:40:261
129761499343,23cyclictest1324572-21grep10:40:261
1297614993424,7cyclictest1319487-21grep10:10:291
129761499341,2cyclictest0-21swapper/108:05:011
1297611993426,6cyclictest0-21swapper/009:35:000
1297611993426,5cyclictest1342597-21grep12:25:300
1297611993422,8cyclictest1305268-21grep08:25:280
129761199341,3cyclictest0-21swapper/010:35:290
129761199341,31cyclictest0-21swapper/012:20:210
1297615993318,11cyclictest0-21swapper/210:30:262
129761599331,27cyclictest0-21swapper/212:20:122
1297614993315,8cyclictest22-21rcuc/111:15:021
129761499331,25cyclictest0-21swapper/107:45:291
1297611993325,5cyclictest21250irq/208-8000000.ethernet11:55:280
129761199331,5cyclictest1316044-21find09:50:270
1297611993314,3cyclictest1302935-21sshd08:04:140
129761199331,30cyclictest0-21swapper/009:03:280
129761199331,30cyclictest0-21swapper/008:33:180
129761599323,3cyclictest1330618-21munin-run11:20:002
1297615993218,9cyclictest0-21swapper/209:50:252
1297614993215,8cyclictest0-21swapper/109:10:011
129761199323,27cyclictest0-21swapper/012:05:250
129761199323,27cyclictest0-21swapper/012:05:240
1297611993225,4cyclictest20050irq/27-20000000.i2c10:25:180
1297611993224,4cyclictest0-21swapper/010:40:270
1297611993224,4cyclictest0-21swapper/010:40:260
129761199322,25cyclictest0-21swapper/010:55:010
1297615993118,8cyclictest0-21swapper/211:20:292
1297615993111,4cyclictest1660-21lldpd08:47:232
1297614993120,6cyclictest0-21swapper/108:10:011
1297614993120,6cyclictest0-21swapper/108:10:011
129761199316,23cyclictest1300223-21kworker/u8:2+rpciod07:36:350
129761199316,23cyclictest1300223-21kworker/u8:2+rpciod07:36:350
129761199311,2cyclictest0-21swapper/008:40:010
129761199311,25cyclictest0-21swapper/007:10:010
129761199311,25cyclictest0-21swapper/007:10:010
1297615993020,7cyclictest0-21swapper/210:40:152
1297615993020,7cyclictest0-21swapper/210:40:152
1297615993020,6cyclictest0-21swapper/212:35:252
1297615993020,6cyclictest0-21swapper/212:35:252
1297615993020,6cyclictest0-21swapper/211:10:012
129761599301,4cyclictest0-21swapper/209:20:262
129761599301,3cyclictest1326276-21users10:50:292
129761599301,2cyclictest0-21swapper/207:25:012
129761499301,26cyclictest1308004-21dropbear08:59:311
1297611993021,4cyclictest0-21swapper/007:15:050
129761199301,26cyclictest0-21swapper/007:55:190
1297615992921,4cyclictest0-21swapper/207:15:042
1297615992919,7cyclictest0-21swapper/207:10:012
1297615992919,7cyclictest0-21swapper/207:10:012
129761599291,22cyclictest0-21swapper/209:00:292
129761499294,15cyclictest1308347-21wc09:05:001
1297614992922,3cyclictest0-21swapper/108:35:001
1297614992915,7cyclictest0-21swapper/107:40:011
1297614992915,7cyclictest0-21swapper/107:40:011
129761499291,25cyclictest1301860-21latency_hist07:55:011
129761499291,25cyclictest1301860-21latency_hist07:55:011
129761499291,23cyclictest0-21swapper/107:22:431
129761599281,22cyclictest0-21swapper/208:08:292
129761599281,22cyclictest0-21swapper/208:08:292
1297615992718,7cyclictest1305757-21sshd08:38:292
1297615992621,3cyclictest311ktimers/208:05:002
1297615992620,4cyclictest1300242-21munin-plugin-st07:35:002
1297615992620,4cyclictest1300242-21munin-plugin-st07:35:002
1297615992618,6cyclictest311ktimers/208:10:112
1297615992615,7cyclictest0-21swapper/208:25:012
1297615992615,7cyclictest0-21swapper/208:25:012
1297615992614,8cyclictest0-21swapper/209:10:012
129761199261,23cyclictest0-21swapper/008:24:290
129761199261,23cyclictest0-21swapper/008:24:290
1297615992516,6cyclictest0-21swapper/208:25:282
1297615992514,7cyclictest0-21swapper/211:00:202
1297611992420,3cyclictest0-21swapper/008:09:280
1297611992420,3cyclictest0-21swapper/008:09:270
1297614992315,5cyclictest0-21swapper/107:10:011
1297614992315,5cyclictest0-21swapper/107:10:011
1297615992214,5cyclictest311ktimers/207:35:022
1297615992214,5cyclictest311ktimers/207:35:022
129761599211,19cyclictest0-21swapper/208:33:292
129761599211,18cyclictest0-21swapper/208:18:202
129761599201,3cyclictest0-21swapper/207:50:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional