You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-22 - 05:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6s.osadl.org (updated Sat Nov 22, 2025 00:44:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
195658199642,53cyclictest0-21swapper/022:25:010
195658199641,51cyclictest0-21swapper/019:35:100
195658199641,51cyclictest0-21swapper/019:35:100
1956587996041,14cyclictest311ktimers/223:40:222
1956581995847,6cyclictest0-21swapper/021:49:590
1956581995643,10cyclictest1964511-21munin-plugin-st19:55:000
195658399545,22cyclictest231ktimers/119:35:181
195658399545,22cyclictest231ktimers/119:35:181
1956581995214,21cyclictest15-21rcuc/020:30:000
1956587995141,5cyclictest2009060-21munin-plugin-st00:15:002
1956581995138,8cyclictest1965358-21sendmail20:00:000
1956583995043,3cyclictest1960848-21phc2sys-jitter19:30:271
1956583995041,6cyclictest1979909-21munin-plugin-st21:25:011
1956583995038,8cyclictest0-21swapper/121:40:011
1956583995038,8cyclictest0-21swapper/121:40:011
1956583994934,12cyclictest1991987-21munin-plugin-st22:35:001
1956581994833,9cyclictest0-21swapper/021:15:300
1956583994739,5cyclictest1968735-21run-parts20:20:001
1956581994734,9cyclictest0-21swapper/023:40:000
1956581994734,9cyclictest0-21swapper/023:40:000
1956581994732,11cyclictest0-21swapper/023:00:000
1956581994732,11cyclictest0-21swapper/023:00:000
1956581994714,29cyclictest0-21swapper/019:20:300
1956581994714,29cyclictest0-21swapper/019:20:300
1956583994635,7cyclictest1964511-21munin-plugin-st19:55:001
1956583994632,9cyclictest0-21swapper/120:55:011
1956583994632,9cyclictest0-21swapper/120:55:011
1956583994628,11cyclictest0-21swapper/100:00:281
195658199466,3cyclictest0-21swapper/021:30:010
195658199461,30cyclictest0-21swapper/000:20:010
1956587994538,4cyclictest1985145-21munin-plugin-st21:55:002
1956587994536,4cyclictest1958511-21latency_hist19:20:012
1956587994535,6cyclictest1974631-21unixbench_multi20:50:272
1956587994535,6cyclictest1974631-21unixbench_multi20:50:272
1956587994535,6cyclictest1969639-21unixbench_singl20:20:322
1956587994535,6cyclictest1969639-21unixbench_singl20:20:322
1956587994532,8cyclictest0-21swapper/219:40:322
1956583994532,8cyclictest0-21swapper/123:20:271
1956583994532,8cyclictest0-21swapper/123:20:271
1956583994529,9cyclictest0-21swapper/100:35:291
1956587994432,7cyclictest0-21swapper/219:50:292
1956587994430,10cyclictest0-21swapper/221:00:302
1956583994429,9cyclictest0-21swapper/122:25:281
1956583994428,11cyclictest0-21swapper/100:25:261
195658399441,13cyclictest22-21rcuc/100:20:001
1956587994329,9cyclictest0-21swapper/223:10:332
1956587994329,9cyclictest0-21swapper/223:10:332
1956587994328,10cyclictest0-21swapper/220:25:272
1956587994328,10cyclictest0-21swapper/200:35:302
1956583994330,9cyclictest0-21swapper/122:45:011
1956583994330,9cyclictest0-21swapper/122:45:011
1956581994333,6cyclictest1992709-21grep22:35:300
1956581994331,8cyclictest0-21swapper/021:40:020
1956581994331,8cyclictest0-21swapper/021:40:020
1956581994316,18cyclictest0-21swapper/021:55:010
1956587994232,6cyclictest1959418-21unixbench_singl19:20:302
1956587994232,6cyclictest1959418-21unixbench_singl19:20:302
1956587994229,9cyclictest0-21swapper/220:50:002
1956587994229,8cyclictest0-21swapper/221:25:302
1956587994229,7cyclictest0-21swapper/220:30:282
195658799421,10cyclictest0-21swapper/221:05:192
1956583994232,5cyclictest0-21swapper/122:15:021
1956583994230,8cyclictest0-21swapper/121:45:271
1956583994227,9cyclictest0-21swapper/119:40:331
1956581994232,8cyclictest0-21swapper/019:44:590
1956581994225,11cyclictest0-21swapper/022:00:290
1956587994131,6cyclictest0-21swapper/220:35:292
1956587994131,6cyclictest0-21swapper/220:35:292
1956587994129,8cyclictest0-21swapper/219:25:312
1956587994127,9cyclictest0-21swapper/221:55:312
1956587994127,9cyclictest0-21swapper/221:55:312
195658799411,20cyclictest0-21swapper/223:25:012
195658799411,20cyclictest0-21swapper/223:25:012
1956583994131,5cyclictest1973847-21unixbench_singl20:45:291
1956583994131,4cyclictest0-21swapper/119:55:281
1956583994130,5cyclictest0-21swapper/121:05:201
1956583994129,8cyclictest0-21swapper/100:30:281
1956583994127,8cyclictest0-21swapper/121:30:021
1956583994123,10cyclictest0-21swapper/119:15:041
1956581994131,7cyclictest1979908-21munin-plugin-st21:25:000
1956581994127,7cyclictest0-21swapper/022:50:310
1956581994115,23cyclictest0-21swapper/023:05:000
195658199411,37cyclictest0-21swapper/022:05:200
1956587994028,9cyclictest0-21swapper/220:15:282
1956587994027,8cyclictest0-21swapper/222:25:282
1956587994025,11cyclictest0-21swapper/223:00:292
1956587994023,8cyclictest0-21swapper/222:30:282
1956583994026,6cyclictest0-21swapper/121:40:201
1956583994026,6cyclictest0-21swapper/121:40:201
1956581994033,5cyclictest131ktimers/000:20:180
1956581994033,5cyclictest131ktimers/000:20:180
1956581994032,5cyclictest21250irq/208-8000000.ethernet20:30:200
1956581994029,7cyclictest0-21swapper/020:45:300
1956581994028,7cyclictest0-21swapper/022:45:010
1956581994028,7cyclictest0-21swapper/022:45:000
1956581994028,7cyclictest0-21swapper/019:15:030
1956581994027,9cyclictest0-21swapper/020:35:310
1956581994027,9cyclictest0-21swapper/020:35:300
1956581994027,10cyclictest0-21swapper/000:35:290
195658199402,3cyclictest2007660-21/usr/sbin/munin00:05:200
195658199401,7cyclictest1957447-21cat19:15:010
1956587993922,9cyclictest1957408-21cat19:15:012
1956583993927,5cyclictest0-21swapper/122:35:291
1956583993926,8cyclictest0-21swapper/119:45:271
195658399392,29cyclictest0-21swapper/100:10:261
1956583993917,6cyclictest1975574-21apt-get21:00:001
195658399391,32cyclictest0-21swapper/121:00:231
1956581993931,4cyclictest0-21swapper/022:15:010
1956581993927,8cyclictest0-21swapper/023:50:270
1956581993926,9cyclictest0-21swapper/020:20:290
1956581993926,9cyclictest0-21swapper/020:20:290
1956581993925,9cyclictest0-21swapper/021:40:280
1956581993925,9cyclictest0-21swapper/021:40:280
1956581993920,13cyclictest0-21swapper/020:55:280
195658199391,36cyclictest0-21swapper/021:10:220
1956587993829,5cyclictest0-21swapper/219:35:272
1956587993829,5cyclictest0-21swapper/219:35:272
1956587993827,8cyclictest0-21swapper/221:40:002
1956587993827,8cyclictest0-21swapper/221:40:002
1956587993827,7cyclictest0-21swapper/221:10:292
1956587993826,9cyclictest0-21swapper/221:30:302
1956587993825,9cyclictest0-21swapper/200:25:272
1956587993825,8cyclictest0-21swapper/222:45:012
1956587993825,8cyclictest0-21swapper/222:45:012
1956587993824,8cyclictest0-21swapper/219:55:282
1956583993830,4cyclictest0-21swapper/119:15:011
1956583993827,8cyclictest2008099-21unixbench_multi00:05:281
1956583993825,8cyclictest0-21swapper/121:15:291
1956583993825,6cyclictest0-21swapper/119:20:301
1956583993825,6cyclictest0-21swapper/119:20:301
1956581993827,7cyclictest2009061-21munin-plugin-st00:15:010
1956581993826,9cyclictest0-21swapper/023:20:280
1956581993826,9cyclictest0-21swapper/023:20:270
1956581993817,18cyclictest1998831-21latency_hist23:15:020
195658199381,3cyclictest1988807-21apt-get22:15:110
1956587993725,8cyclictest0-21swapper/223:45:292
1956587993723,10cyclictest0-21swapper/222:55:292
1956587993723,10cyclictest0-21swapper/222:55:292
1956583993729,5cyclictest0-21swapper/121:50:171
1956583993729,4cyclictest0-21swapper/120:15:001
1956583993728,4cyclictest0-21swapper/123:10:011
1956583993727,6cyclictest0-21swapper/122:55:221
1956583993727,6cyclictest0-21swapper/122:55:211
1956583993727,5cyclictest0-21swapper/120:30:221
1956583993726,8cyclictest0-21swapper/122:00:291
195658199375,2cyclictest0-21swapper/021:05:180
1956581993727,5cyclictest131ktimers/019:30:290
1956581993726,9cyclictest1991145-21munin-plugin-st22:30:010
1956581993726,8cyclictest0-21swapper/020:05:280
1956581993726,8cyclictest0-21swapper/020:05:280
1956587993625,8cyclictest0-21swapper/220:59:592
1956587993625,7cyclictest0-21swapper/221:15:302
1956587993624,8cyclictest0-21swapper/221:20:292
1956587993624,7cyclictest0-21swapper/223:25:302
1956587993623,9cyclictest0-21swapper/223:35:292
1956587993623,9cyclictest0-21swapper/223:35:292
1956587993623,8cyclictest0-21swapper/220:10:262
1956587993622,9cyclictest1986778-21grep22:00:302
1956587993618,10cyclictest0-21swapper/220:00:312
195658799361,15cyclictest0-21swapper/220:45:002
1956583993629,5cyclictest231ktimers/123:50:011
1956583993626,5cyclictest0-21swapper/122:20:281
1956583993625,8cyclictest0-21swapper/123:35:251
1956583993625,8cyclictest0-21swapper/123:35:251
195658399361,33cyclictest0-21swapper/123:40:291
1956581993630,4cyclictest21250irq/208-8000000.ethernet23:55:220
1956581993630,4cyclictest21250irq/208-8000000.ethernet21:30:030
1956581993629,4cyclictest21250irq/208-8000000.ethernet23:40:260
1956581993629,4cyclictest0-21swapper/019:25:240
1956581993628,5cyclictest21250irq/208-8000000.ethernet20:40:250
1956581993628,5cyclictest2012406-21grep00:30:280
1956581993627,5cyclictest0-21swapper/022:49:590
1956581993615,9cyclictest0-21swapper/020:50:280
1956581993615,9cyclictest0-21swapper/020:50:270
195658199361,33cyclictest0-21swapper/020:15:280
1956587993523,7cyclictest0-21swapper/223:05:272
1956583993526,5cyclictest0-21swapper/120:25:191
1956583993525,6cyclictest0-21swapper/123:15:271
1956583993523,8cyclictest168350irq/126-8000000.ethernet-tx122:05:171
195658399351,28cyclictest0-21swapper/122:15:161
1956581993529,4cyclictest21250irq/208-8000000.ethernet23:15:240
1956581993529,4cyclictest21250irq/208-8000000.ethernet23:15:010
1956581993528,4cyclictest21250irq/208-8000000.ethernet21:00:230
1956581993527,5cyclictest0-21swapper/023:45:290
195658199351,31cyclictest0-21swapper/021:57:060
195658199351,31cyclictest0-21swapper/021:57:060
195658799341,17cyclictest0-21swapper/223:55:012
1956583993427,5cyclictest1959657-21/usr/sbin/munin19:25:261
1956583993426,4cyclictest0-21swapper/123:50:201
1956583993425,6cyclictest1985875-21grep21:55:301
1956583993425,6cyclictest1985875-21grep21:55:301
1956583993424,5cyclictest0-21swapper/123:25:221
1956583993423,7cyclictest0-21swapper/120:00:301
195658399341,29cyclictest22-21rcuc/123:00:291
195658399341,27cyclictest0-21swapper/120:40:161
1956581993426,5cyclictest21250irq/208-8000000.ethernet19:45:270
1956581993426,5cyclictest1997994-21munin-plugin-st23:10:000
1956581993426,5cyclictest0-21swapper/020:10:180
1956581993426,4cyclictest131ktimers/023:30:280
1956581993424,7cyclictest0-21swapper/020:00:320
195658199341,26cyclictest0-21swapper/022:35:020
1956587993322,7cyclictest0-21swapper/223:30:292
1956587993321,7cyclictest0-21swapper/223:55:262
1956587993320,9cyclictest0-21swapper/222:10:202
1956583993324,7cyclictest1977562-21/usr/sbin/munin21:10:161
1956583993324,6cyclictest0-21swapper/121:30:311
1956581993327,4cyclictest0-21swapper/023:29:370
1956587993223,6cyclictest1992708-21unixbench_multi22:35:292
1956587993222,7cyclictest2010118-21/usr/sbin/munin00:20:252
1956587993222,7cyclictest2010118-21/usr/sbin/munin00:20:242
1956587993222,7cyclictest1989434-21sshd22:18:242
1956587993220,7cyclictest0-21swapper/219:45:182
195658799321,28cyclictest1987038-21/usr/sbin/munin22:05:192
195658799318,11cyclictest2011803-21/usr/sbin/munin00:30:202
195658799313,18cyclictest1960496-21/usr/sbin/munin19:30:212
1956587993121,7cyclictest2007576-21/usr/sbin/munin00:05:112
1956587993117,9cyclictest0-21swapper/219:10:012
1956583993120,7cyclictest0-21swapper/123:30:281
195658399311,4cyclictest1998497-21meminfo23:10:301
195658399311,4cyclictest1998497-21meminfo23:10:291
195658399311,28cyclictest0-21swapper/120:05:231
195658399311,28cyclictest0-21swapper/120:05:231
1956581993121,6cyclictest0-21swapper/000:00:280
195658199310,3cyclictest2011549-21unixbench_singl00:25:260
1956587993022,6cyclictest2009257-21/usr/sbin/munin00:15:232
1956587993021,6cyclictest1990351-21cat22:25:002
1956583993023,4cyclictest0-21swapper/120:20:291
1956583993023,4cyclictest0-21swapper/120:20:291
1956583993020,6cyclictest0-21swapper/100:20:251
1956583993020,6cyclictest0-21swapper/100:20:251
1956581993024,3cyclictest1956540-21latency_hist19:10:010
1956587992918,7cyclictest0-21swapper/221:40:272
1956587992918,7cyclictest0-21swapper/221:40:272
1956587992917,8cyclictest0-21swapper/223:15:252
1956587992914,11cyclictest0-21swapper/222:50:292
195658399292,4cyclictest1995078-21irqstats22:50:261
195658399291,26cyclictest0-21swapper/120:35:261
195658399291,26cyclictest0-21swapper/120:35:251
195658399291,25cyclictest2006498-21sshd23:56:351
195658799281,24cyclictest0-21swapper/221:46:202
1956583992819,5cyclictest0-21swapper/122:45:231
1956587992722,3cyclictest0-21swapper/220:05:202
1956587992722,3cyclictest0-21swapper/220:05:202
1956587992719,4cyclictest0-21swapper/222:45:232
1956587992717,6cyclictest0-21swapper/200:00:182
1956583992211,6cyclictest1956709-21latency_hist19:10:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional