You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-05 - 15:23

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6s.osadl.org (updated Fri Dec 05, 2025 00:44:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
86498599871,3cyclictest0-21swapper/021:05:010
864985997239,27cyclictest0-21swapper/021:15:010
864985997034,31cyclictest0-21swapper/000:15:300
864986996651,8cyclictest911369-21sendmail23:39:591
864986996230,18cyclictest0-21swapper/120:05:011
864985996221,10cyclictest0-21swapper/020:55:280
864985996024,8cyclictest0-21swapper/000:10:310
864985995948,3cyclictest0-21swapper/020:40:130
864985995921,6cyclictest0-21swapper/022:30:010
864985995824,7cyclictest909868-21latency_hist23:30:020
864985995726,5cyclictest0-21swapper/022:45:320
864985995723,5cyclictest0-21swapper/020:15:300
86498599571,5cyclictest0-21swapper/020:10:010
864985995520,7cyclictest854499-1kworker/0:2H+mmc_complete23:50:000
86498599544,12cyclictest0-21swapper/022:00:020
86498599544,12cyclictest0-21swapper/022:00:010
86498599541,4cyclictest0-21swapper/023:35:010
864989995117,20cyclictest889525-21/usr/sbin/munin21:30:252
864986995142,5cyclictest907897-21munin-plugin-st23:20:001
864986995042,5cyclictest889239-21munin-plugin-st21:30:001
864985995026,5cyclictest21250irq/208-8000000.ethernet19:55:000
864989994835,8cyclictest0-21swapper/219:10:282
864989994834,10cyclictest0-21swapper/223:10:012
86498599488,19cyclictest14-21rcu_preempt00:00:010
864986994737,5cyclictest168350irq/126-8000000.ethernet-tx120:25:201
864986994731,9cyclictest0-21swapper/122:50:261
864985994742,3cyclictest21250irq/208-8000000.ethernet19:20:180
864989994635,6cyclictest902835-21munin-plugin-st22:50:002
864989994537,5cyclictest895133-21grep22:00:282
864986994531,10cyclictest0-21swapper/121:25:001
864985994538,4cyclictest21050irq/252-8000000.ethernet20:10:300
864985994533,9cyclictest888311-21munin-plugin-st21:25:000
864989994427,9cyclictest0-21swapper/223:30:012
864986994432,8cyclictest0-21swapper/122:35:291
864986994420,14cyclictest1668-21snmpd21:05:291
86498699441,4cyclictest0-21swapper/119:20:001
864986994410,16cyclictest22-21rcuc/100:05:011
864986994330,6cyclictest906141-21grep23:05:311
864985994329,9cyclictest0-21swapper/021:45:330
864985994329,11cyclictest15-21rcuc/019:35:150
864985994329,11cyclictest15-21rcuc/019:35:150
86498999426,20cyclictest881657-21/usr/sbin/munin20:45:212
864989994230,7cyclictest0-21swapper/220:50:322
864989994229,9cyclictest0-21swapper/200:15:002
864989994223,11cyclictest0-21swapper/223:20:282
864986994228,8cyclictest890109-21grep21:30:371
864986994227,7cyclictest0-21swapper/119:55:311
86498599428,5cyclictest0-21swapper/019:45:000
864985994235,4cyclictest882300-21munin-plugin-st20:49:590
86498599421,2cyclictest0-21swapper/000:05:200
864989994133,5cyclictest866905-21cron19:19:592
864989994130,8cyclictest921517-21sendmail00:40:012
864989994126,8cyclictest0-21swapper/223:50:282
864989994123,10cyclictest0-21swapper/222:10:292
864989994123,10cyclictest0-21swapper/222:10:292
864986994132,5cyclictest168350irq/126-8000000.ethernet-tx120:55:241
864986994130,6cyclictest0-21swapper/122:20:221
86498699412,31cyclictest0-21swapper/123:30:051
86498699412,18cyclictest22-21rcuc/100:35:001
86498699411,34cyclictest0-21swapper/121:10:261
864985994133,5cyclictest0-21swapper/021:55:000
86498599411,38cyclictest0-21swapper/023:00:220
86498599411,34cyclictest0-21swapper/022:55:180
864989994032,6cyclictest915598-21munin-plugin-st00:05:002
864989994026,10cyclictest0-21swapper/221:10:012
864989994016,9cyclictest871431-21/usr/sbin/munin19:45:212
864986994033,4cyclictest0-21swapper/123:00:001
864986994031,6cyclictest0-21swapper/122:45:301
864986994031,5cyclictest876338-21head20:10:311
864986994031,4cyclictest0-21swapper/100:00:321
864986994030,6cyclictest0-21swapper/122:10:311
864986994030,6cyclictest0-21swapper/122:10:311
86498699401,2cyclictest0-21swapper/120:40:321
864985994034,4cyclictest0-21swapper/019:25:110
864989993927,8cyclictest0-21swapper/222:35:292
864989993924,10cyclictest0-21swapper/221:00:262
864986993932,4cyclictest0-21swapper/120:50:001
864986993924,9cyclictest0-21swapper/100:10:311
864985993933,4cyclictest21250irq/208-8000000.ethernet20:00:000
864985993933,4cyclictest0-21swapper/020:35:120
864985993927,8cyclictest0-21swapper/023:10:250
86498599392,29cyclictest865889-21cat19:15:020
86498599391,8cyclictest0-21swapper/020:25:000
864989993831,4cyclictest168450irq/134-8000000.ethernet-tx223:30:302
864989993828,6cyclictest876318-21grep20:10:312
864989993827,7cyclictest898621-21munin-plugin-st22:25:002
864989993827,6cyclictest0-21swapper/221:40:162
864989993827,6cyclictest0-21swapper/221:40:162
864989993826,6cyclictest919761-21grep00:25:342
86498999381,28cyclictest1668-21snmpd20:15:182
86498699387,25cyclictest0-21swapper/123:00:291
864986993830,5cyclictest917844-21grep00:15:281
864986993830,5cyclictest0-21swapper/119:25:281
864986993829,5cyclictest0-21swapper/121:55:311
864986993829,5cyclictest0-21swapper/121:55:311
864986993827,7cyclictest0-21swapper/122:25:321
864986993827,6cyclictest900248-21grep22:30:321
864986993824,9cyclictest0-21swapper/121:00:331
864986993823,11cyclictest231ktimers/123:20:121
86498699381,6cyclictest0-21swapper/100:00:021
864985993830,6cyclictest21250irq/208-8000000.ethernet19:30:220
86498599382,5cyclictest888792-21sh21:25:240
86498599381,35cyclictest0-21swapper/000:35:260
864989993728,4cyclictest0-21swapper/222:15:272
864989993723,9cyclictest0-21swapper/223:15:282
864989993720,9cyclictest0-21swapper/221:25:322
864989993718,11cyclictest0-21swapper/223:55:322
864986993728,5cyclictest0-21swapper/100:40:011
864986993726,7cyclictest871142-21latency_hist19:45:001
864986993725,5cyclictest0-21swapper/120:50:321
864986993724,5cyclictest0-21swapper/123:25:291
864986993723,10cyclictest0-21swapper/123:40:191
864986993719,15cyclictest231ktimers/100:25:181
86498599371,34cyclictest0-21swapper/021:40:230
86498599371,34cyclictest0-21swapper/021:40:230
864989993628,4cyclictest905285-21unixbench_multi23:00:292
864989993625,8cyclictest0-21swapper/222:50:292
864989993625,7cyclictest0-21swapper/219:20:272
864989993625,6cyclictest0-21swapper/220:55:272
864989993624,8cyclictest0-21swapper/222:30:322
864989993624,8cyclictest0-21swapper/200:20:292
864989993623,9cyclictest0-21swapper/220:05:292
864989993623,10cyclictest0-21swapper/220:20:282
864989993621,9cyclictest0-21swapper/220:30:272
864986993630,3cyclictest168350irq/126-8000000.ethernet-tx119:10:131
864986993628,5cyclictest877227-21munin-plugin-st20:19:591
864986993626,5cyclictest0-21swapper/119:50:291
864986993624,6cyclictest0-21swapper/123:10:251
864986993621,11cyclictest231ktimers/120:35:141
864986993618,14cyclictest231ktimers/123:50:121
864986993617,13cyclictest231ktimers/123:45:161
86498699361,29cyclictest0-21swapper/119:20:261
864985993629,4cyclictest21250irq/208-8000000.ethernet21:35:250
864985993628,5cyclictest0-21swapper/000:30:010
864985993626,5cyclictest0-21swapper/021:30:360
864985993625,7cyclictest0-21swapper/022:20:300
86498599361,6cyclictest0-21swapper/019:20:010
86498599361,3cyclictest0-21swapper/023:50:120
86498599361,33cyclictest0-21swapper/022:15:180
86498599361,33cyclictest0-21swapper/022:00:220
864989993526,6cyclictest888276-21grep21:20:302
864989993522,9cyclictest0-21swapper/222:55:312
864989993522,7cyclictest0-21swapper/219:40:212
86498999351,28cyclictest0-21swapper/200:15:172
864986993524,5cyclictest0-21swapper/122:15:181
864985993529,4cyclictest21250irq/208-8000000.ethernet20:34:590
864985993529,3cyclictest0-21swapper/022:30:290
864985993517,16cyclictest0-21swapper/022:50:150
86498599351,4cyclictest0-21swapper/022:15:010
86498599351,4cyclictest0-21swapper/022:15:010
86498599351,32cyclictest0-21swapper/022:05:260
864989993424,5cyclictest870178-21unixbench_multi19:35:292
864989993424,5cyclictest870178-21unixbench_multi19:35:292
864989993424,5cyclictest0-21swapper/200:33:162
864989993423,8cyclictest0-21swapper/219:35:012
864986993421,8cyclictest0-21swapper/121:45:231
86498699341,27cyclictest0-21swapper/121:35:251
864985993428,4cyclictest21250irq/208-8000000.ethernet23:20:300
864985993428,4cyclictest21250irq/208-8000000.ethernet22:35:310
864985993427,4cyclictest21250irq/208-8000000.ethernet19:45:180
864985993420,10cyclictest0-21swapper/022:40:320
86498599341,31cyclictest0-21swapper/020:50:320
86498599341,2cyclictest0-21swapper/023:40:010
86498599341,20cyclictest854499-1kworker/0:2H+kblockd23:45:020
86498999338,15cyclictest915794-21/usr/sbin/munin00:05:202
864989993324,6cyclictest0-21swapper/223:10:342
864989993323,6cyclictest0-21swapper/222:25:312
864989993322,8cyclictest0-21swapper/220:40:322
864986993322,6cyclictest879663-21grep20:30:361
86498699331,4cyclictest0-21swapper/121:42:381
86498699331,4cyclictest0-21swapper/121:42:381
864985993327,4cyclictest21250irq/208-8000000.ethernet23:05:170
864985993327,4cyclictest21250irq/208-8000000.ethernet20:00:210
86498599331,25cyclictest0-21swapper/000:00:010
864989993225,4cyclictest0-21swapper/221:35:202
864989993218,7cyclictest0-21swapper/220:05:002
86498999321,25cyclictest0-21swapper/223:45:262
86498699326,14cyclictest874899-21/usr/sbin/munin20:05:201
864986993224,4cyclictest0-21swapper/119:45:291
864986993223,4cyclictest901894-21grep22:40:311
864986993221,6cyclictest0-21swapper/120:20:281
864985993227,3cyclictest0-21swapper/021:15:170
864985993224,4cyclictest21250irq/208-8000000.ethernet23:15:290
864985993222,6cyclictest0-21swapper/000:30:310
864989993123,5cyclictest0-21swapper/221:10:192
864989993122,6cyclictest894272-21grep21:55:322
864989993122,6cyclictest894272-21grep21:55:312
864989993119,9cyclictest0-21swapper/221:50:272
864989993115,12cyclictest0-21swapper/222:40:312
864986993125,4cyclictest0-21swapper/122:00:271
864986993123,6cyclictest0-21swapper/119:35:251
864986993123,6cyclictest0-21swapper/119:35:251
864989993022,5cyclictest896019-21grep22:05:312
86498999301,6cyclictest887116-21sshd21:15:272
864986993019,8cyclictest0-21swapper/100:20:201
864986993018,9cyclictest0-21swapper/121:50:251
864986993017,9cyclictest0-21swapper/122:05:291
864986993013,10cyclictest0-21swapper/119:10:021
864985993021,5cyclictest885609-21unixbench_singl21:05:320
86498599301,2cyclictest0-21swapper/020:30:010
86498599301,27cyclictest0-21swapper/000:20:180
864989992921,5cyclictest0-21swapper/219:50:262
864989992921,4cyclictest0-21swapper/220:25:202
864986992917,8cyclictest0-21swapper/119:30:281
86498999281,3cyclictest0-21swapper/220:35:262
86498999281,25cyclictest0-21swapper/223:40:242
86498999281,25cyclictest0-21swapper/223:35:272
86498699281,4cyclictest887455-21munin-run21:19:591
864989992717,7cyclictest0-21swapper/219:25:212
864989992619,4cyclictest0-21swapper/219:55:232
864989992514,8cyclictest892595-21grep21:45:322
864985992517,6cyclictest131ktimers/019:10:020
86498999241,2cyclictest0-21swapper/219:10:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional