You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-15 - 13:09

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot6s.osadl.org (updated Wed Jul 15, 2026 00:44:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2567991997811,53cyclictest2602488-21/usr/sbin/munin22:30:182
2567985997010,19cyclictest2611674-21apt-get23:25:020
2567991996721,36cyclictest0-21swapper/219:55:302
2567991996622,35cyclictest0-21swapper/220:25:302
2567991996622,35cyclictest0-21swapper/220:25:302
2567987996646,12cyclictest0-21swapper/122:00:011
2567985996613,14cyclictest14-21rcu_preempt22:25:010
2567991996320,33cyclictest0-21swapper/223:15:222
2567987996241,14cyclictest231ktimers/122:55:131
2567991996123,33cyclictest0-21swapper/200:10:292
2567991996120,31cyclictest0-21swapper/220:30:202
2567991996120,31cyclictest0-21swapper/220:30:202
2567991996118,35cyclictest0-21swapper/221:30:292
2567991996020,35cyclictest0-21swapper/220:35:202
2567991996019,31cyclictest0-21swapper/220:15:202
2567991996019,31cyclictest0-21swapper/220:15:202
2567991996015,6cyclictest0-21swapper/221:15:292
2567985996054,4cyclictest0-21swapper/000:20:110
2567991995934,20cyclictest2575773-21grep19:50:292
2567991995934,20cyclictest0-21swapper/220:25:002
2567991995932,22cyclictest0-21swapper/219:50:002
2567991995931,23cyclictest0-21swapper/222:10:312
2567991995927,26cyclictest0-21swapper/222:15:302
2567991995920,34cyclictest0-21swapper/200:20:222
2567991995915,5cyclictest0-21swapper/219:20:292
2567991995825,27cyclictest0-21swapper/223:25:002
2567991995817,4cyclictest0-21swapper/220:45:012
2567991995817,35cyclictest0-21swapper/221:45:282
2567991995713,38cyclictest0-21swapper/223:05:002
256799199571,25cyclictest0-21swapper/219:10:162
2567991995619,7cyclictest0-21swapper/221:55:262
2567991995618,4cyclictest0-21swapper/221:50:272
2567991995618,32cyclictest0-21swapper/223:50:222
2567991995617,5cyclictest311ktimers/222:25:212
2567991995525,27cyclictest2618713-21/usr/sbin/munin00:05:222
2567991995444,6cyclictest2586144-21munin-plugin-st20:55:002
2567991995419,29cyclictest0-21swapper/221:40:212
2567991995413,10cyclictest0-21swapper/223:40:202
256799199534,14cyclictest2573288-21cron19:40:002
256799199534,14cyclictest2573288-21cron19:40:002
2567991995326,22cyclictest2571578-21grep19:25:292
2567991995322,24cyclictest0-21swapper/221:25:292
2567991995319,3cyclictest0-21swapper/200:00:292
2567991995318,8cyclictest311ktimers/220:05:182
2567991995318,29cyclictest0-21swapper/220:05:012
2567991995318,27cyclictest0-21swapper/222:40:212
2567991995318,27cyclictest0-21swapper/222:40:212
2567991995312,6cyclictest0-21swapper/223:25:302
2567991995218,4cyclictest2603860-21grep22:35:272
2567987995243,5cyclictest2568788-21munin-plugin-st19:15:001
2567991995142,5cyclictest2613442-21munin-plugin-st23:35:002
256799199511,3cyclictest0-21swapper/221:06:082
256799199501,2cyclictest0-21swapper/200:30:022
256799199501,2cyclictest0-21swapper/200:30:012
2567985995043,4cyclictest167350irq/118-8000000.ethernet-tx021:50:240
2567987994938,6cyclictest2595495-21grep21:45:301
2567985994942,4cyclictest167350irq/118-8000000.ethernet-tx022:25:180
2567991994817,4cyclictest2572412-21head19:30:272
256799199481,19cyclictest2574045-21unixbench_multi19:40:272
2567987994839,5cyclictest2576682-21sendmail20:00:001
2567987994836,8cyclictest0-21swapper/122:30:281
2567987994836,8cyclictest0-21swapper/100:15:001
2567987994732,9cyclictest0-21swapper/123:05:231
2567987994724,18cyclictest231ktimers/121:40:151
2567987994724,16cyclictest22-21rcuc/123:55:001
2567985994735,9cyclictest15-21rcuc/021:25:130
2567985994733,10cyclictest0-21swapper/000:40:000
256798599471,40cyclictest2609149-21latency_hist23:10:010
2567991994633,9cyclictest0-21swapper/223:15:012
2567991994619,9cyclictest2579276-21sshd20:11:192
2567991994615,7cyclictest2605098-21df22:45:182
2567985994638,5cyclictest167350irq/118-8000000.ethernet-tx022:15:270
2567991994520,4cyclictest0-21swapper/200:40:002
2567991994515,7cyclictest2607338-21cron23:00:012
256799199451,23cyclictest0-21swapper/221:10:242
2567987994538,4cyclictest2581841-21munin-plugin-st20:30:001
2567987994538,4cyclictest2581841-21munin-plugin-st20:30:001
2567985994538,4cyclictest167350irq/118-8000000.ethernet-tx020:45:250
2567985994523,18cyclictest131ktimers/020:20:190
2567991994435,5cyclictest2586987-21munin-plugin-st21:00:002
2567985994437,4cyclictest167350irq/118-8000000.ethernet-tx020:05:240
2567985994437,4cyclictest167350irq/118-8000000.ethernet-tx019:40:280
2567985994436,4cyclictest167350irq/118-8000000.ethernet-tx019:30:140
256798599441,39cyclictest0-21swapper/021:35:000
256798599441,38cyclictest2570130-21latency_hist19:20:010
2567991994314,8cyclictest2593821-21cron21:40:002
2567991994310,8cyclictest0-21swapper/223:35:282
2567987994336,5cyclictest2578458-21munin-plugin-st20:10:001
2567985994336,4cyclictest167350irq/118-8000000.ethernet-tx020:30:280
2567985994336,4cyclictest167350irq/118-8000000.ethernet-tx020:30:280
2567985994335,5cyclictest20850irq/208-8000000.ethernet19:25:290
2567985994335,4cyclictest0-21swapper/020:00:230
2567985994325,16cyclictest0-21swapper/023:30:210
2567991994229,9cyclictest0-21swapper/222:50:312
2567987994234,4cyclictest0-21swapper/120:20:301
2567987994232,5cyclictest0-21swapper/119:35:281
2567987994232,5cyclictest0-21swapper/119:35:281
2567987994230,8cyclictest231ktimers/123:00:111
2567987994225,12cyclictest231ktimers/123:10:131
256798599423,6cyclictest0-21swapper/022:40:270
256798599423,6cyclictest0-21swapper/022:40:270
2567985994236,3cyclictest20650irq/252-8000000.ethernet22:50:140
2567985994236,3cyclictest0-21swapper/021:05:270
2567985994235,5cyclictest0-21swapper/019:15:040
2567985994229,8cyclictest0-21swapper/022:30:280
2567985994229,8cyclictest0-21swapper/000:05:290
2567985994227,9cyclictest0-21swapper/000:10:300
2567985994224,15cyclictest2568237-21fschecks_count19:10:190
256798599421,4cyclictest2582068-21cat20:30:010
256798599421,4cyclictest2582068-21cat20:30:010
2567987994132,5cyclictest167450irq/126-8000000.ethernet-tx120:20:021
2567987994132,5cyclictest0-21swapper/121:30:291
2567987994128,9cyclictest0-21swapper/120:45:271
2567987994127,9cyclictest0-21swapper/121:35:301
2567987994127,9cyclictest0-21swapper/100:15:201
256798799411,8cyclictest0-21swapper/123:40:011
256798799411,34cyclictest0-21swapper/122:50:201
2567985994136,2cyclictest0-21swapper/023:15:000
2567985994129,7cyclictest0-21swapper/019:55:320
2567985994128,10cyclictest2580148-21sendmail20:20:000
2567985994128,10cyclictest2580148-21sendmail20:20:000
256798599412,4cyclictest2593429-21if_eth121:35:240
256798599411,12cyclictest0-21swapper/021:45:010
2567991994013,7cyclictest2622946-21apt-get00:30:112
2567987994029,6cyclictest2598793-21grep22:05:311
2567987994029,6cyclictest2598793-21grep22:05:311
2567987994028,8cyclictest2588591-21grep21:05:281
2567987994027,8cyclictest2583570-21grep20:35:301
2567985994035,2cyclictest0-21swapper/020:55:010
2567985994033,4cyclictest167350irq/118-8000000.ethernet-tx023:35:160
2567985994029,7cyclictest0-21swapper/022:35:270
2567985994028,8cyclictest0-21swapper/022:10:300
2567985994028,8cyclictest0-21swapper/020:45:000
2567985994028,8cyclictest0-21swapper/000:25:170
2567985994028,8cyclictest0-21swapper/000:25:170
2567985994028,7cyclictest0-21swapper/022:55:300
2567985994027,8cyclictest0-21swapper/023:25:300
256798599402,4cyclictest2587272-21diskstats21:00:200
2567985994023,15cyclictest0-21swapper/023:15:200
2567987993927,8cyclictest0-21swapper/122:25:001
2567987993925,10cyclictest231ktimers/100:35:141
2567987993919,10cyclictest22-21rcuc/120:55:011
256798799391,31cyclictest0-21swapper/123:45:211
256798799391,31cyclictest0-21swapper/123:45:201
2567985993934,3cyclictest0-21swapper/023:40:200
256798599392,8cyclictest0-21swapper/019:40:020
256798599392,8cyclictest0-21swapper/019:40:020
256798599391,36cyclictest0-21swapper/020:35:300
2567991993814,3cyclictest2598213-21latency_hist22:05:012
2567991993813,4cyclictest0-21swapper/223:10:012
2567987993828,5cyclictest0-21swapper/122:00:191
2567987993827,6cyclictest0-21swapper/122:25:301
2567987993824,8cyclictest0-21swapper/119:45:211
2567987993822,7cyclictest2612513-21grep23:25:301
256798799381,7cyclictest0-21swapper/119:25:011
256798599381,4cyclictest0-21swapper/019:45:200
2567985993813,23cyclictest15-21rcuc/022:45:300
256799199377,15cyclictest2584662-21/usr/sbin/munin20:45:182
2567987993728,5cyclictest0-21swapper/100:20:311
2567987993726,5cyclictest0-21swapper/119:15:041
2567987993725,8cyclictest231ktimers/120:10:121
256798799371,30cyclictest200-21pr/ttyS221:00:001
2567985993731,4cyclictest0-21swapper/021:15:170
2567985993727,7cyclictest0-21swapper/021:20:290
2567985993727,6cyclictest0-21swapper/022:00:280
2567985993724,9cyclictest0-21swapper/020:15:010
256798599371,34cyclictest0-21swapper/020:55:150
2567987993625,5cyclictest0-21swapper/120:00:201
2567987993624,6cyclictest0-21swapper/119:30:261
2567987993620,11cyclictest0-21swapper/121:15:211
2567985993630,3cyclictest0-21swapper/023:45:170
2567985993630,3cyclictest0-21swapper/023:45:170
2567985993626,7cyclictest0-21swapper/000:00:010
256798599362,5cyclictest2607704-21fschecks_time23:00:190
2567985993622,7cyclictest0-21swapper/021:50:010
256798599361,33cyclictest0-21swapper/000:04:490
2567987993527,5cyclictest0-21swapper/100:25:301
2567987993527,5cyclictest0-21swapper/100:25:291
2567987993526,5cyclictest2610716-21grep23:15:301
2567987993524,7cyclictest0-21swapper/119:40:181
2567987993514,17cyclictest231ktimers/122:10:011
2567985993528,5cyclictest0-21swapper/021:10:280
2567985993527,4cyclictest19750irq/27-20000000.i2c21:55:190
2567985993522,8cyclictest0-21swapper/022:05:310
2567985993522,8cyclictest0-21swapper/022:05:310
2567987993425,6cyclictest0-21swapper/100:00:201
2567987993422,8cyclictest0-21swapper/121:10:291
2567987993422,6cyclictest22-21rcuc/121:50:291
2567987993421,6cyclictest0-21swapper/119:50:211
2567985993428,4cyclictest20850irq/208-8000000.ethernet00:15:190
2567987993323,5cyclictest0-21swapper/121:00:311
2567987993322,7cyclictest2613404-21grep23:30:311
2567987993320,10cyclictest231ktimers/119:25:111
2567985993328,2cyclictest0-21swapper/023:50:170
256799199323,19cyclictest2587199-21/usr/sbin/munin21:00:202
2567991993225,4cyclictest2617650-21cron00:00:002
2567987993218,11cyclictest0-21swapper/100:10:001
2567987993217,10cyclictest231ktimers/123:20:121
2567987993215,2cyclictest0-21swapper/120:45:011
2567985993227,4cyclictest200-21pr/ttyS219:55:000
256798599321,6cyclictest0-21swapper/000:35:000
256799199318,9cyclictest2590672-21/usr/sbin/munin21:20:192
2567987993123,5cyclictest0-21swapper/123:55:211
2567987993122,7cyclictest1660-21snmpd20:20:011
2567987993121,6cyclictest0-21swapper/121:25:291
2567991992920,5cyclictest0-21swapper/223:45:192
2567991992920,5cyclictest0-21swapper/223:45:192
2567991992912,11cyclictest2598267-21/usr/sbin/munin22:05:212
2567991992912,11cyclictest2598267-21/usr/sbin/munin22:05:212
2567987992922,5cyclictest2604521-21phc2sys22:40:271
2567987992922,5cyclictest2604521-21phc2sys22:40:271
2567987992918,7cyclictest0-21swapper/100:35:001
256798599291,24cyclictest2568077-21sort19:10:010
2567987992821,5cyclictest0-21swapper/119:10:001
2567987992820,6cyclictest2603959-21sshd22:39:231
2567987992819,6cyclictest0-21swapper/123:45:011
2567987992818,6cyclictest0-21swapper/121:20:291
256798799281,2cyclictest0-21swapper/122:45:211
2567991992719,6cyclictest2601068-21sshd22:20:232
256799199263,15cyclictest2569861-21sed19:15:292
2567991992613,7cyclictest0-21swapper/200:15:492
2567987992622,2cyclictest0-21swapper/122:15:241
256798799242,17cyclictest24-21ksoftirqd/120:30:131
256798799242,17cyclictest24-21ksoftirqd/120:30:131
256799199223,11cyclictest2567993-21latency_hist19:10:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional