You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-12 - 08:38

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6s.osadl.org (updated Fri Jun 12, 2026 00:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2792725997840,7cyclictest14-21rcu_preempt19:50:011
2792724997237,8cyclictest2834715-21/usr/sbin/munin23:15:120
2792724997125,32cyclictest0-21swapper/021:20:010
279272799693,18cyclictest0-21swapper/221:40:132
279272799693,18cyclictest0-21swapper/221:40:132
2792725996913,24cyclictest22-21rcuc/120:45:191
2792724996831,3cyclictest2847720-21df00:30:160
279272499681,64cyclictest0-21swapper/020:30:110
2792727996633,29cyclictest2801315-21grep19:55:282
2792727996633,29cyclictest2801315-21grep19:55:282
2792727996633,28cyclictest2808921-21grep20:40:272
279272799663,15cyclictest0-21swapper/220:10:002
2792727996624,32cyclictest0-21swapper/223:55:282
2792727996624,32cyclictest0-21swapper/223:55:282
2792724996622,40cyclictest2827693-21latency_hist22:35:010
2792724996610,34cyclictest0-21swapper/021:45:020
2792724996610,34cyclictest0-21swapper/021:45:020
2792727996325,29cyclictest0-21swapper/222:25:352
2792724996338,13cyclictest0-21swapper/020:50:120
2792724996320,3cyclictest2820750-21cut21:50:280
2792727996239,19cyclictest2839682-21munin-plugin-st23:45:012
279272799621,55cyclictest1660-21snmpd00:15:252
2792724996233,27cyclictest2843351-21apt00:05:110
2792724996226,7cyclictest2802592-21fschecks_time20:05:200
2792724996223,34cyclictest2804805-21latency_hist20:20:010
2792727996116,35cyclictest0-21swapper/220:55:212
2792724996144,11cyclictest2810892-21apt-get20:55:150
2792724996143,12cyclictest0-21swapper/022:00:120
2792724996132,3cyclictest2841332-21users23:50:290
2792724996124,8cyclictest2816611-21grep21:25:290
2792724996031,4cyclictest2838442-21irqstats23:35:220
2792724996027,4cyclictest2837893-21apt-get23:35:010
2792724996018,39cyclictest2842277-21latency_hist00:00:010
2792724996018,39cyclictest2842277-21latency_hist00:00:010
279272799593,12cyclictest2849110-21head00:35:302
279272799593,11cyclictest2844858-21latency_hist00:15:012
2792727995926,25cyclictest0-21swapper/200:25:272
2792727995916,36cyclictest0-21swapper/220:00:192
2792727995913,6cyclictest2825142-21munin-plugin-st22:19:592
2792724995936,21cyclictest1660-21snmpd22:06:390
2792724995930,3cyclictest2829808-21/usr/sbin/munin22:45:230
2792724995915,38cyclictest0-21swapper/019:30:180
2792727995819,32cyclictest0-21swapper/222:55:302
2792727995816,33cyclictest0-21swapper/200:05:012
2792727995813,37cyclictest0-21swapper/223:00:262
279272799581,10cyclictest2813613-21cut21:10:202
279272499582,24cyclictest0-21swapper/000:30:010
2792724995821,3cyclictest2815523-21meminfo21:20:240
2792724995820,4cyclictest2809281-21diskstats20:45:180
279272799573,12cyclictest2835925-21phc2sys-jitter23:20:262
2792727995730,23cyclictest1283-21cron23:30:012
2792727995718,31cyclictest0-21swapper/222:50:302
2792727995712,34cyclictest0-21swapper/221:15:312
2792724995738,14cyclictest0-21swapper/020:00:140
2792724995729,3cyclictest2794922-21df19:20:150
2792724995728,3cyclictest2833000-21df23:05:160
2792724995713,41cyclictest0-21swapper/019:15:270
2792724995713,41cyclictest0-21swapper/019:15:270
2792724995712,23cyclictest0-21swapper/020:15:020
279272799563,8cyclictest2816657-21grep21:25:302
2792727995626,22cyclictest0-21swapper/222:40:322
2792727995623,25cyclictest2794592-21grep19:15:292
2792727995623,25cyclictest2794592-21grep19:15:292
2792727995619,31cyclictest2823650-21/usr/sbin/munin22:10:262
2792727995619,31cyclictest0-21swapper/220:30:292
2792727995619,28cyclictest0-21swapper/223:10:012
2792724995618,36cyclictest0-21swapper/022:10:170
279272799553,14cyclictest2815806-21head21:20:302
2792727995523,27cyclictest2809798-21grep20:45:282
279272799552,10cyclictest2804695-21tail20:15:302
2792727995516,30cyclictest0-21swapper/223:40:002
2792727995512,35cyclictest0-21swapper/222:50:022
2792724995540,10cyclictest2813590-21diskstats21:10:190
2792724995530,3cyclictest2828171-21meminfo22:35:260
2792724995513,7cyclictest0-21swapper/019:10:090
279272799543,8cyclictest2799624-21grep19:45:282
279272799543,10cyclictest2793419-21grep19:10:282
279272799542,8cyclictest2843947-21grep00:05:302
2792727995422,25cyclictest0-21swapper/223:15:292
2792725995446,5cyclictest2845764-21munin-plugin-st00:20:001
2792724995445,5cyclictest2818388-21munin-plugin-st21:40:000
2792724995441,10cyclictest2836754-21/usr/sbin/munin23:25:250
2792724995440,11cyclictest2806160-21/usr/sbin/munin20:25:240
2792724995423,3cyclictest2831971-21sed23:00:000
2792724995416,36cyclictest2817522-21sshd21:32:230
279272499541,43cyclictest0-21swapper/000:10:100
2792724995413,3cyclictest2830712-21meminfo22:50:250
279272799538,8cyclictest0-21swapper/221:00:282
2792727995329,20cyclictest0-21swapper/223:54:592
279272799532,8cyclictest2806372-21grep20:25:262
2792727995326,20cyclictest0-21swapper/220:35:292
2792727995326,20cyclictest0-21swapper/220:35:292
2792727995312,31cyclictest2810646-21grep20:50:272
2792725995347,4cyclictest231ktimers/119:10:011
2792724995344,5cyclictest2845189-21/usr/sbin/munin00:15:180
2792724995342,8cyclictest2797459-21/usr/sbin/munin19:35:180
2792724995342,7cyclictest2798320-21/usr/sbin/munin19:40:190
2792724995340,10cyclictest2801119-21/usr/sbin/munin19:55:250
2792724995340,10cyclictest2801119-21/usr/sbin/munin19:55:250
2792724995339,9cyclictest2796132-21/usr/sbin/munin19:25:260
2792724995338,9cyclictest0-21swapper/023:40:150
2792724995333,9cyclictest0-21swapper/022:15:110
2792724995319,31cyclictest2848608-21tune2fs00:35:210
2792724995317,3cyclictest2826496-21memory22:25:310
279272799524,7cyclictest2828468-21grep22:35:292
279272799523,42cyclictest2818263-21unixbench_multi21:35:292
279272799523,11cyclictest2819995-21grep21:45:262
2792727995224,24cyclictest2797390-21/usr/sbin/munin19:35:172
279272599521,23cyclictest0-21swapper/121:30:021
2792724995245,4cyclictest2812791-21/usr/sbin/munin21:05:200
2792724995243,7cyclictest2843048-21sshd00:03:250
2792724995241,8cyclictest2829356-21sshd22:43:240
2792724995240,8cyclictest2808373-21apt-get20:40:140
279272799514,6cyclictest2795207-21phc2sys19:20:252
279272799512,9cyclictest2840423-21grep23:45:282
279272799512,9cyclictest2825523-21sshd22:20:192
279272799512,9cyclictest2825523-21sshd22:20:192
2792727995120,25cyclictest2823382-21head22:05:302
2792727995118,23cyclictest0-21swapper/220:20:192
279272799511,43cyclictest0-21swapper/221:05:162
2792725995142,5cyclictest2809011-21munin-plugin-st20:45:001
2792724995142,5cyclictest2821412-21meminfo21:55:230
2792724995137,10cyclictest0-21swapper/023:00:140
2792724995129,16cyclictest2834447-21grep23:10:280
279272799502,11cyclictest2796548-21/usr/sbin/munin19:30:152
279272799502,10cyclictest2821684-21head21:55:292
2792727995012,29cyclictest0-21swapper/223:30:282
2792727995011,3cyclictest2817310-21ptp4l21:30:272
2792727995010,6cyclictest0-21swapper/221:50:282
2792725995035,10cyclictest0-21swapper/123:24:591
2792725995011,12cyclictest22-21rcuc/123:20:011
2792724995044,3cyclictest2799088-21apt-get19:45:120
2792724995035,12cyclictest2846277-21/usr/sbin/munin00:20:240
2792724995035,12cyclictest2819998-21/usr/sbin/munin21:45:270
2792724995035,12cyclictest0-21swapper/023:45:140
2792724995034,11cyclictest2805293-21/usr/sbin/munin20:20:240
279272799493,10cyclictest2822555-21head22:00:312
279272799492,8cyclictest2847657-21/usr/sbin/munin00:30:252
279272799492,10cyclictest2803470-21lsblk20:10:202
279272599494,9cyclictest0-21swapper/123:45:011
2792724994938,8cyclictest2800052-21/usr/sbin/munin19:50:180
2792724994915,30cyclictest2792796-21cut19:10:010
279272799483,10cyclictest2846511-21tail00:20:282
279272799482,10cyclictest2796059-21phc2sys-jitter19:25:252
2792724994836,7cyclictest0-21swapper/022:20:110
2792724994836,7cyclictest0-21swapper/022:20:110
2792724994835,10cyclictest0-21swapper/021:00:140
2792724994830,14cyclictest2807808-21/usr/sbin/munin20:35:230
2792724994830,14cyclictest2807808-21/usr/sbin/munin20:35:230
279272799475,5cyclictest0-21swapper/219:40:262
279272799473,9cyclictest2834481-21grep23:10:272
279272799472,6cyclictest2827177-21cut22:30:202
2792724994733,11cyclictest2835870-21/usr/sbin/munin23:20:240
2792725994637,5cyclictest2808161-21sendmail20:40:001
2792725994637,5cyclictest2808161-21sendmail20:40:001
2792725994636,6cyclictest2823389-21grep22:05:301
2792727994514,5cyclictest2800482-21grep19:50:282
2792725994432,8cyclictest0-21swapper/119:45:001
2792725994321,16cyclictest231ktimers/122:15:131
2792725994235,4cyclictest2848313-21munin-plugin-st00:35:011
2792725994231,8cyclictest2828520-21sendmail22:40:001
2792725994230,8cyclictest0-21swapper/100:30:001
279272599419,20cyclictest231ktimers/123:05:111
279272599413,4cyclictest0-21swapper/120:55:021
2792725994132,5cyclictest0-21swapper/123:50:291
2792725994132,5cyclictest0-21swapper/123:30:281
2792725994132,4cyclictest14-21rcu_preempt22:00:231
2792725994129,7cyclictest2837001-21unixbench_singl23:25:281
2792725994026,10cyclictest0-21swapper/120:20:261
2792725994022,14cyclictest231ktimers/120:10:111
2792725994022,13cyclictest231ktimers/120:15:121
2792725993820,11cyclictest231ktimers/100:35:131
2792727993710,23cyclictest0-21swapper/219:10:012
2792725993727,7cyclictest0-21swapper/121:10:291
2792725993711,12cyclictest8321systemd-network19:25:421
2792725993627,5cyclictest2832658-21grep23:00:301
2792725993626,4cyclictest0-21swapper/122:30:301
279272599361,28cyclictest0-21swapper/121:00:171
2792725993519,12cyclictest231ktimers/119:55:101
2792725993519,12cyclictest231ktimers/119:55:101
2792725993513,13cyclictest231ktimers/119:50:101
2792725993425,6cyclictest0-21swapper/119:15:281
2792725993425,6cyclictest0-21swapper/119:15:281
2792725993425,5cyclictest0-21swapper/122:50:001
2792725993422,7cyclictest0-21swapper/122:25:221
279272599341,27cyclictest0-21swapper/120:25:171
2792725993327,3cyclictest0-21swapper/120:05:201
279272599331,4cyclictest0-21swapper/121:25:001
2792725993313,5cyclictest832-21systemd-network23:38:401
2792725993224,5cyclictest0-21swapper/121:50:281
2792725993223,6cyclictest2821716-21grep21:55:281
2792725993223,4cyclictest0-21swapper/123:10:271
2792725993221,7cyclictest2795196-21phc2sys19:20:261
279272599321,3cyclictest0-21swapper/100:00:021
279272599321,3cyclictest0-21swapper/100:00:011
2792725993213,12cyclictest167450irq/126-8000000.ethernet-tx120:30:221
279272599313,23cyclictest24-21ksoftirqd/100:05:121
2792725993122,6cyclictest1660-21snmpd22:20:211
2792725993122,6cyclictest1660-21snmpd22:20:211
2792725993121,5cyclictest0-21swapper/123:45:271
2792725993113,4cyclictest167450irq/126-8000000.ethernet-tx120:55:211
279272599311,27cyclictest1660-21snmpd22:51:281
279272599311,24cyclictest0-21swapper/122:40:311
2792725993022,6cyclictest2816898-21/usr/sbin/munin21:30:261
2792725993022,5cyclictest2833574-21kworker/u8:2-ext4-rsv-conversion00:05:001
2792725993022,5cyclictest0-21swapper/121:40:171
2792725993022,5cyclictest0-21swapper/121:40:161
2792725993021,6cyclictest0-21swapper/121:40:011
2792725993019,6cyclictest0-21swapper/121:05:131
2792725993017,8cyclictest0-21swapper/120:00:301
2792725992922,4cyclictest0-21swapper/122:15:021
2792725992921,5cyclictest0-21swapper/123:00:001
279272599291,2cyclictest0-21swapper/119:30:211
279272599291,25cyclictest2797520-21fschecks_time19:35:201
2792725992820,4cyclictest0-21swapper/100:15:011
2792725992717,7cyclictest0-21swapper/121:15:301
2792725992710,10cyclictest2846030-21df00:20:161
2792725992617,5cyclictest231ktimers/121:45:241
2792725991813,3cyclictest2792685-21latency_hist19:10:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional