You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-10-20 - 16:15

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack2slot7s.osadl.org (updated Tue Oct 20, 2026 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2521443994936,7cyclictest2599128-21ssh10:15:241
2521442994942,5cyclictest2646060-21rm11:30:250
2521443994838,5cyclictest0-21swapper/111:35:301
2521442994843,3cyclictest151ktimers/011:10:340
2521442994843,3cyclictest151ktimers/011:10:340
2521442994836,8cyclictest12250irq/32-eth012:35:280
252144299483,36cyclictest2564741-21ssh09:20:270
2521444994737,4cyclictest2563772-21kworker/u8:5-rpciod10:29:242
252144499472,6cyclictest171rcu_preempt09:10:262
2521443994637,5cyclictest2676303-21sendmail12:20:011
2521442994640,3cyclictest0-21swapper/011:10:010
2521442994640,3cyclictest0-21swapper/011:10:010
2521442994637,4cyclictest0-21swapper/009:45:020
2521442994627,16cyclictest700-21cron10:20:010
2521444994433,8cyclictest2620125-21ssh10:50:022
2521443994431,10cyclictest2558056-21fschecks_count09:10:201
2521442994435,6cyclictest465-21systemd-logind08:55:020
2521444994334,5cyclictest0-21swapper/210:00:012
252144499433,26cyclictest2633683-21ssh11:10:362
252144499433,26cyclictest2633683-21ssh11:10:362
2521443994335,5cyclictest265-21systemd-journal11:10:011
2521443994335,5cyclictest265-21systemd-journal11:10:011
2521443994234,5cyclictest2566892-21cron09:25:011
2521443994212,20cyclictest420-21dbus-daemon10:10:281
252144299428,9cyclictest2556890-21ntpq09:05:320
252144299423,30cyclictest2611810-21ssh10:35:320
2521442994230,9cyclictest0-21swapper/009:25:190
252144499414,31cyclictest2624273-21ssh10:55:292
252144499414,31cyclictest2624273-21ssh10:55:292
2521444994134,4cyclictest866-21mta-sts-daemon10:39:222
2521444994133,5cyclictest2638789-21sendmail11:20:012
2521444994133,5cyclictest2632544-21ssh11:10:012
2521444994133,5cyclictest2632544-21ssh11:10:012
2521444994131,7cyclictest2548451-21sh08:40:022
2521443994133,5cyclictest2551446-21systemd-run08:50:021
2521443994131,6cyclictest0-21swapper/109:25:261
2521442994127,11cyclictest0-21swapper/010:40:210
2521444994031,6cyclictest2683136-21gltestperf12:30:222
2521444994030,6cyclictest2661648-21needreboot11:55:282
2521443994034,2cyclictest0-21swapper/107:45:021
252144399401,32cyclictest2621222-21ssh10:50:311
2521442994033,4cyclictest2604429-21munin-run10:25:010
2521442994029,8cyclictest420-21dbus-daemon12:23:300
2521442994020,15cyclictest12250irq/32-eth012:05:320
2521444993931,5cyclictest2536450-21systemd-run08:00:012
252144399396,19cyclictest2557424-21diskmemload10:42:331
2521444993830,5cyclictest0-21swapper/207:40:012
252144499381,32cyclictest2686725-21ssh12:35:322
2521443993831,4cyclictest2595067-21latency_hist10:10:021
2521443993830,5cyclictest2521957-21fschecks_time07:10:211
2521443993830,5cyclictest2521957-21fschecks_time07:10:211
252144299384,30cyclictest2642996-21ssh11:25:280
2521442993830,6cyclictest12250irq/32-eth011:55:320
2521442993830,5cyclictest2605029-21ssh10:25:190
2521442993828,7cyclictest420-21dbus-daemon12:13:140
2521442993817,17cyclictest2617996-21ssh10:45:270
2521444993730,4cyclictest0-21swapper/209:55:012
2521444993729,4cyclictest0-21swapper/211:35:342
2521444993728,6cyclictest265-21systemd-journal11:30:012
252144399374,25cyclictest2586853-21ssh09:55:321
252144399373,25cyclictest2608665-21ssh10:30:311
2521443993730,4cyclictest2534912-21cron07:55:011
2521443993729,5cyclictest0-21swapper/110:40:011
2521443993728,6cyclictest1753319-21cups-browsed09:50:181
2521443993727,7cyclictest419-21avahi-daemon08:40:381
252144299375,9cyclictest2591206-21ssh10:02:560
2521442993730,4cyclictest2624680-21timerwakeupswit10:55:390
2521442993730,4cyclictest2624680-21timerwakeupswit10:55:390
2521442993730,4cyclictest2544009-21latency_hist08:25:020
2521442993722,12cyclictest2595862-21sh10:10:210
2521442993711,9cyclictest2522292-21modprobe07:10:270
2521442993711,9cyclictest2522292-21modprobe07:10:270
2521444993629,4cyclictest2679885-21head12:25:192
2521444993628,5cyclictest2528931-21munin-plugin-st07:35:012
2521444993628,4cyclictest0-21swapper/210:00:292
2521444993627,6cyclictest2660728-21systemd11:55:022
2521444993627,5cyclictest2648341-21latency_hist11:35:022
2521443993630,3cyclictest0-21swapper/112:25:021
2521443993629,4cyclictest2642685-21kernelversion11:25:211
2521443993629,3cyclictest0-21swapper/110:55:331
2521443993629,3cyclictest0-21swapper/110:55:331
2521443993628,5cyclictest2590414-21grep10:00:381
2521443993628,5cyclictest0-21swapper/109:20:011
2521443993617,15cyclictest420-21dbus-daemon09:45:321
252144299368,11cyclictest14-21ksoftirqd/012:00:250
2521442993630,3cyclictest0-21swapper/008:50:020
2521442993629,5cyclictest2557424-21diskmemload10:50:170
2521444993529,3cyclictest0-21swapper/210:20:302
2521444993527,5cyclictest2552903-21sshd08:54:322
2521444993526,6cyclictest420-21dbus-daemon07:20:022
2521444993526,6cyclictest420-21dbus-daemon07:20:022
2521443993528,3cyclictest0-21swapper/112:30:271
2521443993527,5cyclictest2688710-21cron12:40:011
2521443993527,4cyclictest2626377-21kworker/u8:5-xprtiod12:05:321
2521443993526,6cyclictest2654471-21systemd-run11:45:011
2521442993525,7cyclictest2683420-21needreboot12:30:260
2521442993524,8cyclictest2545940-21fschecks_count08:30:160
2521442993524,7cyclictest12250irq/32-eth011:40:310
2521444993428,3cyclictest0-21swapper/210:10:012
2521444993428,3cyclictest0-21swapper/208:20:012
2521444993426,5cyclictest2679405-21munin-run12:25:012
2521444993426,5cyclictest265-21systemd-journal10:20:012
2521444993426,5cyclictest2561709-21sshd09:15:322
2521444993425,6cyclictest465-21systemd-logind08:35:022
2521443993428,2cyclictest0-21swapper/108:40:011
2521443993425,5cyclictest2662022-21mailstats11:55:401
252144299349,7cyclictest2530924-21df07:40:160
252144299349,5cyclictest14-21ksoftirqd/008:55:270
252144299343,9cyclictest2629319-21ssh11:04:340
252144299343,9cyclictest2629319-21ssh11:04:340
2521442993427,4cyclictest2657652-21latency_hist11:50:020
2521442993418,12cyclictest2586614-21ssh09:55:240
2521444993328,2cyclictest0-21swapper/209:35:312
2521444993326,4cyclictest2608175-21gltestperf10:30:182
2521444993325,3cyclictest0-21swapper/208:10:312
2521444993323,7cyclictest1753319-21cups-browsed12:05:352
252144399334,19cyclictest439-21mta-sts-daemon11:30:301
2521443993326,4cyclictest2635663-21ssh11:15:011
2521443993326,4cyclictest2635663-21ssh11:15:011
2521443993325,5cyclictest2526397-21cpuspeed07:25:191
252144299338,6cyclictest14-21ksoftirqd/007:20:250
2521442993327,3cyclictest0-21swapper/007:35:020
2521442993326,4cyclictest2609174-21unixbench_singl10:30:380
2521442993324,6cyclictest265-21systemd-journal07:40:010
252144299331,26cyclictest2580449-21diskmemload09:45:280
252144299331,21cyclictest2561711-21modprobe09:15:320
2521442993310,4cyclictest14-21ksoftirqd/008:10:290
2521444993225,3cyclictest0-21swapper/209:35:012
2521443993224,5cyclictest2570740-21if_wlan009:30:231
2521443993222,7cyclictest866-21mta-sts-daemon12:13:531
252144399322,24cyclictest2627404-21ssh11:00:291
252144399322,24cyclictest2627404-21ssh11:00:291
2521443993221,8cyclictest2552934-21true08:55:021
252144299326,7cyclictest2538896-21ntpq08:05:300
252144299326,7cyclictest2538896-21ntpq08:05:300
252144299325,8cyclictest2558565-21ntp_states09:10:320
2521442993226,3cyclictest0-21swapper/011:55:010
2521442993223,6cyclictest2521447-21systemd-run07:10:010
252144499314,21cyclictest658-21snmpd08:40:362
252144499314,16cyclictest2655443-21ssh11:45:252
252144499313,21cyclictest2564884-21ssh09:20:332
2521444993123,5cyclictest867-21mta-sts-daemon11:24:092
2521444993123,5cyclictest2629630-21latency_hist11:05:022
2521444993123,5cyclictest2629630-21latency_hist11:05:022
2521444993123,5cyclictest2557433-21ssh09:10:012
2521444993121,7cyclictest0-21swapper/210:15:022
2521444993120,8cyclictest2674669-21timerwakeupswit12:15:402
252144399318,17cyclictest420-21dbus-daemon09:35:371
2521443993125,3cyclictest0-21swapper/108:00:011
2521443993124,5cyclictest0-21swapper/109:45:021
252144399312,23cyclictest2636788-21ssh11:15:311
252144299319,5cyclictest14-21ksoftirqd/008:00:250
252144299319,5cyclictest14-21ksoftirqd/008:00:250
252144299314,17cyclictest0-21swapper/011:35:340
2521442993124,4cyclictest2576253-21cron09:40:020
2521442993123,5cyclictest465-21systemd-logind08:00:020
2521442993122,4cyclictest0-21swapper/007:15:310
2521442993122,4cyclictest0-21swapper/007:15:310
252144299312,23cyclictest2680411-21ssh12:25:320
2521442993119,8cyclictest2592961-21ntpq10:05:280
252144499305,17cyclictest439-21mta-sts-daemon07:10:262
252144499305,17cyclictest439-21mta-sts-daemon07:10:262
252144499302,25cyclictest2652550-21awk11:40:332
2521444993021,6cyclictest2580870-21cat09:45:382
2521444993018,9cyclictest2577347-21sshd09:40:312
252144399305,19cyclictest2680478-21ssh12:25:371
2521443993024,3cyclictest0-21swapper/111:50:201
2521443993024,3cyclictest0-21swapper/111:45:361
2521443993022,5cyclictest2604210-21ssh10:24:251
2521443993022,5cyclictest2538009-21latency_hist08:05:021
2521443993022,5cyclictest2538009-21latency_hist08:05:021
2521443993022,5cyclictest2076939-21kworker/u8:5+xprtiod07:35:011
252144399301,23cyclictest2664892-21sh12:00:281
252144399301,14cyclictest256377250kworker/u8:5+xprtiod10:29:251
252144299308,5cyclictest14-21ksoftirqd/007:45:350
252144299306,14cyclictest2554922-21df_inode09:00:180
252144299305,7cyclictest2542547-21cat08:20:020
2521442993024,3cyclictest2673812-21fschecks_time12:15:200
2521442993016,10cyclictest2549276-21ntpq08:40:280
252144299301,25cyclictest2636734-21ssh11:15:300
2521444992921,5cyclictest1753319-21cups-browsed08:55:162
2521444992911,3cyclictest171rcu_preempt10:40:272
2521443992923,3cyclictest0-21swapper/107:40:011
2521443992922,3cyclictest0-21swapper/110:45:351
2521443992922,3cyclictest0-21swapper/109:00:311
2521443992921,5cyclictest2545824-21aten_r2power_vo08:30:141
2521443992921,5cyclictest2540792-21sed08:10:381
252144299292,19cyclictest2583643-21ssh09:50:320
2521442992913,11cyclictest12350irq/33-eth009:30:330
2521444992823,2cyclictest0-21swapper/209:30:012
2521444992819,7cyclictest2543139-21latency08:20:222
2521444992819,3cyclictest171rcu_preempt07:30:022
252144499281,3cyclictest171rcu_preempt08:00:252
252144499281,3cyclictest171rcu_preempt08:00:252
252144399285,16cyclictest439-21mta-sts-daemon08:55:281
2521443992823,2cyclictest0-21swapper/108:20:011
2521443992822,3cyclictest0-21swapper/109:10:011
2521443992818,7cyclictest0-21swapper/111:20:291
2521442992819,4cyclictest2547768-21ntpq08:35:270
2521442992817,6cyclictest2526911-21ntpq07:25:340
2521444992720,4cyclictest865-21mta-sts-daemon12:14:132
2521444992717,8cyclictest2620434-21telnet10:50:152
252144399272,20cyclictest658-21snmpd07:45:341
2521442992721,3cyclictest0-21swapper/011:20:290
2521442992715,8cyclictest2534388-21ntpq07:50:350
252144499264,12cyclictest2664856-21ssh12:00:272
2521444992620,3cyclictest0-21swapper/209:00:392
2521444992618,5cyclictest2539372-21head08:05:372
2521444992618,5cyclictest2539372-21head08:05:372
2521444992616,5cyclictest851-21mta-sts-daemon08:30:022
2521443992620,3cyclictest0-21swapper/108:25:011
2521442992613,10cyclictest2544786-21ntpq08:25:240
2521444992518,4cyclictest2532444-21fschecks_count07:45:242
2521444992517,5cyclictest2550228-21aten_r2power_en08:45:162
2521444992517,5cyclictest2533823-21aten_r2power_vo07:50:202
2521444992515,7cyclictest2531868-21head07:40:362
2521443992516,6cyclictest1753319-21cups-browsed08:27:111
2521443992513,9cyclictest2523812-21sshd07:15:311
2521443992513,9cyclictest2523812-21sshd07:15:311
2521444992418,3cyclictest0-21swapper/207:20:252
2521443992315,5cyclictest2539277-21unixbench-2d08:05:361
2521443992315,5cyclictest2539277-21unixbench-2d08:05:361
252144399212,14cyclictest2525467-21ps07:20:321
2521443992014,3cyclictest0-21swapper/107:10:011
252144599191,10cyclictest0-21swapper/311:25:283
2521444991915,2cyclictest0-21swapper/207:10:012
252144599182,7cyclictest0-21swapper/310:50:323
252144599172,9cyclictest0-21swapper/309:40:303
252144599172,8cyclictest0-21swapper/312:15:323
252144599172,5cyclictest0-21swapper/310:35:293
252144599171,9cyclictest0-21swapper/311:15:293
252144599171,7cyclictest0-21swapper/312:00:273
252144599171,7cyclictest0-21swapper/310:30:263
252144599163,6cyclictest0-21swapper/311:50:283
252144599162,8cyclictest0-21swapper/312:35:263
252144599162,8cyclictest0-21swapper/311:45:253
252144599162,8cyclictest0-21swapper/309:50:403
252144599162,8cyclictest0-21swapper/309:15:283
252144599162,8cyclictest0-21swapper/309:10:283
252144599162,10cyclictest0-21swapper/310:55:313
252144599162,10cyclictest0-21swapper/310:55:313
252144599162,10cyclictest0-21swapper/310:29:263
252144599161,9cyclictest0-21swapper/312:31:313
252144599153,6cyclictest0-21swapper/311:55:303
252144599152,6cyclictest0-21swapper/312:25:313
252144599152,6cyclictest0-21swapper/308:35:273
252144599151,7cyclictest0-21swapper/311:40:313
252144599151,7cyclictest0-21swapper/311:30:273
252144599151,7cyclictest0-21swapper/310:15:253
252144599143,6cyclictest0-21swapper/309:45:373
252144599142,7cyclictest0-21swapper/310:10:333
252144599142,7cyclictest0-21swapper/309:55:283
252144599142,7cyclictest0-21swapper/309:30:303
252144599142,6cyclictest0-21swapper/311:05:313
252144599142,6cyclictest0-21swapper/311:05:313
252144599142,6cyclictest0-21swapper/307:40:243
252144599142,6cyclictest0-21swapper/307:15:313
252144599142,6cyclictest0-21swapper/307:15:313
252144599141,8cyclictest0-21swapper/312:20:293
252144599141,8cyclictest0-21swapper/311:35:333
252144599141,8cyclictest0-21swapper/310:05:263
252144599141,8cyclictest0-21swapper/310:03:313
252144599141,7cyclictest0-21swapper/310:45:163
252144599141,6cyclictest0-21swapper/308:50:273
252144599141,6cyclictest0-21swapper/308:05:253
252144599141,6cyclictest0-21swapper/308:05:253
252144599141,6cyclictest0-21swapper/307:50:303
252144599135,6cyclictest0-21swapper/309:20:313
252144599133,7cyclictest0-21swapper/307:25:303
252144599133,6cyclictest0-21swapper/312:05:323
252144599133,6cyclictest0-21swapper/309:25:323
252144599133,5cyclictest0-21swapper/307:30:313
252144599133,4cyclictest0-21swapper/308:10:293
252144599132,6cyclictest0-21swapper/308:20:313
252144599131,7cyclictest0-21swapper/312:10:233
252144599131,7cyclictest0-21swapper/311:25:023
252144599131,7cyclictest0-21swapper/311:00:183
252144599131,7cyclictest0-21swapper/311:00:183
252144599131,7cyclictest0-21swapper/310:40:203
252144599131,7cyclictest0-21swapper/309:35:293
252144599131,6cyclictest0-21swapper/308:25:293
252144599131,6cyclictest0-21swapper/307:10:273
252144599131,6cyclictest0-21swapper/307:10:273
252144599130,7cyclictest0-21swapper/308:00:273
252144599130,7cyclictest0-21swapper/308:00:273
252144599122,7cyclictest0-21swapper/310:20:203
252144599122,6cyclictest0-21swapper/311:10:403
252144599122,6cyclictest0-21swapper/311:10:403
252144599122,6cyclictest0-21swapper/309:00:023
252144599121,6cyclictest0-21swapper/307:55:263
252144599121,6cyclictest0-21swapper/307:20:253
252144599121,5cyclictest0-21swapper/308:30:223
252144599112,6cyclictest0-21swapper/309:10:013
252144599112,5cyclictest0-21swapper/308:15:273
252144599111,6cyclictest0-21swapper/307:35:273
252144599111,5cyclictest0-21swapper/308:45:213
252144599104,4cyclictest0-21swapper/309:00:283
252144599101,6cyclictest0-21swapper/308:40:323
25214459991,4cyclictest0-21swapper/307:45:203
25214459971,3cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional