You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-19 - 08:40

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack2slot7s.osadl.org (updated Sun Jul 19, 2026 00:43:14)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
584924996135,5cyclictest633657-21aten_r2power_fr21:30:330
584926995645,7cyclictest421-21dbus-daemon22:20:012
584924995239,5cyclictest151ktimers/019:25:480
584924995226,18cyclictest12650irq/32-eth000:30:470
584925995031,15cyclictest741013-21mailstats00:25:511
584925995025,22cyclictest0-21swapper/122:45:451
584926994941,5cyclictest601434-21systemd-run20:05:012
584925994930,15cyclictest707850-21unixbench_multi23:30:561
584925994930,15cyclictest707850-21unixbench_multi23:30:561
584925994840,4cyclictest0-21swapper/121:45:441
584925994840,4cyclictest0-21swapper/121:25:451
584925994838,6cyclictest265-21systemd-journal22:01:451
58492599472,12cyclictest664750-21ssh22:20:471
58492599472,12cyclictest664750-21ssh22:20:471
584924994739,5cyclictest421-21dbus-daemon00:00:020
584924994739,5cyclictest421-21dbus-daemon00:00:020
584925994637,6cyclictest712316-21systemd-run23:40:011
584925994625,17cyclictest0-21swapper/121:50:501
584925994620,23cyclictest420-21avahi-daemon23:25:441
584925994536,6cyclictest621014-21latency_hist21:10:021
584925994529,12cyclictest0-21swapper/123:15:471
584925994520,19cyclictest3033423-21cups-browsed19:15:481
58492499454,35cyclictest661636-21ssh22:15:430
584926994435,6cyclictest439-21systemd-logind23:35:012
584926994435,6cyclictest439-21systemd-logind23:35:012
584926994434,6cyclictest716985-21unixbench_multi23:45:552
584925994428,13cyclictest727531-21cron00:05:001
584925994422,18cyclictest567-21gdbus21:23:321
58492599434,12cyclictest3033423-21cups-browsed19:30:511
584925994333,4cyclictest0-21swapper/122:25:431
584925994333,4cyclictest0-21swapper/122:25:431
584925994325,14cyclictest0-21swapper/123:23:311
58492599432,31cyclictest673896-21ssh22:35:461
584924994336,4cyclictest675921-21latency_hist22:40:020
584926994234,5cyclictest587900-21cron19:20:012
584925994225,14cyclictest634474-21sendmail_mailqu21:30:501
584925994224,15cyclictest0-21swapper/100:15:011
584925994217,3cyclictest0-21swapper/122:10:411
584925994216,22cyclictest0-21swapper/100:30:551
584924994232,7cyclictest608906-21munin-plugin-st20:30:000
584924994232,7cyclictest608906-21munin-plugin-st20:30:000
584924994232,6cyclictest1000-21mta-sts-daemon22:26:090
584924994232,6cyclictest1000-21mta-sts-daemon22:26:090
584924994228,11cyclictest718435-21sh23:50:020
584926994131,7cyclictest706193-21basename23:30:012
58492599415,14cyclictest617405-21ps20:55:491
584925994131,6cyclictest670732-21/usr/sbin/munin22:30:411
584925994118,20cyclictest1003-21mta-sts-daemon22:41:031
584925994116,3cyclictest0-21swapper/120:15:431
58492599411,14cyclictest713429-21sh23:40:461
584924994128,8cyclictest265-21systemd-journal00:20:460
584926994034,3cyclictest0-21swapper/222:00:452
584926994034,3cyclictest0-21swapper/221:45:442
584926994020,6cyclictest171rcu_preempt00:20:432
584925994032,3cyclictest0-21swapper/119:20:451
584925994032,3cyclictest0-21swapper/119:20:451
584925994031,4cyclictest0-21swapper/123:10:451
584925994031,3cyclictest0-21swapper/120:30:011
584925994031,3cyclictest0-21swapper/120:30:011
584925994026,11cyclictest0-21swapper/122:10:011
584925994025,12cyclictest735269-21grep00:15:551
58492599402,22cyclictest594869-21sshd19:40:451
584925994022,15cyclictest0-21swapper/100:20:341
584925994012,5cyclictest724464-40logrotate00:00:041
584924994032,5cyclictest729051-21timerandwakeup00:05:550
58492499402,32cyclictest655599-21sh22:05:410
584926993931,3cyclictest0-21swapper/222:20:452
584926993931,3cyclictest0-21swapper/222:20:452
584926993919,5cyclictest171rcu_preempt22:40:482
58492699390,17cyclictest36-21ksoftirqd/221:10:422
584925993932,4cyclictest748793-21cut00:40:011
58492599392,16cyclictest622289-21mailstats21:10:531
584925993920,16cyclictest0-21swapper/121:00:451
584925993918,18cyclictest686184-21proc_pri22:55:531
584925993918,17cyclictest0-21swapper/121:55:361
584925993913,3cyclictest0-21swapper/123:54:221
584925993913,2cyclictest0-21swapper/120:10:451
58492499393,29cyclictest701172-21ssh23:20:440
584924993930,6cyclictest648417-21cron21:55:010
584924993929,8cyclictest1-21systemd22:03:150
584924993910,23cyclictest670931-21diskmemload22:30:490
584926993832,2cyclictest0-21swapper/221:10:012
584926993815,2cyclictest171rcu_preempt00:00:442
584925993820,15cyclictest1001-21mta-sts-daemon23:56:311
584925993817,3cyclictest0-21swapper/122:15:441
584925993815,20cyclictest640170-21latency21:40:361
584925993813,4cyclictest0-21swapper/121:15:561
584924993831,4cyclictest587906-21idleruntime-cro19:20:010
584926993729,5cyclictest599924-21sendmail20:00:012
584926993729,5cyclictest1-21systemd20:55:012
584926993728,6cyclictest694-21cron00:10:012
584926993728,6cyclictest619397-21cron21:05:012
58492699372,27cyclictest631183-21ssh21:25:442
58492599373,4cyclictest171rcu_preempt21:35:481
584925993728,6cyclictest609797-21/usr/sbin/munin20:30:431
584925993728,6cyclictest0-21swapper/119:40:011
58492599372,14cyclictest585816-21ntpq19:10:441
584925993715,18cyclictest0-21swapper/123:08:011
584925993714,2cyclictest0-21swapper/122:52:451
584925993714,2cyclictest0-21swapper/100:05:471
584925993713,2cyclictest0-21swapper/123:05:011
584925993710,10cyclictest421-21dbus-daemon19:45:431
584924993729,5cyclictest718895-21aten_r2power_po23:50:350
584924993726,8cyclictest0-21swapper/021:20:010
584926993627,7cyclictest651467-21munin-run22:00:012
584926993627,4cyclictest0-21swapper/220:45:022
584926993625,3cyclictest171rcu_preempt22:30:442
584926993624,9cyclictest686252-21mailstats22:55:532
58492599363,9cyclictest590319-21ntpq19:25:461
58492599362,9cyclictest716546-21ssh23:45:491
584925993620,13cyclictest1002-21mta-sts-daemon20:43:321
584924993627,7cyclictest707165-21missed_timers23:30:400
584924993627,7cyclictest707165-21missed_timers23:30:400
584924993627,5cyclictest1002-21mta-sts-daemon00:39:260
58492499361,32cyclictest631201-21sshd21:25:440
58492699353,26cyclictest701257-21rm23:20:472
584926993525,6cyclictest724506-21cups-browsed00:11:312
58492699351,22cyclictest655589-21ntpq22:05:412
584924993529,4cyclictest599915-21sendmail20:00:010
584924993528,5cyclictest651488-21idleruntime-cro22:00:010
584924993526,6cyclictest421-21dbus-daemon22:49:450
584924993525,4cyclictest0-21swapper/021:35:420
584924993524,8cyclictest691002-21idleruntime-cro23:05:010
58492499352,25cyclictest713574-21grep23:40:530
58492499352,24cyclictest265-21systemd-journal20:35:450
584926993428,3cyclictest0-21swapper/222:40:022
584926993425,7cyclictest748789-21sendmail00:40:012
58492699341,7cyclictest734723-21ssh00:15:452
58492699341,26cyclictest628115-21ssh21:20:422
584924993427,4cyclictest616383-21cron20:55:010
584924993426,5cyclictest694413-21/usr/sbin/munin23:10:520
584924993424,7cyclictest677467-21sed22:40:540
584924993424,5cyclictest0-21swapper/021:40:250
584926993326,3cyclictest0-21swapper/221:20:012
584925993325,5cyclictest584946-21latency_hist19:10:021
58492499334,18cyclictest12650irq/32-eth000:10:510
584924993328,2cyclictest0-21swapper/023:25:550
584924993327,4cyclictest1003-21mta-sts-daemon22:13:290
584924993327,3cyclictest1000-21mta-sts-daemon00:28:350
584924993325,3cyclictest0-21swapper/022:50:420
584924993322,9cyclictest614910-21systemd-run20:50:010
584924993319,10cyclictest0-21swapper/021:10:560
584924993317,13cyclictest712407-21ls23:40:020
584924993317,12cyclictest265-21systemd-journal20:20:450
584924993313,14cyclictest698202-21ssh23:15:500
58492699326,3cyclictest171rcu_preempt20:20:482
584926993225,4cyclictest694734-21fschecks_time23:10:352
584926993225,4cyclictest691008-21munin-plugin-st23:05:012
584926993224,5cyclictest617876-21cron21:00:012
584926993224,4cyclictest588448-21fschecks_time19:20:352
584926993224,4cyclictest588448-21fschecks_time19:20:352
584926993223,5cyclictest611881-21cron20:40:012
584925993224,5cyclictest599896-21sendmail20:00:011
584924993225,4cyclictest727535-21munin-plugin-st00:05:000
584924993222,8cyclictest0-21swapper/021:45:580
584924993221,7cyclictest598415-21systemd-run19:55:010
584924993211,13cyclictest12650irq/32-eth023:05:440
584926993124,4cyclictest608756-21unixbench-2d20:25:532
584926993124,4cyclictest608756-21unixbench-2d20:25:532
584926993124,3cyclictest0-21swapper/223:05:462
584926993123,5cyclictest745744-21cron00:35:012
584926993123,5cyclictest724427-21cron00:00:012
584926993123,5cyclictest724427-21cron00:00:012
584926993123,5cyclictest586424-21systemd-run19:15:012
584926993122,6cyclictest341rcuc/221:30:432
584926993121,8cyclictest698800-21unixbench_singl23:16:012
584926993118,4cyclictest171rcu_preempt22:10:462
58492499313,21cyclictest3033423-21cups-browsed21:00:470
584924993125,4cyclictest687971-21tr23:00:010
584924993122,5cyclictest627425-21/usr/sbin/munin21:20:350
584924993117,7cyclictest265-21systemd-journal20:30:450
584926993025,2cyclictest0-21swapper/221:50:362
584926993024,3cyclictest0-21swapper/223:35:452
584926993023,3cyclictest0-21swapper/222:25:442
584926993023,3cyclictest0-21swapper/222:25:442
584926993023,3cyclictest0-21swapper/221:35:452
584924993023,4cyclictest1002-21mta-sts-daemon20:05:490
584924993022,4cyclictest0-21swapper/000:15:570
584924993019,4cyclictest0-21swapper/020:10:450
58492699297,12cyclictest1002-21mta-sts-daemon19:30:422
584926992922,4cyclictest713617-21sendmail_mailqu23:40:532
584926992922,4cyclictest601378-21kworker/u8:2-xprtiod20:15:402
584926992912,3cyclictest171rcu_preempt22:45:482
58492699291,21cyclictest596307-21sshd19:45:442
584926992910,3cyclictest171rcu_preempt00:25:452
58492599295,17cyclictest1000-21mta-sts-daemon20:00:421
584925992924,3cyclictest0-21swapper/120:25:011
584924992923,4cyclictest0-21swapper/021:10:020
584924992923,3cyclictest0-21swapper/019:45:430
58492499292,22cyclictest665-21snmpd19:10:480
584924992921,6cyclictest664034-21/usr/sbin/munin22:20:380
584924992921,6cyclictest664034-21/usr/sbin/munin22:20:380
584924992919,7cyclictest151ktimers/019:30:490
584924992914,10cyclictest12650irq/32-eth019:20:450
584924992914,10cyclictest12650irq/32-eth019:20:450
584926992822,3cyclictest0-21swapper/219:45:012
584926992822,2cyclictest0-21swapper/222:50:442
584926992821,4cyclictest0-21swapper/223:50:522
584926992820,5cyclictest1-21systemd20:50:022
584926992820,3cyclictest171rcu_preempt19:25:402
584926992813,4cyclictest171rcu_preempt21:40:412
584925992820,5cyclictest602776-21tail20:05:581
584925992820,5cyclictest598346-21unixbench_singl19:50:551
584925992819,4cyclictest271ktimers/120:35:421
584926992719,5cyclictest420-21avahi-daemon20:10:542
584926992712,2cyclictest171rcu_preempt19:35:452
584925992718,6cyclictest1001-21mta-sts-daemon20:50:441
584924992719,5cyclictest12750irq/33-eth020:40:430
584924992718,4cyclictest594444-21fschecks_time19:40:350
584924992715,8cyclictest12650irq/32-eth020:00:440
58492799261,4cyclictest0-21swapper/323:10:423
58492699268,3cyclictest171rcu_preempt20:30:422
584924992621,2cyclictest0-21swapper/019:35:520
584924992620,3cyclictest0-21swapper/021:00:010
584924992618,5cyclictest585024-21latency_hist19:10:020
58492699256,3cyclictest171rcu_preempt19:50:432
584924992517,6cyclictest4090246-21kworker/u8:10+xprtiod20:20:010
58492799242,6cyclictest0-21swapper/323:00:433
58492799241,4cyclictest0-21swapper/319:50:483
58492799241,3cyclictest0-21swapper/320:15:463
584926992417,5cyclictest1002-21mta-sts-daemon20:05:412
584925992417,4cyclictest613800-21aten_r2power_vo20:45:321
58492799231,5cyclictest0-21swapper/322:45:453
58492799231,4cyclictest0-21swapper/319:35:453
58492799231,3cyclictest0-21swapper/322:25:423
58492799231,3cyclictest0-21swapper/322:25:423
58492799231,3cyclictest0-21swapper/320:00:413
584926992315,3cyclictest171rcu_preempt19:10:022
58492799221,4cyclictest0-21swapper/322:40:413
58492799221,4cyclictest0-21swapper/322:15:493
58492799221,4cyclictest0-21swapper/321:10:423
58492799221,4cyclictest0-21swapper/320:25:403
58492799221,4cyclictest0-21swapper/320:25:403
58492799221,4cyclictest0-21swapper/320:10:453
58492799221,4cyclictest0-21swapper/300:20:483
58492799221,4cyclictest0-21swapper/300:05:453
58492799221,3cyclictest0-21swapper/322:30:423
58492799221,3cyclictest0-21swapper/322:20:473
58492799221,3cyclictest0-21swapper/322:20:473
58492799221,3cyclictest0-21swapper/322:10:453
58492799221,3cyclictest0-21swapper/321:45:453
58492799221,3cyclictest0-21swapper/320:45:453
58492799221,3cyclictest0-21swapper/319:40:443
58492799221,16cyclictest0-21swapper/321:50:453
58492799212,3cyclictest0-21swapper/323:20:523
58492799211,6cyclictest0-21swapper/320:00:023
58492799211,5cyclictest0-21swapper/321:30:453
58492799211,4cyclictest0-21swapper/322:55:443
58492799211,4cyclictest0-21swapper/321:35:413
58492799211,4cyclictest0-21swapper/320:40:423
58492799211,4cyclictest0-21swapper/319:45:493
58492799211,4cyclictest0-21swapper/319:20:463
58492799211,4cyclictest0-21swapper/319:20:463
58492799211,4cyclictest0-21swapper/300:15:433
58492799211,3cyclictest0-21swapper/323:35:433
58492799211,3cyclictest0-21swapper/322:50:443
58492799211,3cyclictest0-21swapper/321:55:423
58492799211,3cyclictest0-21swapper/321:05:423
58492799211,3cyclictest0-21swapper/321:00:463
58492799211,3cyclictest0-21swapper/320:50:473
58492799211,3cyclictest0-21swapper/320:30:463
58492799211,3cyclictest0-21swapper/320:05:493
58492799211,3cyclictest0-21swapper/319:30:463
58492799211,3cyclictest0-21swapper/319:10:413
58492799211,3cyclictest0-21swapper/300:35:423
58492799211,3cyclictest0-21swapper/300:30:483
58492799211,3cyclictest0-21swapper/300:10:493
58492799210,4cyclictest0-21swapper/323:50:443
58492799210,4cyclictest0-21swapper/319:15:483
58492799210,3cyclictest0-21swapper/323:49:593
58492799201,7cyclictest0-21swapper/323:30:393
58492799201,7cyclictest0-21swapper/323:30:393
58492799201,4cyclictest0-21swapper/323:40:443
58492799201,4cyclictest0-21swapper/323:05:423
58492799201,4cyclictest0-21swapper/321:15:443
58492799201,4cyclictest0-21swapper/320:55:423
58492799201,4cyclictest0-21swapper/300:00:083
58492799201,3cyclictest0-21swapper/323:55:453
58492799201,3cyclictest0-21swapper/323:55:453
58492799201,3cyclictest0-21swapper/323:25:393
58492799201,3cyclictest0-21swapper/323:15:513
58492799201,3cyclictest0-21swapper/322:35:223
58492799201,3cyclictest0-21swapper/322:05:413
58492799201,3cyclictest0-21swapper/322:00:443
58492799201,3cyclictest0-21swapper/321:40:343
58492799201,3cyclictest0-21swapper/321:25:353
58492799201,3cyclictest0-21swapper/321:20:433
58492799201,3cyclictest0-21swapper/319:25:353
58492799200,6cyclictest0-21swapper/320:35:423
58492799200,3cyclictest0-21swapper/320:20:423
58492799200,3cyclictest0-21swapper/300:25:463
58492799191,3cyclictest0-21swapper/319:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional