You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-25 - 11:59

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Sat Jul 25, 2026 00:43:12)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
347511499552,32cyclictest3527268-21ntpq21:35:450
3475115995324,6cyclictest3628284-21systemd-run00:25:011
3475115995243,5cyclictest1000-21mta-sts-daemon22:05:551
3475115995224,25cyclictest3590248-21needreboot23:20:431
3475115995030,17cyclictest0-21swapper/123:45:511
3475115995027,3cyclictest0-21swapper/121:50:551
3475114995036,11cyclictest3500612-21systemd-run20:35:010
3475115994940,6cyclictest421-21dbus-daemon22:20:021
3475115994926,3cyclictest0-21swapper/123:40:011
3475114994935,11cyclictest3481125-21systemd-run19:30:010
3475115994823,6cyclictest420-21avahi-daemon22:38:531
3475115994823,6cyclictest420-21avahi-daemon22:38:531
3475116994736,7cyclictest0-21swapper/221:10:002
3475116994736,7cyclictest0-21swapper/221:10:002
3475115994727,16cyclictest1742083-21cups-browsed21:37:351
3475114994731,8cyclictest3599419-21ssh23:35:480
3475116994628,13cyclictest351ktimers/221:50:462
3475115994626,4cyclictest1003-21mta-sts-daemon23:02:371
3475115994623,3cyclictest0-21swapper/121:15:351
3475115994622,3cyclictest0-21swapper/100:05:591
347511499461,40cyclictest3479084-21ntpq19:20:480
347511599451,26cyclictest3539428-21ssh21:55:511
3475116994431,7cyclictest0-21swapper/200:25:502
347511699441,23cyclictest36-21ksoftirqd/220:55:552
347511699441,23cyclictest36-21ksoftirqd/220:55:552
3475115994436,5cyclictest3625248-21idleruntime-cro00:20:011
3475115994436,5cyclictest3622362-21latency_hist00:15:021
3475115994436,5cyclictest3584461-21sshd23:10:521
3475115994421,6cyclictest443-21gpm23:54:411
347511499443,35cyclictest3489542-21ntpq19:55:500
3475114994422,19cyclictest3577732-21aten_r2power_fr23:00:350
347511499441,4cyclictest3511090-21diskmemload23:20:520
347511499441,40cyclictest3502997-21ntpq20:40:450
3475116994336,4cyclictest3610935-21fschecks_count23:55:402
3475116994327,12cyclictest0-21swapper/221:45:522
3475114994329,11cyclictest3569835-21unixbench-2d22:45:580
347511499432,36cyclictest3584419-21ntpq23:10:500
347511499431,12cyclictest3483502-21ntpq19:35:470
347511499431,12cyclictest3483502-21ntpq19:35:470
347511499431,11cyclictest3533433-21ntp_states21:45:510
347511499431,11cyclictest3492462-21ntpq20:05:430
347511499431,11cyclictest3492462-21ntpq20:05:430
3475116994233,6cyclictest3553218-21cat22:20:012
347511699423,31cyclictest421-21dbus-daemon20:40:432
3475115994236,3cyclictest0-21swapper/119:25:011
3475115994233,6cyclictest3629967-21unixbench_singl00:25:591
347511499427,32cyclictest3476016-21ntpq19:10:520
347511499422,37cyclictest3587461-21kworker/u8:4+xprtiod00:00:010
347511499422,34cyclictest3477480-21ntpq19:15:460
3475114994216,23cyclictest3587901-21sed23:15:580
347511499421,37cyclictest3506010-21ntpq20:50:480
347511499421,37cyclictest3506010-21ntpq20:50:480
347511499421,11cyclictest3593283-21ntpq23:25:440
347511499421,11cyclictest3493971-21ntpq20:10:450
3475116994133,6cyclictest3475113-21cyclictest23:01:572
3475116994133,5cyclictest3515800-21unixbench_multi21:15:572
3475116994130,7cyclictest1742083-21cups-browsed23:20:452
3475115994135,3cyclictest0-21swapper/122:00:481
3475115994133,5cyclictest3475119-21systemd-run19:10:011
3475115994125,3cyclictest0-21swapper/122:33:231
3475115994125,3cyclictest0-21swapper/122:33:231
347511499413,32cyclictest3551365-21ssh22:15:480
347511499412,3cyclictest3542386-21ntpq22:00:480
347511499412,34cyclictest3518355-21ntpq21:20:560
347511499412,34cyclictest3501565-21ntpq20:35:510
347511499412,34cyclictest3490952-21ntpq20:00:430
347511499411,5cyclictest3496969-21ntpq20:20:430
347511499411,3cyclictest3563290-21ntpq22:35:430
347511499411,3cyclictest3563290-21ntpq22:35:430
347511499411,11cyclictest3512227-21ntpq21:10:480
347511499411,11cyclictest3512227-21ntpq21:10:480
3475116994032,5cyclictest3622238-21cron00:15:012
3475115994032,5cyclictest3587828-21unixbench-2d23:15:571
3475115994031,6cyclictest265-21systemd-journal22:30:011
3475115994031,5cyclictest1742083-21cups-browsed23:05:411
3475114994033,4cyclictest1002-21mta-sts-daemon00:10:010
347511499403,31cyclictest3635457-21ntpq00:35:510
347511499403,30cyclictest3507544-21ntpq20:55:530
347511499403,30cyclictest3507544-21ntpq20:55:530
347511499402,4cyclictest3632311-21ntpq00:30:430
347511499402,31cyclictest3510481-21ntpq21:05:480
347511499402,31cyclictest3510481-21ntpq21:05:480
347511499402,13cyclictest3536264-21ntpq21:50:440
347511499401,6cyclictest3581431-21ntpq23:05:500
347511499401,5cyclictest3626505-21ntpq00:20:530
347511499401,5cyclictest3509057-21ntpq21:00:550
347511499401,5cyclictest3509057-21ntpq21:00:550
347511499401,32cyclictest3575342-21ntpq22:55:480
3475114994012,23cyclictest0-21swapper/020:45:390
347511499401,11cyclictest3557308-21ntpq22:25:450
347511499400,11cyclictest3572268-21ntpq22:50:440
3475116993931,5cyclictest421-21dbus-daemon20:40:012
3475116993928,8cyclictest420-21avahi-daemon22:55:472
347511499391,9cyclictest3487981-21ntpq19:50:480
347511499391,7cyclictest3547908-21/usr/sbin/munin22:10:400
347511499391,6cyclictest3614472-21sshd00:00:510
347511499391,5cyclictest3560269-21ntpq22:30:440
347511499391,5cyclictest3560269-21ntpq22:30:440
347511499391,5cyclictest3495504-21ntpq20:15:480
347511499391,4cyclictest3566432-21ntpq22:40:520
347511499391,3cyclictest3486511-21ntpq19:45:470
347511499391,3cyclictest3484978-21ntpq19:40:440
347511499391,35cyclictest3524377-21ntpq21:30:510
3475116993831,3cyclictest0-21swapper/222:00:012
3475116993830,5cyclictest3584387-21ssh23:10:492
3475116993830,5cyclictest3550201-21cron22:15:012
3475116993829,6cyclictest3547209-21sh22:10:012
3475115993830,4cyclictest0-21swapper/119:10:511
3475115993828,4cyclictest0-21swapper/121:45:451
3475115993825,10cyclictest3508990-21sshd21:00:521
3475115993825,10cyclictest3508990-21sshd21:00:521
347511499386,29cyclictest3605830-21unixbench-2d23:45:570
347511499381,4cyclictest3623291-21ntpq00:15:430
347511499381,4cyclictest3596290-21ntpq23:30:450
347511499381,4cyclictest3539434-21ntpq21:55:510
347511499381,3cyclictest3482055-21ntpq19:30:550
347511499381,3cyclictest3482055-21ntpq19:30:550
347511499381,12cyclictest3555349-21ssh22:22:120
347511499381,11cyclictest3498473-21ntpq20:25:430
347511499380,9cyclictest3620488-21ntpq00:10:530
3475116993729,4cyclictest0-21swapper/223:40:412
3475116993713,4cyclictest171rcu_preempt21:20:562
347511599376,25cyclictest3518440-21ssh21:21:021
3475115993731,3cyclictest0-21swapper/122:55:471
3475115993731,2cyclictest0-21swapper/122:21:291
3475115993728,5cyclictest0-21swapper/121:30:521
3475115993727,7cyclictest3632629-21mailstats00:30:541
3475115993725,8cyclictest3571208-21cron22:50:001
347511499373,26cyclictest3515306-21ssh21:15:480
347511499371,4cyclictest3608422-21ntpq23:50:490
347511499371,4cyclictest3545443-21ntpq22:05:530
347511499371,10cyclictest3521257-21ntpq21:25:470
347511699363,26cyclictest3599323-21ssh23:35:442
3475116993629,3cyclictest0-21swapper/219:40:012
3475116993629,3cyclictest0-21swapper/219:40:012
3475116993628,4cyclictest0-21swapper/223:15:522
3475116993626,7cyclictest351ktimers/200:20:492
3475116993626,6cyclictest1742083-21cups-browsed23:29:002
3475115993630,3cyclictest0-21swapper/100:00:361
3475115993627,6cyclictest420-21avahi-daemon19:40:001
3475115993627,6cyclictest420-21avahi-daemon19:40:001
3475115993626,6cyclictest420-21avahi-daemon22:51:231
3475115993626,6cyclictest3547686-21aten2.4-expect22:10:361
3475114993627,6cyclictest420-21avahi-daemon23:40:250
347511499361,4cyclictest3629488-21ntpq00:25:520
347511499361,4cyclictest3530325-21ntpq21:40:460
3475116993530,2cyclictest0-21swapper/221:40:012
3475116993527,4cyclictest0-21swapper/222:00:482
3475115993528,3cyclictest0-21swapper/121:10:591
3475115993528,3cyclictest0-21swapper/121:10:591
3475115993527,5cyclictest1000-21mta-sts-daemon23:31:551
3475115993526,6cyclictest3637232-21ssh00:40:011
3475115993526,5cyclictest1002-21mta-sts-daemon21:44:221
3475115993524,8cyclictest3478108-21idleruntime-cro19:20:011
3475116993427,4cyclictest3566074-21kernelversion22:40:422
3475116993427,4cyclictest3488582-21cron19:55:012
3475116993427,4cyclictest0-21swapper/219:25:012
3475116993422,9cyclictest3475906-21needreboot19:10:472
347511699342,27cyclictest3563384-21ssh22:35:472
347511699342,27cyclictest3563384-21ssh22:35:472
347511699341,27cyclictest3608434-21ssh23:50:502
3475115993427,4cyclictest3500587-21idleruntime-cro20:35:011
3475115993426,5cyclictest3507376-21needreboot20:55:461
3475115993426,5cyclictest3507376-21needreboot20:55:461
347511499341,4cyclictest3475126-21munin-run19:10:020
3475116993326,4cyclictest0-21swapper/220:15:002
3475116993325,5cyclictest3556217-21cron22:25:012
3475116993325,4cyclictest0-21swapper/200:40:012
3475116993324,6cyclictest265-21systemd-journal21:15:002
3475116993324,6cyclictest265-21systemd-journal21:15:002
3475116993324,6cyclictest265-21systemd-journal21:05:002
3475116993324,6cyclictest265-21systemd-journal21:05:002
3475116993322,8cyclictest3623232-21missed_timers00:15:412
3475116993321,9cyclictest3485620-21sh19:45:012
3475116993316,4cyclictest171rcu_preempt19:45:442
3475115993327,3cyclictest0-21swapper/122:40:361
3475115993325,5cyclictest3491612-21systemd-run20:05:021
3475115993323,6cyclictest439-21systemd-logind20:25:021
3475116993224,5cyclictest3569946-21grep22:45:592
3475116993221,8cyclictest3631647-21sh00:30:342
3475115993227,2cyclictest0-21swapper/121:30:021
3475115993225,4cyclictest3611252-21needreboot23:55:451
3475115993225,4cyclictest3593247-21needreboot23:25:431
3475115993223,6cyclictest265-21systemd-journal20:30:011
3475115993223,5cyclictest3489431-21ntpq19:55:451
3475116993124,4cyclictest0-21swapper/219:55:482
3475116993122,6cyclictest3480133-21fschecks_time19:25:402
3475116993121,7cyclictest1742083-21cups-browsed20:30:022
3475116993118,3cyclictest3525342-21ssh21:32:202
3475115993122,6cyclictest3505757-21latency20:50:411
3475115993122,6cyclictest3505757-21latency20:50:411
347511699305,19cyclictest3617388-21sshd00:05:522
347511699304,18cyclictest3614347-21ssh00:00:462
3475116993022,5cyclictest3562303-21latency_hist22:35:022
3475116993022,5cyclictest3562303-21latency_hist22:35:022
347511699301,20cyclictest3521253-21ssh21:25:472
3475115993022,5cyclictest3485171-21sendmail_mailqu19:40:531
3475115993022,5cyclictest0-21swapper/120:15:521
3475115993021,7cyclictest3488367-21timerwakeupswit19:50:581
347511699293,5cyclictest171rcu_preempt20:30:522
3475116992923,3cyclictest0-21swapper/220:20:002
3475116992922,4cyclictest3552288-21kworker/u8:5-xprtiod22:25:342
3475116992922,4cyclictest3466961-21kworker/u8:8+xprtiod19:10:012
3475116992922,4cyclictest0-21swapper/219:30:422
3475116992922,4cyclictest0-21swapper/219:30:422
3475116992921,5cyclictest3478089-21cron19:20:012
3475116992920,7cyclictest3504254-21kernelversion20:45:402
3475115992922,4cyclictest3601570-21ssh23:40:251
347511699282,19cyclictest3530286-21ssh21:40:442
3475116992821,3cyclictest0-21swapper/223:30:512
3475115992822,3cyclictest0-21swapper/119:50:021
3475115992820,5cyclictest3481037-21unixbench_singl19:25:581
3475116992720,4cyclictest3605933-21unixbench_singl23:45:572
3475116992720,3cyclictest0-21swapper/223:05:392
3475116992719,4cyclictest0-21swapper/222:50:382
3475116992717,8cyclictest3492412-21needreboot20:05:422
3475116992717,8cyclictest3492412-21needreboot20:05:422
3475116992619,4cyclictest3497548-21unixbench_singl20:20:562
3475115992621,2cyclictest0-21swapper/120:05:551
3475115992621,2cyclictest0-21swapper/120:05:551
3475115992612,10cyclictest421-21dbus-daemon20:35:451
3475116992519,3cyclictest0-21swapper/220:00:392
3475115992517,4cyclictest0-21swapper/120:40:431
347511599244,14cyclictest1840681-21munin-node20:45:451
3475116992315,5cyclictest1742083-21cups-browsed20:54:282
3475116992315,5cyclictest1742083-21cups-browsed20:54:282
3475115992317,3cyclictest3488608-21kworker/u8:11-xprtiod20:10:381
3475115992214,5cyclictest1742083-21cups-browsed21:05:401
3475115992214,5cyclictest1742083-21cups-browsed21:05:401
347511799212,9cyclictest0-21swapper/300:35:473
347511799212,10cyclictest0-21swapper/300:25:513
347511599218,10cyclictest261rcuc/119:30:571
347511599218,10cyclictest261rcuc/119:30:571
347511799205,10cyclictest0-21swapper/321:00:523
347511799205,10cyclictest0-21swapper/321:00:523
347511799192,9cyclictest0-21swapper/323:45:493
347511799183,8cyclictest0-21swapper/323:50:463
347511799182,9cyclictest0-21swapper/323:25:443
347511799182,9cyclictest0-21swapper/300:10:523
347511799182,10cyclictest0-21swapper/321:30:473
347511799181,10cyclictest0-21swapper/323:10:523
347511799172,9cyclictest0-21swapper/322:10:013
347511799172,8cyclictest0-21swapper/322:55:463
347511799172,8cyclictest0-21swapper/321:40:493
347511799172,8cyclictest0-21swapper/300:00:023
347511799172,7cyclictest0-21swapper/323:20:403
347511799172,7cyclictest0-21swapper/300:00:373
347511799171,9cyclictest0-21swapper/323:05:453
347511799171,9cyclictest0-21swapper/322:30:463
347511799171,9cyclictest0-21swapper/322:30:463
347511799171,9cyclictest0-21swapper/321:55:473
347511799171,10cyclictest0-21swapper/323:40:513
347511799171,10cyclictest0-21swapper/321:20:543
347511799164,7cyclictest0-21swapper/321:50:523
347511799163,8cyclictest0-21swapper/323:15:413
347511799162,7cyclictest0-21swapper/319:35:453
347511799162,7cyclictest0-21swapper/319:35:453
347511799161,9cyclictest0-21swapper/322:40:463
347511799161,9cyclictest0-21swapper/322:15:463
347511799161,9cyclictest0-21swapper/321:15:523
347511799161,9cyclictest0-21swapper/321:10:493
347511799161,9cyclictest0-21swapper/321:10:493
347511799161,9cyclictest0-21swapper/300:15:463
347511799161,6cyclictest0-21swapper/319:15:453
347511799161,10cyclictest0-21swapper/322:00:513
347511799153,7cyclictest0-21swapper/322:25:483
347511799152,8cyclictest0-21swapper/322:50:503
347511799152,8cyclictest0-21swapper/321:25:513
347511799152,8cyclictest0-21swapper/319:20:443
347511799152,8cyclictest0-21swapper/300:20:523
347511799152,7cyclictest0-21swapper/321:35:443
347511799151,9cyclictest0-21swapper/323:35:433
347511799151,9cyclictest0-21swapper/323:30:543
347511799151,9cyclictest0-21swapper/322:10:473
347511799151,9cyclictest0-21swapper/300:30:443
347511799151,8cyclictest0-21swapper/322:45:443
347511799151,8cyclictest0-21swapper/322:35:433
347511799151,8cyclictest0-21swapper/322:35:433
347511799151,8cyclictest0-21swapper/322:20:463
347511799151,7cyclictest0-21swapper/320:00:473
347511799142,7cyclictest0-21swapper/300:05:503
347511799142,5cyclictest0-21swapper/320:20:453
347511799141,8cyclictest0-21swapper/319:25:513
347511799141,7cyclictest0-21swapper/320:10:443
347511799141,6cyclictest0-21swapper/320:40:433
347511799141,6cyclictest0-21swapper/320:15:463
347511799132,6cyclictest0-21swapper/320:55:523
347511799132,6cyclictest0-21swapper/320:55:523
347511799132,6cyclictest0-21swapper/320:35:453
347511799131,7cyclictest0-21swapper/323:00:493
347511799131,7cyclictest0-21swapper/321:45:343
347511799131,7cyclictest0-21swapper/320:45:463
347511799131,7cyclictest0-21swapper/320:05:473
347511799131,7cyclictest0-21swapper/320:05:473
347511799131,6cyclictest0-21swapper/319:55:453
347511799131,6cyclictest0-21swapper/319:45:473
347511799122,6cyclictest0-21swapper/319:45:013
347511799122,6cyclictest0-21swapper/319:30:483
347511799122,6cyclictest0-21swapper/319:30:483
347511799121,6cyclictest0-21swapper/320:50:453
347511799121,6cyclictest0-21swapper/320:50:453
347511799113,6cyclictest0-21swapper/319:50:483
347511799112,5cyclictest0-21swapper/320:25:423
347511799111,7cyclictest0-21swapper/319:10:513
347511799111,6cyclictest0-21swapper/321:05:473
347511799111,6cyclictest0-21swapper/321:05:473
347511799111,6cyclictest0-21swapper/320:30:443
34751179992,5cyclictest0-21swapper/319:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional