You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-14 - 05:17

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Thu May 14, 2026 00:43:05)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1955155995547,5cyclictest2015255-21awk21:40:011
195515699543,37cyclictest2060896-21ssh22:35:582
1955156995130,16cyclictest421-21dbus-daemon22:20:532
1955156995041,5cyclictest2117344-21mailstats23:46:002
1955154994943,3cyclictest0-21swapper/020:35:010
1955154994942,4cyclictest2003217-21grep21:25:010
1955154994926,14cyclictest1472737-21kworker/u8:1+events_unbound20:50:520
1955156994537,5cyclictest1054-21mta-sts-daemon23:53:252
195515699453,34cyclictest2093027-21ssh23:15:572
1955156994434,5cyclictest0-21swapper/223:20:522
1955156994433,8cyclictest421-21dbus-daemon21:30:452
195515699443,34cyclictest2157192-21sendmail-mta00:35:502
1955155994436,5cyclictest2020192-21fschecks_time21:45:451
1955155994436,5cyclictest0-21swapper/100:00:011
1955155994435,6cyclictest96104-21cups-browsed21:30:561
1955155994435,5cyclictest2135925-21munin-plugin-st00:10:011
1955155994434,7cyclictest421-21dbus-daemon22:10:011
1955155994434,6cyclictest421-21dbus-daemon23:40:001
1955155994430,9cyclictest2028634-21rm21:55:531
1955156994335,5cyclictest2019322-21systemd-run21:45:022
1955156994332,7cyclictest0-21swapper/222:45:012
1955156994331,9cyclictest1-21systemd00:30:012
1955156994331,9cyclictest1-21systemd00:30:012
1955155994334,6cyclictest1968654-21systemd-run19:55:011
1955156994234,5cyclictest1961169-21systemd-run19:30:012
1955156994232,6cyclictest1-21systemd22:55:012
1955156994232,6cyclictest1-21systemd22:55:012
1955155994234,4cyclictest0-21swapper/100:20:021
1955154994233,5cyclictest2024870-21sendmail_mailqu21:51:020
1955154994229,3cyclictest0-21swapper/023:31:030
1955154994221,15cyclictest12450irq/33-eth000:15:560
1955155994133,4cyclictest2051784-21kworker/u8:1-xprtiod22:35:011
1955155994131,6cyclictest2115899-21latency_hist23:45:021
1955154994134,4cyclictest2071513-21systemd-run22:50:020
1955156994032,5cyclictest2127901-21ssh00:00:012
1955156994032,5cyclictest2056212-21aten_r2power_vo22:30:442
1955156994032,5cyclictest1955159-21systemd-run19:10:012
1955156994031,5cyclictest2079524-21cron23:00:002
1955155994032,5cyclictest2100570-21fschecks_count23:25:471
1955155994032,5cyclictest1960175-21fschecks_count19:25:451
1955155994032,4cyclictest0-21swapper/122:55:571
1955155994031,5cyclictest0-21swapper/123:51:031
1955154994033,4cyclictest1-21systemd22:05:010
1955154994030,8cyclictest1979161-21true20:30:010
1955154994030,8cyclictest1979161-21true20:30:010
1955156993931,5cyclictest1-21systemd21:00:022
1955156993930,5cyclictest261-21systemd-journal22:30:002
1955156993928,8cyclictest2045072-21switchtime22:16:022
1955156993928,6cyclictest0-21swapper/223:25:542
195515699391,31cyclictest2153241-21ssh00:30:572
195515599396,10cyclictest2089386-21ssh23:11:031
1955155993931,3cyclictest0-21swapper/100:26:001
1955155993931,3cyclictest0-21swapper/100:26:001
195515599391,32cyclictest1966491-21sendmail-mta19:45:501
1955155993911,7cyclictest62450lldpd23:33:021
1955155993911,5cyclictest28-21ksoftirqd/121:20:551
1955154993932,4cyclictest427-21polkitd22:40:010
1955154993931,5cyclictest261-21systemd-journal23:05:010
1955154993925,6cyclictest12350irq/32-eth022:40:510
195515699383,24cyclictest2137370-21ssh00:10:572
1955156993830,4cyclictest0-21swapper/200:10:022
1955156993829,5cyclictest0-21swapper/221:10:012
1955155993829,6cyclictest1995840-21/usr/sbin/munin21:15:421
1955155993829,6cyclictest1995840-21/usr/sbin/munin21:15:421
1955154993827,8cyclictest2129470-21mailstats00:01:000
195515499382,28cyclictest2028633-21sh21:55:530
195515499381,33cyclictest2056733-21sh22:30:540
1955156993729,5cyclictest2035447-21latency_hist22:05:022
1955156993726,6cyclictest0-21swapper/221:55:562
195515599373,16cyclictest2060829-21ntpq22:35:561
1955155993729,5cyclictest1970138-21systemctl20:00:011
1955155993728,6cyclictest1979662-21fschecks_count20:30:451
1955155993726,7cyclictest420-21avahi-daemon22:11:211
1955155993724,10cyclictest2004211-21kernelversion21:25:461
1955155993713,5cyclictest28-21ksoftirqd/100:00:431
1955154993729,6cyclictest2095641-21sendmail23:20:010
1955154993729,4cyclictest1056-21mta-sts-daemon23:40:510
1955154993722,8cyclictest12350irq/32-eth023:25:590
1955154993715,14cyclictest12350irq/32-eth022:50:520
1955154993715,14cyclictest12350irq/32-eth022:50:520
1955156993630,3cyclictest0-21swapper/219:45:012
1955156993629,4cyclictest2145697-21wc00:21:032
1955156993629,3cyclictest0-21swapper/220:20:002
195515699361,31cyclictest96104-21cups-browsed21:30:012
195515599365,25cyclictest2080971-21ssh23:00:571
1955155993629,3cyclictest0-21swapper/122:23:131
1955155993628,5cyclictest2159923-21cron00:40:001
1955155993627,6cyclictest1985662-21fschecks_time20:50:441
1955155993626,7cyclictest1973214-21latency_hist20:10:021
1955155993622,9cyclictest2084877-21sh23:05:511
1955155993616,14cyclictest1055-21mta-sts-daemon00:20:531
1955155993612,5cyclictest28-21ksoftirqd/120:00:591
1955155993611,6cyclictest28-21ksoftirqd/122:40:571
1955154993628,5cyclictest1051-21mta-sts-daemon00:31:050
1955154993627,6cyclictest261-21systemd-journal22:14:140
195515699354,25cyclictest2084845-21ssh23:05:492
1955156993527,5cyclictest2107684-21cron23:35:002
1955156993527,5cyclictest1973094-21grep20:06:022
195515699352,26cyclictest96104-21cups-browsed21:00:522
195515599356,11cyclictest2043942-21ssh22:15:371
195515599353,22cyclictest1991144-21diskmemload22:50:561
195515599353,22cyclictest1991144-21diskmemload22:50:561
1955155993524,7cyclictest2055488-21systemd-run22:30:011
1955155993511,4cyclictest28-21ksoftirqd/119:30:501
1955154993529,3cyclictest0-21swapper/022:55:550
1955154993527,6cyclictest1989649-21/usr/sbin/munin21:05:020
1955154993527,5cyclictest1995817-21aten_r2power_cu21:15:420
1955154993527,5cyclictest1995817-21aten_r2power_cu21:15:420
1955156993425,5cyclictest1-21systemd19:25:022
1955155993426,5cyclictest2024421-21latency21:50:501
1955155993426,4cyclictest0-21swapper/100:10:451
1955155993425,5cyclictest1991841-21aten_r2power_fr21:10:431
1955155993423,8cyclictest1983020-21ntp_kernel_pll_20:40:521
1955155993422,9cyclictest1990519-21ntp_kernel_pll_21:05:511
1955154993428,4cyclictest1976064-21unixbench_singl20:16:050
1955154993426,5cyclictest96104-21cups-browsed22:09:200
1955154993425,7cyclictest421-21dbus-daemon21:40:020
1955154993423,8cyclictest2137272-21ssh00:10:530
1955154993422,8cyclictest1-21systemd22:25:410
1955156993327,3cyclictest0-21swapper/222:05:532
1955156993327,3cyclictest0-21swapper/219:40:012
1955156993325,5cyclictest2015248-21/usr/sbin/munin21:40:012
1955156993325,5cyclictest1967081-21unixbench_singl19:46:042
195515699332,23cyclictest1992504-21ssh21:10:542
195515599337,7cyclictest1989127-21ntpq21:00:571
195515599333,22cyclictest2092922-21ssh23:15:521
1955155993326,3cyclictest0-21swapper/120:20:001
1955155993325,4cyclictest1051-21mta-sts-daemon22:46:561
1955155993311,3cyclictest0-21swapper/120:25:461
1955155993311,3cyclictest0-21swapper/120:25:461
1955155993310,4cyclictest28-21ksoftirqd/100:30:411
195515499338,17cyclictest2004480-21ssh21:25:510
1955154993327,4cyclictest2007862-21head21:30:420
1955154993325,5cyclictest1992189-21kernelversion21:10:480
1955154993324,6cyclictest2020465-21missed_timers21:45:480
1955154993313,15cyclictest2121144-21rm23:50:530
1955156993226,3cyclictest0-21swapper/222:50:012
1955156993225,4cyclictest1980523-21unixbench_multi20:31:032
1955156993222,6cyclictest420-21avahi-daemon23:38:502
195515699322,23cyclictest2141185-21ssh00:15:492
195515599329,4cyclictest261rcuc/122:04:311
195515599323,11cyclictest1974802-21cut20:15:021
1955155993225,3cyclictest0-21swapper/123:21:021
1955155993223,6cyclictest96104-21cups-browsed19:10:571
1955155993211,4cyclictest28-21ksoftirqd/123:45:571
1955154993225,4cyclictest2119821-21kworker/u8:10-xprtiod00:00:010
1955154993223,7cyclictest2047992-21/usr/sbin/munin22:20:530
1955154993223,6cyclictest2159931-21munin-plugin-st00:40:000
1955154993219,8cyclictest12350irq/32-eth023:20:560
1955154993210,12cyclictest171rcu_preempt00:06:270
195515699313,21cyclictest2040787-21ssh22:10:552
1955156993123,5cyclictest1995839-21ssh21:15:422
1955156993123,5cyclictest1995839-21ssh21:15:422
1955156993123,5cyclictest1-21systemd21:50:022
1955156993122,6cyclictest1982124-21cron20:40:012
195515699312,22cyclictest2113130-21ssh23:40:542
195515699311,21cyclictest659-21snmpd20:10:572
195515599316,7cyclictest1957553-21ntpq19:15:531
1955155993110,4cyclictest28-21ksoftirqd/121:44:131
195515499314,12cyclictest171rcu_preempt23:46:270
1955154993126,3cyclictest0-21swapper/019:35:010
1955154993125,4cyclictest2017171-21tail21:41:030
195515499312,24cyclictest2044859-21ssh22:15:580
1955154993110,12cyclictest2109115-21ssh23:35:570
1955156993025,2cyclictest0-21swapper/223:11:022
1955156993023,4cyclictest0-21swapper/221:25:002
1955156993023,3cyclictest0-21swapper/221:51:012
1955156993020,5cyclictest0-21swapper/223:00:522
195515599309,5cyclictest28-21ksoftirqd/119:40:501
195515599309,4cyclictest28-21ksoftirqd/120:55:431
195515599305,18cyclictest753-21ntpd19:20:571
1955155993023,4cyclictest1984160-21fschecks_count20:45:461
1955154993026,2cyclictest0-21swapper/020:00:530
1955154993025,2cyclictest0-21swapper/019:15:010
1955154993024,4cyclictest2144611-21tail00:20:410
1955154993015,11cyclictest12350irq/32-eth023:05:530
195515499301,3cyclictest171rcu_preempt20:35:550
1955156992921,5cyclictest2129765-21unixbench_multi00:01:032
195515599299,3cyclictest28-21ksoftirqd/119:35:531
1955154992924,2cyclictest0-21swapper/023:10:480
1955154992924,2cyclictest0-21swapper/020:20:510
1955154992924,2cyclictest0-21swapper/020:20:510
1955154992922,4cyclictest1966830-21switchtime19:46:020
195515499291,3cyclictest171rcu_preempt19:50:540
1955156992819,7cyclictest1979143-21latency_hist20:30:022
1955156992819,7cyclictest1979143-21latency_hist20:30:022
1955156992819,6cyclictest420-21avahi-daemon19:17:112
195515599283,7cyclictest1981616-21ntpq20:35:581
195515499289,4cyclictest171rcu_preempt21:05:540
195515499287,7cyclictest0-21swapper/019:55:540
1955154992821,4cyclictest96104-21cups-browsed19:26:000
195515499280,3cyclictest171rcu_preempt19:40:490
195515699275,12cyclictest208113-21munin-node19:50:552
1955156992719,5cyclictest420-21avahi-daemon19:30:352
1955155992714,8cyclictest1977012-21ntpq20:20:501
1955155992714,8cyclictest1977012-21ntpq20:20:501
195515499272,21cyclictest2149241-21rm00:25:520
195515499272,21cyclictest2149241-21rm00:25:520
1955154992718,6cyclictest0-21swapper/019:25:010
1955156992616,6cyclictest420-21avahi-daemon20:02:292
195515499269,3cyclictest171rcu_preempt20:40:520
195515499265,10cyclictest1055-21mta-sts-daemon20:55:520
1955154992622,2cyclictest0-21swapper/019:40:010
1955154992619,4cyclictest1958132-21cron19:20:010
195515499260,3cyclictest171rcu_preempt20:10:560
195515699256,13cyclictest428-21mta-sts-daemon19:55:502
1955156992520,2cyclictest0-21swapper/220:55:022
1955156992519,3cyclictest0-21swapper/220:45:482
1955156992519,3cyclictest0-21swapper/220:21:022
1955156992519,3cyclictest0-21swapper/220:21:022
1955156992519,3cyclictest0-21swapper/219:15:012
1955156992416,5cyclictest96104-21cups-browsed20:40:502
1955154992417,4cyclictest1973159-21systemd-run20:10:010
1955154992416,5cyclictest1-21systemd19:10:020
195515499229,9cyclictest1984138-21df_inode20:45:450
195515599219,8cyclictest421-21dbus-daemon19:10:011
195515799192,9cyclictest0-21swapper/321:15:593
195515799192,9cyclictest0-21swapper/321:15:593
195515799183,8cyclictest0-21swapper/322:20:523
195515799182,8cyclictest0-21swapper/323:30:563
195515799181,9cyclictest0-21swapper/322:55:543
195515799172,8cyclictest0-21swapper/300:10:583
195515799162,9cyclictest0-21swapper/321:30:563
195515799162,8cyclictest0-21swapper/322:50:563
195515799162,8cyclictest0-21swapper/322:50:563
195515799162,8cyclictest0-21swapper/321:55:513
195515799154,7cyclictest0-21swapper/321:10:433
195515799153,6cyclictest0-21swapper/300:35:543
195515799153,5cyclictest0-21swapper/321:40:493
195515799152,8cyclictest0-21swapper/323:35:483
195515799152,7cyclictest0-21swapper/321:45:523
195515799151,9cyclictest0-21swapper/321:35:513
195515799151,8cyclictest0-21swapper/322:00:553
195515799151,8cyclictest0-21swapper/321:20:593
195515799151,7cyclictest0-21swapper/300:00:503
195515799151,6cyclictest0-21swapper/320:55:503
195515799144,7cyclictest0-21swapper/322:35:533
195515799143,7cyclictest0-21swapper/323:10:523
195515799143,6cyclictest0-21swapper/323:20:563
195515799143,6cyclictest0-21swapper/319:40:563
195515799143,6cyclictest0-21swapper/300:31:003
195515799142,7cyclictest0-21swapper/322:15:443
195515799142,7cyclictest0-21swapper/322:05:523
195515799142,7cyclictest0-21swapper/321:25:493
195515799142,6cyclictest0-21swapper/321:50:473
195515799142,6cyclictest0-21swapper/319:30:573
195515799141,9cyclictest0-21swapper/300:15:393
195515799141,9cyclictest0-21swapper/300:05:523
195515799141,8cyclictest0-21swapper/322:45:563
195515799141,8cyclictest0-21swapper/322:30:543
195515799141,8cyclictest0-21swapper/300:25:523
195515799141,8cyclictest0-21swapper/300:25:523
195515799141,7cyclictest0-21swapper/323:05:493
195515799141,7cyclictest0-21swapper/322:25:443
195515799141,6cyclictest0-21swapper/320:20:513
195515799141,6cyclictest0-21swapper/320:20:513
195515799141,6cyclictest0-21swapper/319:15:523
195515799135,5cyclictest0-21swapper/323:55:513
195515799133,7cyclictest0-21swapper/323:50:433
195515799133,6cyclictest0-21swapper/300:20:523
195515799133,5cyclictest0-21swapper/320:35:513
195515799132,7cyclictest0-21swapper/322:40:463
195515799132,6cyclictest0-21swapper/320:50:563
195515799132,5cyclictest0-21swapper/320:05:523
195515799131,8cyclictest0-21swapper/323:15:533
195515799131,7cyclictest0-21swapper/323:45:533
195515799131,7cyclictest0-21swapper/323:25:543
195515799131,7cyclictest0-21swapper/320:45:543
195515799131,6cyclictest0-21swapper/321:05:513
195515799131,6cyclictest0-21swapper/321:00:523
195515799131,6cyclictest0-21swapper/320:40:563
195515799131,6cyclictest0-21swapper/320:30:533
195515799131,6cyclictest0-21swapper/320:15:523
195515799131,5cyclictest0-21swapper/320:10:523
195515799131,5cyclictest0-21swapper/319:45:513
195515799130,7cyclictest0-21swapper/319:35:553
195515799123,5cyclictest0-21swapper/322:10:493
195515799121,7cyclictest0-21swapper/323:40:453
195515799121,7cyclictest0-21swapper/323:00:493
195515799121,6cyclictest0-21swapper/320:25:523
195515799121,6cyclictest0-21swapper/320:25:523
195515799120,7cyclictest0-21swapper/320:00:593
195515799120,6cyclictest0-21swapper/319:20:513
195515799111,6cyclictest0-21swapper/319:10:533
195515799103,5cyclictest0-21swapper/319:25:503
195515799101,5cyclictest0-21swapper/319:55:423
195515799101,5cyclictest0-21swapper/319:50:483
19551579991,4cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional