You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-20 - 05:39

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Wed May 20, 2026 00:43:02)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1572046995517,7cyclictest1768501-21sh00:29:301
1572046995426,3cyclictest0-21swapper/123:05:011
1572045995440,9cyclictest12350irq/32-eth022:25:560
1572046995142,5cyclictest1-21systemd00:00:021
1572045995139,8cyclictest1717609-21/usr/sbin/munin23:25:520
1572045995139,8cyclictest1717609-21/usr/sbin/munin23:25:520
1572046995023,5cyclictest1625794-21timerandwakeup21:31:071
1572046995023,5cyclictest1625794-21timerandwakeup21:31:071
1572046994925,20cyclictest1605012-21idleruntime-cro21:00:011
157204799482,34cyclictest1621488-21ssh21:26:012
157204799482,34cyclictest1621488-21ssh21:26:012
157204699482,22cyclictest1621404-21ssh21:25:561
157204699482,22cyclictest1621404-21ssh21:25:561
1572046994822,22cyclictest1704563-21latency_hist23:10:021
1572047994739,5cyclictest1620011-21ssh21:25:012
1572047994739,5cyclictest1620011-21ssh21:25:012
1572046994725,3cyclictest0-21swapper/123:40:001
157204699472,20cyclictest1613377-21ssh21:15:561
157204699472,20cyclictest1613377-21ssh21:15:561
1572046994721,6cyclictest3888198-21cups-browsed19:26:001
1572046994721,6cyclictest3888198-21cups-browsed19:26:001
1572046994636,6cyclictest0-21swapper/122:10:561
1572046994619,4cyclictest0-21swapper/123:15:011
1572045994639,5cyclictest421-21dbus-daemon21:50:010
157204599463,36cyclictest1617308-21ssh21:20:530
157204599463,36cyclictest1617308-21ssh21:20:530
1572045994631,8cyclictest12350irq/32-eth000:06:010
1572046994520,4cyclictest0-21swapper/123:15:561
1572045994531,11cyclictest1744616-40systemctl00:00:000
1572046994434,5cyclictest0-21swapper/122:51:021
1572046994423,5cyclictest1629384-21ntp_kernel_pll_21:35:551
1572046994422,6cyclictest3888198-21cups-browsed23:27:491
1572046994422,6cyclictest3888198-21cups-browsed23:27:491
1572045994436,5cyclictest1748687-21ssh00:05:010
1572047994334,6cyclictest421-21dbus-daemon22:35:012
1572047994334,6cyclictest421-21dbus-daemon22:30:012
1572047994334,5cyclictest1689997-21mailstats22:51:082
1572046994335,5cyclictest1638058-21unixbench_multi21:46:101
1572046994234,4cyclictest0-21swapper/123:51:011
1572046994233,6cyclictest1591539-21systemd-run20:15:011
157204699422,18cyclictest1669690-21ssh22:26:011
1572045994234,3cyclictest0-21swapper/000:15:470
157204599422,33cyclictest1665458-21ssh22:20:540
1572046994133,3cyclictest0-21swapper/119:50:571
1572045994135,4cyclictest1660154-21grep22:15:010
1572045994132,6cyclictest12350irq/32-eth022:46:020
1572047994035,2cyclictest0-21swapper/223:25:562
1572047994035,2cyclictest0-21swapper/223:25:562
1572047994032,5cyclictest1668252-21ssh22:25:012
157204799402,28cyclictest1609426-21ssh21:10:582
1572046994030,6cyclictest1733166-21acpi23:45:451
1572045994032,5cyclictest1597530-21systemd-run20:35:010
1572045994031,5cyclictest1587064-21latency_hist20:00:020
1572047993933,3cyclictest0-21swapper/200:16:002
1572047993932,3cyclictest0-21swapper/200:00:012
1572047993931,5cyclictest1648150-21idleruntime-cro22:00:012
1572047993930,6cyclictest1-21systemd20:10:012
1572047993930,5cyclictest1584045-21systemd-run19:50:022
157204799392,30cyclictest1770110-21ssh00:30:562
1572047993921,4cyclictest171rcu_preempt21:35:482
1572045993932,5cyclictest1684336-21systemd-run22:45:010
1572045993932,4cyclictest1566738-21kworker/u8:0+xprtiod19:40:010
1572045993931,5cyclictest1753342-21aten_r2power_en00:10:460
1572045993920,13cyclictest151ktimers/019:40:560
1572047993830,5cyclictest3888198-21cups-browsed19:51:302
1572047993830,5cyclictest1730148-21sendmail_mailtr23:41:032
1572047993830,5cyclictest1728541-21systemd-run23:40:012
1572047993829,4cyclictest0-21swapper/221:50:572
157204699384,28cyclictest1661499-21ssh22:15:571
157204699384,28cyclictest1661499-21ssh22:15:571
1572046993825,7cyclictest0-21swapper/121:11:001
1572045993831,4cyclictest12350irq/32-eth022:35:590
1572045993830,6cyclictest1689433-21kernelversion22:50:550
1572045993829,7cyclictest1705150-21sh23:10:450
1572045993825,9cyclictest0-21swapper/022:10:020
1572047993731,3cyclictest0-21swapper/222:40:592
1572047993728,5cyclictest420-21avahi-daemon22:12:262
1572047993728,5cyclictest1637354-21needreboot21:45:552
1572047993726,7cyclictest1578186-21latency_hist19:30:022
1572047993726,7cyclictest1578186-21latency_hist19:30:022
157204599373,29cyclictest1762055-21ssh00:20:570
1572045993721,8cyclictest0-21swapper/020:35:560
157204599371,32cyclictest1766115-21ssh00:25:570
1572047993631,2cyclictest0-21swapper/200:21:012
1572047993629,4cyclictest1771615-21kworker/u8:10-xprtiod00:35:552
1572047993629,4cyclictest1771615-21kworker/u8:10-xprtiod00:35:552
1572047993629,3cyclictest0-21swapper/223:05:532
1572047993628,5cyclictest1608014-21diskmemload21:40:542
1572046993630,3cyclictest0-21swapper/122:10:021
1572046993628,5cyclictest1673135-21fschecks_count22:30:481
157204699361,27cyclictest1677775-21ssh22:36:021
1572045993629,4cyclictest1713119-21tail23:20:460
1572045993626,7cyclictest1740825-21latency_hist23:55:030
1572045993624,9cyclictest0-21swapper/021:55:010
157204799356,24cyclictest1653590-21ssh22:06:022
1572047993529,3cyclictest0-21swapper/221:20:012
1572047993529,3cyclictest0-21swapper/221:20:012
1572047993526,6cyclictest1055-21mta-sts-daemon20:00:542
1572046993528,3cyclictest0-21swapper/119:10:011
1572046993526,6cyclictest1760799-21latency_hist00:20:021
1572045993527,5cyclictest420-21avahi-daemon21:27:500
1572045993527,5cyclictest420-21avahi-daemon21:27:500
1572045993527,3cyclictest0-21swapper/021:42:430
157204799343,27cyclictest1661515-21ssh22:15:572
157204799343,27cyclictest1661515-21ssh22:15:572
1572047993427,3cyclictest0-21swapper/223:55:022
1572047993426,5cyclictest1746003-21ntp_kernel_err00:00:592
1572047993426,5cyclictest1680302-21systemd-run22:40:012
1572047993426,5cyclictest1605004-21munin-run21:00:012
157204699343,23cyclictest1753988-21ssh00:10:581
1572046993426,5cyclictest1602019-21munin-plugin-st20:50:011
1572046993426,5cyclictest1-21systemd20:20:011
157204699342,28cyclictest1693705-21ssh22:55:561
157204699342,25cyclictest1750064-21ssh00:06:021
157204599343,25cyclictest1609529-21sh21:11:020
1572045993428,2cyclictest0-21swapper/023:40:500
1572045993427,4cyclictest1704431-21kworker/u8:7-events_unbound23:30:550
1572045993427,4cyclictest1704431-21kworker/u8:7-events_unbound23:30:550
1572045993427,4cyclictest1648141-21sendmail22:00:010
1572045993426,5cyclictest1772642-21sh00:34:410
1572045993424,8cyclictest1692862-21sshd22:55:370
1572045993423,8cyclictest1562481-21kworker/u8:10-xprtiod20:25:010
157204599342,26cyclictest1725858-21ssh23:35:570
1572047993327,3cyclictest0-21swapper/223:31:002
1572047993327,3cyclictest0-21swapper/223:31:002
1572047993326,4cyclictest1051-21mta-sts-daemon23:10:252
1572047993326,3cyclictest0-21swapper/200:26:002
1572047993325,5cyclictest3888198-21cups-browsed22:45:042
1572047993325,5cyclictest1734493-21tail23:46:082
1572047993325,5cyclictest0-21swapper/221:10:012
1572046993325,5cyclictest1055-21mta-sts-daemon22:20:271
1572046993325,3cyclictest0-21swapper/121:21:081
1572046993325,3cyclictest0-21swapper/121:21:081
1572046993323,6cyclictest1606520-21munin-plugin-st21:05:011
1572046993322,8cyclictest1774116-21ntp_kernel_err00:35:561
1572046993322,8cyclictest1774116-21ntp_kernel_err00:35:561
1572045993326,4cyclictest1588533-21munin-plugin-st20:05:010
1572045993325,5cyclictest420-21avahi-daemon21:31:200
1572045993325,5cyclictest420-21avahi-daemon21:31:200
1572045993325,5cyclictest3888198-21cups-browsed20:50:490
1572045993320,9cyclictest0-21swapper/023:00:510
157204599331,27cyclictest1733208-21tail23:45:450
1572045993312,15cyclictest12350irq/32-eth022:16:020
1572045993312,15cyclictest12350irq/32-eth022:16:020
1572047993225,3cyclictest0-21swapper/220:00:012
1572047993224,5cyclictest1572050-21systemd-run19:10:012
1572047993224,4cyclictest1055-21mta-sts-daemon00:14:042
1572046993224,5cyclictest1573548-21systemd-run19:15:011
1572046993223,5cyclictest1051-21mta-sts-daemon00:01:011
1572046993222,8cyclictest1688333-21/usr/sbin/munin22:50:021
1572045993222,8cyclictest1650356-21sshd22:01:350
1572045993222,7cyclictest1600522-21munin-plugin-st20:45:020
157204799316,19cyclictest421-21dbus-daemon20:35:562
1572047993124,3cyclictest0-21swapper/220:40:552
1572047993124,2cyclictest0-21swapper/200:06:012
1572047993123,5cyclictest420-21avahi-daemon23:20:512
1572047993123,5cyclictest1575030-21munin-run19:20:002
1572047993122,6cyclictest1698329-21ssh23:01:062
1572047993121,8cyclictest1693530-21missed_timers22:55:502
157204699313,21cyclictest1770170-21ssh00:30:581
1572046993125,3cyclictest1051-21mta-sts-daemon22:40:531
1572046993125,3cyclictest0-21swapper/121:55:011
1572046993125,3cyclictest0-21swapper/100:21:411
1572046993122,6cyclictest421-21dbus-daemon23:45:011
1572046993122,6cyclictest1576533-21cron19:25:001
1572046993121,7cyclictest1608007-21cron21:10:011
157204599313,21cyclictest0-21swapper/021:05:540
1572045993125,4cyclictest1572044-21cyclictest21:15:560
1572045993125,4cyclictest1572044-21cyclictest21:15:560
1572045993124,4cyclictest1774133-21ntp_kernel_err00:35:550
1572045993124,4cyclictest1774133-21ntp_kernel_err00:35:550
1572045993117,4cyclictest1676233-21idleruntime-cro22:35:000
1572045993115,11cyclictest1629395-21ssh21:35:560
1572047993022,5cyclictest1596022-21idleruntime-cro20:30:002
1572047993017,7cyclictest1625397-21sh21:30:572
1572047993017,7cyclictest1625397-21sh21:30:572
1572046993023,4cyclictest1055-21mta-sts-daemon21:40:561
1572046993022,6cyclictest0-21swapper/122:05:021
1572045993025,3cyclictest1577975-21head19:26:060
1572045993025,3cyclictest1577975-21head19:26:060
157204599302,22cyclictest1051-21mta-sts-daemon20:05:570
1572045993021,6cyclictest3888198-21cups-browsed19:30:460
1572047992923,3cyclictest1051-21mta-sts-daemon23:16:422
157204799292,18cyclictest659-21snmpd19:40:542
1572047992917,8cyclictest1649886-21switchtime22:01:142
1572046992922,3cyclictest0-21swapper/123:21:021
1572046992920,7cyclictest695-21cron19:35:001
1572045992915,11cyclictest0-21swapper/023:06:030
1572047992823,2cyclictest0-21swapper/220:15:012
1572047992822,3cyclictest0-21swapper/219:35:552
1572047992820,4cyclictest1601062-21gltestperf20:45:482
1572046992822,3cyclictest1644827-21aten2.4-expect21:55:451
1572046992822,3cyclictest0-21swapper/119:20:011
1572046992819,6cyclictest1599002-21sh20:40:011
1572046992818,8cyclictest1721502-21sh23:30:501
1572046992818,8cyclictest1721502-21sh23:30:501
1572045992823,2cyclictest0-21swapper/021:00:010
1572045992820,6cyclictest1592357-21ntp_kernel_err20:15:540
157204599281,21cyclictest1709767-21ssh23:15:570
1572047992719,5cyclictest1597515-21munin-plugin-st20:35:012
1572047992719,5cyclictest1593012-21cron20:20:012
1572046992720,4cyclictest1587046-21kworker/u8:7-xprtiod20:05:531
1572046992720,4cyclictest1055-21mta-sts-daemon20:31:011
157204599272,16cyclictest151ktimers/019:45:550
1572045992719,5cyclictest1585531-21systemd-run19:55:010
1572047992619,3cyclictest0-21swapper/219:30:572
1572047992618,5cyclictest1605288-21aten_r2power_cu21:00:442
1572046992621,2cyclictest0-21swapper/119:40:011
1572046992613,10cyclictest271ktimers/119:40:581
1572045992621,3cyclictest1054-21mta-sts-daemon19:10:580
1572045992619,4cyclictest1-21systemd20:50:020
1572045992613,10cyclictest0-21swapper/019:21:040
1572047992519,3cyclictest0-21swapper/219:15:012
1572047992518,4cyclictest1603384-21unixbench_multi20:51:062
157204699259,5cyclictest62450lldpd20:23:111
1572046992518,4cyclictest1583957-21unixbench_singl19:46:071
1572046992517,5cyclictest518-21rs:main1
1572046992516,6cyclictest548-21gdbus20:53:441
1572045992518,4cyclictest1054-21mta-sts-daemon21:00:570
1572045992514,8cyclictest1590862-21ntp_kernel_err20:10:550
1572046992415,7cyclictest1599566-21gltestperf20:40:481
157204599242,16cyclictest151ktimers/019:15:580
1572045992415,6cyclictest439-21systemd-logind20:30:010
157204799232,15cyclictest1575999-21ntp_states19:20:582
1572047992318,2cyclictest0-21swapper/220:21:042
1572046992315,5cyclictest548-21gdbus20:29:191
1572046992215,4cyclictest0-21swapper/120:00:011
1572045992110,8cyclictest421-21dbus-daemon19:10:010
157204899204,10cyclictest0-21swapper/323:26:013
157204899204,10cyclictest0-21swapper/323:26:013
157204899203,9cyclictest0-21swapper/323:45:573
157204899203,9cyclictest0-21swapper/321:15:563
157204899203,9cyclictest0-21swapper/321:15:563
157204899203,10cyclictest0-21swapper/323:40:553
157204899201,11cyclictest0-21swapper/323:01:003
157204899193,9cyclictest0-21swapper/323:36:013
157204899193,10cyclictest0-21swapper/323:55:543
157204899192,10cyclictest0-21swapper/322:16:023
157204899192,10cyclictest0-21swapper/322:16:023
157204899183,9cyclictest0-21swapper/323:05:573
157204899183,9cyclictest0-21swapper/322:31:003
157204899183,9cyclictest0-21swapper/322:25:573
157204899183,9cyclictest0-21swapper/321:50:543
157204899183,9cyclictest0-21swapper/320:10:583
157204899183,8cyclictest0-21swapper/300:15:533
157204899182,9cyclictest0-21swapper/300:11:023
157204899182,7cyclictest0-21swapper/320:35:563
157204899182,10cyclictest0-21swapper/323:30:583
157204899182,10cyclictest0-21swapper/323:30:583
157204899182,10cyclictest0-21swapper/323:15:583
157204899182,10cyclictest0-21swapper/321:30:573
157204899182,10cyclictest0-21swapper/321:30:573
157204899182,10cyclictest0-21swapper/300:20:593
157204899173,9cyclictest0-21swapper/322:20:583
157204899173,9cyclictest0-21swapper/322:10:543
157204899173,9cyclictest0-21swapper/321:55:553
157204899173,9cyclictest0-21swapper/321:20:553
157204899173,9cyclictest0-21swapper/321:20:553
157204899173,9cyclictest0-21swapper/320:55:013
157204899173,8cyclictest0-21swapper/322:51:003
157204899173,8cyclictest0-21swapper/300:25:543
157204899173,10cyclictest0-21swapper/321:36:023
157204899172,9cyclictest0-21swapper/323:21:003
157204899172,9cyclictest0-21swapper/322:55:533
157204899172,11cyclictest0-21swapper/322:45:543
157204899172,10cyclictest0-21swapper/323:50:563
157204899172,10cyclictest0-21swapper/321:05:543
157204899172,10cyclictest0-21swapper/300:30:593
157204899171,9cyclictest0-21swapper/322:01:013
157204899171,9cyclictest0-21swapper/319:11:003
157204899171,9cyclictest0-21swapper/300:06:033
157204899171,7cyclictest0-21swapper/320:00:543
157204899171,10cyclictest0-21swapper/321:25:543
157204899171,10cyclictest0-21swapper/321:25:543
157204899165,4cyclictest0-21swapper/319:30:523
157204899163,9cyclictest0-21swapper/322:40:543
157204899163,8cyclictest0-21swapper/323:10:483
157204899163,8cyclictest0-21swapper/321:40:583
157204899161,9cyclictest0-21swapper/322:05:493
157204899161,9cyclictest0-21swapper/321:45:483
157204899161,8cyclictest0-21swapper/300:35:493
157204899161,8cyclictest0-21swapper/300:35:493
157204899154,4cyclictest0-21swapper/320:30:583
157204899152,9cyclictest0-21swapper/321:11:003
157204899152,8cyclictest0-21swapper/322:35:493
157204899152,8cyclictest0-21swapper/300:00:473
157204899152,7cyclictest0-21swapper/320:40:543
157204899152,7cyclictest0-21swapper/319:20:523
157204899152,6cyclictest0-21swapper/319:45:583
157204899151,7cyclictest0-21swapper/319:56:043
157204899143,6cyclictest0-21swapper/319:15:573
157204899142,8cyclictest0-21swapper/319:45:023
157204899142,7cyclictest0-21swapper/319:25:593
157204899142,7cyclictest0-21swapper/319:25:593
157204899134,4cyclictest0-21swapper/320:05:543
157204899133,6cyclictest0-21swapper/320:25:533
157204899132,7cyclictest0-21swapper/319:35:553
157204899132,6cyclictest0-21swapper/320:46:033
157204899132,5cyclictest0-21swapper/320:20:453
157204899131,7cyclictest0-21swapper/320:55:543
157204899123,6cyclictest0-21swapper/321:05:013
157204899122,6cyclictest0-21swapper/320:15:543
157204899121,5cyclictest0-21swapper/319:50:463
157204899101,5cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional