You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-09 - 00:35

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Wed Jul 08, 2026 12:43:19)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1713253999877,18cyclictest1800861-40mandb10:35:580
1713254997964,10cyclictest1800861-40mandb10:35:111
1713255996551,9cyclictest1802442-21grep10:36:002
1713254996550,10cyclictest1800981-21latency_hist10:35:031
1713253995643,10cyclictest1771228-21sort09:45:310
1713253995643,10cyclictest1771228-21sort09:45:310
1713253995334,14cyclictest0-21swapper/010:35:030
171325499492,39cyclictest1750385-21ssh09:10:381
1713255994840,5cyclictest1831050-21ssh11:25:012
171325399483,40cyclictest1823153-21ssh11:10:480
1713254994739,5cyclictest1824955-21cron11:15:001
1713255994637,6cyclictest1762803-21switchtime09:30:502
1713253994630,11cyclictest1859069-21latency12:10:320
1713255994537,5cyclictest1003-21mta-sts-daemon09:40:552
1713253994538,3cyclictest151ktimers/009:15:440
1713253994535,8cyclictest439-21systemd-logind07:20:010
1713255994436,5cyclictest1843875-21kernelversion11:45:322
1713255994435,6cyclictest1789389-21uniq10:15:292
171325499444,35cyclictest1820079-21ssh11:05:441
1713254994336,4cyclictest1840064-21munin-run11:40:011
1713253994333,6cyclictest1782868-21latency_hist10:05:020
1713253994310,29cyclictest1829047-21ssh11:20:360
1713255994234,5cyclictest420-21avahi-daemon11:15:372
1713255994232,6cyclictest0-21swapper/210:35:042
1713255994231,7cyclictest1000-21mta-sts-daemon12:03:182
1713253994233,4cyclictest0-21swapper/009:25:290
1713255994136,2cyclictest0-21swapper/208:00:012
1713255994131,7cyclictest1794804-21sh10:25:012
1713255994032,5cyclictest1761411-21sh09:30:012
1713255994031,6cyclictest1756982-21tail09:20:522
1713255994028,9cyclictest1834185-21grep11:30:022
1713254994033,3cyclictest0-21swapper/110:40:421
1713254994031,5cyclictest1865445-21ntpq12:20:441
1713254994020,15cyclictest1792792-21diskmemload10:20:361
1713255993933,3cyclictest0-21swapper/210:00:452
1713255993924,11cyclictest908625-21cups-browsed11:35:102
171325599391,13cyclictest1749237-21diskmemload11:05:442
1713254993931,5cyclictest1834055-21ssh11:30:011
1713254993930,5cyclictest1752986-21grep09:15:351
1713254993929,8cyclictest750-21ntpd11:35:011
1713253993932,4cyclictest421-21dbus-daemon12:30:010
1713253993931,5cyclictest1719272-21systemd-run07:30:010
1713253993930,5cyclictest1858194-21latency_hist12:10:000
1713253993930,5cyclictest1858194-21latency_hist12:10:000
1713255993831,4cyclictest1731245-21idleruntime-cro08:10:012
1713255993829,6cyclictest1858865-21fschecks_count12:10:292
1713254993832,3cyclictest0-21swapper/108:40:021
1713254993830,5cyclictest1873282-21cron12:35:011
171325499382,9cyclictest171rcu_preempt12:10:411
1713254993829,5cyclictest420-21avahi-daemon10:00:321
1713254993826,9cyclictest0-21swapper/109:35:411
171325399384,5cyclictest0-21swapper/012:35:390
1713253993831,4cyclictest1776714-21latency_hist09:55:030
1713253993830,5cyclictest421-21dbus-daemon10:30:010
1713253993829,5cyclictest151ktimers/010:05:370
1713253993828,7cyclictest151ktimers/007:50:370
1713255993729,5cyclictest1855910-21sh12:05:312
1713255993729,5cyclictest1855910-21sh12:05:312
1713255993729,5cyclictest1725413-21latency_hist07:50:022
1713255993728,6cyclictest908625-21cups-browsed12:35:302
1713255993726,7cyclictest420-21avahi-daemon10:05:292
1713255993726,7cyclictest0-21swapper/209:50:302
1713254993731,3cyclictest0-21swapper/107:45:001
1713254993731,3cyclictest0-21swapper/107:45:001
1713254993728,7cyclictest1828984-21needreboot11:20:341
1713254993728,6cyclictest908625-21cups-browsed12:08:091
1713254993728,6cyclictest908625-21cups-browsed12:08:091
1713253993727,7cyclictest1-21systemd10:55:010
1713255993627,6cyclictest421-21dbus-daemon09:00:012
1713254993628,6cyclictest0-21swapper/111:20:011
1713254993627,5cyclictest1003-21mta-sts-daemon10:49:091
1713254993625,8cyclictest1-21systemd10:30:011
171325499362,21cyclictest1844188-21ssh11:45:391
1713253993628,5cyclictest151ktimers/011:45:380
1713253993627,5cyclictest151ktimers/007:35:410
1713253993627,5cyclictest151ktimers/007:35:410
1713253993620,9cyclictest12650irq/32-eth010:40:430
1713253993619,10cyclictest12650irq/32-eth009:30:390
1713255993528,4cyclictest1001-21mta-sts-daemon10:13:312
1713255993524,8cyclictest539-21wpa_supplicant10:56:332
1713255993524,8cyclictest539-21wpa_supplicant10:56:332
1713255993523,9cyclictest1852136-21munin-plugin-st12:00:022
171325599352,26cyclictest1753499-21ssh09:15:482
1713254993530,2cyclictest0-21swapper/112:05:021
1713254993528,4cyclictest1770549-21cron09:45:011
1713254993527,5cyclictest1812918-21munin-run10:55:021
1713253993528,4cyclictest1825830-21latency11:15:350
1713253993517,11cyclictest12650irq/32-eth011:55:420
171325599345,4cyclictest171rcu_preempt09:35:452
1713255993427,3cyclictest0-21swapper/208:30:352
1713255993426,5cyclictest1870961-21fschecks_time12:30:342
1713255993425,6cyclictest1811360-21timerandwakeup10:50:482
1713255993425,6cyclictest1735775-21systemd-run08:25:012
1713255993422,9cyclictest1744103-21ntp_kernel_pll_08:50:382
1713255993413,14cyclictest421-21dbus-daemon10:40:432
1713254993427,4cyclictest1741966-21kworker/u8:9-xprtiod11:55:011
1713254993427,3cyclictest0-21swapper/109:35:021
1713254993426,5cyclictest1734782-21fschecks_time08:20:301
1713254993425,6cyclictest421-21dbus-daemon08:30:011
1713254993425,6cyclictest421-21dbus-daemon08:30:011
171325499342,25cyclictest1759410-21ssh09:25:391
1713253993428,3cyclictest0-21swapper/009:35:450
1713253993427,4cyclictest1741767-21systemd-run08:45:020
1713253993424,7cyclictest1779616-21sh10:00:010
171325599334,22cyclictest1841253-21ssh11:40:452
1713255993327,4cyclictest0-21swapper/211:05:012
1713255993327,4cyclictest0-21swapper/211:05:012
1713255993326,4cyclictest1742393-21kernelversion08:45:352
1713255993325,5cyclictest1741737-21cron08:45:012
1713255993324,5cyclictest1003-21mta-sts-daemon09:55:182
171325599331,28cyclictest1795911-21ssh10:25:412
171325599331,26cyclictest1868390-21sh12:25:392
1713254993325,5cyclictest1716784-21fschecks_time07:20:301
1713254993325,4cyclictest1730112-21aten_r2power_po08:05:271
1713253993324,7cyclictest1821963-21grep11:10:000
1713253993313,14cyclictest421-21dbus-daemon07:55:430
171325599322,21cyclictest1847120-21ssh11:50:392
1713255993221,8cyclictest1722924-21latency07:40:332
1713255993221,8cyclictest1722924-21latency07:40:332
1713255993221,8cyclictest1716240-21sendmail07:20:012
1713255993221,7cyclictest1861712-21aten_r2power_po12:15:282
1713255993220,3cyclictest171rcu_preempt12:20:462
1713254993227,2cyclictest0-21swapper/109:50:001
1713254993227,2cyclictest0-21swapper/109:50:001
1713254993225,3cyclictest0-21swapper/111:55:441
1713254993224,4cyclictest1817538-21unixbench_multi11:00:491
1713254993224,4cyclictest1817538-21unixbench_multi11:00:491
171325499322,21cyclictest1786745-21ssh10:10:381
1713254993220,9cyclictest694-21cron08:05:001
1713253993225,5cyclictest0-21swapper/011:30:290
1713253993225,4cyclictest1752316-21systemd-run09:15:010
1713253993224,5cyclictest0-21swapper/011:50:530
1713253993224,5cyclictest0-21swapper/011:40:010
171325399322,25cyclictest1786880-21ssh10:10:440
1713253993222,5cyclictest151ktimers/008:30:330
1713253993221,7cyclictest908625-21cups-browsed11:02:540
1713253993221,7cyclictest908625-21cups-browsed11:02:540
171325399321,27cyclictest1865276-21sh12:20:370
171325599313,21cyclictest1835068-21rm11:30:372
1713255993126,2cyclictest0-21swapper/209:15:012
1713255993125,4cyclictest1713256-21kworker/u8:8+nfsiod07:10:012
1713255993124,5cyclictest0-21swapper/207:15:012
1713255993124,4cyclictest1717747-21cron07:25:012
1713255993122,6cyclictest908625-21cups-browsed10:48:362
1713255993121,7cyclictest1734034-21timerwakeupswit08:15:482
171325499318,15cyclictest1774733-21ssh09:50:411
1713254993124,3cyclictest0-21swapper/111:00:011
1713254993124,3cyclictest0-21swapper/111:00:011
1713254993120,7cyclictest0-21swapper/107:30:011
171325399313,21cyclictest665-21snmpd10:48:210
171325399313,21cyclictest1749237-21diskmemload12:00:370
1713253993126,3cyclictest1792620-21latency10:20:320
1713253993124,4cyclictest1832644-21tail11:25:550
1713253993124,3cyclictest0-21swapper/011:00:010
1713253993124,3cyclictest0-21swapper/011:00:010
1713253993123,5cyclictest1736255-21sshd08:25:290
1713253993123,5cyclictest1736255-21sshd08:25:290
1713253993121,7cyclictest0-21swapper/008:05:000
1713253993119,8cyclictest1841066-21needreboot11:40:370
1713255993024,3cyclictest0-21swapper/209:10:012
171325599302,20cyclictest1771796-21ps09:45:452
171325599302,20cyclictest1771796-21ps09:45:452
1713255993020,7cyclictest1739879-21switchtime08:35:472
1713255993020,6cyclictest0-21swapper/211:10:292
171325499303,23cyclictest1756455-21ssh09:20:411
1713254993024,3cyclictest0-21swapper/108:20:011
1713254993023,3cyclictest0-21swapper/109:55:361
1713254993022,3cyclictest0-21swapper/112:15:491
1713254993021,5cyclictest1874569-21mailstats12:35:441
1713253993025,3cyclictest0-21swapper/007:20:410
1713253993024,3cyclictest0-21swapper/009:20:300
1713253993022,5cyclictest1861715-21aten_r2power_po12:15:280
171325399302,22cyclictest1871049-21awk12:30:350
1713253993014,12cyclictest0-21swapper/008:10:030
1713255992923,3cyclictest0-21swapper/207:40:012
1713255992923,3cyclictest0-21swapper/207:40:012
171325499292,20cyclictest1783908-21ps10:05:441
1713254992919,7cyclictest1732512-21timerwakeupswit08:10:491
1713253992922,4cyclictest1746261-21systemd-run09:00:010
1713255992821,4cyclictest1003-21mta-sts-daemon08:28:562
1713255992821,4cyclictest1003-21mta-sts-daemon08:28:562
1713254992821,3cyclictest0-21swapper/107:15:371
1713254992820,5cyclictest1867904-21sshd12:25:291
1713254992820,5cyclictest1713641-21aten_r2power_vo07:10:281
1713254992819,6cyclictest1738751-21systemd-run08:35:011
1713253992823,3cyclictest1769249-21grep09:41:040
1713253992822,4cyclictest421-21dbus-daemon10:20:010
1713253992820,5cyclictest0-21swapper/008:55:020
171325599274,18cyclictest665-21snmpd08:00:422
1713255992720,4cyclictest1000-21mta-sts-daemon07:25:452
1713255992719,6cyclictest1746786-21gltestperf09:00:322
1713254992721,3cyclictest0-21swapper/107:40:011
1713254992721,3cyclictest0-21swapper/107:40:011
1713254992719,5cyclictest908625-21cups-browsed08:40:531
1713254992719,5cyclictest0-21swapper/111:45:021
1713254992718,6cyclictest1001-21mta-sts-daemon08:50:501
1713254992717,6cyclictest1789057-21/usr/sbin/munin10:15:261
1713253992720,4cyclictest1743179-21unixbench_singl08:45:530
171325599252,17cyclictest443-21gpm07:30:412
1713254992520,2cyclictest0-21swapper/108:00:011
1713254992518,5cyclictest1713252-21cyclictest09:05:261
1713254992517,5cyclictest1743240-21munin-plugin-st08:50:011
1713254992517,4cyclictest0-21swapper/107:30:401
171325399253,14cyclictest665-21snmpd09:00:410
171325599243,16cyclictest1732738-21ls08:15:012
1713255992417,4cyclictest1002-21mta-sts-daemon07:52:102
1713254992418,3cyclictest0-21swapper/108:55:511
1713254992417,5cyclictest1725762-21fschecks_count07:50:301
1713254992416,5cyclictest908625-21cups-browsed09:00:331
1713254992414,7cyclictest421-21dbus-daemon07:50:011
171325399246,11cyclictest151ktimers/008:20:410
171325399242,15cyclictest665-21snmpd07:40:420
171325399242,15cyclictest665-21snmpd07:40:420
1713253992417,5cyclictest1714601-21unixbench_multi07:10:490
1713253992417,4cyclictest1740232-21munin-run08:40:010
1713253992414,7cyclictest0-21swapper/009:10:010
171325399232,17cyclictest1731851-21awk08:10:320
1713253992316,5cyclictest1733272-21gltestperf08:15:300
1713253992316,5cyclictest1724895-21switchtime07:45:480
171325799214,10cyclictest0-21swapper/310:35:393
171325799213,8cyclictest0-21swapper/309:30:403
171325799213,10cyclictest0-21swapper/310:35:033
1713254992113,6cyclictest0-21swapper/107:10:031
171325399212,14cyclictest1720107-21ntpq07:30:370
1713253992015,2cyclictest0-21swapper/007:10:010
171325799193,8cyclictest0-21swapper/309:50:363
171325799193,5cyclictest0-21swapper/312:25:393
171325799183,9cyclictest0-21swapper/308:30:353
171325799183,8cyclictest0-21swapper/312:10:393
171325799182,7cyclictest0-21swapper/311:20:383
171325799181,9cyclictest0-21swapper/310:40:423
171325799174,7cyclictest0-21swapper/309:45:393
171325799174,7cyclictest0-21swapper/309:45:393
171325799173,5cyclictest0-21swapper/309:40:533
171325799173,5cyclictest0-21swapper/308:25:363
171325799173,5cyclictest0-21swapper/308:25:363
171325799172,8cyclictest0-21swapper/311:35:423
171325799164,6cyclictest0-21swapper/310:15:403
171325799162,8cyclictest0-21swapper/311:00:423
171325799162,8cyclictest0-21swapper/311:00:423
171325799162,6cyclictest0-21swapper/309:00:393
171325799161,8cyclictest0-21swapper/309:20:383
171325799154,5cyclictest0-21swapper/310:00:403
171325799153,8cyclictest0-21swapper/311:40:413
171325799153,6cyclictest0-21swapper/312:00:443
171325799153,6cyclictest0-21swapper/311:05:343
171325799153,6cyclictest0-21swapper/310:05:393
171325799153,5cyclictest0-21swapper/307:45:393
171325799152,8cyclictest0-21swapper/309:55:293
171325799152,7cyclictest0-21swapper/311:25:413
171325799152,6cyclictest0-21swapper/310:55:453
171325799152,6cyclictest0-21swapper/310:55:453
171325799151,9cyclictest0-21swapper/311:10:493
171325799151,8cyclictest0-21swapper/311:55:433
171325799143,6cyclictest0-21swapper/312:20:383
171325799143,6cyclictest0-21swapper/311:30:403
171325799143,6cyclictest0-21swapper/309:25:393
171325799142,7cyclictest0-21swapper/310:20:363
171325799142,7cyclictest0-21swapper/309:15:293
171325799142,5cyclictest0-21swapper/309:05:353
171325799142,5cyclictest0-21swapper/307:55:393
171325799141,8cyclictest0-21swapper/309:10:333
171325799141,7cyclictest0-21swapper/308:15:363
171325799141,6cyclictest0-21swapper/311:50:393
171325799141,6cyclictest0-21swapper/307:15:363
171325799133,6cyclictest0-21swapper/312:30:353
171325799133,6cyclictest0-21swapper/312:15:293
171325799133,6cyclictest0-21swapper/310:25:323
171325799132,7cyclictest0-21swapper/312:05:373
171325799132,7cyclictest0-21swapper/312:05:373
171325799132,7cyclictest0-21swapper/310:50:303
171325799132,6cyclictest0-21swapper/311:45:263
171325799132,6cyclictest0-21swapper/308:55:373
171325799132,6cyclictest0-21swapper/308:40:403
171325799132,6cyclictest0-21swapper/308:10:423
171325799132,6cyclictest0-21swapper/308:05:373
171325799132,6cyclictest0-21swapper/307:30:403
171325799131,8cyclictest0-21swapper/312:35:333
171325799131,8cyclictest0-21swapper/309:35:383
171325799131,7cyclictest0-21swapper/311:15:363
171325799131,7cyclictest0-21swapper/310:45:383
171325799131,7cyclictest0-21swapper/308:20:383
171325799131,6cyclictest0-21swapper/308:35:403
171325799131,6cyclictest0-21swapper/307:40:373
171325799131,6cyclictest0-21swapper/307:40:373
171325799131,6cyclictest0-21swapper/307:20:433
171325799123,5cyclictest0-21swapper/310:10:323
171325799122,6cyclictest0-21swapper/307:35:423
171325799122,6cyclictest0-21swapper/307:35:423
171325799122,5cyclictest0-21swapper/308:45:393
171325799122,5cyclictest0-21swapper/307:50:373
171325799121,6cyclictest0-21swapper/308:50:423
171325799111,6cyclictest0-21swapper/308:00:293
171325799111,6cyclictest0-21swapper/307:25:403
171325799111,6cyclictest0-21swapper/307:10:363
17132579981,5cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional