You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-28 - 17:56

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Thu May 28, 2026 12:42:58)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1541698996122,18cyclictest0-21swapper/010:01:000
1541698995648,6cyclictest1568680-21grep08:40:000
154170099515,35cyclictest1646867-21ssh10:35:592
1541700994939,6cyclictest1550709-21systemd-run07:40:012
1541700994939,5cyclictest1556683-21idleruntime-cro08:00:012
1541698994629,4cyclictest1641547-21latency_hist10:30:000
1541698994629,4cyclictest1641547-21latency_hist10:30:000
1541699994436,5cyclictest1562718-21systemd-run08:20:011
1541700994322,13cyclictest351ktimers/209:36:062
1541699994334,6cyclictest1675175-21true11:15:011
1541699994320,16cyclictest710674-21cups-browsed10:41:001
1541698994329,11cyclictest822790-21munin-node09:36:030
1541699994235,3cyclictest0-21swapper/110:11:101
1541699994234,5cyclictest1542216-21fschecks_time07:10:521
1541699994234,5cyclictest1542216-21fschecks_time07:10:521
1541699994233,7cyclictest1570205-21sh08:45:011
1541699994231,8cyclictest261-21systemd-journal07:20:001
1541699994231,8cyclictest261-21systemd-journal07:20:001
154170099411,32cyclictest1662991-21ssh10:56:022
1541699994131,7cyclictest420-21avahi-daemon09:50:191
1541699994131,7cyclictest420-21avahi-daemon09:50:191
1541698994134,4cyclictest1617506-21sendmail10:00:010
1541698994115,20cyclictest1666918-21ssh11:00:570
1541700994031,6cyclictest0-21swapper/211:05:522
1541700994030,6cyclictest420-21avahi-daemon09:56:342
1541700994030,4cyclictest0-21swapper/209:11:052
154169999403,30cyclictest1579166-21ssh09:11:021
1541698994033,4cyclictest516-21in:imuxsock09:25:000
1541698994027,7cyclictest12450irq/33-eth009:26:060
1541698994026,11cyclictest710674-21cups-browsed08:31:000
1541698994026,10cyclictest1622820-21needreboot10:05:550
1541700993922,12cyclictest351ktimers/210:51:032
1541699993931,5cyclictest1594274-21aten_r2power_po09:30:511
1541699993930,6cyclictest1574665-21ls09:00:011
154170099386,27cyclictest1651083-21ssh10:41:052
1541700993832,2cyclictest0-21swapper/207:20:002
1541700993832,2cyclictest0-21swapper/207:20:002
154169999388,24cyclictest1602985-21sh09:41:051
154169999388,24cyclictest1602985-21sh09:41:051
1541699993832,3cyclictest0-21swapper/107:40:011
1541699993830,5cyclictest1676704-21systemd-run11:20:021
1541699993829,6cyclictest421-21dbus-daemon10:56:081
1541698993828,5cyclictest0-21swapper/012:26:010
1541698993828,5cyclictest0-21swapper/012:26:010
1541698993827,7cyclictest1650680-21latency10:40:540
1541700993728,6cyclictest1603482-21unixbench_multi09:41:142
1541700993728,6cyclictest1603482-21unixbench_multi09:41:142
1541699993729,5cyclictest1587583-21unixbench_multi09:21:181
1541699993729,5cyclictest1577672-21cron09:10:011
1541699993728,6cyclictest1614609-21latency09:55:541
1541699993727,8cyclictest1643393-21timerandwakeup10:31:181
1541699993726,7cyclictest420-21avahi-daemon11:08:101
1541698993729,5cyclictest0-21swapper/009:40:550
1541698993729,5cyclictest0-21swapper/009:40:550
1541698993727,7cyclictest151ktimers/011:21:020
1541700993627,4cyclictest0-21swapper/208:31:012
1541700993626,6cyclictest1558184-21cron08:05:002
1541699993629,3cyclictest0-21swapper/109:26:021
1541699993628,5cyclictest1676983-21aten_r2power_en11:20:501
1541699993627,6cyclictest439-21systemd-logind08:35:011
1541699993627,6cyclictest1667541-21sh11:01:101
1541699993620,10cyclictest1658918-21sshd10:50:581
1541698993628,6cyclictest1557504-21needreboot08:00:570
1541698993626,7cyclictest1634397-21/usr/sbin/munin10:20:500
1541698993626,7cyclictest1634397-21/usr/sbin/munin10:20:500
154169899362,29cyclictest1642914-21ssh10:31:040
154169899362,27cyclictest1627061-21ssh10:11:040
154170099355,5cyclictest171rcu_preempt10:45:572
154170099353,28cyclictest1583144-21ssh09:16:062
154170099353,28cyclictest1583144-21ssh09:16:062
1541700993529,3cyclictest0-21swapper/211:01:112
1541700993528,5cyclictest0-21swapper/212:15:012
1541700993527,5cyclictest1645510-21cut10:35:002
1541700993526,6cyclictest420-21avahi-daemon09:52:212
1541700993526,6cyclictest420-21avahi-daemon09:52:212
1541700993524,8cyclictest1693965-21needreboot12:15:572
1541700993512,17cyclictest421-21dbus-daemon11:41:012
1541699993527,5cyclictest1696701-21fschecks_time12:25:541
1541699993527,5cyclictest1696701-21fschecks_time12:25:541
1541699993527,5cyclictest1693145-21cron12:15:011
1541699993527,4cyclictest0-21swapper/110:25:561
1541699993527,4cyclictest0-21swapper/110:25:561
1541699993526,4cyclictest0-21swapper/110:49:481
1541698993528,3cyclictest0-21swapper/009:20:000
1541698993528,3cyclictest0-21swapper/009:20:000
1541698993522,9cyclictest0-21swapper/012:35:550
1541698993521,11cyclictest261-21systemd-journal12:01:010
1541700993427,3cyclictest0-21swapper/211:40:022
1541700993426,6cyclictest351ktimers/208:45:592
1541700993426,3cyclictest0-21swapper/210:10:012
1541700993425,6cyclictest420-21avahi-daemon10:20:272
1541700993425,6cyclictest420-21avahi-daemon10:20:272
1541700993422,9cyclictest1554585-21ntp_kernel_pll_07:51:002
1541699993428,3cyclictest0-21swapper/112:40:001
1541699993427,4cyclictest1054-21mta-sts-daemon12:16:011
1541699993425,4cyclictest0-21swapper/110:25:011
1541699993425,4cyclictest0-21swapper/110:25:011
1541699993424,7cyclictest1686745-21mailstats11:51:061
154169899343,25cyclictest1610927-21ssh09:51:030
154169899343,25cyclictest1610927-21ssh09:51:030
1541698993428,4cyclictest1694582-21unixbench_singl12:16:100
1541698993428,4cyclictest1564148-21unixbench_singl08:21:120
1541698993428,4cyclictest1564148-21unixbench_singl08:21:120
1541698993426,5cyclictest1679672-21idleruntime-cro11:30:010
1541698993425,6cyclictest1581826-21latency_hist09:15:030
1541698993425,6cyclictest0-21swapper/008:20:010
1541698993425,5cyclictest151ktimers/012:21:040
154170099333,23cyclictest1594896-21ssh09:31:012
154170099333,21cyclictest1051-21mta-sts-daemon08:56:032
1541700993324,6cyclictest710674-21cups-browsed12:35:562
1541700993324,6cyclictest1570133-21head08:41:102
1541700993316,12cyclictest351ktimers/210:16:052
154169999334,22cyclictest1623028-21ssh10:06:031
1541699993326,4cyclictest1056-21mta-sts-daemon11:55:581
1541699993325,5cyclictest1548211-21fschecks_count07:30:521
1541699993324,6cyclictest1572196-21fschecks_count08:50:521
1541699993322,9cyclictest1683486-21needreboot11:40:561
154169899332,26cyclictest1655020-21sh10:46:030
1541700993225,5cyclictest0-21swapper/209:30:012
1541700993222,7cyclictest261-21systemd-journal11:15:012
154170099322,22cyclictest659-21snmpd09:21:122
1541699993226,3cyclictest0-21swapper/109:20:011
1541699993226,3cyclictest0-21swapper/109:20:011
1541699993226,3cyclictest0-21swapper/109:05:011
1541699993225,4cyclictest1055-21mta-sts-daemon10:00:471
1541699993224,5cyclictest1678541-21aten_r2power_po11:25:491
1541699993224,5cyclictest1556675-21grep08:00:011
1541699993222,6cyclictest1646774-21needreboot10:35:561
1541698993226,4cyclictest1609495-21systemd-run09:50:010
1541698993226,4cyclictest1609495-21systemd-run09:50:010
1541698993225,4cyclictest1552211-21systemd-run07:45:010
1541698993224,5cyclictest261-21systemd-journal08:50:010
1541698993224,2cyclictest0-21swapper/011:00:010
1541700993124,4cyclictest1690909-21missed_timers12:05:552
1541700993123,5cyclictest1607452-21grep09:46:152
1541700993123,5cyclictest1607452-21grep09:46:152
1541700993123,5cyclictest1577573-21unixbench_multi09:06:092
154170099311,24cyclictest1632868-21kworker/u8:8+xprtiod10:25:572
154170099311,24cyclictest1632868-21kworker/u8:8+xprtiod10:25:572
154170099311,15cyclictest1689576-21cron12:01:012
1541699993125,3cyclictest0-21swapper/108:40:001
1541699993125,3cyclictest0-21swapper/107:50:011
1541699993123,5cyclictest1607545-21unixbench_singl09:46:151
1541699993123,5cyclictest1607545-21unixbench_singl09:46:151
1541699993123,5cyclictest1564186-21cron08:25:001
1541699993123,5cyclictest1564186-21cron08:25:001
1541699993120,8cyclictest1-21systemd11:36:051
154169899314,20cyclictest1630879-21ssh10:15:580
1541698993124,4cyclictest1547711-21systemd-run07:30:020
1541698993118,3cyclictest0-21swapper/007:20:580
1541700993024,3cyclictest0-21swapper/210:15:012
1541700993023,5cyclictest351ktimers/211:45:562
1541700993022,5cyclictest1568666-21cron08:40:002
1541699993023,4cyclictest1559914-21/usr/sbin/munin08:10:571
1541699993022,4cyclictest0-21swapper/109:35:541
1541698993023,4cyclictest1681115-21head11:31:100
1541698993018,5cyclictest1646190-21aten_r2power_en10:35:480
1541698993015,10cyclictest12350irq/32-eth010:51:030
1541700992921,5cyclictest1548452-21missed_timers07:30:552
1541700992914,8cyclictest1051-21mta-sts-daemon08:50:572
1541699992922,3cyclictest0-21swapper/110:20:011
1541699992921,5cyclictest1689196-21fschecks_time12:00:521
1541699992920,6cyclictest0-21swapper/107:26:011
1541698992923,4cyclictest1683566-21awk11:41:010
1541698992923,4cyclictest1056-21mta-sts-daemon11:10:110
154169899292,21cyclictest710674-21cups-browsed07:11:030
154169899292,21cyclictest710674-21cups-browsed07:11:030
1541698992921,6cyclictest420-21avahi-daemon09:01:050
1541700992821,4cyclictest1619099-21proc_pri10:01:062
1541700992820,5cyclictest1564729-21fschecks_time08:25:522
1541700992820,5cyclictest1564729-21fschecks_time08:25:522
1541700992820,4cyclictest0-21swapper/211:56:082
1541699992822,3cyclictest0-21swapper/108:26:101
1541699992822,3cyclictest0-21swapper/108:26:101
1541699992821,4cyclictest0-21swapper/112:10:011
1541699992821,3cyclictest0-21swapper/108:05:011
1541699992820,5cyclictest1541709-21systemd-run07:10:011
1541699992820,5cyclictest1541709-21systemd-run07:10:011
1541699992818,4cyclictest1054-21mta-sts-daemon07:41:011
154169899283,21cyclictest1670873-21sshd11:06:010
1541698992823,3cyclictest1051-21mta-sts-daemon12:14:140
1541698992822,3cyclictest0-21swapper/011:40:010
1541698992818,7cyclictest0-21swapper/007:40:010
154170199271,6cyclictest0-21swapper/308:25:593
154170199271,6cyclictest0-21swapper/308:25:593
154170099277,5cyclictest171rcu_preempt08:11:032
1541700992721,4cyclictest1051-21mta-sts-daemon07:21:132
1541700992719,6cyclictest1575619-21cron09:01:012
1541700992719,5cyclictest1542713-21proc_pri07:11:052
1541700992719,5cyclictest1542713-21proc_pri07:11:052
1541700992718,7cyclictest1678191-21sh11:25:012
1541699992720,4cyclictest0-21swapper/112:25:011
1541699992718,6cyclictest710674-21cups-browsed11:48:201
1541699992716,7cyclictest1546347-21latency_hist07:25:021
154169899272,20cyclictest12350irq/32-eth012:05:590
1541698992721,4cyclictest1594980-21ssh09:31:050
1541698992721,4cyclictest1559586-21tail08:06:100
1541698992720,4cyclictest1688604-21unixbench_singl11:56:080
1541700992620,3cyclictest0-21swapper/208:25:012
1541700992620,3cyclictest0-21swapper/208:25:012
1541700992619,4cyclictest710674-21cups-browsed11:29:152
1541700992619,4cyclictest427-21polkitd07:42:242
1541700992618,5cyclictest1696170-21/usr/sbin/munin12:25:022
1541700992617,7cyclictest1698806-21switchtime12:31:072
154170099260,3cyclictest171rcu_preempt11:31:002
1541699992618,5cyclictest710674-21cups-browsed08:45:291
1541698992619,5cyclictest600-21gmain08:11:120
154170199252,17cyclictest0-21swapper/308:11:023
154170199251,7cyclictest0-21swapper/312:31:013
1541700992519,3cyclictest0-21swapper/211:55:012
1541700992519,3cyclictest0-21swapper/207:45:522
1541699992516,7cyclictest1698299-21kernelversion12:30:531
154169899252,17cyclictest1556042-21ntpq07:55:580
1541698992517,5cyclictest1547911-21sshd07:30:060
1541698992513,9cyclictest1565578-21unixbench_multi08:26:100
1541698992513,9cyclictest1565578-21unixbench_multi08:26:100
154169899251,18cyclictest1577693-21awk09:10:010
154170099242,17cyclictest1562106-21ntpq08:16:012
1541700992419,2cyclictest0-21swapper/208:10:012
1541699992416,5cyclictest1681152-21cron11:35:011
1541698992419,3cyclictest1054-21mta-sts-daemon07:46:020
1541698992417,5cyclictest710674-21cups-browsed11:45:580
1541698992416,6cyclictest1568999-21aten_r2power_en08:40:480
154169899241,18cyclictest659-21snmpd12:31:000
154170199231,3cyclictest0-21swapper/310:56:013
154170199231,14cyclictest0-21swapper/309:11:053
154170099232,16cyclictest1547145-21ntpq07:26:012
1541700992318,2cyclictest0-21swapper/212:25:532
1541700992318,2cyclictest0-21swapper/212:25:532
1541699992315,5cyclictest1-21systemd07:50:591
1541698992316,4cyclictest0-21swapper/007:51:020
1541698992313,6cyclictest1686676-21/usr/sbin/munin11:51:050
154170199222,15cyclictest0-21swapper/311:30:583
154170199221,7cyclictest0-21swapper/311:01:013
154170199221,3cyclictest0-21swapper/311:25:593
154170199221,3cyclictest0-21swapper/308:35:593
154170199221,3cyclictest0-21swapper/307:10:573
154170199221,3cyclictest0-21swapper/307:10:573
154170199221,17cyclictest0-21swapper/312:35:583
1541700992216,3cyclictest0-21swapper/211:20:012
154169999221,15cyclictest710674-21cups-browsed08:06:041
154169899223,15cyclictest12350irq/32-eth007:16:000
154169899223,15cyclictest12350irq/32-eth007:16:000
154169899222,15cyclictest659-21snmpd08:50:590
1541698992215,4cyclictest1675809-21kernelversion11:16:000
1541698992212,5cyclictest151ktimers/008:55:570
154170199212,14cyclictest0-21swapper/310:51:023
154170199211,3cyclictest0-21swapper/312:11:003
154170199211,3cyclictest0-21swapper/311:06:053
154170199211,3cyclictest0-21swapper/310:32:353
154170199211,3cyclictest0-21swapper/310:20:593
154170199211,3cyclictest0-21swapper/310:20:593
154170199211,3cyclictest0-21swapper/310:03:583
154170199211,3cyclictest0-21swapper/309:51:003
154170199211,3cyclictest0-21swapper/309:51:003
154170199211,3cyclictest0-21swapper/309:26:013
154170199211,3cyclictest0-21swapper/309:05:523
154170199211,3cyclictest0-21swapper/308:46:043
154170199211,3cyclictest0-21swapper/307:50:573
154170199211,3cyclictest0-21swapper/307:30:573
154170199211,3cyclictest0-21swapper/307:25:573
154170199211,3cyclictest0-21swapper/307:21:053
154170199211,16cyclictest0-21swapper/310:06:033
154170199211,16cyclictest0-21swapper/309:16:023
154170199211,16cyclictest0-21swapper/309:16:023
154170199210,3cyclictest0-21swapper/310:40:593
154170199210,3cyclictest0-21swapper/309:41:003
154170199210,3cyclictest0-21swapper/309:41:003
154170199210,3cyclictest0-21swapper/309:31:063
154170199210,3cyclictest0-21swapper/308:40:563
154170199210,3cyclictest0-21swapper/307:15:593
154170199210,3cyclictest0-21swapper/307:15:593
154170199202,13cyclictest0-21swapper/309:45:593
154170199202,13cyclictest0-21swapper/309:45:593
154170199201,4cyclictest0-21swapper/311:45:533
154170199201,4cyclictest0-21swapper/308:15:593
154170199201,3cyclictest0-21swapper/312:21:023
154170199201,3cyclictest0-21swapper/312:15:583
154170199201,3cyclictest0-21swapper/312:06:013
154170199201,3cyclictest0-21swapper/312:01:003
154170199201,3cyclictest0-21swapper/311:55:503
154170199201,3cyclictest0-21swapper/311:50:583
154170199201,3cyclictest0-21swapper/311:40:583
154170199201,3cyclictest0-21swapper/311:11:023
154170199201,3cyclictest0-21swapper/310:35:593
154170199201,3cyclictest0-21swapper/310:26:003
154170199201,3cyclictest0-21swapper/310:26:003
154170199201,3cyclictest0-21swapper/310:10:593
154170199201,3cyclictest0-21swapper/309:55:313
154170199201,3cyclictest0-21swapper/309:36:003
154170199201,3cyclictest0-21swapper/309:20:273
154170199201,3cyclictest0-21swapper/308:50:573
154170199201,3cyclictest0-21swapper/308:31:013
154170199201,3cyclictest0-21swapper/308:20:583
154170199201,3cyclictest0-21swapper/308:20:583
154170199201,3cyclictest0-21swapper/308:05:503
154170199201,3cyclictest0-21swapper/308:00:593
154170199201,3cyclictest0-21swapper/307:45:593
154170199201,14cyclictest0-21swapper/310:15:583
154170199200,3cyclictest0-21swapper/311:35:593
154170199200,3cyclictest0-21swapper/311:20:593
154170199200,3cyclictest0-21swapper/311:15:563
154170199200,3cyclictest0-21swapper/310:45:573
154170199200,3cyclictest0-21swapper/308:55:543
154170199200,3cyclictest0-21swapper/307:55:573
154170199200,3cyclictest0-21swapper/307:40:583
154170199200,3cyclictest0-21swapper/307:35:553
154169899206,8cyclictest0-21swapper/007:10:000
154169899206,8cyclictest0-21swapper/007:10:000
154170199191,3cyclictest0-21swapper/312:25:503
154170199191,3cyclictest0-21swapper/312:25:503
154170199190,3cyclictest0-21swapper/309:00:563
154170199171,2cyclictest0-21swapper/307:10:013
154170199171,2cyclictest0-21swapper/307:10:013
1541700991611,3cyclictest1540314-21kworker/u8:17-nfsiod07:10:012
1541700991611,3cyclictest1540314-21kworker/u8:17-nfsiod07:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional