You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-29 - 21:46

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #4

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot4s.osadl.org (updated Fri May 29, 2026 12:44:06)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1529463997265,5cyclictest1795959-21getprofile12:01:370
1529467994942,5cyclictest1828192-21dpkg12:33:231
1529467994543,1cyclictest1795940-21lspci12:01:371
1529471994138,2cyclictest1764317-21kworker/u8:4+flush-259:012:35:012
1529471994135,5cyclictest1639115-21cat09:35:002
1529471994033,5cyclictest335557-21systemd-journal08:44:052
1529474993934,4cyclictest1774604-21base6411:45:003
1529467993933,4cyclictest1691377-21latency_hist10:25:011
1529463993934,3cyclictest1696978-21diskstats10:30:120
1529474993733,2cyclictest1649917-21kworker/u8:1+flush-259:011:35:153
1529471993734,2cyclictest1659036-21kworker/u8:0+events_unbound10:05:002
1529467993733,3cyclictest1665577-21kworker/u8:3+flush-259:010:14:461
1529463993630,4cyclictest335557-21systemd-journal10:18:590
1529474993329,3cyclictest1758470-21apt-get11:30:013
1529467993317,5cyclictest335557-21systemd-journal12:10:001
1529463993328,3cyclictest509-21rs:main0
1529463993319,12cyclictest0-21swapper/011:30:010
1529474993229,2cyclictest1613412-21kworker/u8:1+events_unbound09:15:183
1529471993228,3cyclictest1665577-21kworker/u8:3+flush-259:010:10:272
1529471993227,4cyclictest1649917-21kworker/u8:1+flush-259:012:01:592
1529471993226,4cyclictest1722775-21diskstats10:55:152
1529474993125,4cyclictest335557-21systemd-journal12:28:543
1529467993125,4cyclictest335557-21systemd-journal07:51:041
1529474993026,3cyclictest1534607-21kworker/u8:2+events_unbound07:40:183
1529474993023,5cyclictest1585398-21ntpq08:35:193
1529471993024,4cyclictest1581178-21latency_hist08:35:002
1529467993019,4cyclictest1701973-21apt-get10:35:121
1529463993024,4cyclictest335557-21systemd-journal09:45:000
1529474992925,3cyclictest1558704-21kworker/u8:0+flush-259:008:00:163
1529467992923,4cyclictest509-21rs:main1
152946399290,27cyclictest1-21systemd10:26:150
1529471992824,3cyclictest1681016-21kworker/u8:2+flush-259:011:40:262
1529474992724,2cyclictest1681016-21kworker/u8:2+flush-259:011:50:013
1529463992723,2cyclictest1575610-21apt-get08:25:110
1529474992622,3cyclictest1575577-21kworker/u8:3+flush-259:008:35:003
1529474992620,4cyclictest335557-21systemd-journal12:01:383
1529471992622,3cyclictest1540610-21kworker/u8:4+events_unbound08:00:022
1529471992621,4cyclictest335557-21systemd-journal12:35:432
1529471992621,4cyclictest1659036-21kworker/u8:0+flush-259:010:05:162
1529467992622,3cyclictest1534607-21kworker/u8:2+flush-259:007:35:001
1529467992620,4cyclictest335557-21systemd-journal08:16:041
1529463992621,4cyclictest1665577-21kworker/u8:3+flush-259:010:45:160
1529474992519,4cyclictest1828180-21apt-get12:33:233
1529471992522,2cyclictest1681016-21kworker/u8:2+flush-259:011:25:002
1529471992521,3cyclictest1665577-21kworker/u8:3+flush-259:010:50:002
1529474992420,3cyclictest1540610-21kworker/u8:4+flush-259:007:30:153
1529471992420,3cyclictest1764317-21kworker/u8:4+flush-259:012:05:232
1529471992420,3cyclictest1665577-21kworker/u8:3+flush-259:010:15:202
1529471992420,3cyclictest1660561-21base6409:55:022
1529471992419,3cyclictest1659968-21latency_hist09:55:012
1529471992418,4cyclictest509-21rs:main2
1529467992417,5cyclictest1539498-21ntpq07:20:211
1529463992419,3cyclictest335557-21systemd-journal11:09:150
1529463992419,3cyclictest335557-21systemd-journal10:10:010
1529474992321,1cyclictest1649917-21kworker/u8:1+events_unbound11:00:233
1529474992320,2cyclictest1649917-21kworker/u8:1+flush-259:012:15:243
1529474992319,3cyclictest1801945-21latency_hist12:10:003
1529474992319,3cyclictest1587195-21kworker/u8:3+events_unbound08:50:233
1529471992319,3cyclictest1569502-21kworker/u8:2+flush-259:008:15:142
1529463992316,5cyclictest335557-21systemd-journal09:05:000
1529474992219,2cyclictest1649917-21kworker/u8:1+flush-259:011:30:003
1529471992219,2cyclictest1558704-21kworker/u8:0+flush-259:008:55:252
1529471992219,2cyclictest1558704-21kworker/u8:0+flush-259:008:55:252
1529471992218,3cyclictest1558704-21kworker/u8:0+flush-259:009:05:052
1529471992217,3cyclictest1758469-21latency_hist11:30:002
1529463992217,4cyclictest1802634-21apt-get12:10:100
1529474992118,2cyclictest1807760-21kworker/u8:2+flush-259:012:20:203
1529474992118,2cyclictest1649917-21kworker/u8:1+flush-259:012:35:143
1529474992117,3cyclictest1665577-21kworker/u8:3+events_unbound10:45:233
1529471992117,3cyclictest1587195-21kworker/u8:3+flush-259:009:00:242
1529471992117,3cyclictest1587195-21kworker/u8:3+flush-259:008:45:122
1529471992116,3cyclictest1686462-21/usr/sbin/munin10:20:192
1529467992118,2cyclictest1665577-21kworker/u8:3+events_unbound10:55:181
1529467992117,3cyclictest1634069-21/usr/sbin/munin09:30:131
1529467992117,3cyclictest1587224-21apt-get08:45:071
1529467992115,5cyclictest1768396-21ntpq11:35:191
1529467992115,4cyclictest1722353-21latency_hist10:55:011
1529467992115,4cyclictest1644548-21latency_hist09:40:011
152946799210,19cyclictest1-21systemd11:05:001
1529463992116,3cyclictest1655110-21apt-get09:50:110
1529463992115,5cyclictest1779264-21ntpq11:45:210
1529474992017,2cyclictest1628669-21sh09:25:003
1529474992017,2cyclictest1547042-21kworker/u8:1+flush-259:007:55:013
1529474992016,3cyclictest1558704-21kworker/u8:0+flush-259:009:35:243
1529474992015,3cyclictest1569486-21latency_hist08:15:003
1529474992013,5cyclictest1591280-21ntpq08:45:163
1529471992017,2cyclictest1665577-21kworker/u8:3+events_unbound11:30:162
1529471992017,2cyclictest1613412-21kworker/u8:1+flush-259:009:20:202
1529471992016,3cyclictest1807760-21kworker/u8:2+events_unbound12:20:222
1529471992016,3cyclictest1649917-21kworker/u8:1+events_unbound10:25:232
1529467992016,3cyclictest1774485-21kworker/u8:0+events_unbound11:55:181
1529467992016,3cyclictest1649917-21kworker/u8:1+flush-259:010:30:151
1529463992017,2cyclictest1534606-21kworker/u8:0+flush-259:007:15:000
1529463992016,3cyclictest1552254-21kworker/u8:5+flush-259:008:14:530
1529463992015,4cyclictest1639483-21cat09:35:010
1529463992014,4cyclictest1780324-21/usr/sbin/munin11:50:150
1529463992013,5cyclictest335557-21systemd-journal11:20:140
1529474991913,4cyclictest509-21rs:main3
1529471991916,2cyclictest1649917-21kworker/u8:1+flush-259:011:45:112
1529467991913,4cyclictest335557-21systemd-journal12:11:161
152946399194,1cyclictest0-21swapper/012:40:010
1529463991911,7cyclictest60350irq/132-enp0s29f1:rx-009:30:240
1529474991815,2cyclictest1623534-21kworker/u8:2+events_unbound09:45:263
1529474991814,3cyclictest1534607-21kworker/u8:2+flush-259:007:50:013
1529471991814,3cyclictest1774485-21kworker/u8:0+events_unbound12:25:142
1529467991814,3cyclictest1529687-21apt-get07:10:091
152946399186,11cyclictest0-21swapper/009:20:000
152946399185,3cyclictest1763540-21sed11:30:250
152946399185,2cyclictest1632740-21sed09:25:190
152946399185,12cyclictest0-21swapper/011:10:220
152946399183,3cyclictest1618475-21grep09:15:000
152946399183,3cyclictest1561619-21cut08:00:180
1529463991814,3cyclictest60350irq/132-enp0s29f1:rx-008:35:180
1529463991812,5cyclictest60350irq/132-enp0s29f1:rx-008:45:360
152946399180,5cyclictest1822887-21systemd12:28:540
152946399180,4cyclictest1549396-21ps07:40:170
152946399180,3cyclictest1801942-21sh12:10:010
152946399180,3cyclictest1-21systemd11:45:010
1529474991714,2cyclictest1774485-21kworker/u8:0+flush-259:012:10:213
1529474991714,2cyclictest1649917-21kworker/u8:1+events_unbound10:20:143
1529474991714,2cyclictest1623534-21kworker/u8:2+flush-259:009:50:153
1529474991713,3cyclictest1665577-21kworker/u8:3+events_unbound10:50:143
1529471991714,2cyclictest1548095-21kthreadcore07:40:162
1529471991712,4cyclictest1613412-21kworker/u8:1+flush-259:009:15:252
1529467991715,1cyclictest1675693-21fwupd10:08:161
1529467991714,2cyclictest1561051-21kthreadcore08:00:181
1529467991712,3cyclictest1769570-21apt-get11:40:111
1529467991711,4cyclictest1785305-21latency_hist11:55:001
152946399175,2cyclictest17250irq/128-nvme0q107:25:000
152946399175,1cyclictest0-21swapper/009:55:160
152946399173,2cyclictest1627808-21modprobe09:20:200
152946399173,2cyclictest1566978-21kthreadcore08:05:170
152946399172,1cyclictest0-21swapper/010:10:120
152946399171,4cyclictest335557-21systemd-journal10:25:000
152946399171,4cyclictest1722749-21grep10:55:130
1529463991714,2cyclictest60350irq/132-enp0s29f1:rx-008:42:580
152946399171,3cyclictest1768482-21ntpq11:35:210
152946399170,4cyclictest1816905-21/usr/sbin/munin12:20:190
152946399170,4cyclictest1811822-21ld12:15:200
152946399170,4cyclictest1747238-21/usr/sbin/munin11:15:190
152946399170,4cyclictest1747238-21/usr/sbin/munin11:15:180
152946399170,4cyclictest1650360-21/usr/sbin/munin09:45:200
152946399170,4cyclictest1611882-21/usr/sbin/munin09:05:220
152946399170,4cyclictest1598593-21/usr/sbin/munin08:55:180
152946399170,4cyclictest1598593-21/usr/sbin/munin08:55:170
152946399170,4cyclictest1552659-21awk07:50:000
152946399170,3cyclictest1827262-21tail12:30:190
152946399170,3cyclictest1558463-21idleruntime-cro08:00:000
152946399170,2cyclictest1597332-21idleruntime-cro08:55:000
1529474991611,4cyclictest1540377-21latency_hist07:25:013
1529471991613,2cyclictest1649917-21kworker/u8:1+flush-259:011:55:002
1529471991613,2cyclictest1540610-21kworker/u8:4+flush-259:007:30:002
1529471991612,3cyclictest1665577-21kworker/u8:3+flush-259:010:50:202
1529471991611,4cyclictest1701705-21latency_hist10:35:002
1529467991612,3cyclictest500-21systemd-logind09:25:001
1529467991612,3cyclictest1665577-21kworker/u8:3+flush-259:011:30:211
1529467991612,3cyclictest1665577-21kworker/u8:3+flush-259:010:45:241
1529467991612,3cyclictest1623534-21kworker/u8:2+flush-259:009:45:311
152946799161,14cyclictest1618366-21awk09:15:011
1529467991611,3cyclictest1558704-21kworker/u8:0+flush-259:009:03:351
1529463991614,1cyclictest60350irq/132-enp0s29f1:rx-007:40:000
1529463991613,2cyclictest61150irq/133-enp0s29f1:tx-011:00:180
1529463991613,2cyclictest60350irq/132-enp0s29f1:rx-011:55:240
1529463991613,2cyclictest60350irq/132-enp0s29f1:rx-008:15:090
152946399160,4cyclictest1717418-21grep10:50:130
152946399160,4cyclictest1669823-21ntpq10:00:200
152946399160,4cyclictest1553459-21cut07:50:120
152946399160,3cyclictest1705995-21/usr/sbin/munin10:35:220
152946399160,3cyclictest1545745-21grep07:30:240
152946399160,2cyclictest1541024-21cron07:30:000
1529474991513,1cyclictest1699113-21kthreadcore10:30:163
1529474991513,1cyclictest0-21swapper/307:40:003
1529474991512,1cyclictest0-21swapper/310:40:173
1529474991511,3cyclictest1659036-21kworker/u8:0+events_unbound09:55:223
1529474991511,3cyclictest1534606-21kworker/u8:0+flush-259:007:20:003
1529474991510,4cyclictest1649917-21kworker/u8:1+flush-259:010:25:273
1529474991510,3cyclictest1670691-21dump-pmu-power10:05:003
1529471991512,2cyclictest1806640-21ntp_kernel_pll_12:10:192
1529471991511,3cyclictest1638957-21kworker/u8:3+flush-259:009:40:262
152946799159,4cyclictest509-21rs:main1
152946799158,1cyclictest0-21swapper/108:55:001
1529467991512,2cyclictest1817823-21cron12:25:011
1529467991512,1cyclictest0-21swapper/109:55:001
1529467991511,3cyclictest507-21in:imuxsock10:05:001
1529463991512,2cyclictest60350irq/132-enp0s29f1:rx-008:32:290
1529463991512,2cyclictest60350irq/132-enp0s29f1:rx-007:19:400
152946399150,3cyclictest1529496-21cat07:10:010
152947499148,4cyclictest1574702-21latency_hist08:20:003
1529474991411,2cyclictest1649917-21kworker/u8:1+flush-259:011:10:003
1529474991411,2cyclictest1649917-21kworker/u8:1+flush-259:010:35:243
152947499140,13cyclictest1-21systemd11:19:143
152947499140,13cyclictest1-21systemd11:19:143
1529471991411,1cyclictest0-21swapper/211:35:152
152946799148,4cyclictest1587195-21kworker/u8:3+flush-259:009:05:161
152947499139,3cyclictest1638957-21kworker/u8:3+flush-259:009:40:243
152947499137,4cyclictest1681418-21diskstats10:15:133
1529474991311,1cyclictest1602481-21idleruntime-cro09:00:003
1529474991311,1cyclictest1602481-21idleruntime-cro09:00:003
152947499131,10cyclictest1534596-21awk07:15:003
1529474991310,2cyclictest1649917-21kworker/u8:1+flush-259:011:20:203
152947199139,3cyclictest1681016-21kworker/u8:2+events_unbound11:15:232
152947199139,3cyclictest1681016-21kworker/u8:2+events_unbound11:15:222
152947199138,4cyclictest1785733-21diskstats11:55:132
1529471991310,2cyclictest1649917-21kworker/u8:1+events_unbound11:10:152
152946799138,3cyclictest1628935-21apt-get09:25:121
152946799136,1cyclictest0-21swapper/108:00:001
1529467991310,2cyclictest1822516-21unixbench_multi12:25:251
1529467991310,2cyclictest1622998-21unixbench_multi09:15:241
1529463991311,1cyclictest60350irq/132-enp0s29f1:rx-008:22:350
152947499129,2cyclictest1552254-21kworker/u8:5+flush-259:008:25:053
152947499125,5cyclictest513-21gdbus12:00:003
1529474991210,1cyclictest0-21swapper/309:35:013
152947199129,2cyclictest0-21swapper/212:15:132
152947199129,2cyclictest0-21swapper/207:10:012
152947199121,9cyclictest1540370-21awk07:25:002
1529471991210,1cyclictest1728795-21kthreadcore11:00:172
152946799129,2cyclictest1775399-21fschecks_time11:45:131
152946799129,2cyclictest1740417-21tr11:10:161
152946799129,2cyclictest0-21swapper/111:10:001
152946799129,1cyclictest0-21swapper/108:45:001
152946799127,3cyclictest335557-21systemd-journal11:19:551
152946799127,3cyclictest335557-21systemd-journal11:19:541
152947199119,1cyclictest1564120-21fschecks_count08:05:132
152947199119,1cyclictest0-21swapper/207:30:172
152947199118,2cyclictest1575678-21cpuspeed_turbos08:25:132
152946799119,1cyclictest0-21swapper/107:40:011
152946799115,4cyclictest335557-21systemd-journal07:29:181
152946799111,8cyclictest335557-21systemd-journal07:20:001
152947499106,2cyclictest1541019-21latency_hist07:30:013
152947499101,7cyclictest1586951-21awk08:45:003
152947199105,3cyclictest1532415-21cut07:10:152
152947199101,7cyclictest1618371-21munin-run09:15:002
152946799104,4cyclictest335557-21systemd-journal08:22:041
152946799101,8cyclictest1540610-21kworker/u8:4+flush-259:008:15:001
15294749996,1cyclictest0-21swapper/308:25:003
15294749991,5cyclictest335557-21systemd-journal08:10:003
15294719997,1cyclictest0-21swapper/207:50:012
15294719994,3cyclictest1569470-21cron08:15:002
15294679994,1cyclictest0-21swapper/108:35:001
15294679992,6cyclictest17450irq/129-nvme0q207:50:011
15294719986,1cyclictest0-21swapper/207:16:042
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional