You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-07 - 19:12

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #4

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot4s.osadl.org (updated Sun Dec 07, 2025 12:44:06)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1485994994336,5cyclictest1600044-21latency_hist09:00:012
1485989993832,4cyclictest1693454-21/usr/sbin/munin10:30:141
1485994993629,4cyclictest1698383-21latency_hist10:35:012
1485983993430,3cyclictest1687683-21kworker/u8:2+flush-259:010:50:000
1485994993225,5cyclictest1532539-21latency_hist07:55:012
1485983993227,3cyclictest1558521-21kworker/u8:2+flush-259:009:05:010
1485994993127,3cyclictest1579161-21kworker/u8:1+flush-259:009:19:592
1485983993126,3cyclictest1512202-21/usr/sbin/munin07:35:150
1485983993126,3cyclictest1512202-21/usr/sbin/munin07:35:150
1485994992922,5cyclictest1568588-21latency_hist08:30:012
1485983992925,3cyclictest1823020-21kworker/u8:1+events_unbound12:35:140
1485983992925,3cyclictest1687683-21kworker/u8:2+flush-259:010:45:000
1486000992823,4cyclictest1635193-21ntpq09:30:233
1485983992824,3cyclictest1620856-21kworker/u8:4+events_unbound10:00:230
1486000992724,2cyclictest1522264-21kworker/u8:1+events_unbound07:55:193
1485994992721,4cyclictest1626244-21diskstats09:25:152
1485983992723,3cyclictest1760979-21kworker/u8:0+flush-259:011:40:220
148598399271,24cyclictest1822810-21true12:35:010
1485994992623,2cyclictest1770166-21kworker/u8:3+flush-259:012:05:012
1485994992619,5cyclictest1786693-21latency_hist12:00:002
1485994992619,5cyclictest1537681-21latency_hist08:00:002
1485983992622,3cyclictest1677961-21kworker/u8:4+events_unbound10:20:030
1485983992622,3cyclictest1636127-21kworker/u8:1+flush-259:010:10:200
1485983992621,3cyclictest1636127-21kworker/u8:1+flush-259:010:10:000
1485994992521,3cyclictest1687683-21kworker/u8:2+flush-259:011:20:002
1485994992520,3cyclictest1447316-21kworker/u8:0+flush-259:007:45:242
1485989992518,5cyclictest2698871-21systemd-journal11:10:001
1485983992521,3cyclictest1496398-21kworker/u8:2+events_unbound08:05:230
1486000992420,3cyclictest1817916-21apt-get12:30:123
1485994992421,2cyclictest1522264-21kworker/u8:1+flush-259:008:20:002
1485994992421,2cyclictest1-21systemd11:15:002
1485994992420,3cyclictest1583557-21kworker/u8:3+flush-259:009:05:162
1485994992419,3cyclictest1583557-21kworker/u8:3+events_unbound08:45:012
1485989992420,3cyclictest1547043-21kworker/u8:0+events_unbound08:35:181
1485989992418,5cyclictest1562592-21ntpq08:20:261
1485989992418,4cyclictest1625808-21latency_hist09:25:001
1485983992420,3cyclictest1781554-21kworker/u8:2+events_unbound12:15:150
1485983992417,5cyclictest2698871-21systemd-journal09:50:000
1486000992319,3cyclictest1745736-21apt-get11:20:133
1486000992318,3cyclictest1584315-21/usr/sbin/munin08:45:153
1485994992319,3cyclictest3624151-21kworker/u8:3+events_unbound07:15:272
1485994992319,3cyclictest1636127-21kworker/u8:1+flush-259:009:40:202
1485989992318,3cyclictest1703781-21apt-get10:40:121
1485983992320,2cyclictest1447316-21kworker/u8:0+events_unbound07:40:150
1485983992319,3cyclictest1661516-21kworker/u8:0+events_unbound10:30:130
1485983992317,4cyclictest1594864-21latency_hist08:55:010
1485983992316,5cyclictest1636327-21/usr/sbin/munin09:35:150
1485983992315,6cyclictest1501707-21latency_hist07:25:000
1486000992219,2cyclictest492-21dbus-daemon10:50:003
1485994992218,3cyclictest1558521-21kworker/u8:2+events_unbound09:00:182
1485994992217,3cyclictest1620856-21kworker/u8:4+flush-259:009:50:152
1485989992216,4cyclictest2698871-21systemd-journal12:25:011
1485989992216,4cyclictest2698871-21systemd-journal12:25:001
1485983992218,3cyclictest1730347-21apt-get11:05:130
1485983992218,3cyclictest1636127-21kworker/u8:1+flush-259:010:50:160
1485983992215,5cyclictest2698871-21systemd-journal11:05:010
1485983992215,5cyclictest1620632-21latency_hist09:20:000
1485994992118,2cyclictest1687683-21kworker/u8:2+events_unbound10:55:172
1485983992118,2cyclictest1583557-21kworker/u8:3+events_unbound09:10:150
1485983992118,2cyclictest1532769-21kworker/u8:3+events_unbound08:30:260
1485983992117,3cyclictest1770166-21kworker/u8:3+flush-259:011:55:210
1485983992117,3cyclictest1734963-21kworker/u8:3+flush-259:011:10:260
1485983992117,3cyclictest1522264-21kworker/u8:1+flush-259:007:55:160
1485983992117,2cyclictest1496398-21kworker/u8:2+events_unbound07:25:130
1485983992114,4cyclictest1797033-21latency_hist12:10:000
1486000992015,4cyclictest1817652-21latency_hist12:30:013
1486000992014,4cyclictest1766096-21latency_hist11:40:013
1485994992016,3cyclictest1645530-21kworker/u8:0+flush-259:009:45:252
1485994992013,5cyclictest1712883-21ntpq10:45:222
148599499200,18cyclictest1730104-21unin-run11:05:002
1485989992017,2cyclictest1760979-21kworker/u8:0+flush-259:011:50:191
1485989992016,3cyclictest1661516-21kworker/u8:0+flush-259:010:00:001
1485989992015,4cyclictest1620856-21kworker/u8:4+flush-259:009:25:181
1485989992014,4cyclictest1754897-21ntpq11:25:221
1485983992016,3cyclictest1447316-21kworker/u8:0+events_unbound07:13:130
1485994991915,3cyclictest1823020-21kworker/u8:1+events_unbound12:35:212
1485994991915,3cyclictest1667648-21kworker/u8:3+events_unbound10:10:142
1485994991915,3cyclictest1547043-21kworker/u8:0+flush-259:008:35:182
1485994991913,4cyclictest1698622-21/usr/sbin/munin10:35:162
1485989991913,4cyclictest2698871-21systemd-journal07:59:591
1485989991913,4cyclictest1496790-21/usr/sbin/munin07:20:151
1485983991916,2cyclictest1636127-21kworker/u8:1+events_unbound10:35:250
1485983991916,2cyclictest1579161-21kworker/u8:1+events_unbound08:40:250
1485983991916,2cyclictest1447316-21kworker/u8:0+events_unbound07:30:140
1485983991916,2cyclictest1447316-21kworker/u8:0+events_unbound07:30:130
1485983991915,3cyclictest1724941-21kworker/u8:1+events_unbound11:25:150
1485983991915,3cyclictest1687683-21kworker/u8:2+events_unbound10:25:170
1486000991814,3cyclictest1807375-21kworker/u8:0+flush-259:012:20:163
1486000991814,3cyclictest1807375-21kworker/u8:0+flush-259:012:20:163
1486000991813,4cyclictest2698871-21systemd-journal07:54:553
1485994991815,2cyclictest1532769-21kworker/u8:3+flush-259:008:20:212
1485994991811,5cyclictest1667525-21base6410:05:012
1485989991814,3cyclictest1522476-21/usr/sbin/munin07:45:191
1485989991814,3cyclictest1447316-21kworker/u8:0+flush-259:007:40:001
1485989991814,3cyclictest1447316-21kworker/u8:0+flush-259:007:40:001
1485989991813,4cyclictest2698871-21systemd-journal10:15:001
1485983991815,2cyclictest1781555-21kworker/u8:4+events_unbound12:25:210
1485983991815,2cyclictest1734963-21kworker/u8:3+events_unbound11:22:140
1485983991815,2cyclictest1636127-21kworker/u8:1+flush-259:009:50:250
1485983991815,2cyclictest1579161-21kworker/u8:1+events_unbound09:21:140
148600099179,6cyclictest2698871-21systemd-journal10:30:003
1486000991714,2cyclictest1615465-21idleruntime-cro09:15:003
1486000991711,4cyclictest2698871-21systemd-journal07:10:023
148600099170,16cyclictest1-21systemd11:20:003
148599499171,8cyclictest1625824-21basename09:25:002
1485994991713,3cyclictest1661516-21kworker/u8:0+flush-259:010:15:172
1485994991713,3cyclictest1620856-21kworker/u8:4+flush-259:010:00:172
1485994991711,4cyclictest2698871-21systemd-journal11:39:132
1485989991714,2cyclictest1827913-21cron12:40:011
1485989991714,2cyclictest0-21swapper/107:55:001
1485983991714,2cyclictest61450irq/134-enp0s29f1:tx-008:35:150
1485983991714,2cyclictest1496398-21kworker/u8:2+flush-259:008:00:250
1485983991713,3cyclictest1532769-21kworker/u8:3+events_unbound08:15:270
1485983991712,4cyclictest1786963-21apt-get12:00:130
148600099169,5cyclictest1547957-21latency_hist08:10:013
148600099168,6cyclictest1599170-21ntpq08:55:213
1486000991613,2cyclictest1583557-21kworker/u8:3+flush-259:009:15:163
1485994991613,2cyclictest1807344-21idleruntime-cro12:20:012
1485994991613,2cyclictest1792567-21irqcore12:05:162
1485994991612,3cyclictest1636127-21kworker/u8:1+flush-259:010:40:252
1485994991610,4cyclictest1661825-21latency_hist10:00:002
1485989991614,1cyclictest0-21swapper/108:45:001
1485989991612,3cyclictest1447316-21kworker/u8:0+flush-259:007:44:591
1485989991610,4cyclictest1771446-21/usr/sbin/munin11:45:151
1485983991614,1cyclictest60650irq/133-enp0s29f1:rx-009:05:230
1485983991613,2cyclictest60650irq/133-enp0s29f1:rx-011:35:260
1485983991613,2cyclictest1807375-21kworker/u8:0+events_unbound12:20:170
1485983991613,2cyclictest1807375-21kworker/u8:0+events_unbound12:20:170
1485983991612,3cyclictest3624151-21kworker/u8:3+events_unbound07:15:290
1485983991612,3cyclictest1724941-21kworker/u8:1+flush-259:011:30:230
1485983991612,3cyclictest1620856-21kworker/u8:4+events_unbound09:30:250
1485983991610,5cyclictest1660911-21ntpq09:55:220
1486000991513,1cyclictest1771446-21/usr/sbin/munin11:45:193
1486000991513,1cyclictest0-21swapper/310:00:003
148599499159,4cyclictest2698871-21systemd-journal07:40:142
1485994991512,2cyclictest1760979-21kworker/u8:0+events_unbound11:50:232
1485994991512,2cyclictest1687683-21kworker/u8:2+flush-259:011:20:182
1485994991511,3cyclictest1791899-21kworker/u8:1+flush-259:012:10:202
1485994991511,3cyclictest1687683-21kworker/u8:2+flush-259:011:25:182
1485994991511,3cyclictest1532769-21kworker/u8:3+events_unbound08:00:182
1485989991512,2cyclictest1666975-21idleruntime-cro10:05:001
1485989991512,2cyclictest1538960-21kthreadcore08:00:171
1485989991510,4cyclictest1447316-21kworker/u8:0+flush-259:007:30:171
1485989991510,4cyclictest1447316-21kworker/u8:0+flush-259:007:30:161
1485989991510,3cyclictest1583557-21kworker/u8:3+flush-259:009:10:171
1485983991514,1cyclictest60650irq/133-enp0s29f1:rx-009:28:340
1485983991512,2cyclictest61450irq/134-enp0s29f1:tx-007:45:150
1485983991512,2cyclictest1642534-21kthreadcore09:40:150
1485983991511,3cyclictest1496398-21kworker/u8:2+events_unbound07:50:230
1485983991510,3cyclictest1724941-21kworker/u8:1+flush-259:011:15:190
148600099148,4cyclictest2698871-21systemd-journal12:04:133
148600099148,4cyclictest1501974-21apt-get07:25:123
1486000991411,2cyclictest1447316-21kworker/u8:0+flush-259:007:45:223
148599499149,4cyclictest1610590-21apt-get09:10:122
148599499147,5cyclictest1719371-21latency_hist10:55:012
1485994991411,2cyclictest1522264-21kworker/u8:1+events_unbound08:10:182
1485994991411,2cyclictest1505988-21ntp_offset07:25:212
1485994991410,2cyclictest1687683-21kworker/u8:2-events_unbound10:25:222
1485989991412,1cyclictest1672600-21idleruntime-cro10:10:001
1485989991412,1cyclictest0-21swapper/111:45:001
1485989991411,2cyclictest1692422-21nvmesmart_nvme010:25:261
1485989991411,2cyclictest1641254-21sh09:40:001
1485989991411,2cyclictest1589779-21base6408:50:011
1485989991410,3cyclictest2698871-21systemd-journal07:29:501
1485983991412,1cyclictest60650irq/133-enp0s29f1:rx-008:26:480
1485983991412,1cyclictest60650irq/133-enp0s29f1:rx-008:21:460
1485983991412,1cyclictest60650irq/133-enp0s29f1:rx-008:10:160
148600099139,3cyclictest1781554-21kworker/u8:2+flush-259:011:55:013
148600099139,3cyclictest1558521-21kworker/u8:2+flush-259:008:25:273
148600099139,3cyclictest1501727-21kworker/u8:3+flush-259:007:35:003
148600099139,3cyclictest1501727-21kworker/u8:3+flush-259:007:35:003
148600099138,3cyclictest18064762sleep312:15:243
148600099137,4cyclictest1724941-21kworker/u8:1+flush-259:011:05:273
1486000991311,1cyclictest0-21swapper/310:20:183
1486000991311,1cyclictest0-21swapper/309:25:173
148599499139,3cyclictest1807375-21kworker/u8:0+flush-259:012:20:252
148599499139,3cyclictest1807375-21kworker/u8:0+flush-259:012:20:242
148599499138,4cyclictest1568823-21kworker/u8:4+flush-259:008:30:162
148599499137,3cyclictest1781555-21kworker/u8:4+events_unbound12:30:222
148598999139,3cyclictest1491428-21kworker/u8:1+flush-259:007:15:261
1485989991310,2cyclictest503-21systemd-logind07:14:591
1485989991310,2cyclictest1760483-21unixbench_multi11:30:271
1485983991312,1cyclictest60650irq/133-enp0s29f1:rx-012:13:050
1485983991312,1cyclictest60650irq/133-enp0s29f1:rx-010:15:240
1485983991312,1cyclictest60650irq/133-enp0s29f1:rx-008:57:180
1485983991310,2cyclictest1775908-21unixbench_multi11:45:250
148600099129,2cyclictest1797357-21cpuspeed_turbos12:10:123
148600099129,2cyclictest1697948-21unixbench_singl10:30:243
148600099129,2cyclictest1687683-21kworker/u8:2+flush-259:010:55:193
148600099129,2cyclictest1606455-21grep09:05:163
148600099129,2cyclictest1580223-21kthreadcore08:40:193
148600099129,2cyclictest1521810-21unixbench_singl07:40:253
148600099129,1cyclictest0-21swapper/310:05:243
148600099128,3cyclictest1615696-21kworker/u8:2+flush-259:009:45:183
148600099128,3cyclictest1501727-21kworker/u8:3+flush-259:007:35:173
148600099128,3cyclictest1501727-21kworker/u8:3+flush-259:007:35:163
148600099128,1cyclictest0-21swapper/308:25:003
1486000991210,1cyclictest0-21swapper/311:30:133
148599499129,2cyclictest1636776-21irqcore09:35:172
148599499129,2cyclictest1590153-21fschecks_count08:50:152
148599499129,1cyclictest0-21swapper/211:50:012
148598999129,2cyclictest1609914-21unixbench_singl09:05:251
148598999129,1cyclictest0-21swapper/110:50:001
148598999128,3cyclictest2698871-21systemd-journal08:20:001
148598999126,4cyclictest2698871-21systemd-journal12:10:001
148598399129,2cyclictest1583557-21kworker/u8:3+events_unbound08:48:140
148600099119,1cyclictest0-21swapper/311:15:003
148600099119,1cyclictest0-21swapper/310:15:243
148600099118,2cyclictest1496884-21cpuspeed_turbos07:20:153
148600099117,3cyclictest1770166-21kworker/u8:3+flush-259:011:40:253
148600099115,4cyclictest1593958-21ntpq08:50:213
148600099114,5cyclictest2698871-21systemd-journal08:15:003
148600099110,9cyclictest1719373-21apt10:55:003
148600099110,2cyclictest1666979-21awk10:05:003
148599499117,2cyclictest1499113-21kthreadcore07:20:202
148598999118,2cyclictest1787028-21cpuspeed_turbos12:00:161
148598999118,2cyclictest0-21swapper/111:15:211
148598999118,2cyclictest0-21swapper/108:30:001
148598999117,3cyclictest1589477-21gpgv08:50:011
148598999116,4cyclictest1802475-21/usr/sbin/munin12:15:151
148598999116,4cyclictest1781846-21awk11:55:121
148600099108,1cyclictest0-21swapper/311:25:243
148600099107,2cyclictest1792212-21cpuspeed_turbos12:05:133
148598999108,1cyclictest0-21swapper/109:30:151
148598999107,2cyclictest0-21swapper/111:35:251
148598999106,2cyclictest15431062chrt08:05:131
148598999104,2cyclictest1817659-21munin-run12:30:001
148598999103,1cyclictest0-21swapper/108:35:001
14860009996,2cyclictest0-21swapper/311:55:253
14860009995,3cyclictest1568823-21kworker/u8:4+flush-259:008:35:263
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional