You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-19 - 14:49

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Wed Nov 19, 2025 12:39:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1535768996449,10cyclictest1632111-21unixbench_singl10:44:242
1535767996354,6cyclictest266-21systemd-journal12:30:011
1535767995645,7cyclictest0-21swapper/111:04:171
1535767995039,7cyclictest1593858-21unixbench_singl09:44:261
1535767994739,5cyclictest1555264-21systemd-run08:15:021
1535766994730,14cyclictest0-21swapper/011:39:170
1535767994636,6cyclictest1671068-21latency_hist11:45:021
153576799453,4cyclictest0-21swapper/107:14:131
153576799453,33cyclictest1696495-21ssh12:24:161
1535766994525,11cyclictest12450irq/32-eth012:39:190
1535768994434,5cyclictest0-21swapper/211:39:182
1535767994436,5cyclictest1603611-21ssh10:00:001
1535767994436,5cyclictest1603611-21ssh10:00:001
1535767994431,10cyclictest1652277-21sh11:15:011
1535767994333,6cyclictest422-21dbus-daemon11:39:161
1535766994226,4cyclictest421-21avahi-daemon10:24:060
1535768994131,7cyclictest1680905-21idleruntime-cro12:00:012
1535767994133,5cyclictest1660356-21fschecks_time11:29:051
1535766994134,4cyclictest0-21swapper/009:39:130
1535768994027,8cyclictest0-21swapper/208:04:192
153576799403,28cyclictest1680135-21ssh11:59:181
1535767994032,5cyclictest1705692-21aten_r2power_vo12:39:031
1535767994032,5cyclictest1614659-21aten_r2power_en10:19:001
1535766994032,5cyclictest738385-21cups-browsed11:09:000
1535766994032,5cyclictest1657539-21ssh11:24:110
1535768993933,3cyclictest0-21swapper/211:15:012
1535768993931,5cyclictest1628999-21munin-run10:40:012
1535768993931,5cyclictest1626038-21latency_hist10:35:032
1535768993930,7cyclictest1590907-21sh09:40:012
1535768993929,6cyclictest738385-21cups-browsed12:31:302
1535767993930,6cyclictest421-21avahi-daemon10:51:371
1535767993929,7cyclictest421-21avahi-daemon10:22:481
1535766993932,3cyclictest0-21swapper/012:19:140
1535766993931,5cyclictest1581594-21systemd-run09:25:020
1535766993926,10cyclictest1677467-21kworker/u8:011:55:020
1535768993829,5cyclictest0-21swapper/212:39:172
1535767993827,7cyclictest266-21systemd-journal09:18:321
1535767993827,6cyclictest1642655-21latency_hist11:00:061
1535768993730,4cyclictest955-21mta-sts-daemon11:09:172
1535768993729,3cyclictest0-21swapper/210:09:122
1535768993726,8cyclictest1578683-21/usr/sbin/munin09:20:022
1535767993728,6cyclictest1557303-21fschecks_count08:24:051
1535767993727,7cyclictest738385-21cups-browsed07:39:161
1535767993717,11cyclictest271ktimers/107:29:291
1535766993730,4cyclictest1690361-21unixbench_multi12:14:250
1535766993730,4cyclictest1690361-21unixbench_multi12:14:250
1535766993729,5cyclictest1632406-21systemd-run10:45:020
1535766993716,14cyclictest12450irq/32-eth009:29:180
1535766993710,25cyclictest151ktimers/010:54:170
1535768993630,3cyclictest0-21swapper/208:35:012
1535768993628,5cyclictest1664820-21munin-plugin-st11:35:012
1535767993629,5cyclictest0-21swapper/112:09:211
1535767993629,5cyclictest0-21swapper/112:09:211
1535767993628,5cyclictest1597299-21systemd-run09:50:021
1535768993528,4cyclictest1603626-21munin-run10:00:002
1535768993528,4cyclictest1603626-21munin-run10:00:002
1535768993526,6cyclictest738385-21cups-browsed11:44:122
1535768993525,8cyclictest453-21systemd-logind07:55:012
1535767993527,5cyclictest1546259-21munin-plugin-st07:45:011
1535767993527,5cyclictest1546259-21munin-plugin-st07:45:011
1535767993527,4cyclictest1621141-21aten_r2power_fr10:29:041
1535767993527,4cyclictest0-21swapper/108:20:011
1535767993524,8cyclictest1553547-21timerwakeupswit08:09:251
1535767993524,7cyclictest1538789-21systemd-run07:20:021
1535766993527,6cyclictest1625562-21unixbench_singl10:34:240
1535766993527,4cyclictest0-21swapper/010:49:150
1535768993427,4cyclictest1540262-21cron07:25:012
1535768993427,3cyclictest0-21swapper/210:55:012
1535768993427,3cyclictest0-21swapper/210:25:012
1535768993427,3cyclictest0-21swapper/209:13:322
1535768993426,5cyclictest1544740-21cron07:40:012
1535768993426,4cyclictest0-21swapper/210:19:242
1535767993427,4cyclictest955-21mta-sts-daemon09:37:571
1535767993425,6cyclictest1627883-21kernelversion10:39:101
1535767993422,8cyclictest1676809-21awk11:54:261
153576799342,23cyclictest1574843-21ssh09:14:181
1535766993428,4cyclictest1628773-21grep10:39:310
1535766993428,4cyclictest1569294-21fschecks_count09:04:070
1535766993428,3cyclictest477-21rs:main0
1535766993427,4cyclictest1621739-21ntp_kernel_pll_10:29:140
1535766993426,3cyclictest0-21swapper/008:29:140
1535768993326,3cyclictest0-21swapper/210:15:012
1535768993326,3cyclictest0-21swapper/208:20:012
1535768993325,5cyclictest1686568-21ssh12:09:102
1535768993325,5cyclictest1686568-21ssh12:09:102
1535767993325,5cyclictest1663323-21aten_r2power_en11:34:001
1535767993325,5cyclictest1583261-21fschecks_time09:29:051
1535767993324,7cyclictest0-21swapper/110:50:031
1535766993326,4cyclictest1645202-21ls11:04:230
1535766993323,7cyclictest1577914-21ssh09:19:110
1535766993322,8cyclictest1612610-21timerwakeupswit10:14:250
153576899323,24cyclictest1605889-21ssh10:04:112
1535768993224,5cyclictest1543170-21tail07:34:282
1535768993222,5cyclictest0-21swapper/212:24:192
1535768993221,8cyclictest461-21thd10:49:172
1535767993226,2cyclictest0-21swapper/112:32:151
1535767993224,5cyclictest1567206-21unixbench_singl08:54:241
1535767993222,7cyclictest1682673-21/usr/sbin/munin12:04:251
1535767993222,7cyclictest1682673-21/usr/sbin/munin12:04:251
1535767993222,6cyclictest0-21swapper/109:54:161
153576799322,16cyclictest1625050-21ssh10:34:161
1535767993220,9cyclictest1542642-21ntp_kernel_pll_07:34:161
153576799321,25cyclictest1654579-21ssh11:19:161
1535766993225,4cyclictest1552146-21unixbench_multi08:04:250
1535766993224,5cyclictest738385-21cups-browsed11:41:210
1535768993125,3cyclictest0-21swapper/207:20:012
1535768993124,4cyclictest1622617-21munin-plugin-st10:30:012
1535768993123,5cyclictest1540815-21fschecks_time07:29:222
1535768993123,4cyclictest0-21swapper/209:49:172
1535768993122,6cyclictest266-21systemd-journal09:55:022
1535768993122,6cyclictest0-21swapper/209:24:272
1535768993120,8cyclictest1690353-21unixbench_multi12:14:242
1535768993120,8cyclictest1690353-21unixbench_multi12:14:242
153576799313,21cyclictest1631470-21ssh10:44:111
1535767993126,3cyclictest0-21swapper/108:00:021
1535767993123,5cyclictest1693927-21latency_hist12:20:021
1535767993123,4cyclictest0-21swapper/110:04:081
1535767993123,4cyclictest0-21swapper/108:40:011
1535766993125,3cyclictest0-21swapper/010:09:580
1535766993124,5cyclictest738385-21cups-browsed11:47:090
1535766993122,7cyclictest1695125-21sh12:22:320
153576699311,26cyclictest1615407-21ssh10:19:150
153576699311,24cyclictest1659845-21kworker/u8:9+rpciod12:34:170
1535768993023,4cyclictest738385-21cups-browsed10:56:252
1535768993023,4cyclictest1584173-21unixbench_multi09:29:232
1535768993022,5cyclictest1568354-21mailstats08:59:222
153576899302,23cyclictest1673327-21ssh11:49:162
1535768993020,7cyclictest1593316-21ntp_offset09:44:172
1535768993016,9cyclictest266-21systemd-journal11:22:322
1535767993022,5cyclictest956-21mta-sts-daemon11:09:161
1535767993022,5cyclictest1586789-21ntp_kernel_pll_09:34:131
1535767993022,5cyclictest0-21swapper/110:14:011
1535767993019,7cyclictest271ktimers/108:49:121
1535766993022,5cyclictest738385-21cups-browsed11:29:350
1535766993021,7cyclictest266-21systemd-journal11:15:010
1535766993021,6cyclictest1679456-21basename11:59:030
1535766993020,7cyclictest1602637-21latency09:59:120
1535766993020,7cyclictest1602637-21latency09:59:120
1535766993020,7cyclictest1599670-21ntp_offset09:54:160
1535766993014,13cyclictest1543241-21cron07:35:010
1535766993013,12cyclictest12450irq/32-eth009:44:130
153576899294,20cyclictest1586844-21ssh09:34:162
1535768992923,3cyclictest0-21swapper/208:00:012
153576899292,19cyclictest1699895-21ssh12:29:192
1535768992921,5cyclictest1625862-21kworker/u8:0+xprtiod11:30:012
153576899291,22cyclictest1654715-21ssh11:19:212
153576799292,16cyclictest1689859-21ssh12:14:151
153576799292,16cyclictest1689859-21ssh12:14:151
1535767992921,5cyclictest956-21mta-sts-daemon09:05:011
1535767992921,5cyclictest1581562-21cron09:25:011
1535767992921,4cyclictest0-21swapper/111:24:191
1535767992920,6cyclictest266-21systemd-journal10:10:011
1535767992919,5cyclictest0-21swapper/108:34:131
153576799291,7cyclictest171rcu_preempt11:49:191
1535766992922,5cyclictest453-21systemd-logind08:00:020
1535766992922,5cyclictest1547743-21cron07:50:000
1535766992922,5cyclictest1547743-21cron07:50:000
1535766992922,5cyclictest1540171-21unixbench_multi07:24:260
1535766992922,4cyclictest1571991-21kworker/u8:8-rpciod09:13:320
1535766992921,6cyclictest1596884-21timerwakeupswit09:49:250
1535766992921,6cyclictest1557806-21proc_pri08:24:180
1535766992920,4cyclictest955-21mta-sts-daemon10:04:250
1535766992920,3cyclictest0-21swapper/009:34:160
1535766992918,3cyclictest0-21swapper/007:45:010
1535766992918,3cyclictest0-21swapper/007:45:010
1535766992912,12cyclictest151ktimers/008:14:160
153576899284,17cyclictest1644940-21ssh11:04:162
1535768992824,2cyclictest0-21swapper/207:45:012
1535768992824,2cyclictest0-21swapper/207:45:012
1535768992822,3cyclictest0-21swapper/212:05:022
1535768992822,3cyclictest0-21swapper/212:05:022
1535768992821,4cyclictest1569419-21kernelversion09:04:092
1535767992822,3cyclictest1535990-21kworker/u8:6-xprtiod08:04:061
1535766992823,3cyclictest0-21swapper/012:10:010
1535766992823,3cyclictest0-21swapper/012:10:010
1535766992822,4cyclictest1642426-21cron11:00:010
1535766992822,4cyclictest1563295-21fschecks_count08:44:060
1535768992722,2cyclictest0-21swapper/212:20:012
1535768992720,4cyclictest1561782-21fschecks_count08:39:042
1535768992718,6cyclictest421-21avahi-daemon09:07:432
1535768992718,6cyclictest421-21avahi-daemon08:41:022
1535767992720,4cyclictest0-21swapper/107:25:021
1535767992719,5cyclictest738385-21cups-browsed08:41:461
1535767992719,4cyclictest0-21swapper/108:59:121
1535767992718,4cyclictest0-21swapper/108:29:141
153576699272,7cyclictest1683505-21ntpq12:04:170
153576699272,7cyclictest1683505-21ntpq12:04:170
1535766992722,3cyclictest1700361-21unixbench_multi12:29:250
1535766992721,4cyclictest1664351-21ssh11:34:220
1535766992721,4cyclictest1571751-21munin-plugin-st09:10:010
1535766992720,5cyclictest1556033-21missed_timers08:19:090
153576899269,14cyclictest351ktimers/208:09:172
153576899265,4cyclictest1571746-21diskmemload11:52:462
1535768992620,3cyclictest0-21swapper/208:15:012
1535767992620,3cyclictest0-21swapper/109:10:021
1535767992619,5cyclictest266-21systemd-journal07:48:321
1535767992619,5cyclictest266-21systemd-journal07:48:321
1535766992618,6cyclictest1564473-21sshd08:45:320
1535768992520,2cyclictest0-21swapper/207:10:022
1535768992519,4cyclictest0-21swapper/207:15:012
1535768992517,5cyclictest491-21gdbus08:51:512
1535768992516,6cyclictest491-21gdbus08:26:072
153576699258,13cyclictest422-21dbus-daemon07:10:020
1535766992519,4cyclictest1568622-21unixbench_multi08:59:250
1535766992518,6cyclictest1535765-21cyclictest07:38:310
1535766992518,5cyclictest266-21systemd-journal07:10:320
1535768992416,5cyclictest474-21in:imuxsock08:50:002
1535768992414,7cyclictest1557961-21ls08:24:212
1535766992416,6cyclictest151ktimers/008:34:180
1535766992416,5cyclictest491-21gdbus08:35:500
1535768992317,3cyclictest0-21swapper/207:49:072
1535768992317,3cyclictest0-21swapper/207:49:072
1535766992318,2cyclictest0-21swapper/008:09:250
1535766992317,4cyclictest738385-21cups-browsed07:16:450
153576799222,15cyclictest1548709-21ntpq07:54:131
1535767992212,8cyclictest1535770-21sh07:10:021
1535766992217,3cyclictest1535765-21cyclictest07:29:210
1535766992216,4cyclictest1566284-21uniq08:54:060
153576699221,17cyclictest1548618-21ntpq07:54:090
153576999172,7cyclictest0-21swapper/311:24:123
153576999172,7cyclictest0-21swapper/309:14:093
153576999164,6cyclictest0-21swapper/310:54:223
153576999163,9cyclictest0-21swapper/311:59:153
153576999162,9cyclictest0-21swapper/312:24:043
153576999161,8cyclictest0-21swapper/311:39:163
153576999153,5cyclictest0-21swapper/308:14:113
153576999152,7cyclictest0-21swapper/309:49:173
153576999152,6cyclictest0-21swapper/309:54:063
153576999151,8cyclictest0-21swapper/312:19:133
153576999151,7cyclictest0-21swapper/312:14:143
153576999151,7cyclictest0-21swapper/312:14:143
153576999151,7cyclictest0-21swapper/311:09:153
153576999151,6cyclictest0-21swapper/307:54:103
153576999151,6cyclictest0-21swapper/307:29:273
153576999144,6cyclictest0-21swapper/312:04:133
153576999144,6cyclictest0-21swapper/312:04:133
153576999142,8cyclictest0-21swapper/310:20:323
153576999142,7cyclictest0-21swapper/312:29:163
153576999142,7cyclictest0-21swapper/310:39:143
153576999142,7cyclictest0-21swapper/309:45:013
153576999142,7cyclictest0-21swapper/307:39:163
153576999141,8cyclictest0-21swapper/311:54:163
153576999141,8cyclictest0-21swapper/311:49:023
153576999141,8cyclictest0-21swapper/311:44:133
153576999141,8cyclictest0-21swapper/311:04:113
153576999141,8cyclictest0-21swapper/310:09:133
153576999141,7cyclictest0-21swapper/310:34:133
153576999141,7cyclictest0-21swapper/308:09:153
153576999141,6cyclictest0-21swapper/308:39:133
153576999141,6cyclictest0-21swapper/308:29:123
153576999141,6cyclictest0-21swapper/308:04:153
153576999141,6cyclictest0-21swapper/307:49:113
153576999141,6cyclictest0-21swapper/307:49:113
153576999141,6cyclictest0-21swapper/307:44:103
153576999141,6cyclictest0-21swapper/307:44:103
153576999141,6cyclictest0-21swapper/307:19:313
153576999136,4cyclictest0-21swapper/311:15:013
153576999133,6cyclictest0-21swapper/311:34:133
153576999132,7cyclictest0-21swapper/312:39:153
153576999132,7cyclictest0-21swapper/309:39:133
153576999132,6cyclictest0-21swapper/309:21:313
153576999131,7cyclictest0-21swapper/312:34:163
153576999131,7cyclictest0-21swapper/310:59:093
153576999131,7cyclictest0-21swapper/310:49:143
153576999131,7cyclictest0-21swapper/310:04:053
153576999131,7cyclictest0-21swapper/309:59:173
153576999131,7cyclictest0-21swapper/309:59:173
153576999131,7cyclictest0-21swapper/309:19:173
153576999131,6cyclictest0-21swapper/309:09:103
153576999131,6cyclictest0-21swapper/307:59:113
153576999126,4cyclictest0-21swapper/312:09:113
153576999126,4cyclictest0-21swapper/312:09:113
153576999125,4cyclictest0-21swapper/311:19:273
153576999123,5cyclictest0-21swapper/311:28:223
153576999122,6cyclictest0-21swapper/310:14:123
153576999121,7cyclictest0-21swapper/310:44:113
153576999121,7cyclictest0-21swapper/310:29:133
153576999121,7cyclictest0-21swapper/310:19:113
153576999121,6cyclictest0-21swapper/308:44:123
153576999121,5cyclictest0-21swapper/308:19:123
153576999120,6cyclictest0-21swapper/308:49:113
153576999115,4cyclictest0-21swapper/309:02:243
153576999111,6cyclictest0-21swapper/309:30:103
153576999111,6cyclictest0-21swapper/308:24:113
153576999110,9cyclictest0-21swapper/307:35:023
153576999101,7cyclictest0-21swapper/307:10:033
153576999101,6cyclictest0-21swapper/309:25:303
153576999101,5cyclictest0-21swapper/308:34:043
153576999100,6cyclictest0-21swapper/307:25:013
15357699995,3cyclictest0-21swapper/308:59:143
15357699995,3cyclictest0-21swapper/308:54:083
15357699984,3cyclictest0-21swapper/307:10:433
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional