You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 08:55
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack0slot2.osadl.org (updated Mon Dec 29, 2025 00:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
140933926655,8sleep60-21swapper/619:06:586
140938525747,7sleep40-21swapper/419:07:364
140107325520,29sleep70-21swapper/719:04:107
140937723928,8sleep50-21swapper/519:07:295
1409777993734,2cyclictest1635733-21kworker/u16:1+flush-8:021:38:545
1409772993634,2cyclictest1809653-21kworker/u16:0+events_unbound22:58:534
1409772993634,2cyclictest1809653-21kworker/u16:0+events_unbound22:58:534
1409772993533,2cyclictest1409490-21kworker/u16:1+events_unbound19:43:544
1409785993431,2cyclictest1994703-21cat00:08:537
1409785993431,2cyclictest1655395-21awk21:13:537
1409777993331,2cyclictest1809653-21kworker/u16:0+events_unbound22:58:555
1409777993330,2cyclictest1809653-21kworker/u16:0+flush-8:022:54:125
1409777993330,2cyclictest1809653-21kworker/u16:0+flush-8:022:54:125
1409780993229,2cyclictest1965888-21kworker/u16:3+flush-8:000:04:096
1409777993129,2cyclictest1432835-21kworker/u16:0+flush-8:019:29:165
1409777993028,2cyclictest1995001-21kworker/u16:0+events_unbound00:12:005
1409777993027,2cyclictest1792248-21kworker/u16:1+events_unbound00:14:015
1409777992927,2cyclictest1762379-21kworker/u16:3+events_unbound22:18:045
1409777992927,2cyclictest1582550-21kworker/u16:0+events_unbound20:43:055
1409777992927,2cyclictest1142872-21kworker/u16:4+events_unbound19:54:165
1409777992926,2cyclictest1809653-21kworker/u16:0+events_unbound22:39:035
1409777992826,2cyclictest1868754-21kworker/u16:3+events_unbound23:10:055
1409777992826,2cyclictest1792248-21kworker/u16:1+events_unbound23:18:535
1409777992826,2cyclictest1762379-21kworker/u16:3+events_unbound22:29:035
1409777992826,2cyclictest1635733-21kworker/u16:1+events_unbound21:05:065
1409777992826,2cyclictest1558652-21kworker/u16:1+flush-8:020:25:055
1409772992825,2cyclictest1995001-21kworker/u16:0+flush-8:000:38:534
1409777992725,2cyclictest1878378-21kworker/u16:4+events_unbound23:56:035
1409777992725,2cyclictest1792248-21kworker/u16:1+events_unbound23:21:045
1409777992725,2cyclictest1409490-21kworker/u16:1+events_unbound19:47:045
1409777992725,2cyclictest1409490-21kworker/u16:1+events_unbound19:47:045
1409777992724,2cyclictest1635733-21kworker/u16:1+flush-8:021:44:045
1409772992724,2cyclictest1995001-21kworker/u16:0+flush-8:000:23:584
1409785992625,0cyclictest0-21swapper/720:04:127
1409777992624,2cyclictest1792248-21kworker/u16:1+events_unbound23:53:035
1409777992624,2cyclictest1792248-21kworker/u16:1+events_unbound23:47:155
1409777992624,2cyclictest1703832-21kworker/u16:0+events_unbound22:08:045
1409777992624,2cyclictest1703832-21kworker/u16:0+events_unbound22:08:045
1409777992624,2cyclictest1568284-21kworker/u16:2+events_unbound20:33:055
1409777992624,2cyclictest1432835-21kworker/u16:0+flush-8:019:26:125
1409777992623,2cyclictest1432835-21kworker/u16:0+flush-8:019:19:045
1409785992524,0cyclictest0-21swapper/723:14:007
1409777992523,2cyclictest1896746-21kworker/u16:2+events_unbound23:32:005
1409777992523,2cyclictest1762379-21kworker/u16:3+flush-8:022:22:165
1409777992523,2cyclictest1762379-21kworker/u16:3+events_unbound22:38:005
1409777992523,2cyclictest1674892-21kworker/u16:2+events_unbound21:28:165
1409772992523,2cyclictest1142872-21kworker/u16:4+flush-8:021:19:164
1409772992523,2cyclictest1142872-21kworker/u16:4+flush-8:021:19:164
1409785992423,0cyclictest0-21swapper/700:22:377
1409785992419,4cyclictest1674704-21latency_hist21:23:547
1409785992419,4cyclictest1674704-21latency_hist21:23:547
1409777992422,2cyclictest1809653-21kworker/u16:0+events_unbound22:53:055
1409777992422,2cyclictest1703832-21kworker/u16:0+events_unbound22:12:165
1409777992422,2cyclictest1582550-21kworker/u16:0+flush-8:021:21:045
1409777992422,2cyclictest1582550-21kworker/u16:0+flush-8:021:21:045
1409777992422,2cyclictest1490907-21kworker/u16:0+events_unbound20:08:575
1409777992422,2cyclictest1142872-21kworker/u16:4+events_unbound21:16:055
1409777992421,2cyclictest1896746-21kworker/u16:2+events_unbound23:33:545
1409777992421,2cyclictest1741779-21kworker/u16:4+events_unbound21:58:555
1409785992322,0cyclictest0-21swapper/722:29:147
1409785992317,5cyclictest1033-21rs:main7
1409777992321,2cyclictest2052423-21kworker/u16:2+events_unbound00:36:165
1409777992321,2cyclictest1965888-21kworker/u16:3+events_unbound00:07:055
1409777992321,2cyclictest1490907-21kworker/u16:0+events_unbound20:15:055
1409777992321,2cyclictest1490907-21kworker/u16:0+events_unbound20:01:205
1409777992321,2cyclictest1142872-21kworker/u16:4+events_unbound19:13:045
1409777992320,2cyclictest1820489-21kworker/u16:2+flush-8:023:04:045
1409772992321,2cyclictest1635733-21kworker/u16:1+events_unbound21:03:544
1409772992320,3cyclictest1142872-21kworker/u16:4+flush-8:020:29:244
1409785992221,0cyclictest0-21swapper/719:24:107
1409785992216,5cyclictest1539188-21latency_hist20:13:547
1409777992220,2cyclictest1995001-21kworker/u16:0+events_unbound00:27:035
1409777992220,2cyclictest1635733-21kworker/u16:1+events_unbound21:53:525
1409777992220,2cyclictest1582550-21kworker/u16:0+flush-8:021:01:575
1409777992220,2cyclictest1409490-21kworker/u16:1+events_unbound19:41:165
1409777992220,2cyclictest1142872-21kworker/u16:4+flush-8:021:33:495
1409777992219,2cyclictest1792248-21kworker/u16:1+flush-8:000:29:035
1409772992220,2cyclictest1896746-21kworker/u16:2+flush-8:023:34:184
1409772992220,2cyclictest1809653-21kworker/u16:0+flush-8:022:59:274
1409772992220,2cyclictest1500514-21kworker/u16:3+flush-8:020:24:094
1409772992220,2cyclictest1432835-21kworker/u16:0+flush-8:019:28:494
1409772992219,2cyclictest1390683-21kworker/u16:2+flush-8:019:09:144
1409785992120,0cyclictest0-21swapper/723:13:157
1409780992119,2cyclictest1751331-21kworker/u16:5+events_unbound22:44:216
1409780992117,3cyclictest1409490-21kworker/u16:1+events_unbound19:09:096
1409772992119,2cyclictest1792248-21kworker/u16:1+flush-8:023:48:484
1409785992019,0cyclictest0-21swapper/721:44:087
1409785992014,5cyclictest1839443-21latency_hist22:48:537
1409777992018,2cyclictest1965888-21kworker/u16:3+events_unbound00:01:055
1409777992018,2cyclictest1792248-21kworker/u16:1+events_unbound23:42:005
1409777992018,2cyclictest1582550-21kworker/u16:0+events_unbound20:45:575
1409777992018,2cyclictest1500514-21kworker/u16:3+flush-8:020:03:555
1409777992018,2cyclictest1142872-21kworker/u16:4+events_unbound19:52:215
1409772992018,2cyclictest1142872-21kworker/u16:4+flush-8:020:19:154
1409780991917,2cyclictest1142872-21kworker/u16:4+events_unbound20:49:076
1409777991917,2cyclictest1751331-21kworker/u16:5+events_unbound22:46:035
1409777991917,2cyclictest1142872-21kworker/u16:4+events_unbound19:15:055
1409772991917,2cyclictest2024079-21kworker/u16:3+flush-8:000:29:174
1409772991917,2cyclictest1792248-21kworker/u16:1+flush-8:023:39:174
1409772991917,2cyclictest1792248-21kworker/u16:1+events_unbound23:54:174
1409772991917,2cyclictest1751331-21kworker/u16:5+events_unbound22:08:534
1409772991917,2cyclictest1751331-21kworker/u16:5+events_unbound22:08:534
1409772991917,2cyclictest1142872-21kworker/u16:4+flush-8:020:49:144
1409772991916,2cyclictest1635733-21kworker/u16:1+events_unbound21:49:164
140978599189,8cyclictest5944-21gmain20:44:207
1409785991817,0cyclictest0-21swapper/720:02:057
1409785991816,1cyclictest0-21swapper/719:14:207
1409785991812,5cyclictest5944-21gmain23:24:117
1409777991816,2cyclictest1582550-21kworker/u16:0+events_unbound20:37:575
1409777991816,2cyclictest1558652-21kworker/u16:1+events_unbound20:51:575
1409772991817,1cyclictest1762379-21kworker/u16:3+events_unbound22:25:044
1409772991814,3cyclictest1500514-21kworker/u16:3+flush-8:019:54:194
140977299180,17cyclictest1751187-21missed_timers21:59:174
1409785991715,1cyclictest0-21swapper/723:39:187
1409780991715,2cyclictest1674892-21kworker/u16:2+flush-8:022:03:536
1409777991715,2cyclictest1995001-21kworker/u16:0+events_unbound00:19:435
1409772991715,2cyclictest1142872-21kworker/u16:4+flush-8:019:34:244
1409772991714,2cyclictest1582550-21kworker/u16:0+flush-8:020:44:204
1409785991615,0cyclictest0-21swapper/700:24:197
1409785991614,1cyclictest0-21swapper/722:59:227
1409785991613,2cyclictest0-21swapper/723:03:547
1409785991612,3cyclictest1267-21snmpd20:28:337
1409785991611,4cyclictest1771711-21latency_hist22:13:547
140978599160,14cyclictest0-21swapper/720:34:187
1409780991613,2cyclictest1489875-21ntpq19:44:196
1409780991613,2cyclictest1489875-21ntpq19:44:196
1409777991614,2cyclictest1635733-21kworker/u16:1+events_unbound21:42:165
1409772991614,2cyclictest1490907-21kworker/u16:0+flush-8:020:09:104
1409772991614,2cyclictest1490907-21kworker/u16:0+events_unbound20:14:184
1409772991612,3cyclictest1142872-21kworker/u16:4+events_unbound19:19:134
140978599156,8cyclictest0-21swapper/700:14:147
1409785991511,3cyclictest1509239-21ntpq19:54:217
140978599150,14cyclictest0-21swapper/700:33:527
1409780991512,3cyclictest1792248-21kworker/u16:1+flush-8:023:29:256
1409780991511,3cyclictest1390683-21kworker/u16:2+flush-8:019:49:116
1409777991513,2cyclictest1490907-21kworker/u16:0+events_unbound20:22:405
1409777991513,2cyclictest1142872-21kworker/u16:4+events_unbound20:55:575
1409772991513,2cyclictest1965535-21kworker/u16:2+flush-8:000:09:244
1409772991513,2cyclictest1142872-21kworker/u16:4+events_unbound19:14:164
1409772991513,1cyclictest1896746-21kworker/u16:2+flush-8:023:24:064
1409772991512,2cyclictest1142872-21kworker/u16:4+events_unbound20:39:074
1409785991414,0cyclictest0-21swapper/700:00:037
1409785991411,2cyclictest1267-21snmpd19:51:297
140978599140,1cyclictest0-21swapper/700:34:217
1409780991412,2cyclictest1762379-21kworker/u16:3+flush-8:022:34:256
1409780991412,2cyclictest1142872-21kworker/u16:4+events_unbound20:59:116
1409780991412,2cyclictest1142872-21kworker/u16:4+events_unbound20:14:126
1409777991412,2cyclictest1635733-21kworker/u16:1+events_unbound21:55:165
1409777991412,2cyclictest1409490-21kworker/u16:1+events_unbound19:38:185
1409777991412,2cyclictest1142872-21kworker/u16:4+events_unbound21:11:285
1409772991412,2cyclictest1896746-21kworker/u16:2+events_unbound23:32:164
1409772991412,2cyclictest1792248-21kworker/u16:1+events_unbound23:49:124
1409772991411,2cyclictest1142872-21kworker/u16:4+flush-8:021:24:234
140978599139,3cyclictest1849539-21/usr/sbin/munin22:54:247
140978599139,3cyclictest1849539-21/usr/sbin/munin22:54:247
140978599139,3cyclictest1625389-21ntpq20:54:217
140978599139,3cyclictest1267-21snmpd22:50:547
140978599139,3cyclictest1267-21snmpd22:35:087
140978599139,3cyclictest1267-21snmpd21:56:567
140978599139,3cyclictest1267-21snmpd20:40:307
140978599139,3cyclictest1267-21snmpd19:23:227
140978599136,6cyclictest0-21swapper/721:36:367
1409785991313,0cyclictest0-21swapper/721:04:207
1409785991311,1cyclictest0-21swapper/723:49:107
1409785991310,2cyclictest0-21swapper/722:38:537
1409780991311,2cyclictest1792248-21kworker/u16:1+flush-8:022:24:326
140978099130,1cyclictest0-21swapper/600:12:016
140978099130,13cyclictest0-21swapper/622:59:116
140978599129,2cyclictest1267-21snmpd20:22:177
140978599129,2cyclictest0-21swapper/720:28:547
140978599128,3cyclictest1267-21snmpd23:20:007
140978599128,3cyclictest1267-21snmpd22:05:237
140978599128,3cyclictest1267-21snmpd22:05:237
140978599128,3cyclictest1267-21snmpd20:59:217
140978599128,3cyclictest1267-21snmpd20:14:207
140978599128,3cyclictest1267-21snmpd19:43:027
140978599128,3cyclictest1267-21snmpd19:34:077
140978599128,3cyclictest1267-21snmpd19:12:557
140978599127,4cyclictest1995011-21/usr/sbin/munin00:09:227
140978599126,5cyclictest1936419-21latency_hist23:38:537
140978599125,6cyclictest0-21swapper/723:58:147
1409785991211,0cyclictest0-21swapper/723:29:097
1409785991211,0cyclictest0-21swapper/721:14:087
140978599120,11cyclictest0-21swapper/719:44:137
140978599120,11cyclictest0-21swapper/719:44:137
140978599120,10cyclictest0-21swapper/721:59:077
1409780991211,1cyclictest0-21swapper/623:15:536
1409780991210,2cyclictest1762379-21kworker/u16:3+flush-8:022:19:096
1409780991210,2cyclictest1142872-21kworker/u16:4+flush-8:020:24:266
1409780991210,2cyclictest1142872-21kworker/u16:4+flush-8:019:39:206
1409780991210,2cyclictest1142872-21kworker/u16:4+events_unbound21:24:216
140978099120,1cyclictest0-21swapper/600:14:326
1409777991210,2cyclictest1896746-21kworker/u16:2+events_unbound23:27:365
140977299128,3cyclictest1995001-21kworker/u16:0+flush-8:000:14:164
1409772991210,2cyclictest1762379-21kworker/u16:3+events_unbound22:34:064
1409772991210,2cyclictest1635733-21kworker/u16:1+flush-8:021:04:154
140977299120,1cyclictest0-21swapper/400:06:404
140977299120,12cyclictest0-21swapper/422:46:254
626589110,1rtkit-daemon0-21swapper/421:29:584
140978599118,2cyclictest1267-21snmpd22:23:597
140978599118,2cyclictest1267-21snmpd22:21:267
140978599114,6cyclictest0-21swapper/719:30:157
140978599111,2cyclictest1711850-21sshd-session21:39:147
1409785991111,0cyclictest0-21swapper/721:32:257
1409785991111,0cyclictest0-21swapper/721:27:037
140978599110,10cyclictest1950722-21kthreadcore23:44:177
140978599110,10cyclictest1267-21snmpd22:18:027
140978099119,2cyclictest1142872-21kworker/u16:4+events_unbound21:14:216
1409780991110,1cyclictest0-21swapper/623:49:096
1409780991110,1cyclictest0-21swapper/623:46:476
1409780991110,1cyclictest0-21swapper/623:22:596
1409780991110,1cyclictest0-21swapper/622:54:176
1409780991110,1cyclictest0-21swapper/622:54:176
1409780991110,1cyclictest0-21swapper/622:42:566
1409780991110,1cyclictest0-21swapper/622:04:286
1409780991110,1cyclictest0-21swapper/622:04:286
1409780991110,1cyclictest0-21swapper/621:51:146
1409780991110,1cyclictest0-21swapper/621:21:266
1409780991110,1cyclictest0-21swapper/621:21:266
1409780991110,1cyclictest0-21swapper/621:06:376
1409780991110,1cyclictest0-21swapper/620:06:236
1409780991110,1cyclictest0-21swapper/619:24:466
1409780991110,1cyclictest0-21swapper/600:30:286
140978099110,11cyclictest0-21swapper/600:35:496
140977799110,11cyclictest0-21swapper/522:24:375
140977299119,2cyclictest1635733-21kworker/u16:1+flush-8:021:34:224
140977299119,2cyclictest1500514-21kworker/u16:3+events_unbound20:04:164
1409772991110,1cyclictest0-21swapper/400:22:444
140977299110,1cyclictest0-21swapper/423:08:104
140977299110,11cyclictest0-21swapper/422:13:284
140977299110,11cyclictest0-21swapper/420:38:434
140978599100,8cyclictest0-21swapper/720:49:057
140978099109,1cyclictest1601421-21kthreadcore20:44:146
140978099109,1cyclictest0-21swapper/623:27:436
140978099109,1cyclictest0-21swapper/621:58:296
140978099109,1cyclictest0-21swapper/621:12:276
140978099109,1cyclictest0-21swapper/600:25:066
140978099106,3cyclictest1704984-21cat21:39:086
140977299109,1cyclictest0-21swapper/423:22:224
140977299109,1cyclictest0-21swapper/420:55:264
140977299108,2cyclictest1762379-21kworker/u16:3+flush-8:022:29:154
140977299108,1cyclictest1041-21lldpd22:19:534
140977299105,4cyclictest1889129-21cat23:14:094
14097809998,1cyclictest0-21swapper/623:54:036
14097809998,1cyclictest0-21swapper/623:06:266
14097809998,1cyclictest0-21swapper/622:29:326
14097809998,1cyclictest0-21swapper/622:18:496
14097809998,1cyclictest0-21swapper/621:46:306
14097809998,1cyclictest0-21swapper/621:37:216
14097809998,1cyclictest0-21swapper/620:55:166
14097809998,1cyclictest0-21swapper/620:03:056
14097809998,1cyclictest0-21swapper/619:17:226
14097809990,4cyclictest2015449-21ps00:19:116
14097729998,1cyclictest0-21swapper/423:12:544
14097729998,1cyclictest0-21swapper/422:41:514
14097729998,1cyclictest0-21swapper/421:09:464
14097729998,1cyclictest0-21swapper/420:02:184
14097729997,2cyclictest1432835-21kworker/u16:0+flush-8:019:29:114
14097729995,3cyclictest1734061-21cat21:54:094
14097729990,8cyclictest1840745-21sed22:49:084
14097809987,1cyclictest0-21swapper/620:13:106
14097809986,1cyclictest0-21swapper/620:34:126
14097809986,1cyclictest0-21swapper/619:34:106
14097809983,4cyclictest1979968-21grep23:59:126
14097809983,4cyclictest1939750-21grep23:39:126
14097809983,4cyclictest1881286-21cat23:09:136
14097809983,4cyclictest1592270-21cut20:39:136
14097809983,4cyclictest1550677-21cut20:19:146
14097809983,4cyclictest1501347-21expr19:54:086
14097809983,4cyclictest1437485-21grep19:19:126
14097809981,2cyclictest0-21swapper/619:29:116
14097729986,2cyclictest1762379-21kworker/u16:3+flush-8:022:14:094
14097729986,1cyclictest0-21swapper/421:14:154
14097729986,1cyclictest0-21swapper/419:44:124
14097729986,1cyclictest0-21swapper/419:44:124
14097729985,2cyclictest1712592-21ntpq21:39:184
14097729984,3cyclictest1978610-21kthreadcore23:59:114
14097729984,3cyclictest1499698-21awk19:49:214
14097729983,4cyclictest1717709-21cut21:44:154
14097809975,2cyclictest1762379-21kworker/u16:3+flush-8:022:09:096
14097809974,2cyclictest1927262-21cpuspeed_turbos23:34:056
14097809973,3cyclictest1839916-21cpuspeed22:49:036
14097809973,3cyclictest1685000-21grep21:29:066
14097809973,3cyclictest1569488-21sed20:29:096
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional