You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-02 - 07:47
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackfslot7.osadl.org (updated Tue Dec 02, 2025 00:46:08)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2512737997334,19cyclictest2649454-21/usr/sbin/munin23:10:234
2512737997234,19cyclictest591rcuc/400:25:154
2512737997233,39cyclictest0-21swapper/422:51:534
2512737997133,19cyclictest2539262-21grep19:55:174
2512737997113,39cyclictest2548067-21sed20:10:194
2512739997032,38cyclictest0-21swapper/620:05:216
251273799697,60cyclictest2674574-21taskset23:52:014
2512737996951,18cyclictest601ktimers/419:44:574
251273799678,59cyclictest2683698-21kworker/u32:4+events_unbound00:14:354
2512737996729,38cyclictest0-21swapper/400:35:584
2512737996528,19cyclictest601ktimers/421:45:154
2512733996529,18cyclictest171ktimers/022:50:160
2512737996424,40cyclictest0-21swapper/419:15:054
2512737996423,39cyclictest6050ktimers/400:03:494
251273799635,39cyclictest110280-21munin-node22:10:114
2512737996345,18cyclictest0-21swapper/423:45:164
2512737996222,20cyclictest2583217-21taskset21:13:134
2512737996122,19cyclictest0-21swapper/400:32:284
2512737995921,0cyclictest144798rtkit-daemon22:29:534
251273799580,39cyclictest2631134-21ntpq22:35:234
251273799570,57cyclictest2555291-21awk20:25:014
2512737995536,19cyclictest875-21mta-sts-daemon19:13:374
2512737995536,19cyclictest875-21mta-sts-daemon19:13:374
2512737995517,19cyclictest2610295-21aten2.4-expect22:00:134
2512737995436,18cyclictest2583729-21gdbus21:25:074
2512737995419,35cyclictest0-21swapper/423:29:394
2512737995419,35cyclictest0-21swapper/420:47:574
2512737995419,34cyclictest0-21swapper/422:31:394
2512737995419,15cyclictest0-21swapper/420:39:074
2512737995419,15cyclictest0-21swapper/420:28:154
2512737995415,39cyclictest0-21swapper/423:55:094
2512737995319,34cyclictest0-21swapper/423:41:474
2512737995319,34cyclictest0-21swapper/422:58:554
2512737995319,34cyclictest0-21swapper/421:56:154
2512737995319,34cyclictest0-21swapper/421:30:234
2512737995319,15cyclictest0-21swapper/423:31:154
2512737995315,19cyclictest2654826-21wc23:20:014
2512737995315,19cyclictest2649203-21munin-run23:10:014
2512737995315,19cyclictest2578710-21df_inode21:05:154
2512737995315,19cyclictest2528475-21ntpq19:35:214
2512735995314,19cyclictest0-21swapper/220:30:182
2512739995214,19cyclictest0-21swapper/619:10:166
2512739995214,19cyclictest0-21swapper/619:10:166
2512739995213,39cyclictest0-21swapper/619:35:176
2512737995233,19cyclictest0-21swapper/422:42:274
2512737995233,19cyclictest0-21swapper/422:15:034
2512737995233,19cyclictest0-21swapper/421:35:354
2512737995233,19cyclictest0-21swapper/421:21:354
2512737995233,19cyclictest0-21swapper/420:57:154
2512737995233,19cyclictest0-21swapper/420:32:154
2512737995233,19cyclictest0-21swapper/420:05:394
2512737995233,19cyclictest0-21swapper/420:02:034
2512737995233,19cyclictest0-21swapper/400:09:474
2512737995233,0cyclictest0-21swapper/419:26:314
2512737995232,19cyclictest0-21swapper/421:01:274
2512737995214,19cyclictest0-21swapper/422:24:274
2512737995213,39cyclictest0-21swapper/422:45:274
2512737995213,39cyclictest0-21swapper/421:41:554
2512737995213,20cyclictest2584076-21acpi21:15:114
2512737995213,19cyclictest0-21swapper/423:39:014
2512735995214,19cyclictest0-21swapper/200:00:162
2512737995133,18cyclictest0-21swapper/420:44:474
2512737995133,18cyclictest0-21swapper/420:15:594
2512737995133,18cyclictest0-21swapper/419:47:594
2512737995133,18cyclictest0-21swapper/419:20:314
2512737995132,19cyclictest0-21swapper/423:20:514
2512737995132,19cyclictest0-21swapper/423:02:114
2512737995132,19cyclictest0-21swapper/422:08:594
2512737995132,19cyclictest0-21swapper/420:50:474
2512737995132,19cyclictest0-21swapper/419:30:474
2512737995132,19cyclictest0-21swapper/400:15:554
2512737995112,39cyclictest0-21swapper/400:20:154
2512735995112,39cyclictest0-21swapper/222:15:162
2512739995013,37cyclictest0-21swapper/622:40:176
2512737995031,19cyclictest0-21swapper/421:50:114
2512737995031,19cyclictest0-21swapper/419:50:034
2512735995012,19cyclictest0-21swapper/223:00:182
2512733995030,19cyclictest0-21swapper/023:00:180
2512735994829,19cyclictest0-21swapper/220:00:192
251273399468,19cyclictest0-21swapper/020:45:180
2512733994527,18cyclictest0-21swapper/019:50:170
251273399446,38cyclictest0-21swapper/022:10:150
251273599401,20cyclictest0-21swapper/200:05:162
251273999390,39cyclictest0-21swapper/622:00:166
251273999390,20cyclictest0-21swapper/622:55:176
251273599391,19cyclictest0-21swapper/219:50:172
251273599390,20cyclictest0-21swapper/222:30:172
251273999380,38cyclictest0-21swapper/619:15:176
251273399380,38cyclictest0-21swapper/020:35:160
251273399380,19cyclictest0-21swapper/023:20:170
251273399380,19cyclictest0-21swapper/000:30:150
251273999370,37cyclictest0-21swapper/622:35:186
251273599370,18cyclictest0-21swapper/221:40:192
2512733993736,1cyclictest2597638-21kworker/0:1+events22:26:270
2512733993735,2cyclictest2552034-21kworker/0:2+events20:56:550
251273399370,36cyclictest0-21swapper/021:00:180
251273999360,17cyclictest0-21swapper/619:20:176
251273999350,15cyclictest0-21swapper/623:05:196
251273599350,35cyclictest0-21swapper/222:05:162
251273599350,35cyclictest0-21swapper/219:35:172
251273399350,35cyclictest0-21swapper/000:35:170
251273999340,34cyclictest0-21swapper/623:50:156
251273999340,15cyclictest0-21swapper/600:10:186
251273599340,15cyclictest0-21swapper/219:30:182
251273399340,15cyclictest0-21swapper/019:40:170
2512739993314,19cyclictest0-21swapper/623:10:166
2512739993314,19cyclictest0-21swapper/621:35:166
2512739993314,19cyclictest0-21swapper/621:25:196
2512739993314,19cyclictest0-21swapper/621:00:186
2512739993314,19cyclictest0-21swapper/619:40:186
2512736993314,19cyclictest0-21swapper/319:54:533
2512736993314,19cyclictest0-21swapper/300:25:163
2512735993314,19cyclictest0-21swapper/223:40:172
2512735993314,19cyclictest0-21swapper/222:35:192
2512735993314,19cyclictest0-21swapper/220:15:172
2512735993314,19cyclictest0-21swapper/220:10:172
2512735993314,19cyclictest0-21swapper/219:20:172
2512735993314,19cyclictest0-21swapper/200:35:172
2512735993313,20cyclictest0-21swapper/223:20:172
251273399339,19cyclictest0-21swapper/019:55:180
2512733993314,19cyclictest0-21swapper/022:15:170
2512733993314,19cyclictest0-21swapper/000:10:180
2512739993214,18cyclictest0-21swapper/600:15:176
2512739993213,19cyclictest0-21swapper/621:15:166
2512739993213,0cyclictest0-21swapper/622:45:176
2512735993214,18cyclictest0-21swapper/220:50:172
2512735993213,19cyclictest0-21swapper/223:35:182
2512735993213,19cyclictest0-21swapper/221:00:182
2512735993213,19cyclictest0-21swapper/200:10:182
2512735993211,19cyclictest0-21swapper/222:55:172
2512733993214,0cyclictest0-21swapper/021:20:160
2512733993213,19cyclictest0-21swapper/022:45:180
2512733993213,19cyclictest0-21swapper/022:30:170
2512733993213,19cyclictest0-21swapper/020:30:180
2512733993213,19cyclictest0-21swapper/020:15:170
2512733993213,19cyclictest0-21swapper/019:25:180
2512733993213,19cyclictest0-21swapper/019:10:160
2512733993213,19cyclictest0-21swapper/019:10:160
2512733993213,19cyclictest0-21swapper/000:20:160
2512733993213,19cyclictest0-21swapper/000:00:160
2512739993112,19cyclictest0-21swapper/622:30:176
2512739993112,19cyclictest0-21swapper/621:10:166
2512735993111,19cyclictest0-21swapper/221:55:252
2512733993112,19cyclictest0-21swapper/022:35:180
2512733993112,19cyclictest0-21swapper/021:45:170
2512733993112,19cyclictest0-21swapper/019:30:180
2512733993112,19cyclictest0-21swapper/000:15:170
2512740993028,2cyclictest871ktimers/721:30:167
2512739993012,0cyclictest0-21swapper/621:20:166
2512735993011,19cyclictest0-21swapper/223:30:182
2512735993011,19cyclictest0-21swapper/223:25:182
2512735993011,19cyclictest0-21swapper/223:10:162
2512735993011,19cyclictest0-21swapper/221:20:162
2512735993010,20cyclictest0-21swapper/223:55:202
2512733993011,19cyclictest0-21swapper/022:55:240
2512733993011,19cyclictest0-21swapper/020:25:190
2512740992928,1cyclictest2605136-21ethtool21:50:177
2512733992910,19cyclictest0-21swapper/023:05:190
2512733992910,19cyclictest0-21swapper/019:15:160
251274099289,19cyclictest0-21swapper/723:30:187
251274099289,19cyclictest0-21swapper/720:10:177
251274099289,19cyclictest0-21swapper/719:45:167
2512740992810,18cyclictest0-21swapper/720:20:187
2512739992810,18cyclictest0-21swapper/621:50:176
251273599289,19cyclictest0-21swapper/223:45:152
251273599289,19cyclictest0-21swapper/220:55:192
251273599288,19cyclictest0-21swapper/222:40:172
251273399289,19cyclictest0-21swapper/023:25:170
251274099279,18cyclictest0-21swapper/721:55:187
251274099278,19cyclictest0-21swapper/723:15:177
251274099278,19cyclictest0-21swapper/721:40:197
251274099278,19cyclictest0-21swapper/721:25:197
251274099277,19cyclictest0-21swapper/720:40:177
251273999278,19cyclictest0-21swapper/623:30:186
251273999278,19cyclictest0-21swapper/622:15:166
251273999278,19cyclictest0-21swapper/619:25:186
251273499270,26cyclictest2612747-21latency_hist22:05:011
251273399278,19cyclictest0-21swapper/020:00:190
251273399277,19cyclictest0-21swapper/000:05:160
251274099267,19cyclictest0-21swapper/723:50:157
251274099267,19cyclictest0-21swapper/723:45:157
251274099267,19cyclictest0-21swapper/720:25:187
251274099266,19cyclictest0-21swapper/723:35:187
251273899266,20cyclictest0-21swapper/500:30:155
251273599267,19cyclictest0-21swapper/200:25:162
251274099257,0cyclictest0-21swapper/720:35:167
251274099256,19cyclictest0-21swapper/723:55:217
251274099256,19cyclictest0-21swapper/719:15:177
251273899256,19cyclictest0-21swapper/521:45:175
2512736992519,1cyclictest2661827-21ethtool23:30:183
251273599256,19cyclictest0-21swapper/221:45:182
251273399256,19cyclictest0-21swapper/021:35:160
251274099246,0cyclictest0-21swapper/700:25:167
251274099245,19cyclictest0-21swapper/719:50:177
251273999245,19cyclictest0-21swapper/619:30:186
251273899245,19cyclictest0-21swapper/523:45:225
251273899245,19cyclictest0-21swapper/523:10:165
251273899245,19cyclictest0-21swapper/522:40:175
251273899245,19cyclictest0-21swapper/522:05:165
251273899245,19cyclictest0-21swapper/522:00:165
251273899245,19cyclictest0-21swapper/520:55:195
251273899245,19cyclictest0-21swapper/520:05:215
251274099235,18cyclictest0-21swapper/700:30:157
251273999234,19cyclictest0-21swapper/622:50:166
251273999234,19cyclictest0-21swapper/600:35:176
251273899234,19cyclictest0-21swapper/521:40:195
251273899234,19cyclictest0-21swapper/521:05:175
251273899234,19cyclictest0-21swapper/520:15:175
251273899234,19cyclictest0-21swapper/519:45:165
251273899234,19cyclictest0-21swapper/500:20:165
251273899234,19cyclictest0-21swapper/500:10:185
251273899233,19cyclictest0-21swapper/522:10:165
251273899233,19cyclictest0-21swapper/521:10:165
2512736992319,0cyclictest2547897-21mii-tool20:10:173
2512736992319,0cyclictest1089-21snmpd22:18:373
251273599234,19cyclictest0-21swapper/220:25:192
251273399233,20cyclictest0-21swapper/021:05:170
2512733992320,3cyclictest2626687-21kworker/0:2+events22:44:150
2512733992320,2cyclictest2538365-21kworker/0:1+events20:10:070
2512733992319,3cyclictest2531213-21kworker/0:2+events19:45:470
2512733992319,2cyclictest2648944-21kworker/0:0+events23:10:110
251273899223,19cyclictest0-21swapper/521:55:185
251273899223,19cyclictest0-21swapper/521:30:165
251273899223,19cyclictest0-21swapper/520:10:175
251273899223,19cyclictest0-21swapper/519:40:185
251273899223,19cyclictest0-21swapper/500:25:165
251273899222,19cyclictest0-21swapper/522:20:175
2512736992221,1cyclictest0-21swapper/319:45:473
251273599224,18cyclictest0-21swapper/221:25:192
2512733992220,2cyclictest2688701-21kworker/0:2+events00:25:310
2512733992220,2cyclictest2648944-21kworker/0:0+events23:55:030
2512733992220,2cyclictest2648944-21kworker/0:0+events23:51:270
2512733992220,2cyclictest2648944-21kworker/0:0+events23:45:070
2512733992220,2cyclictest2648944-21kworker/0:0+events23:40:070
2512733992220,2cyclictest2648944-21kworker/0:0+events23:35:350
2512733992220,2cyclictest2648944-21kworker/0:0+events23:30:230
2512733992220,2cyclictest2597638-21kworker/0:1+events22:20:270
2512733992220,2cyclictest2597638-21kworker/0:1+events22:01:030
2512733992220,2cyclictest2597638-21kworker/0:1+events21:57:150
2512733992220,2cyclictest2597638-21kworker/0:1+events21:50:070
2512733992220,2cyclictest2597638-21kworker/0:1+events21:41:510
2512733992220,2cyclictest2592434-21kworker/0:2+events21:30:470
2512733992220,2cyclictest2578597-21kworker/0:1+events21:16:190
2512733992220,2cyclictest2575316-21kworker/0:0+events21:28:070
2512733992220,2cyclictest2575316-21kworker/0:0+events21:10:150
2512733992220,2cyclictest2552034-21kworker/0:2+events20:50:270
2512733992220,2cyclictest2546352-21kworker/0:0+events20:23:310
2512733992220,2cyclictest2538365-21kworker/0:1+events20:05:110
2512733992220,2cyclictest2520909-21kworker/0:1+events19:35:030
2512733992220,2cyclictest2512192-21kworker/0:0+events19:22:070
2512733992219,3cyclictest2597638-21kworker/0:1+events22:05:190
2512733992219,3cyclictest2552034-21kworker/0:2+events20:40:270
2512733992219,2cyclictest2648944-21kworker/0:0+events23:15:110
251274099212,19cyclictest0-21swapper/723:10:227
251274099212,19cyclictest0-21swapper/720:30:187
251273999210,21cyclictest0-21swapper/623:00:056
251273899212,19cyclictest0-21swapper/520:45:245
251273899212,19cyclictest0-21swapper/519:55:185
2512738992119,1cyclictest1089-21snmpd21:50:065
251273899210,20cyclictest0-21swapper/523:18:435
251273899210,20cyclictest0-21swapper/523:08:115
251273899210,20cyclictest0-21swapper/521:20:165
251273899210,20cyclictest0-21swapper/520:28:195
251273899210,20cyclictest0-21swapper/519:10:555
251273899210,20cyclictest0-21swapper/519:10:555
2512736992120,1cyclictest0-21swapper/323:07:313
2512736992120,1cyclictest0-21swapper/322:32:033
2512736992120,1cyclictest0-21swapper/321:45:073
251273699210,21cyclictest0-21swapper/321:50:193
251273699210,20cyclictest0-21swapper/320:51:473
251273599212,19cyclictest0-21swapper/220:20:182
2512735992120,1cyclictest2513943-21ethtool19:10:162
2512735992120,1cyclictest2513943-21ethtool19:10:162
251273599210,20cyclictest0-21swapper/219:43:432
2512734992120,1cyclictest2695827-21mii-tool00:30:151
251273499210,2cyclictest0-21swapper/123:42:451
251273499210,21cyclictest0-21swapper/123:08:111
251273499210,20cyclictest0-21swapper/123:26:551
251273499210,20cyclictest0-21swapper/121:35:431
251273499210,20cyclictest0-21swapper/121:12:491
251273499210,20cyclictest0-21swapper/120:28:191
251273499210,20cyclictest0-21swapper/119:16:111
251273499210,20cyclictest0-21swapper/119:11:011
251273499210,20cyclictest0-21swapper/119:11:011
2512740992019,1cyclictest1089-21snmpd23:40:277
2512740992019,1cyclictest1089-21snmpd22:06:497
2512740992019,1cyclictest1089-21snmpd21:23:447
2512740992019,1cyclictest1089-21snmpd00:00:167
2512740992019,0cyclictest1089-21snmpd23:22:487
2512740992018,1cyclictest1089-21snmpd23:05:147
251274099201,19cyclictest0-21swapper/722:15:177
251274099201,19cyclictest0-21swapper/721:10:167
251274099200,20cyclictest0-21swapper/721:09:297
251274099200,19cyclictest0-21swapper/722:56:507
2512739992019,1cyclictest2655937-21ethtool23:20:176
2512739992019,1cyclictest1089-21snmpd23:15:546
2512739992019,1cyclictest1089-21snmpd21:44:546
2512739992019,1cyclictest1089-21snmpd20:46:406
2512739992015,1cyclictest1089-21snmpd23:43:096
251273999200,1cyclictest0-21swapper/622:05:286
2512738992019,1cyclictest2625045-21mii-tool22:25:175
2512738992018,1cyclictest1089-21snmpd23:41:155
251273899201,19cyclictest0-21swapper/521:15:165
251273899201,19cyclictest0-21swapper/520:30:185
251273899201,19cyclictest0-21swapper/520:00:195
251273899201,19cyclictest0-21swapper/500:00:165
251273899201,0cyclictest0-21swapper/522:39:025
251273899200,20cyclictest0-21swapper/523:26:555
251273899200,20cyclictest0-21swapper/521:35:435
251273899200,20cyclictest0-21swapper/519:16:115
251273899200,19cyclictest0-21swapper/523:53:395
251273899200,19cyclictest0-21swapper/522:55:195
251273899200,19cyclictest0-21swapper/500:08:075
251273899200,0cyclictest0-21swapper/523:21:075
2512736992020,0cyclictest2553547-21mii-tool20:20:183
2512736992020,0cyclictest0-21swapper/323:55:473
2512736992020,0cyclictest0-21swapper/323:10:433
2512736992020,0cyclictest0-21swapper/322:25:073
2512736992020,0cyclictest0-21swapper/320:48:153
2512736992020,0cyclictest0-21swapper/320:01:033
2512736992019,1cyclictest2607939-21ethtool21:55:183
2512736992019,1cyclictest2556595-21mii-tool20:25:183
2512736992019,1cyclictest1089-21snmpd22:01:493
251273699200,20cyclictest0-21swapper/321:17:053
251273699200,20cyclictest0-21swapper/320:40:553
251273699200,20cyclictest0-21swapper/319:40:083
251273699200,20cyclictest0-21swapper/300:14:373
2512735992020,0cyclictest2545096-21mii-tool20:05:212
2512735992019,1cyclictest1089-21snmpd23:06:322
251273599201,19cyclictest0-21swapper/200:15:172
251273599200,20cyclictest0-21swapper/222:26:512
251273599200,20cyclictest0-21swapper/222:01:432
251273599200,20cyclictest0-21swapper/221:52:232
251273599200,20cyclictest0-21swapper/221:37:272
251273599200,20cyclictest0-21swapper/221:09:312
251273599200,20cyclictest0-21swapper/200:23:352
2512734992020,0cyclictest2622243-21mii-tool22:20:171
2512734992020,0cyclictest2573436-21mii-tool20:55:191
2512734992019,1cyclictest2678971-21ethtool00:00:161
2512734992019,1cyclictest2671218-21sensors23:45:221
2512734992019,1cyclictest2613829-21mii-tool22:05:161
2512734992019,1cyclictest2590835-21mii-tool21:25:191
2512734992019,1cyclictest1089-21snmpd19:20:311
251273499200,20cyclictest0-21swapper/121:01:261
251273499200,20cyclictest0-21swapper/120:18:031
251273499200,19cyclictest0-21swapper/100:36:261
251273499200,0cyclictest0-21swapper/123:04:051
251273499200,0cyclictest0-21swapper/120:23:231
251273499200,0cyclictest0-21swapper/119:51:591
251273499200,0cyclictest0-21swapper/100:11:411
2512740991919,0cyclictest2639083-21mii-tool22:50:167
2512740991919,0cyclictest1089-21snmpd21:39:007
2512740991919,0cyclictest1089-21snmpd19:21:137
2512740991918,1cyclictest1089-21snmpd21:02:237
2512740991918,1cyclictest1089-21snmpd20:56:107
2512740991918,0cyclictest1089-21snmpd20:00:447
251274099190,19cyclictest0-21swapper/723:25:187
251274099190,19cyclictest0-21swapper/722:28:107
251274099190,19cyclictest0-21swapper/721:45:247
251274099190,19cyclictest0-21swapper/720:17:547
251274099190,19cyclictest0-21swapper/700:15:317
2512739991919,0cyclictest2664896-21mii-tool23:35:186
2512739991919,0cyclictest2559400-21mii-tool20:30:186
2512739991919,0cyclictest2556610-21ethtool20:25:196
2512739991919,0cyclictest1089-21snmpd21:07:356
2512739991918,1cyclictest2678968-21cat00:00:166
2512739991918,1cyclictest2602334-21ethtool21:45:186
2512739991916,0cyclictest2676115-21mii-tool23:55:196
2512739991915,0cyclictest1089-21snmpd20:22:396
251273999190,19cyclictest0-21swapper/621:55:276
2512738991917,1cyclictest2619411-21ethtool22:15:165
2512738991917,1cyclictest1089-21snmpd23:31:185
251273899190,19cyclictest0-21swapper/523:03:475
251273899190,19cyclictest0-21swapper/521:25:195
251273899190,19cyclictest0-21swapper/521:04:025
251273899190,19cyclictest0-21swapper/520:54:015
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional