You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-10-18 - 11:43
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot5.osadl.org (updated Sat Oct 18, 2025 00:44:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
20633993028,1cyclictest14106-21turbostat.cron23:30:011
2063399300,1cyclictest1798-21idleruntime-cro23:05:011
20638992927,1cyclictest12998-21apt-get00:35:173
20638992926,2cyclictest303-21systemd-journal00:00:013
20638992926,2cyclictest303-21systemd-journal00:00:003
2063899290,28cyclictest0-21swapper/320:40:113
2063799290,28cyclictest15864-21apt-get22:25:152
2063799290,28cyclictest15606-21munin-run22:25:012
20633992927,1cyclictest0-21swapper/122:30:141
2063399290,28cyclictest29010-21apt-get20:35:121
2063399290,1cyclictest8045-21munin-run21:00:011
2063399290,1cyclictest609-21dbus-daemon00:40:001
2063399290,1cyclictest26670-21sh21:40:011
20627992927,1cyclictest23438-21awk23:50:010
2062799290,28cyclictest9444-21apt-get23:20:130
2062799290,28cyclictest3555-21apt-get22:00:010
2062799290,28cyclictest0-21swapper/020:55:130
2063899280,28cyclictest0-21swapper/322:35:133
2063899280,28cyclictest0-21swapper/320:10:133
2063899280,0cyclictest0-21swapper/300:15:133
2063899280,0cyclictest0-21swapper/300:05:113
20637992828,0cyclictest31353-21apt-get20:40:112
2063799280,28cyclictest0-21swapper/200:05:122
2063799280,27cyclictest20846-21apt-get19:10:102
20633992828,0cyclictest0-21swapper/123:30:171
20633992828,0cyclictest0-21swapper/121:15:121
20633992828,0cyclictest0-21swapper/121:05:131
20633992827,1cyclictest4137-21apt-get23:10:021
20633992826,1cyclictest1221-21sh21:55:001
2063399280,28cyclictest0-21swapper/123:50:171
2063399280,0cyclictest0-21swapper/120:45:131
2063399280,0cyclictest0-21swapper/119:30:131
2063399280,0cyclictest0-21swapper/119:20:141
20627992826,1cyclictest29028-21munin-run21:45:010
2062799280,28cyclictest0-21swapper/019:25:120
2062799280,27cyclictest0-21swapper/022:55:130
2062799280,0cyclictest31353-21apt-get20:40:110
2062799280,0cyclictest0-21swapper/022:35:130
2062799280,0cyclictest0-21swapper/020:35:140
2062799280,0cyclictest0-21swapper/019:45:120
2062799280,0cyclictest0-21swapper/000:00:130
20638992727,0cyclictest0-21swapper/300:30:153
20638992726,1cyclictest27512-21apt-get22:50:113
2063899270,0cyclictest0-21swapper/323:25:023
20637992727,0cyclictest20520-21apt-get22:35:132
20637992725,1cyclictest28559-21pachectl00:00:012
20637992725,1cyclictest28559-21pachectl00:00:002
2063799270,0cyclictest0-21swapper/220:25:112
20633992727,0cyclictest0-21swapper/123:40:131
20633992727,0cyclictest0-21swapper/123:15:131
20633992727,0cyclictest0-21swapper/120:30:131
20633992727,0cyclictest0-21swapper/100:15:131
20633992725,1cyclictest27224-21cron22:49:591
2063399270,0cyclictest0-21swapper/122:05:101
20627992727,0cyclictest0-21swapper/022:50:110
20627992727,0cyclictest0-21swapper/022:30:130
20627992727,0cyclictest0-21swapper/000:15:120
20638992626,0cyclictest0-21swapper/320:45:133
20638992625,0cyclictest28146-21apt-get19:25:143
20637992626,0cyclictest0-21swapper/223:25:022
20637992626,0cyclictest0-21swapper/200:35:172
20633992626,0cyclictest0-21swapper/122:35:131
20627992626,0cyclictest0-21swapper/023:25:130
20627992624,1cyclictest0-21swapper/000:25:000
20638992525,0cyclictest29278-21apt-get21:45:093
20638992524,0cyclictest10057-21apt-get19:55:143
20637992525,0cyclictest0-21swapper/222:50:102
20637992525,0cyclictest0-21swapper/220:45:122
20637992525,0cyclictest0-21swapper/200:30:152
20633992525,0cyclictest0-21swapper/122:25:151
20633992525,0cyclictest0-21swapper/121:10:151
20633992523,1cyclictest23453-21apt-get23:50:001
20627992525,0cyclictest0-21swapper/023:50:170
20627992524,1cyclictest8580-21awk22:10:000
20638992424,0cyclictest0-21swapper/322:20:123
20638992424,0cyclictest0-21swapper/322:05:103
20638992424,0cyclictest0-21swapper/321:35:003
20638992424,0cyclictest0-21swapper/321:20:133
20638992424,0cyclictest0-21swapper/321:00:133
20638992424,0cyclictest0-21swapper/320:25:113
20638992424,0cyclictest0-21swapper/319:20:023
20638992424,0cyclictest0-21swapper/319:10:113
2063899240,5cyclictest0-21swapper/323:45:123
20637992424,0cyclictest19418-21perf20:15:022
20637992423,1cyclictest6483-21apt-get22:05:092
20637992422,1cyclictest24360-21munin-run21:35:002
20633992424,0cyclictest0-21swapper/119:15:131
20633992424,0cyclictest0-21swapper/119:15:131
20627992424,0cyclictest0-21swapper/022:20:130
20627992424,0cyclictest0-21swapper/020:00:150
20627992422,1cyclictest1-21systemd00:00:010
20627992422,1cyclictest1-21systemd00:00:010
20638992322,1cyclictest0-21swapper/320:15:123
20637992323,0cyclictest8311-21apt-get21:00:142
20637992323,0cyclictest0-21swapper/221:45:092
20637992323,0cyclictest0-21swapper/221:20:122
20637992323,0cyclictest0-21swapper/219:25:142
20637992323,0cyclictest0-21swapper/219:20:022
20633992323,0cyclictest0-21swapper/122:20:131
20633992323,0cyclictest0-21swapper/119:40:131
20633992321,1cyclictest977-21dump-pmu-power20:44:591
20633992321,1cyclictest0-21swapper/122:45:001
20627992323,0cyclictest0-21swapper/023:35:130
20627992323,0cyclictest0-21swapper/019:35:130
20638992222,0cyclictest0-21swapper/322:10:133
20638992222,0cyclictest0-21swapper/320:00:153
20637992222,0cyclictest0-21swapper/219:55:132
20637992221,1cyclictest0-21swapper/222:10:122
20633992222,0cyclictest0-21swapper/120:05:141
20633992222,0cyclictest0-21swapper/119:55:021
20627992222,0cyclictest0-21swapper/023:00:120
20627992220,1cyclictest0-21swapper/019:15:010
20638992121,0cyclictest0-21swapper/321:40:133
20638992121,0cyclictest0-21swapper/319:40:143
20637992121,0cyclictest3676-21apt-get00:15:132
20637992121,0cyclictest12406-21apt-get20:00:152
20637992121,0cyclictest0-21swapper/220:15:132
20637992120,1cyclictest2729-21apt-get19:40:142
20633992121,0cyclictest0-21swapper/119:25:141
20627992121,0cyclictest0-21swapper/021:45:080
20627992121,0cyclictest0-21swapper/021:05:120
20627992121,0cyclictest0-21swapper/021:00:140
20638992020,0cyclictest0-21swapper/323:20:143
20638992020,0cyclictest0-21swapper/319:35:133
20637992019,0cyclictest26960-21apt-get21:40:132
20633992018,1cyclictest22002-21sh21:30:001
20627992020,0cyclictest0-21swapper/023:15:120
20627992020,0cyclictest0-21swapper/021:15:120
20638991919,0cyclictest0-21swapper/321:35:113
20638991919,0cyclictest0-21swapper/320:55:123
20638991919,0cyclictest0-21swapper/320:20:143
20637991919,0cyclictest0-21swapper/223:20:142
20637991919,0cyclictest0-21swapper/219:35:132
20637991918,1cyclictest22036-21apt-get20:20:142
20633991919,0cyclictest0-21swapper/122:50:111
20627991919,0cyclictest24615-21apt-get21:35:130
20627991919,0cyclictest0-21swapper/019:40:140
20638991816,1cyclictest9499-21munin-run19:55:013
20637991818,0cyclictest5910-21apt-get20:55:132
20637991818,0cyclictest0-21swapper/221:35:122
20633991817,1cyclictest11514-21http23:25:011
2062799183,12cyclictest803-21ntpd21:30:220
20627991816,1cyclictest24935-21munin-run22:45:010
20638991717,0cyclictest0-21swapper/322:45:143
20633991717,0cyclictest2092-21apt-get23:05:141
20633991717,0cyclictest0-21swapper/122:00:161
20633991717,0cyclictest0-21swapper/120:50:151
20633991716,1cyclictest1345-21apt-get00:10:121
20627991715,1cyclictest4217-21grep20:50:180
20638991616,0cyclictest0-21swapper/323:05:133
20638991616,0cyclictest0-21swapper/319:30:133
2063899161,14cyclictest15365-21head20:05:153
2063899160,15cyclictest0-21swapper/320:35:173
20637991616,0cyclictest0-21swapper/222:45:142
20633991616,0cyclictest0-21swapper/119:10:111
20633991616,0cyclictest0-21swapper/100:00:141
20633991614,1cyclictest3652-21apt-config21:59:591
2063399160,15cyclictest9055-21awk19:50:231
20627991616,0cyclictest0-21swapper/019:15:130
20627991616,0cyclictest0-21swapper/019:15:130
2063899150,1cyclictest18190-21apt-get22:30:143
20637991515,0cyclictest9480-21apt-get19:55:012
20637991515,0cyclictest0-21swapper/223:05:142
20637991513,1cyclictest0-21swapper/200:05:012
2063799150,1cyclictest23525-21munin-run23:50:012
2063799150,14cyclictest0-21swapper/223:15:132
2063799150,14cyclictest0-21swapper/222:40:192
2063799150,14cyclictest0-21swapper/222:30:172
20633991514,1cyclictest13451-21ntp_states20:00:201
20627991515,0cyclictest0-21swapper/000:10:110
20627991513,1cyclictest16794-21munin-run20:10:010
2062799150,1cyclictest63250irq/126-eno122:00:000
2062799150,1cyclictest16446-21perf23:35:000
2062799150,14cyclictest0-21swapper/019:50:240
2063899140,14cyclictest0-21swapper/323:51:593
2063899140,14cyclictest0-21swapper/323:42:013
2063899140,14cyclictest0-21swapper/323:35:513
2063899140,14cyclictest0-21swapper/323:16:543
2063899140,14cyclictest0-21swapper/323:13:143
2063899140,14cyclictest0-21swapper/323:00:013
2063899140,14cyclictest0-21swapper/322:57:063
2063899140,14cyclictest0-21swapper/322:40:103
2063899140,14cyclictest0-21swapper/322:01:063
2063899140,14cyclictest0-21swapper/321:59:123
2063899140,14cyclictest0-21swapper/321:53:043
2063899140,14cyclictest0-21swapper/321:25:323
2063899140,14cyclictest0-21swapper/321:19:443
2063899140,14cyclictest0-21swapper/321:12:563
2063899140,14cyclictest0-21swapper/320:54:243
2063899140,14cyclictest0-21swapper/320:30:433
2063899140,14cyclictest0-21swapper/319:46:263
2063899140,14cyclictest0-21swapper/319:15:203
2063899140,14cyclictest0-21swapper/319:15:203
2063899140,14cyclictest0-21swapper/300:27:243
2063899140,14cyclictest0-21swapper/300:01:323
2063899140,0cyclictest0-21swapper/323:30:073
2063899140,0cyclictest0-21swapper/322:28:363
2063899140,0cyclictest0-21swapper/322:15:593
2063899140,0cyclictest0-21swapper/321:05:263
2063899140,0cyclictest0-21swapper/300:22:343
2063899140,0cyclictest0-21swapper/300:13:573
20637991414,0cyclictest30471-21apt-get19:30:132
20637991414,0cyclictest0-21swapper/223:30:552
2063799140,14cyclictest0-21swapper/223:50:502
2063799140,14cyclictest0-21swapper/223:42:392
2063799140,14cyclictest0-21swapper/223:10:052
2063799140,14cyclictest0-21swapper/223:01:102
2063799140,14cyclictest0-21swapper/222:55:042
2063799140,14cyclictest0-21swapper/222:15:112
2063799140,14cyclictest0-21swapper/221:50:162
2063799140,14cyclictest0-21swapper/221:28:542
2063799140,14cyclictest0-21swapper/221:12:062
2063799140,14cyclictest0-21swapper/220:51:192
2063799140,14cyclictest0-21swapper/220:35:172
2063799140,14cyclictest0-21swapper/220:30:092
2063799140,14cyclictest0-21swapper/220:09:432
2063799140,14cyclictest0-21swapper/219:15:232
2063799140,14cyclictest0-21swapper/219:15:232
2063799140,14cyclictest0-21swapper/200:22:082
2063799140,14cyclictest0-21swapper/200:10:122
2063799140,0cyclictest0-21swapper/223:35:172
2063799140,0cyclictest0-21swapper/222:01:222
2063799140,0cyclictest0-21swapper/221:16:002
2063799140,0cyclictest0-21swapper/200:25:562
2063399143,4cyclictest0-21swapper/120:20:141
20633991414,0cyclictest0-21swapper/121:40:121
20633991414,0cyclictest0-21swapper/119:37:101
20633991414,0cyclictest0-21swapper/100:25:071
2063399140,14cyclictest0-21swapper/123:55:141
2063399140,14cyclictest0-21swapper/123:55:141
2063399140,14cyclictest0-21swapper/123:35:341
2063399140,14cyclictest0-21swapper/122:55:591
2063399140,14cyclictest0-21swapper/122:15:131
2063399140,14cyclictest0-21swapper/122:10:431
2063399140,14cyclictest0-21swapper/121:30:121
2063399140,14cyclictest0-21swapper/121:00:371
2063399140,14cyclictest0-21swapper/120:15:151
2063399140,14cyclictest0-21swapper/120:10:281
2063399140,14cyclictest0-21swapper/119:45:581
2063399140,14cyclictest0-21swapper/100:20:081
2063399140,0cyclictest0-21swapper/121:46:301
2063399140,0cyclictest0-21swapper/121:20:241
2063399140,0cyclictest0-21swapper/100:30:111
2063399140,0cyclictest0-21swapper/100:05:541
20627991414,0cyclictest0-21swapper/023:05:140
20627991414,0cyclictest0-21swapper/021:51:110
20627991414,0cyclictest0-21swapper/021:10:110
20627991414,0cyclictest0-21swapper/020:31:010
20627991414,0cyclictest0-21swapper/020:20:180
20627991414,0cyclictest0-21swapper/000:30:070
20627991414,0cyclictest0-21swapper/000:06:220
20627991411,2cyclictest9388-21cut22:10:150
2062799140,14cyclictest0-21swapper/023:11:050
2062799140,14cyclictest0-21swapper/022:45:180
2062799140,14cyclictest0-21swapper/022:26:330
2062799140,14cyclictest0-21swapper/022:15:090
2062799140,14cyclictest0-21swapper/021:20:030
2062799140,14cyclictest0-21swapper/020:15:440
2062799140,14cyclictest0-21swapper/020:10:270
2062799140,14cyclictest0-21swapper/019:30:430
2062799140,14cyclictest0-21swapper/019:23:530
2062799140,0cyclictest0-21swapper/023:40:530
2062799140,0cyclictest0-21swapper/021:25:080
2062799140,0cyclictest0-21swapper/020:45:160
2062799140,0cyclictest0-21swapper/020:25:560
2062799140,0cyclictest0-21swapper/019:56:220
2062799140,0cyclictest0-21swapper/000:35:450
2062799140,0cyclictest0-21swapper/000:25:070
20637991313,0cyclictest0-21swapper/221:05:262
20637991313,0cyclictest0-21swapper/219:46:132
20633991313,0cyclictest0-21swapper/120:26:321
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional