You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-03 - 11:26
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackaslot8.osadl.org (updated Wed Dec 03, 2025 00:44:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
85712278245,21sleep00-21swapper/019:06:390
85132275208,22sleep10-21swapper/119:05:551
87162270233,24sleep30-21swapper/319:08:153
85532263226,22sleep20-21swapper/219:06:242
34862620,0sleep30-21swapper/300:28:493
120932620,1sleep3341ksoftirqd/323:48:073
35742610,0sleep10-21swapper/100:28:551
270182600,0sleep10-21swapper/121:49:461
163412590,0sleep00-21swapper/022:25:120
70792580,0sleep10-21swapper/122:19:051
193312580,0sleep10-21swapper/123:52:591
183902580,0sleep00-21swapper/023:09:530
169752580,0sleep20-21swapper/221:21:192
156322550,0sleep10-21swapper/100:37:311
36752180,0sleep30-21swapper/300:05:143
216852180,0sleep20-21swapper/222:06:532
68972150,0sleep10-21swapper/100:30:271
8963991411,2cyclictest28-21ksoftirqd/223:30:012
297202140,0sleep20-21swapper/222:55:182
159772140,0sleep10-21swapper/122:25:001
238122130,0sleep10-21swapper/122:51:001
254862120,0sleep00-21swapper/000:20:210
285282110,0sleep10-21swapper/122:33:061
89689994,3cyclictest19982-21systemd-journal00:38:553
89689994,3cyclictest19982-21systemd-journal00:02:523
89609995,3cyclictest508-21dbus-daemon22:00:231
10986290,0sleep10-21swapper/122:42:431
89689986,1cyclictest0-21swapper/322:17:303
89689984,3cyclictest19982-21systemd-journal20:48:123
89689983,3cyclictest19982-21systemd-journal23:44:203
89689983,3cyclictest19982-21systemd-journal23:20:293
89689983,3cyclictest19982-21systemd-journal22:39:113
89689983,3cyclictest19982-21systemd-journal00:32:313
89689980,4cyclictest19982-21systemd-journal19:55:013
89639986,1cyclictest28-21ksoftirqd/222:35:002
89639984,3cyclictest19982-21systemd-journal21:47:012
89639984,3cyclictest11736-21in:imuxsock00:01:222
89639983,1cyclictest0-21swapper/200:17:132
89639982,3cyclictest9915-21munin-run00:10:012
89639981,4cyclictest10658-21awk20:25:012
89639981,3cyclictest21813-21idleruntime-cro20:50:002
89609984,3cyclictest19982-21systemd-journal23:49:411
89609984,3cyclictest19982-21systemd-journal22:47:231
89609984,3cyclictest19982-21systemd-journal19:26:511
89559984,3cyclictest508-21dbus-daemon22:42:570
89559984,3cyclictest508-21dbus-daemon20:55:000
89559984,3cyclictest19982-21systemd-journal00:18:030
25662280,1sleep125659-21timerwakeupswit20:55:191
12015280,0sleep30-21swapper/321:18:353
89689974,2cyclictest668-21runrttasks20:20:143
89689973,3cyclictest508-21dbus-daemon20:53:363
89689973,3cyclictest19982-21systemd-journal23:51:123
89689973,3cyclictest19982-21systemd-journal22:52:013
89689973,3cyclictest19982-21systemd-journal22:40:253
89689973,3cyclictest19982-21systemd-journal20:00:013
89689973,3cyclictest19982-21systemd-journal00:16:483
89689973,2cyclictest19982-21systemd-journal20:34:563
89689973,1cyclictest0-21swapper/300:21:333
89689972,3cyclictest19982-21systemd-journal23:34:153
89689971,4cyclictest19982-21systemd-journal23:00:283
89689970,7cyclictest0-21swapper/321:42:013
89689970,3cyclictest27808-21ntp_states21:00:183
89639975,1cyclictest0-21swapper/221:33:202
89639974,2cyclictest28-21ksoftirqd/223:50:012
89639973,3cyclictest508-21dbus-daemon20:36:062
89639973,3cyclictest4485-21cat23:00:172
89639973,3cyclictest30654-21snmpd19:40:392
89639973,3cyclictest28268-21sshd23:59:202
89639973,3cyclictest2188-21awk23:20:132
89639973,3cyclictest19116-21gdbus23:20:002
89639973,3cyclictest11736-21in:imuxsock21:12:492
89639973,2cyclictest508-21dbus-daemon20:41:302
89639973,1cyclictest0-21swapper/222:28:292
89639973,1cyclictest0-21swapper/221:50:592
89639973,1cyclictest0-21swapper/221:37:542
89639973,1cyclictest0-21swapper/200:35:462
89639973,1cyclictest0-21swapper/200:13:252
89639972,3cyclictest19982-21systemd-journal23:39:552
89639970,4cyclictest11352-21awk00:35:002
89639970,1cyclictest2703-21ssh22:37:132
89609975,1cyclictest318172sleep122:56:371
89609974,2cyclictest508-21dbus-daemon20:07:191
89609973,3cyclictest30654-21snmpd23:31:581
89609973,3cyclictest30654-21snmpd23:10:541
89609973,3cyclictest19982-21systemd-journal22:37:311
89609973,3cyclictest19982-21systemd-journal00:05:011
89609973,3cyclictest1-21systemd20:05:011
89609973,3cyclictest0-21swapper/123:03:591
89609973,1cyclictest0-21swapper/121:44:261
89609973,1cyclictest0-21swapper/121:27:461
89609972,3cyclictest19982-21systemd-journal21:07:481
89609972,3cyclictest19982-21systemd-journal20:23:351
89609971,3cyclictest2264-21ssh21:11:361
89559973,3cyclictest508-21dbus-daemon23:23:240
89559973,3cyclictest508-21dbus-daemon22:12:030
89559973,3cyclictest508-21dbus-daemon19:15:010
89559973,3cyclictest30834-21ntpq19:55:170
89559973,3cyclictest30654-21snmpd20:32:550
89559973,3cyclictest19982-21systemd-journal22:21:150
89559973,3cyclictest19982-21systemd-journal21:58:200
89559973,3cyclictest19982-21systemd-journal00:35:000
89559973,3cyclictest0-21swapper/021:50:020
89559973,1cyclictest0-21swapper/023:47:200
89559973,1cyclictest0-21swapper/023:13:360
89559973,1cyclictest0-21swapper/022:36:300
89559973,1cyclictest0-21swapper/022:00:090
89559972,4cyclictest1-21systemd21:25:200
89559972,3cyclictest7661-21lldpd19:52:140
89559971,4cyclictest19982-21systemd-journal21:14:030
89559970,7cyclictest0-21swapper/023:15:130
28128270,0sleep10-21swapper/119:50:171
89689966,0cyclictest0-21swapper/321:35:163
89689963,2cyclictest508-21dbus-daemon22:30:513
89689963,2cyclictest508-21dbus-daemon20:56:323
89689963,2cyclictest32662-21ssh21:31:403
89689963,2cyclictest30654-21snmpd21:50:133
89689963,2cyclictest30654-21snmpd21:21:563
89689963,2cyclictest30654-21snmpd20:02:113
89689963,2cyclictest14756-21tune2fs19:20:173
89689963,2cyclictest11736-21in:imuxsock19:40:373
89689963,2cyclictest11585-21wc19:15:013
89689963,2cyclictest11309-21fschecks_count20:25:163
89689963,2cyclictest10103-21ntpq19:10:183
89689962,3cyclictest9046-21expr22:20:143
89689962,3cyclictest508-21dbus-daemon19:25:363
89689962,3cyclictest508-21dbus-daemon00:10:333
89689962,3cyclictest3699-21if_enp4s021:55:143
89689962,3cyclictest30654-21snmpd23:55:043
89689962,3cyclictest30654-21snmpd19:30:123
89689962,3cyclictest29588-21grep21:05:153
89689962,3cyclictest29436-21cat22:55:163
89689962,3cyclictest21894-21ntp_kernel_pll_19:35:193
89689962,3cyclictest20357-21tr21:45:133
89689962,3cyclictest17980-21df20:40:133
89689962,3cyclictest16524-21cat22:25:133
89689962,3cyclictest14500-21grep22:45:143
89689962,3cyclictest11567-21cat23:05:143
89689962,3cyclictest10109-21cat23:25:143
89689962,3cyclictest0-21swapper/323:15:133
89689962,1cyclictest0-21swapper/323:37:463
89689962,1cyclictest0-21swapper/323:10:503
89689961,4cyclictest27414-21turbostat19:50:013
89689961,4cyclictest0-21swapper/322:06:503
89689961,3cyclictest19982-21systemd-journal22:00:203
89689961,3cyclictest19982-21systemd-journal21:10:183
89689961,3cyclictest19982-21systemd-journal20:35:413
89689961,3cyclictest19982-21systemd-journal20:15:143
89689961,3cyclictest19982-21systemd-journal20:14:243
89689961,3cyclictest19982-21systemd-journal20:06:283
89689960,3cyclictest24512-21seq21:26:173
89689960,0cyclictest0-21swapper/322:10:243
89639966,0cyclictest0-21swapper/222:40:062
89639966,0cyclictest0-21swapper/222:10:462
89639963,2cyclictest693-21ntpq20:00:182
89639963,2cyclictest3657-21hwlatdetect21:55:152
89639963,2cyclictest26319-21expr19:45:162
89639963,2cyclictest24042-21cat00:20:132
89639963,2cyclictest23730-21sshd20:51:382
89639963,2cyclictest19982-21systemd-journal20:08:592
89639963,2cyclictest16131-21sh21:41:542
89639963,2cyclictest11736-21in:imuxsock21:16:092
89639963,2cyclictest1049-21sendmail_mailtr23:40:192
89639963,1cyclictest0-21swapper/222:00:312
89639962,3cyclictest30654-21snmpd23:53:222
89639962,3cyclictest30654-21snmpd21:26:302
89639962,3cyclictest30654-21snmpd21:00:232
89639962,3cyclictest30407-21tune2fs19:55:142
89639962,3cyclictest19982-21systemd-journal19:21:502
89639962,3cyclictest17707-21smart_sda19:25:202
89639962,3cyclictest12437-21awk19:15:152
89639962,3cyclictest0-21swapper/222:22:302
89639962,2cyclictest19982-21systemd-journal20:32:242
89639962,1cyclictest0-21swapper/223:31:232
89639962,1cyclictest0-21swapper/222:46:182
89639962,1cyclictest0-21swapper/222:18:082
89639961,3cyclictest19982-21systemd-journal23:10:202
89639961,3cyclictest19982-21systemd-journal21:05:432
89639961,3cyclictest19982-21systemd-journal19:50:132
89639961,3cyclictest19982-21systemd-journal19:14:202
89639961,2cyclictest1251-21ssh00:26:342
89639960,5cyclictest21921-21fschecks_time22:50:152
89639960,1cyclictest141rcu_preempt23:05:532
89609966,0cyclictest0-21swapper/100:20:191
89609964,1cyclictest28453-21gltestperf21:50:171
89609964,1cyclictest17329-21munin-run20:40:011
89609963,2cyclictest5061-21tr20:10:181
89609963,2cyclictest29741-11brltty20:46:321
89609963,2cyclictest29741-11brltty20:16:541
89609963,2cyclictest29319-21ssh21:30:101
89609963,2cyclictest26877-21ntp_states22:10:181
89609963,2cyclictest26813-21sh23:35:411
89609963,2cyclictest23148-21ntpq23:55:181
89609963,2cyclictest22955-21cut20:50:181
89609963,2cyclictest20024-21awk19:30:201
89609963,2cyclictest19536-21sensors22:05:191
89609962,3cyclictest5336-21cat21:35:151
89609962,3cyclictest508-21dbus-daemon00:15:581
89609962,3cyclictest30654-21snmpd23:26:071
89609962,3cyclictest30654-21snmpd19:56:061
89609962,3cyclictest30654-21snmpd19:46:571
89609962,3cyclictest30654-21snmpd19:39:021
89609962,3cyclictest30654-21snmpd19:15:021
89609962,3cyclictest18275-21cat20:40:151
89609962,3cyclictest14556-21sh21:20:141
89609962,1cyclictest0-21swapper/123:41:311
89609962,1cyclictest0-21swapper/123:05:591
89609962,1cyclictest0-21swapper/122:26:031
89609962,1cyclictest0-21swapper/100:09:431
89609961,1cyclictest141rcu_preempt21:15:201
89609961,1cyclictest0-21swapper/100:10:111
89609960,2cyclictest4590-21sshd23:21:191
89559964,1cyclictest29295-21grep22:55:140
89559964,1cyclictest24275-21hddtemp_smartct22:30:140
89559963,2cyclictest7578-21ssh21:15:180
89559963,2cyclictest29592-21expr21:30:130
89559963,2cyclictest27331-21grep21:00:150
89559963,2cyclictest25773-21ntpq23:35:190
89559963,2cyclictest21807-21df_inode22:50:140
89559963,2cyclictest20026-21ssh21:45:050
89559963,2cyclictest19851-21ps19:30:190
89559963,2cyclictest13873-21ssh23:27:390
89559963,2cyclictest11736-21in:imuxsock20:27:220
89559963,2cyclictest11736-21in:imuxsock19:22:140
89559963,2cyclictest0-21swapper/023:30:570
89559962,3cyclictest4222-21which00:05:150
89559962,3cyclictest30654-21snmpd20:56:410
89559962,3cyclictest30654-21snmpd19:45:090
89559962,3cyclictest30654-21snmpd19:35:390
89559962,3cyclictest22266-21grep23:55:130
89559962,3cyclictest17639-21find19:25:200
89559962,3cyclictest16070-21sensors_temp23:50:210
89559962,3cyclictest14888-21cat21:20:160
89559962,3cyclictest13355-21cat21:40:180
89559962,3cyclictest0-21swapper/022:46:180
89559962,1cyclictest0-21swapper/022:15:160
89559962,1cyclictest0-21swapper/000:26:590
89559961,4cyclictest0-21swapper/020:36:200
89559961,3cyclictest19982-21systemd-journal19:40:120
89559961,1cyclictest4597-21apt-get21:35:120
89559960,6cyclictest0-21swapper/020:21:080
89559960,6cyclictest0-21swapper/000:11:010
89559960,6cyclictest0-21swapper/000:03:270
89559960,5cyclictest5875-21chrt20:11:540
89559960,3cyclictest6255-21rm23:01:030
89559960,3cyclictest2965-21rm23:41:390
89559960,3cyclictest20255-21rm22:05:370
89559960,3cyclictest11704-21rm00:35:070
10014260,0sleep10-21swapper/121:59:551
89639952,2cyclictest6713-21expr20:15:152
89639952,2cyclictest21271-21expr19:35:152
89639952,2cyclictest10919-21cpu20:25:142
89639951,3cyclictest4495-21expr20:10:152
89639951,3cyclictest24461-21expr20:55:122
89639950,3cyclictest19982-21systemd-journal19:31:012
89609952,2cyclictest26716-21dpkg21:00:001
89609952,2cyclictest26434-21ssh23:15:041
89609952,2cyclictest23452-21cat19:40:131
89609952,2cyclictest13390-21expr20:30:121
89609952,2cyclictest11276-21expr20:25:151
89609951,2cyclictest19982-21systemd-journal19:20:101
89609950,3cyclictest502-21systemd-logind19:10:091
89559952,2cyclictest6874-21fschecks_time20:15:160
89559952,2cyclictest32322-21cut20:00:140
89559952,2cyclictest30654-21snmpd20:40:010
89559951,3cyclictest2534-21grep20:05:150
89559951,3cyclictest11570-21irqstats19:15:000
89559950,5cyclictest0-21swapper/020:45:130
89559950,2cyclictest29053-21/usr/sbin/munin21:05:160
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional