You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-03 - 03:40
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack5slot2.osadl.org (updated Wed Dec 03, 2025 00:44:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
308282207192,10sleep10-21swapper/119:08:161
306862205189,11sleep30-21swapper/319:06:253
308742188171,12sleep00-21swapper/019:08:510
309182184167,12sleep20-21swapper/219:09:252
221322460,0sleep10-21swapper/122:44:381
159062420,0sleep30-21swapper/319:40:203
226092150,0sleep30-21swapper/322:44:563
168732150,0sleep20-21swapper/222:09:322
42342100,0sleep10-21swapper/122:19:241
2703290,0sleep10-21swapper/123:40:031
4592280,0sleep00-21swapper/022:03:060
311389973,4cyclictest24756-21munin-run21:25:010
9269260,1sleep00-21swapper/022:37:480
7611260,0sleep10-21swapper/100:30:551
311389960,3cyclictest23953-21perf00:40:000
4731250,4sleep20-21swapper/223:40:212
311519955,0cyclictest0-21swapper/323:22:543
311519955,0cyclictest0-21swapper/300:03:213
311519953,2cyclictest0-21swapper/320:10:143
311519951,2cyclictest0-21swapper/320:30:123
311519950,5cyclictest11148-21ssh23:10:563
311519950,5cyclictest0-21swapper/300:36:573
311479955,0cyclictest0-21swapper/223:45:132
311479955,0cyclictest0-21swapper/222:01:112
311479950,5cyclictest0-21swapper/223:02:002
311479950,5cyclictest0-21swapper/222:53:422
311479950,5cyclictest0-21swapper/222:41:382
311479950,5cyclictest0-21swapper/222:13:502
311479950,5cyclictest0-21swapper/200:30:192
311479950,0cyclictest0-21swapper/200:05:532
311429951,2cyclictest0-21swapper/100:10:101
311429950,5cyclictest0-21swapper/100:07:171
311389955,0cyclictest0-21swapper/023:14:170
311389955,0cyclictest0-21swapper/022:34:160
311389955,0cyclictest0-21swapper/019:30:130
311389950,5cyclictest0-21swapper/022:57:420
311389950,5cyclictest0-21swapper/000:27:370
311389950,4cyclictest22099-21apt-get21:00:130
311389950,0cyclictest0-21swapper/000:05:540
21400250,0sleep10-21swapper/122:27:371
3705240,0sleep10-21swapper/123:24:051
311519944,0cyclictest0-21swapper/322:08:153
311519944,0cyclictest0-21swapper/319:30:143
311519944,0cyclictest0-21swapper/300:30:073
311519943,1cyclictest7636-21cpuspeed00:15:133
311519942,1cyclictest29097-21ssh21:42:563
311519942,1cyclictest2816-21perl19:15:153
311519942,1cyclictest18018-21memory19:45:163
311519942,1cyclictest13955-21ssh22:56:013
311519941,2cyclictest0-21swapper/323:00:133
311519941,2cyclictest0-21swapper/321:00:133
311519941,2cyclictest0-21swapper/320:45:143
311519940,4cyclictest8880-21ssh23:42:483
311519940,4cyclictest1264-21rm23:55:163
311519940,4cyclictest0-21swapper/323:50:143
311519940,4cyclictest0-21swapper/323:30:033
311519940,4cyclictest0-21swapper/322:32:593
311519940,4cyclictest0-21swapper/322:25:093
311519940,4cyclictest0-21swapper/322:20:113
311519940,4cyclictest0-21swapper/322:00:123
311519940,4cyclictest0-21swapper/321:35:123
311519940,4cyclictest0-21swapper/321:21:423
311519940,4cyclictest0-21swapper/321:05:463
311519940,4cyclictest0-21swapper/319:25:133
311519940,4cyclictest0-21swapper/300:20:123
311519940,4cyclictest0-21swapper/300:11:283
311519940,3cyclictest5130-21ssh22:51:453
311519940,3cyclictest5084-21sh23:08:223
311519940,3cyclictest4833-21cut22:35:213
311519940,3cyclictest28725-21sh22:47:313
311519940,3cyclictest28707-21sed00:25:193
311519940,3cyclictest27951-21ssh21:25:453
311519940,3cyclictest2536-21ssh21:13:513
311519940,3cyclictest14414-21wc20:45:003
311519940,3cyclictest12002-21ntp_states21:50:203
311519940,3cyclictest0-21swapper/323:20:013
311519940,1cyclictest9508-21/usr/sbin/munin20:35:153
311519940,1cyclictest7061-21ntp_states23:25:173
311519940,1cyclictest4305-21ntp_states21:30:193
311519940,1cyclictest18170-21/usr/sbin/munin22:10:133
311519940,1cyclictest12822-21/usr/sbin/munin23:45:203
311479944,0cyclictest9310-21ssh22:37:512
311479944,0cyclictest0-21swapper/222:29:332
311479944,0cyclictest0-21swapper/222:20:322
311479944,0cyclictest0-21swapper/221:32:222
311479944,0cyclictest0-21swapper/220:44:212
311479943,1cyclictest11962-21tr21:50:192
311479943,1cyclictest1081-21ssh23:55:152
311479941,3cyclictest30490-21ssh21:11:042
311479941,1cyclictest0-21swapper/200:10:102
311479940,4cyclictest14470-21apt-get20:45:142
311479940,4cyclictest1217-21ssh00:28:082
311479940,4cyclictest0-21swapper/220:53:222
311479940,4cyclictest0-21swapper/220:20:132
311479940,3cyclictest4567-21/usr/sbin/munin19:20:192
311479940,3cyclictest30781-21rm21:27:322
311479940,3cyclictest21106-21ssh21:55:142
311479940,3cyclictest19991-21ssh23:15:202
311479940,3cyclictest1281-21munin-node19:15:012
311479940,0cyclictest0-21swapper/221:47:482
311429944,0cyclictest0-21swapper/123:28:091
311429944,0cyclictest0-21swapper/123:05:181
311429944,0cyclictest0-21swapper/123:01:311
311429944,0cyclictest0-21swapper/121:20:241
311429943,1cyclictest211ktimersoftd/119:18:211
311429942,1cyclictest0-21swapper/122:50:121
311429941,2cyclictest0-21swapper/123:55:121
311429941,2cyclictest0-21swapper/122:45:121
311429941,2cyclictest0-21swapper/121:50:141
311429941,2cyclictest0-21swapper/121:40:141
311429941,2cyclictest0-21swapper/120:45:141
311429941,2cyclictest0-21swapper/120:20:131
311429941,2cyclictest0-21swapper/119:50:141
311429941,2cyclictest0-21swapper/119:30:121
311429941,2cyclictest0-21swapper/100:35:121
311429941,2cyclictest0-21swapper/100:00:121
311429940,4cyclictest0-21swapper/122:22:051
311429940,4cyclictest0-21swapper/121:32:551
311429940,4cyclictest0-21swapper/121:19:401
311429940,4cyclictest0-21swapper/100:23:261
311429940,1cyclictest0-21swapper/122:30:111
311429940,0cyclictest0-21swapper/123:54:111
311429940,0cyclictest0-21swapper/122:11:371
311389944,0cyclictest0-21swapper/023:37:080
311389944,0cyclictest0-21swapper/023:27:140
311389944,0cyclictest0-21swapper/022:22:120
311389943,1cyclictest3429-21grep19:15:190
311389942,1cyclictest24694-21grep23:50:220
311389941,1cyclictest0-21swapper/020:20:130
311389940,4cyclictest27658-21perf22:15:000
311389940,4cyclictest26809-21diskmemload21:18:520
311389940,4cyclictest26809-21diskmemload00:17:120
311389940,4cyclictest16368-21ssh22:09:120
311389940,4cyclictest0-21swapper/022:15:090
311389940,4cyclictest0-21swapper/021:35:120
311389940,4cyclictest0-21swapper/021:34:390
311389940,4cyclictest0-21swapper/021:25:140
311389940,4cyclictest0-21swapper/020:35:210
311389940,4cyclictest0-21swapper/019:35:180
311389940,4cyclictest0-21swapper/000:20:140
311389940,3cyclictest4632-21/usr/sbin/munin00:30:170
311389940,3cyclictest453-21memory20:15:180
311389940,3cyclictest3798-21expr23:40:150
311389940,3cyclictest30425-21df_inode00:10:120
311389940,3cyclictest27784-21apt-config23:20:010
311389940,3cyclictest27405-21diskstats20:05:140
311389940,3cyclictest24928-21df_inode20:00:140
311389940,3cyclictest23256-21ssh22:45:120
311389940,3cyclictest21947-21ntp_states21:55:180
311389940,3cyclictest20186-21ssh21:55:000
311389940,3cyclictest18568-21df23:15:120
311389940,3cyclictest16990-21basename19:45:120
311389940,3cyclictest15304-21ssh23:30:020
311389940,3cyclictest15268-21rm23:45:350
311389940,3cyclictest14450-21date20:45:000
311389940,3cyclictest1377-21memory23:55:170
311389940,3cyclictest1172-21sh23:05:520
311389940,3cyclictest10084-21ssh00:00:120
311389940,2cyclictest0-21swapper/020:50:130
30003240,0sleep00-21swapper/021:10:460
27166240,0sleep10-21swapper/100:25:121
26331240,0sleep20-21swapper/222:46:002
311519930,3cyclictest422-21sh21:45:113
311519930,3cyclictest31555-21tr19:10:143
311519930,3cyclictest19877-21ssh00:05:063
311519930,3cyclictest0-21swapper/323:35:033
311519930,3cyclictest0-21swapper/322:15:083
311519930,3cyclictest0-21swapper/321:55:013
311519930,3cyclictest0-21swapper/321:15:123
311519930,3cyclictest0-21swapper/320:55:053
311519930,3cyclictest0-21swapper/320:50:013
311519930,3cyclictest0-21swapper/320:25:053
311519930,3cyclictest0-21swapper/320:20:013
311519930,3cyclictest0-21swapper/320:15:133
311519930,3cyclictest0-21swapper/320:05:043
311519930,3cyclictest0-21swapper/320:00:043
311519930,3cyclictest0-21swapper/319:55:043
311519930,3cyclictest0-21swapper/319:50:043
311519930,3cyclictest0-21swapper/319:35:043
311519930,2cyclictest711-21runrttasks19:20:013
311479933,0cyclictest0-21swapper/220:29:212
311479933,0cyclictest0-21swapper/220:17:252
311479932,1cyclictest714-21snmpd22:30:012
311479932,1cyclictest7119-21ssh00:15:022
311479932,1cyclictest11292-21wc00:00:162
311479931,1cyclictest30726-21apt-get23:05:132
311479931,1cyclictest20275-21fschecks_time20:55:132
311479931,1cyclictest0-21swapper/222:15:142
311479931,1cyclictest0-21swapper/219:50:142
311479930,3cyclictest9051-21head23:10:152
311479930,3cyclictest31953-21perl19:10:152
311479930,3cyclictest25674-21ssh21:40:462
311479930,3cyclictest23508-21threads19:55:212
311479930,3cyclictest15981-21python19:40:212
311479930,3cyclictest10774-21ntp_states19:30:182
311479930,3cyclictest0-21swapper/223:50:142
311479930,3cyclictest0-21swapper/223:30:122
311479930,3cyclictest0-21swapper/223:25:112
311479930,3cyclictest0-21swapper/222:55:152
311479930,3cyclictest0-21swapper/221:35:072
311479930,3cyclictest0-21swapper/221:20:132
311479930,3cyclictest0-21swapper/221:15:122
311479930,3cyclictest0-21swapper/221:05:132
311479930,3cyclictest0-21swapper/221:00:122
311479930,3cyclictest0-21swapper/220:35:052
311479930,3cyclictest0-21swapper/220:30:122
311479930,3cyclictest0-21swapper/220:10:132
311479930,3cyclictest0-21swapper/220:05:122
311479930,3cyclictest0-21swapper/220:00:122
311479930,3cyclictest0-21swapper/219:45:042
311479930,3cyclictest0-21swapper/219:35:052
311479930,3cyclictest0-21swapper/219:25:132
311479930,3cyclictest0-21swapper/200:35:012
311479930,3cyclictest0-21swapper/200:20:022
311479930,2cyclictest27936-21rm23:20:032
311479930,2cyclictest25155-21ssh23:35:012
311429933,0cyclictest211ktimersoftd/123:45:011
311429933,0cyclictest211ktimersoftd/123:35:031
311429933,0cyclictest211ktimersoftd/123:30:011
311429933,0cyclictest211ktimersoftd/123:15:011
311429933,0cyclictest211ktimersoftd/123:10:011
311429933,0cyclictest211ktimersoftd/122:55:011
311429933,0cyclictest211ktimersoftd/122:35:011
311429933,0cyclictest211ktimersoftd/122:05:011
311429933,0cyclictest211ktimersoftd/122:00:011
311429933,0cyclictest211ktimersoftd/121:55:011
311429933,0cyclictest211ktimersoftd/121:45:011
311429933,0cyclictest211ktimersoftd/121:35:031
311429933,0cyclictest211ktimersoftd/121:25:021
311429933,0cyclictest211ktimersoftd/121:10:041
311429933,0cyclictest211ktimersoftd/121:05:021
311429933,0cyclictest211ktimersoftd/121:00:011
311429933,0cyclictest211ktimersoftd/120:55:011
311429933,0cyclictest211ktimersoftd/120:50:011
311429933,0cyclictest211ktimersoftd/120:40:011
311429933,0cyclictest211ktimersoftd/120:35:191
311429933,0cyclictest211ktimersoftd/120:30:011
311429933,0cyclictest211ktimersoftd/120:25:011
311429933,0cyclictest211ktimersoftd/120:15:151
311429933,0cyclictest211ktimersoftd/120:10:131
311429933,0cyclictest211ktimersoftd/119:55:131
311429933,0cyclictest211ktimersoftd/119:40:151
311429933,0cyclictest211ktimersoftd/119:35:011
311429933,0cyclictest211ktimersoftd/119:10:131
311429933,0cyclictest211ktimersoftd/100:15:031
311429931,2cyclictest0-21swapper/120:05:121
311429931,1cyclictest0-21swapper/120:00:121
311429931,1cyclictest0-21swapper/119:45:111
311429931,1cyclictest0-21swapper/119:25:131
311429931,1cyclictest0-21swapper/119:20:151
311389932,1cyclictest29867-21df_inode20:10:150
311389931,1cyclictest711-21runrttasks21:40:160
311389931,1cyclictest0-21swapper/020:40:110
311389931,1cyclictest0-21swapper/019:55:120
311389931,1cyclictest0-21swapper/019:50:140
311389930,3cyclictest13635-21cut22:40:140
311389930,3cyclictest0-21swapper/023:00:130
311389930,3cyclictest0-21swapper/022:50:020
311389930,3cyclictest0-21swapper/022:25:060
311389930,3cyclictest0-21swapper/021:45:100
311389930,3cyclictest0-21swapper/021:05:130
311389930,3cyclictest0-21swapper/020:55:030
311389930,3cyclictest0-21swapper/020:30:120
311389930,3cyclictest0-21swapper/020:25:130
311389930,3cyclictest0-21swapper/019:40:130
311389930,3cyclictest0-21swapper/019:25:060
311389930,3cyclictest0-21swapper/019:20:140
311389930,3cyclictest0-21swapper/019:10:010
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional