You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-27 - 12:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack5slot2.osadl.org (updated Sat Apr 27, 2024 00:44:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
86062195179,11sleep10-21swapper/119:07:561
84942193167,21sleep00-21swapper/019:06:300
65482190172,13sleep30-21swapper/319:05:093
87402183166,12sleep20-21swapper/219:09:412
163282480,1sleep3896299cyclictest23:53:423
145062440,0sleep10-21swapper/123:32:301
99352430,0sleep20-21swapper/223:50:002
74612430,0sleep30-21swapper/322:29:553
225592430,0sleep20-21swapper/219:35:102
181792420,0sleep10-21swapper/121:56:181
288722400,0sleep10-21swapper/121:43:411
894899151,4cyclictest24706-21munin-run19:40:000
89489992,3cyclictest31551-21apt-get22:25:000
89489982,3cyclictest1021-21seq23:25:000
89629961,4cyclictest0-21swapper/319:50:093
89539960,5cyclictest22575-21apt-get21:40:022
89499961,3cyclictest0-21swapper/121:15:101
89489960,6cyclictest0-21swapper/023:56:000
89489960,5cyclictest0-21swapper/023:10:120
89489960,3cyclictest31036-21perf22:05:010
89489960,3cyclictest29644-21apt-get19:50:000
89489960,1cyclictest12710-21taskset22:51:590
17550260,0sleep10-21swapper/122:35:211
89629955,0cyclictest11754-21kworker/3:122:04:043
89629950,5cyclictest0-21swapper/323:34:313
89629950,5cyclictest0-21swapper/322:37:463
89629950,5cyclictest0-21swapper/321:24:273
89629950,4cyclictest0-21swapper/321:40:023
89539950,5cyclictest0-21swapper/222:10:132
89539950,4cyclictest0-21swapper/223:25:122
89499954,1cyclictest0-21swapper/120:06:261
89499952,2cyclictest0-21swapper/121:25:121
89499951,3cyclictest0-21swapper/121:05:131
89499950,5cyclictest0-21swapper/121:54:081
89499950,5cyclictest0-21swapper/100:12:301
89489955,0cyclictest0-21swapper/000:04:000
89489951,4cyclictest24079-21perf22:40:000
89489950,5cyclictest0-21swapper/022:55:540
89489950,5cyclictest0-21swapper/020:25:180
89489950,4cyclictest4807-21diskmemload23:05:100
89489950,4cyclictest0-21swapper/023:45:100
89489950,4cyclictest0-21swapper/000:15:090
7217250,0sleep30-21swapper/300:08:003
89629944,0cyclictest11754-21kworker/3:121:19:193
89629944,0cyclictest11754-21kworker/3:120:56:533
89629943,1cyclictest3092-21df_inode21:05:163
89629942,1cyclictest0-21swapper/320:40:093
89629941,3cyclictest32611-21ssh00:23:523
89629940,4cyclictest4807-21diskmemload23:15:243
89629940,4cyclictest4807-21diskmemload22:08:033
89629940,4cyclictest30089-21apt-get21:25:123
89629940,4cyclictest25631-21perl20:45:143
89629940,4cyclictest0-21swapper/323:42:523
89629940,4cyclictest0-21swapper/323:36:223
89629940,4cyclictest0-21swapper/323:25:013
89629940,4cyclictest0-21swapper/323:07:413
89629940,4cyclictest0-21swapper/322:55:463
89629940,4cyclictest0-21swapper/322:31:303
89629940,4cyclictest0-21swapper/322:17:523
89629940,4cyclictest0-21swapper/321:52:183
89629940,4cyclictest0-21swapper/321:45:123
89629940,4cyclictest0-21swapper/321:10:143
89629940,4cyclictest0-21swapper/320:35:113
89629940,4cyclictest0-21swapper/320:25:163
89629940,4cyclictest0-21swapper/319:59:023
89629940,4cyclictest0-21swapper/319:35:093
89629940,4cyclictest0-21swapper/319:20:113
89629940,4cyclictest0-21swapper/300:11:013
89629940,4cyclictest0-21swapper/300:04:553
89629940,3cyclictest4807-21diskmemload22:12:033
89629940,3cyclictest26569-21sh23:00:213
89629940,3cyclictest24417-21dpkg22:40:003
89629940,3cyclictest17901-21latency_hist00:35:003
89629940,3cyclictest14071-21ssh21:35:033
89629940,3cyclictest11116-21sh22:50:413
89629940,3cyclictest10000-21perl19:10:163
89629940,3cyclictest0-21swapper/320:30:093
89539944,0cyclictest0-21swapper/221:57:282
89539941,2cyclictest0-21swapper/223:35:102
89539940,4cyclictest61-21kswapd022:15:092
89539940,4cyclictest0-21swapper/223:56:462
89539940,4cyclictest0-21swapper/223:15:102
89539940,4cyclictest0-21swapper/222:55:122
89539940,4cyclictest0-21swapper/222:30:122
89539940,4cyclictest0-21swapper/222:05:132
89539940,4cyclictest0-21swapper/222:04:282
89539940,4cyclictest0-21swapper/221:47:552
89539940,4cyclictest0-21swapper/221:35:172
89539940,4cyclictest0-21swapper/221:25:122
89539940,4cyclictest0-21swapper/221:16:272
89539940,4cyclictest0-21swapper/221:13:162
89539940,4cyclictest0-21swapper/219:30:092
89539940,3cyclictest7687-21hddtemp_smartct21:50:172
89539940,3cyclictest31976-21ssh22:25:012
89539940,3cyclictest29905-21cat19:50:002
89539940,3cyclictest27185-21hddtemp_smartct23:40:162
89539940,3cyclictest25672-21ssh23:20:122
89539940,3cyclictest24372-21dpkg22:40:002
89539940,3cyclictest23257-21ntp_states21:20:212
89539940,3cyclictest220-21systemd-journal22:45:002
89539940,3cyclictest12621-21sh23:30:572
89539940,3cyclictest11838-21munin-node19:15:002
89539940,3cyclictest0-21swapper/200:30:102
89539940,2cyclictest0-21swapper/200:26:212
89539940,1cyclictest5073-21/usr/sbin/munin20:05:202
89539940,1cyclictest27385-21cat00:00:162
89539940,1cyclictest0-21swapper/219:50:002
89539940,0cyclictest0-21swapper/222:53:132
89499944,0cyclictest0-21swapper/122:44:281
89499944,0cyclictest0-21swapper/121:11:211
89499942,1cyclictest0-21swapper/120:00:131
89499941,2cyclictest0-21swapper/123:50:101
89499941,2cyclictest0-21swapper/123:40:121
89499941,2cyclictest0-21swapper/123:35:101
89499941,2cyclictest0-21swapper/123:25:011
89499941,2cyclictest0-21swapper/122:55:131
89499941,2cyclictest0-21swapper/122:45:101
89499941,2cyclictest0-21swapper/122:10:131
89499941,2cyclictest0-21swapper/122:05:131
89499941,2cyclictest0-21swapper/121:45:121
89499941,2cyclictest0-21swapper/121:35:131
89499941,2cyclictest0-21swapper/121:20:121
89499941,2cyclictest0-21swapper/121:00:091
89499941,2cyclictest0-21swapper/120:10:091
89499941,2cyclictest0-21swapper/119:45:091
89499941,2cyclictest0-21swapper/119:25:101
89499941,2cyclictest0-21swapper/119:20:111
89499941,2cyclictest0-21swapper/119:15:101
89499941,2cyclictest0-21swapper/100:20:141
89499941,1cyclictest0-21swapper/123:55:101
89499941,1cyclictest0-21swapper/121:30:101
89499941,1cyclictest0-21swapper/120:40:091
89499940,4cyclictest0-21swapper/123:16:461
89499940,4cyclictest0-21swapper/123:09:381
89499940,4cyclictest0-21swapper/119:10:341
89499940,2cyclictest0-21swapper/120:50:011
89499940,2cyclictest0-21swapper/120:15:081
89499940,0cyclictest0-21swapper/122:31:141
89499940,0cyclictest0-21swapper/122:20:191
89499940,0cyclictest0-21swapper/100:07:421
89489944,0cyclictest0-21swapper/021:35:350
89489944,0cyclictest0-21swapper/000:28:440
89489942,1cyclictest31015-21ssh22:43:480
89489942,1cyclictest23297-21ssh21:20:220
89489942,1cyclictest19227-21grep20:30:230
89489942,1cyclictest17980-21ssh23:35:080
89489942,1cyclictest10258-21ssh22:30:320
89489941,1cyclictest326592rm21:25:470
89489940,4cyclictest6848-21munin-run22:10:010
89489940,4cyclictest0-21swapper/023:30:590
89489940,4cyclictest0-21swapper/022:25:100
89489940,4cyclictest0-21swapper/022:15:090
89489940,4cyclictest0-21swapper/022:10:480
89489940,4cyclictest0-21swapper/021:55:100
89489940,4cyclictest0-21swapper/019:10:000
89489940,3cyclictest9940-21sort20:15:000
89489940,3cyclictest8029-21ssh21:30:240
89489940,3cyclictest32301-21cron19:55:000
89489940,3cyclictest3226-21ssh22:45:570
89489940,3cyclictest30763-21ssh21:45:020
89489940,3cyclictest25780-21hddtemp_smartct19:40:180
89489940,3cyclictest22780-21aten2_r5power_c21:40:120
89489940,3cyclictest19339-21/usr/sbin/munin00:35:170
89489940,3cyclictest15481-21ssh00:33:100
89489940,3cyclictest13357-21ssh21:15:030
89489940,3cyclictest13101-21latency_hist21:15:010
89489940,3cyclictest13051-21diskstats20:20:130
89489940,3cyclictest12403-21ssh00:10:340
89489940,3cyclictest0-21swapper/023:15:100
89489940,3cyclictest0-21swapper/020:50:000
89489940,0cyclictest0-21swapper/000:05:360
25631240,0sleep10-21swapper/123:00:151
13305240,0sleep10-21swapper/100:31:231
89629931,1cyclictest0-21swapper/323:55:103
89629931,1cyclictest0-21swapper/320:00:123
89629930,3cyclictest9069-21ssh23:10:043
89629930,3cyclictest25669-21apt-get23:20:123
89629930,3cyclictest11767-21ntp_states19:15:003
89629930,3cyclictest10416-21expr20:15:103
89629930,3cyclictest0-21swapper/323:45:013
89629930,3cyclictest0-21swapper/322:45:103
89629930,3cyclictest0-21swapper/322:20:043
89629930,3cyclictest0-21swapper/321:55:093
89629930,3cyclictest0-21swapper/321:30:043
89629930,3cyclictest0-21swapper/321:00:093
89629930,3cyclictest0-21swapper/320:50:103
89629930,3cyclictest0-21swapper/320:20:093
89629930,3cyclictest0-21swapper/320:10:003
89629930,3cyclictest0-21swapper/320:05:093
89629930,3cyclictest0-21swapper/319:45:053
89629930,3cyclictest0-21swapper/319:40:133
89629930,3cyclictest0-21swapper/319:30:093
89629930,3cyclictest0-21swapper/319:25:103
89629930,3cyclictest0-21swapper/300:35:063
89629930,3cyclictest0-21swapper/300:25:013
89629930,3cyclictest0-21swapper/300:15:023
89539932,1cyclictest9258-21ssh23:10:132
89539932,1cyclictest30849-21sed20:55:152
89539932,1cyclictest10063-21ssh23:50:042
89539931,1cyclictest22421-21apt-get20:40:092
89539931,1cyclictest1975-21apt-get00:05:092
89539931,1cyclictest0-21swapper/221:00:092
89539931,1cyclictest0-21swapper/219:55:122
89539930,3cyclictest8069-21df_inode20:10:112
89539930,3cyclictest61-21kswapd000:10:102
89539930,3cyclictest27881-21cut20:50:122
89539930,3cyclictest25983-21memory20:45:172
89539930,3cyclictest23921-21cpu22:20:112
89539930,3cyclictest15513-21df20:25:142
89539930,3cyclictest13340-21kworker/2:100:20:002
89539930,3cyclictest12635-21/usr/sbin/munin20:20:122
89539930,3cyclictest0-21swapper/223:05:102
89539930,3cyclictest0-21swapper/222:35:132
89539930,3cyclictest0-21swapper/221:05:132
89539930,3cyclictest0-21swapper/220:35:112
89539930,3cyclictest0-21swapper/220:30:092
89539930,3cyclictest0-21swapper/220:15:092
89539930,3cyclictest0-21swapper/220:00:122
89539930,3cyclictest0-21swapper/219:40:122
89539930,3cyclictest0-21swapper/219:25:052
89539930,3cyclictest0-21swapper/219:20:112
89539930,3cyclictest0-21swapper/219:10:012
89539930,3cyclictest0-21swapper/200:35:032
89539930,2cyclictest5738-21sh21:30:012
89539930,1cyclictest25075-21ssh23:00:072
89539930,1cyclictest18144-21/usr/sbin/munin00:15:102
89499931,2cyclictest0-21swapper/120:35:111
89499931,2cyclictest0-21swapper/119:55:121
89499931,1cyclictest0-21swapper/123:45:101
89499931,1cyclictest0-21swapper/123:10:121
89499931,1cyclictest0-21swapper/122:00:111
89499931,1cyclictest0-21swapper/121:00:001
89499931,1cyclictest0-21swapper/120:45:111
89499931,1cyclictest0-21swapper/120:30:091
89499931,1cyclictest0-21swapper/120:20:091
89499931,1cyclictest0-21swapper/119:35:091
89499931,1cyclictest0-21swapper/119:30:091
89499931,1cyclictest0-21swapper/100:35:101
89499931,1cyclictest0-21swapper/100:25:111
89499931,1cyclictest0-21swapper/100:15:091
89499931,1cyclictest0-21swapper/100:00:101
89499930,2cyclictest17901-21chrt22:15:391
89499930,2cyclictest0-21swapper/123:20:121
89499930,2cyclictest0-21swapper/122:50:121
89499930,2cyclictest0-21swapper/122:25:011
89499930,2cyclictest0-21swapper/119:40:131
89489931,2cyclictest20749-21grep19:30:110
89489931,1cyclictest3576-21sed21:05:210
89489931,1cyclictest1360-21dpkg23:25:000
89489931,1cyclictest0-21swapper/020:35:110
89489931,1cyclictest0-21swapper/019:20:110
89489930,3cyclictest26304-21ssh00:20:110
89489930,3cyclictest0-21swapper/023:50:100
89489930,3cyclictest0-21swapper/023:40:120
89489930,3cyclictest0-21swapper/021:50:020
89489930,3cyclictest0-21swapper/021:00:090
89489930,3cyclictest0-21swapper/020:55:110
89489930,3cyclictest0-21swapper/020:45:110
89489930,3cyclictest0-21swapper/020:40:090
89489930,3cyclictest0-21swapper/020:15:090
89489930,3cyclictest0-21swapper/020:05:090
89489930,3cyclictest0-21swapper/020:00:130
89489930,3cyclictest0-21swapper/019:50:010
89489930,3cyclictest0-21swapper/019:25:100
89489930,3cyclictest0-21swapper/019:15:010
89489930,2cyclictest25160-21ssh23:00:100
89499921,1cyclictest0-21swapper/120:25:001
89499920,1cyclictest0-21swapper/119:50:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional