You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-27 - 19:23
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack5slot2.osadl.org (updated Sat Apr 27, 2024 12:44:41)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
139942203189,10sleep10-21swapper/107:09:491
137402197164,27sleep00-21swapper/007:06:300
138872188172,11sleep30-21swapper/307:08:253
117832169150,14sleep20-21swapper/207:05:032
135532480,0sleep30-21swapper/311:27:363
18882440,0sleep10-21swapper/110:41:251
18790290,0sleep20-21swapper/210:32:132
15198290,0sleep30-21swapper/309:12:203
142289991,4cyclictest5093-21munin-run07:55:010
142289991,4cyclictest20526-21idleruntime-cro09:55:000
142289991,4cyclictest16608-21idleruntime-cro11:30:020
142579970,6cyclictest31543-21df_inode10:40:143
142579960,5cyclictest0-21swapper/307:55:153
142579955,0cyclictest5392-21kworker/3:312:26:073
142579955,0cyclictest31566-21apt-get11:00:113
142579955,0cyclictest0-21swapper/309:45:493
142579951,2cyclictest0-21swapper/307:35:093
142579950,5cyclictest10260-21diskmemload12:05:133
142579950,5cyclictest0-21swapper/312:03:543
142579950,5cyclictest0-21swapper/310:35:263
142579950,5cyclictest0-21swapper/310:21:543
142579950,5cyclictest0-21swapper/309:36:053
142579950,5cyclictest0-21swapper/308:20:243
142579950,4cyclictest9868-21users09:05:263
142579950,4cyclictest2828-21date07:50:023
142579950,4cyclictest26070-21diskstats08:35:153
142489954,1cyclictest0-21swapper/208:30:092
142489951,2cyclictest0-21swapper/211:45:112
142489950,5cyclictest0-21swapper/209:20:132
142489950,1cyclictest32051-21irqstats10:40:172
142379952,1cyclictest0-21swapper/111:35:101
142379951,2cyclictest0-21swapper/111:45:111
142379951,2cyclictest0-21swapper/111:20:111
142379950,5cyclictest0-21swapper/110:09:471
142289953,1cyclictest30540-21munin-run10:40:010
142289950,5cyclictest0-21swapper/011:39:080
142289950,5cyclictest0-21swapper/011:23:430
142289950,5cyclictest0-21swapper/011:08:170
142289950,5cyclictest0-21swapper/009:44:550
142289950,5cyclictest0-21swapper/009:17:070
142289950,4cyclictest24234-21apt-get11:15:010
142289950,4cyclictest19071-21ntp_states11:50:230
142289950,4cyclictest0-21swapper/008:05:100
142579944,0cyclictest5392-21kworker/3:312:14:563
142579942,1cyclictest26911-21ssh12:34:573
142579942,1cyclictest20783-21fschecks_count07:20:153
142579941,3cyclictest10260-21diskmemload10:07:383
142579941,3cyclictest0-21swapper/312:16:003
142579941,3cyclictest0-21swapper/311:50:433
142579941,2cyclictest14238-21wc10:30:013
142579941,2cyclictest0-21swapper/312:35:113
142579941,2cyclictest0-21swapper/309:20:133
142579941,2cyclictest0-21swapper/308:55:093
142579941,1cyclictest0-21swapper/311:35:113
142579941,1cyclictest0-21swapper/309:00:103
142579940,4cyclictest901-21df_inode07:45:133
142579940,4cyclictest3246-21apt-get09:25:103
142579940,4cyclictest29120-21taskset11:56:223
142579940,4cyclictest23095-21hddtemp_smartct10:15:163
142579940,4cyclictest0-21swapper/311:46:273
142579940,4cyclictest0-21swapper/311:40:123
142579940,4cyclictest0-21swapper/311:30:113
142579940,4cyclictest0-21swapper/311:10:123
142579940,4cyclictest0-21swapper/310:45:083
142579940,4cyclictest0-21swapper/310:31:233
142579940,4cyclictest0-21swapper/310:00:113
142579940,4cyclictest0-21swapper/309:55:103
142579940,4cyclictest0-21swapper/309:50:133
142579940,4cyclictest0-21swapper/308:50:093
142579940,4cyclictest0-21swapper/308:00:113
142579940,3cyclictest8320-21cat11:25:013
142579940,3cyclictest7430-21apt-config11:05:013
142579940,3cyclictest29443-21if_eth009:40:153
142579940,3cyclictest27820-21cut07:35:023
142579940,3cyclictest23306-21/usr/sbin/munin10:55:123
142579940,3cyclictest21676-21ntp_states08:25:263
142579940,3cyclictest17194-21munin-node07:15:013
142579940,3cyclictest16713-21ntp_states08:15:243
142579940,3cyclictest13889-21/usr/sbin/munin10:10:213
142579940,3cyclictest10236-21latency_hist12:25:003
142579940,3cyclictest0-21swapper/311:15:133
142579940,1cyclictest21131-21users09:15:243
142489944,0cyclictest0-21swapper/211:05:162
142489943,1cyclictest8360-21fgrep10:45:192
142489943,1cyclictest30577-21cut08:45:142
142489942,1cyclictest6220-21/usr/sbin/munin10:25:112
142489941,2cyclictest0-21swapper/207:35:102
142489941,1cyclictest0-21swapper/212:20:102
142489941,1cyclictest0-21swapper/207:15:102
142489940,4cyclictest9009-21irqstats09:05:182
142489940,4cyclictest6598-21ntp_states07:55:222
142489940,4cyclictest27930-21ntp_states12:15:182
142489940,4cyclictest27402-21ssh12:35:102
142489940,4cyclictest20128-21irqstats09:15:182
142489940,4cyclictest15341-21expr10:50:142
142489940,4cyclictest10807-21diskstats08:05:132
142489940,4cyclictest0-21swapper/212:33:542
142489940,4cyclictest0-21swapper/212:14:352
142489940,4cyclictest0-21swapper/212:05:592
142489940,4cyclictest0-21swapper/211:50:122
142489940,4cyclictest0-21swapper/211:40:122
142489940,4cyclictest0-21swapper/211:20:102
142489940,4cyclictest0-21swapper/211:17:322
142489940,4cyclictest0-21swapper/211:10:132
142489940,4cyclictest0-21swapper/211:00:102
142489940,4cyclictest0-21swapper/210:10:122
142489940,4cyclictest0-21swapper/209:56:332
142489940,4cyclictest0-21swapper/209:35:132
142489940,4cyclictest0-21swapper/209:30:122
142489940,4cyclictest0-21swapper/208:55:232
142489940,4cyclictest0-21swapper/208:40:112
142489940,4cyclictest0-21swapper/208:20:212
142489940,4cyclictest0-21swapper/208:15:132
142489940,3cyclictest8549-21sh11:25:012
142489940,3cyclictest28404-21/usr/sbin/munin09:40:142
142489940,3cyclictest2623-21munin-run07:50:002
142489940,3cyclictest25536-21/usr/sbin/munin08:35:242
142489940,3cyclictest23425-21fschecks_time10:35:162
142489940,3cyclictest21497-21memory08:25:242
142489940,3cyclictest18905-21latency_hist12:30:002
142489940,3cyclictest18814-21sed09:15:012
142489940,1cyclictest5652-21/usr/sbin/munin10:05:202
142489940,1cyclictest5543-21/usr/sbin/munin09:00:222
142489940,1cyclictest25184-21/usr/sbin/munin11:35:262
142489940,1cyclictest12743-21/usr/sbin/munin08:10:112
142489940,0cyclictest0-21swapper/209:47:162
142379944,0cyclictest0-21swapper/112:25:411
142379944,0cyclictest0-21swapper/111:52:311
142379944,0cyclictest0-21swapper/111:27:201
142379944,0cyclictest0-21swapper/110:04:241
142379944,0cyclictest0-21swapper/109:15:051
142379944,0cyclictest0-21swapper/108:40:001
142379944,0cyclictest0-21swapper/107:40:391
142379941,2cyclictest0-21swapper/110:45:101
142379941,2cyclictest0-21swapper/110:15:121
142379941,2cyclictest0-21swapper/109:35:131
142379941,2cyclictest0-21swapper/108:10:101
142379941,2cyclictest0-21swapper/107:55:141
142379941,1cyclictest0-21swapper/111:00:101
142379941,1cyclictest0-21swapper/109:50:001
142379941,1cyclictest0-21swapper/108:15:131
142379940,4cyclictest0-21swapper/109:59:011
142379940,4cyclictest0-21swapper/109:53:391
142379940,4cyclictest0-21swapper/108:51:381
142379940,2cyclictest0-21swapper/112:20:091
142379940,2cyclictest0-21swapper/110:55:101
142379940,0cyclictest0-21swapper/112:15:121
142379940,0cyclictest0-21swapper/112:02:161
142289944,0cyclictest0-21swapper/009:25:250
142289943,1cyclictest2868-21sort12:40:010
142289940,4cyclictest0-21swapper/012:30:000
142289940,4cyclictest0-21swapper/011:40:160
142289940,4cyclictest0-21swapper/011:00:110
142289940,4cyclictest0-21swapper/010:50:120
142289940,4cyclictest0-21swapper/010:10:120
142289940,4cyclictest0-21swapper/009:58:380
142289940,3cyclictest9802-21sort12:05:000
142289940,3cyclictest92042sleep011:45:050
142289940,3cyclictest5224-21apt-config10:05:010
142289940,3cyclictest3723-21perl08:55:130
142289940,3cyclictest29369-21/usr/sbin/munin07:35:220
142289940,3cyclictest29216-21cat10:00:020
142289940,3cyclictest26474-21memory07:30:220
142289940,3cyclictest2259-21ssh12:20:030
142289940,3cyclictest19454-21python08:20:250
142289940,3cyclictest18282-21dpkg12:10:100
142289940,3cyclictest17010-21users07:15:010
142289940,3cyclictest14490-21apt-get07:10:010
142289940,3cyclictest14056-21latency_hist10:30:020
142289940,3cyclictest12171-21ntp_states09:10:230
142289940,3cyclictest11722-21rm10:47:420
142289940,3cyclictest10613-21apt-config12:25:000
142289940,3cyclictest0-21swapper/009:05:110
142289940,3cyclictest0-21swapper/008:45:150
142289940,3cyclictest0-21swapper/008:30:000
142289940,3cyclictest0-21swapper/007:20:110
142289940,0cyclictest0-21swapper/012:16:230
1204240,3sleep20-21swapper/210:21:172
142579932,1cyclictest22810-21cut07:25:143
142579931,1cyclictest0-21swapper/310:50:123
142579930,3cyclictest28815-21perl08:40:143
142579930,3cyclictest0-21swapper/308:45:153
142579930,3cyclictest0-21swapper/308:30:003
142579930,3cyclictest0-21swapper/308:10:093
142579930,3cyclictest0-21swapper/308:05:103
142579930,3cyclictest0-21swapper/307:40:143
142579930,3cyclictest0-21swapper/307:10:063
142579930,2cyclictest11482-21apt-key09:30:013
142489932,1cyclictest30561-21cut07:40:152
142489932,1cyclictest2847-21apt-get07:50:102
142489931,1cyclictest568-21apt-get08:50:102
142489931,1cyclictest22914-21cron10:55:012
142489931,1cyclictest21774-21latency_hist10:15:012
142489930,3cyclictest8551-21perl08:00:162
142489930,3cyclictest3246-21apt-get09:25:102
142489930,3cyclictest25796-21ssh11:55:102
142489930,3cyclictest0-21swapper/211:30:062
142489930,3cyclictest0-21swapper/210:00:012
142489930,3cyclictest0-21swapper/207:30:132
142489930,3cyclictest0-21swapper/207:25:122
142489930,3cyclictest0-21swapper/207:20:102
142489930,2cyclictest0-21swapper/209:50:022
142489930,2cyclictest0-21swapper/207:10:012
142489930,1cyclictest0-21swapper/212:00:022
142379933,0cyclictest0-21swapper/108:29:571
142379933,0cyclictest0-21swapper/107:30:091
142379933,0cyclictest0-21swapper/107:20:251
142379931,1cyclictest0-21swapper/112:10:101
142379931,1cyclictest0-21swapper/111:15:021
142379931,1cyclictest0-21swapper/110:30:091
142379931,1cyclictest0-21swapper/110:25:091
142379931,1cyclictest0-21swapper/110:10:121
142379931,1cyclictest0-21swapper/109:40:091
142379931,1cyclictest0-21swapper/109:30:011
142379931,1cyclictest0-21swapper/109:25:111
142379931,1cyclictest0-21swapper/109:10:101
142379931,1cyclictest0-21swapper/109:05:111
142379931,1cyclictest0-21swapper/108:30:001
142379931,1cyclictest0-21swapper/108:20:111
142379931,1cyclictest0-21swapper/108:00:111
142379931,1cyclictest0-21swapper/107:45:101
142379931,1cyclictest0-21swapper/107:30:001
142379931,1cyclictest0-21swapper/107:10:021
142379930,3cyclictest0-21swapper/107:52:431
142379930,2cyclictest290682sleep111:56:191
142379930,2cyclictest23450-21taskset11:33:571
142379930,2cyclictest124722sleep112:05:411
142379930,2cyclictest0-21swapper/109:20:131
142379930,2cyclictest0-21swapper/108:05:111
142379930,2cyclictest0-21swapper/107:15:101
142379930,1cyclictest0-21swapper/107:35:091
142289932,1cyclictest3602-21snmpd07:45:010
142289932,1cyclictest31736-21fschecks_time10:40:150
142289931,2cyclictest3602-21snmpd07:55:070
142289931,1cyclictest16762-21fw_packets11:10:160
142289931,1cyclictest0-21swapper/010:55:110
142289931,1cyclictest0-21swapper/007:40:140
142289930,3cyclictest61-21kswapd010:20:100
142289930,3cyclictest16903-21ssh11:30:050
142289930,3cyclictest0-21swapper/012:05:070
142289930,3cyclictest0-21swapper/011:55:110
142289930,3cyclictest0-21swapper/010:30:080
142289930,3cyclictest0-21swapper/010:15:090
142289930,3cyclictest0-21swapper/009:45:110
142289930,3cyclictest0-21swapper/009:35:130
142289930,3cyclictest0-21swapper/009:30:020
142289930,3cyclictest0-21swapper/009:20:140
142289930,3cyclictest0-21swapper/009:00:370
142289930,3cyclictest0-21swapper/008:50:090
142289930,3cyclictest0-21swapper/008:40:120
142289930,3cyclictest0-21swapper/008:35:120
142289930,3cyclictest0-21swapper/008:25:150
142289930,3cyclictest0-21swapper/008:10:090
142289930,3cyclictest0-21swapper/007:25:130
142289930,2cyclictest0-21swapper/008:15:020
142289930,2cyclictest0-21swapper/008:00:120
142379921,1cyclictest324202chrt08:45:341
142379921,1cyclictest0-21swapper/110:50:131
142379921,1cyclictest0-21swapper/109:00:101
142379920,1cyclictest4348-21chrt08:55:191
142379920,1cyclictest421-21chrt10:20:401
142379920,1cyclictest0-21swapper/112:35:101
142379920,1cyclictest0-21swapper/112:30:101
142379920,1cyclictest0-21swapper/111:40:131
142379920,1cyclictest0-21swapper/111:10:121
142379920,1cyclictest0-21swapper/111:05:011
142379920,1cyclictest0-21swapper/110:35:111
142379920,1cyclictest0-21swapper/108:35:131
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional