You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-12-05 - 16:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot5.osadl.org (updated Tue Dec 05, 2023 12:44:21)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3239199340,1cyclictest17201-21ssh10:10:020
3239199330,32cyclictest9289-21ssh11:41:190
3239199330,32cyclictest23789-21diskmemload09:52:410
3239199330,32cyclictest23789-21diskmemload09:26:500
3239199320,32cyclictest23789-21diskmemload11:07:020
3239199320,31cyclictest23789-21diskmemload12:00:160
3239199320,31cyclictest0-21swapper/012:11:410
3239199320,29cyclictest23789-21diskmemload11:16:510
3239199320,29cyclictest0-21swapper/009:34:370
3239199320,29cyclictest0-21swapper/009:34:370
3239199320,0cyclictest23789-21diskmemload11:23:430
3239199320,0cyclictest23789-21diskmemload09:35:590
3239799310,30cyclictest15016-21ssh11:47:543
3239699310,2cyclictest6663-21lockfile-create11:40:002
32392993129,2cyclictest11859-21cron08:45:021
3239299310,30cyclictest27419-21expr10:20:211
3239299310,30cyclictest23789-21diskmemload09:17:211
3239299310,30cyclictest12173-21ssh10:05:091
32391993129,1cyclictest29047-21ls12:35:330
32391993128,3cyclictest23789-21diskmemload12:32:280
32391993128,3cyclictest23789-21diskmemload10:57:530
32391993128,3cyclictest23789-21diskmemload10:01:220
32391993128,3cyclictest0-21swapper/011:28:290
32391993128,3cyclictest0-21swapper/010:53:280
3239199310,31cyclictest0-21swapper/012:28:350
3239199310,0cyclictest0-21swapper/010:41:020
32397993028,1cyclictest2411-21systemd-journal07:50:013
3239799300,29cyclictest4603-21ssh09:55:483
3239799300,29cyclictest24266-21ssh11:24:183
3239799300,29cyclictest11270-21ssh10:36:173
3239799300,29cyclictest0-21swapper/312:32:543
3239799300,29cyclictest0-21swapper/310:20:213
32396993029,1cyclictest31862-21ssh10:25:192
32396993028,1cyclictest0-21swapper/211:00:542
32396993028,1cyclictest0-21swapper/210:35:332
32396993028,1cyclictest0-21swapper/210:06:592
3239699300,29cyclictest23789-21diskmemload09:16:192
3239699300,29cyclictest23308-21ntp_states10:15:272
3239699300,29cyclictest0-21swapper/212:16:332
3239699300,29cyclictest0-21swapper/212:05:442
3239699300,1cyclictest31839-21cron12:40:012
3239699300,1cyclictest23789-21diskmemload09:20:132
3239699300,1cyclictest22873-21avahi-daemon10:59:502
32392993030,0cyclictest211rcuc/112:35:271
32392993029,1cyclictest211rcuc/110:01:081
32392993028,1cyclictest0-21swapper/111:37:141
3239299300,29cyclictest23789-21diskmemload12:20:241
3239299300,29cyclictest23789-21diskmemload11:58:261
3239299300,29cyclictest23789-21diskmemload09:25:151
3239299300,29cyclictest23789-21diskmemload09:20:391
3239299300,29cyclictest0-21swapper/112:25:081
3239299300,29cyclictest0-21swapper/112:15:201
3239299300,29cyclictest0-21swapper/111:07:131
3239299300,29cyclictest0-21swapper/110:50:191
3239299300,29cyclictest0-21swapper/110:40:201
3239299300,29cyclictest0-21swapper/109:50:471
3239299300,1cyclictest0-21swapper/111:10:271
32391993028,1cyclictest0-21swapper/011:02:190
3239199300,30cyclictest0-21swapper/010:35:390
3239199300,29cyclictest32299-21/usr/sbin/munin10:25:210
3239199300,29cyclictest23789-21diskmemload12:17:010
3239199300,29cyclictest23789-21diskmemload12:05:400
3239199300,29cyclictest23789-21diskmemload10:30:420
3239199300,29cyclictest23789-21diskmemload09:55:590
3239199300,29cyclictest0-21swapper/011:45:220
3239199300,29cyclictest0-21swapper/008:00:220
3239199300,1cyclictest31227-21ssh10:24:450
3239199300,1cyclictest18842-21cron09:00:000
32397992929,0cyclictest23789-21diskmemload11:30:573
32397992929,0cyclictest0-21swapper/309:32:183
32397992929,0cyclictest0-21swapper/309:32:183
32397992929,0cyclictest0-21swapper/307:50:203
32397992927,1cyclictest0-21swapper/312:20:273
3239799290,29cyclictest23789-21diskmemload12:15:123
3239799290,29cyclictest23789-21diskmemload12:05:283
3239799290,29cyclictest23789-21diskmemload12:00:483
3239799290,29cyclictest23789-21diskmemload11:37:393
3239799290,29cyclictest23789-21diskmemload10:52:433
3239799290,29cyclictest23789-21diskmemload10:40:323
3239799290,29cyclictest23789-21diskmemload10:26:143
3239799290,29cyclictest23789-21diskmemload10:01:373
3239799290,29cyclictest23789-21diskmemload09:41:353
3239799290,29cyclictest23789-21diskmemload09:35:243
3239799290,29cyclictest23789-21diskmemload09:20:293
3239799290,29cyclictest0-21swapper/312:10:493
3239799290,29cyclictest0-21swapper/311:50:193
3239799290,29cyclictest0-21swapper/311:26:463
3239799290,29cyclictest0-21swapper/311:05:503
3239799290,29cyclictest0-21swapper/311:00:383
3239799290,29cyclictest0-21swapper/310:58:433
3239799290,29cyclictest0-21swapper/309:50:023
3239799290,29cyclictest0-21swapper/309:10:073
3239799290,28cyclictest0-21swapper/310:05:213
3239799290,1cyclictest0-21swapper/309:16:323
3239799290,0cyclictest23789-21diskmemload12:36:473
3239799290,0cyclictest23789-21diskmemload11:42:403
3239799290,0cyclictest23789-21diskmemload10:33:333
3239799290,0cyclictest23789-21diskmemload09:26:413
3239799290,0cyclictest0-21swapper/311:56:533
3239799290,0cyclictest0-21swapper/311:16:213
3239799290,0cyclictest0-21swapper/310:45:313
3239799290,0cyclictest0-21swapper/310:10:363
32396992929,0cyclictest0-21swapper/207:45:212
32396992928,1cyclictest6099-21ssh09:25:072
32396992928,1cyclictest21066-21ssh10:46:362
3239699290,29cyclictest23789-21diskmemload11:30:532
3239699290,29cyclictest23789-21diskmemload10:20:172
3239699290,29cyclictest23789-21diskmemload10:12:452
3239699290,29cyclictest23789-21diskmemload09:41:022
3239699290,29cyclictest23789-21diskmemload09:11:352
3239699290,29cyclictest0-21swapper/211:58:522
3239699290,29cyclictest0-21swapper/211:41:052
3239699290,29cyclictest0-21swapper/211:25:162
3239699290,29cyclictest0-21swapper/211:11:182
3239699290,29cyclictest0-21swapper/211:06:042
3239699290,29cyclictest0-21swapper/210:03:402
3239699290,29cyclictest0-21swapper/209:57:172
3239699290,29cyclictest0-21swapper/209:51:592
3239699290,28cyclictest0-21swapper/212:10:182
3239699290,28cyclictest0-21swapper/211:45:112
3239699290,1cyclictest28674-21sh12:01:422
3239699290,1cyclictest0-21swapper/212:31:142
3239699290,1cyclictest0-21swapper/211:15:502
3239699290,1cyclictest0-21swapper/210:40:222
3239699290,1cyclictest0-21swapper/209:30:242
3239699290,1cyclictest0-21swapper/209:30:242
3239699290,0cyclictest23789-21diskmemload11:20:312
3239699290,0cyclictest23789-21diskmemload10:50:002
3239699290,0cyclictest23789-21diskmemload09:48:252
3239699290,0cyclictest23789-21diskmemload09:35:262
3239699290,0cyclictest0-21swapper/212:25:542
3239699290,0cyclictest0-21swapper/211:50:352
3239699290,0cyclictest0-21swapper/210:31:232
3239699290,0cyclictest0-21swapper/207:35:212
32392992929,0cyclictest9065-21apt-get10:35:191
32392992929,0cyclictest23789-21diskmemload09:55:361
32392992929,0cyclictest0-21swapper/109:30:171
32392992929,0cyclictest0-21swapper/109:30:161
32392992928,1cyclictest25417-21ssh10:18:041
32392992928,1cyclictest211rcuc/112:10:291
32392992928,1cyclictest0-21swapper/109:36:311
3239299290,29cyclictest211rcuc/111:45:101
3239299290,29cyclictest0-21swapper/112:05:051
3239299290,29cyclictest0-21swapper/111:00:061
3239299290,29cyclictest0-21swapper/110:55:511
3239299290,29cyclictest0-21swapper/110:45:331
3239299290,29cyclictest0-21swapper/110:26:421
3239299290,29cyclictest0-21swapper/110:10:091
3239299290,29cyclictest0-21swapper/109:11:231
3239299290,1cyclictest22-21ksoftirqd/111:25:441
3239299290,1cyclictest211rcuc/109:42:211
3239299290,0cyclictest23789-21diskmemload11:30:301
3239299290,0cyclictest0-21swapper/112:30:131
3239299290,0cyclictest0-21swapper/112:00:151
3239299290,0cyclictest0-21swapper/111:51:041
3239299290,0cyclictest0-21swapper/111:22:041
3239299290,0cyclictest0-21swapper/111:15:071
3239299290,0cyclictest0-21swapper/109:46:251
3239299290,0cyclictest0-21swapper/107:10:201
32391992929,0cyclictest0-21swapper/011:50:290
32391992928,1cyclictest23789-21diskmemload11:35:290
32391992926,3cyclictest23789-21diskmemload11:59:510
3239199290,29cyclictest23789-21diskmemload11:31:470
3239199290,29cyclictest0-21swapper/011:10:130
3239199290,29cyclictest0-21swapper/010:15:040
3239199290,29cyclictest0-21swapper/010:05:430
3239199290,1cyclictest23789-21diskmemload12:20:100
3239199290,1cyclictest0-21swapper/009:20:520
3239199290,0cyclictest23789-21diskmemload10:45:120
3239199290,0cyclictest23789-21diskmemload09:45:150
3239199290,0cyclictest0-21swapper/009:40:250
3239199290,0cyclictest0-21swapper/009:10:130
32397992828,0cyclictest0-21swapper/310:15:053
32397992828,0cyclictest0-21swapper/309:45:073
32397992828,0cyclictest0-21swapper/308:55:193
3239799280,28cyclictest0-21swapper/311:10:353
3239799280,0cyclictest14484-21apt-get08:50:213
3239799280,0cyclictest0-21swapper/312:25:333
32396992828,0cyclictest0-21swapper/212:20:302
32392992828,0cyclictest23789-21diskmemload10:30:401
32392992828,0cyclictest0-21swapper/111:40:091
32392992828,0cyclictest0-21swapper/108:10:171
32392992826,1cyclictest25631-21cron08:05:021
32391992828,0cyclictest19137-21apt-get09:00:160
32391992826,1cyclictest4914-21munin-run08:30:010
32397992727,0cyclictest2864-21apt-get08:25:193
32397992725,1cyclictest32647-21cron08:20:013
32396992727,0cyclictest0-21swapper/208:50:212
32397992626,0cyclictest32655-21apt-get07:10:213
32396992626,0cyclictest0-21swapper/208:40:192
32396992626,0cyclictest0-21swapper/208:15:232
32397992525,0cyclictest0-21swapper/309:00:173
32397992525,0cyclictest0-21swapper/307:15:213
32396992525,0cyclictest0-21swapper/207:40:212
32396992523,1cyclictest1-21systemd09:05:002
32392992525,0cyclictest0-21swapper/109:00:171
32392992525,0cyclictest0-21swapper/107:30:221
32392992524,1cyclictest561-21dbus-daemon08:30:001
32391992525,0cyclictest0-21swapper/009:05:000
32391992525,0cyclictest0-21swapper/008:40:200
32397992424,0cyclictest0-21swapper/308:35:213
32396992424,0cyclictest18935-21apt-get07:50:192
32392992424,0cyclictest0-21swapper/108:05:231
32391992424,0cyclictest0-21swapper/007:55:210
32397992323,0cyclictest0-21swapper/308:30:193
32391992323,0cyclictest0-21swapper/007:30:220
32396992222,0cyclictest0-21swapper/208:45:212
32392992222,0cyclictest0-21swapper/107:45:201
32396992121,0cyclictest0-21swapper/208:20:192
32396992121,0cyclictest0-21swapper/207:20:192
32392992120,1cyclictest0-21swapper/109:05:001
32392992120,1cyclictest0-21swapper/108:55:201
32396992020,0cyclictest0-21swapper/209:05:192
32392992017,2cyclictest2567-21cron08:25:001
32392991919,0cyclictest0-21swapper/107:25:181
32392991816,1cyclictest21264-21apt-get07:55:201
32391991818,0cyclictest0-21swapper/008:05:230
32391991815,2cyclictest16508-21cron08:55:010
32391991717,0cyclictest0-21swapper/007:10:200
32397991614,1cyclictest2411-21systemd-journal07:45:013
32396991616,0cyclictest2551-21apt-get07:15:202
32396991616,0cyclictest0-21swapper/208:25:192
32396991614,1cyclictest0-21swapper/208:05:282
32396991614,1cyclictest0-21swapper/207:31:152
3239699160,15cyclictest21683-21df_inode07:55:222
3239299160,0cyclictest0-21swapper/108:39:341
3239299160,0cyclictest0-21swapper/107:21:101
32397991515,0cyclictest0-21swapper/308:10:173
32397991514,1cyclictest0-21swapper/307:20:293
3239299150,14cyclictest0-21swapper/107:40:341
3239299150,0cyclictest0-21swapper/107:54:451
32391991515,0cyclictest0-21swapper/007:40:200
3239199150,14cyclictest0-21swapper/007:15:190
32397991414,0cyclictest14145-21kworker/3:108:05:573
3239799140,14cyclictest0-21swapper/309:05:073
3239799140,14cyclictest0-21swapper/308:45:103
3239799140,14cyclictest0-21swapper/308:44:293
3239799140,14cyclictest0-21swapper/308:23:463
3239799140,14cyclictest0-21swapper/307:36:583
3239799140,14cyclictest0-21swapper/307:26:183
3239799140,0cyclictest0-21swapper/308:00:073
3239799140,0cyclictest0-21swapper/307:31:553
32396991414,0cyclictest0-21swapper/208:30:292
3239699140,14cyclictest0-21swapper/208:56:112
3239699140,14cyclictest0-21swapper/208:36:162
3239699140,14cyclictest0-21swapper/208:14:152
3239699140,14cyclictest0-21swapper/207:14:022
3239699140,0cyclictest0-21swapper/208:00:012
32392991414,0cyclictest0-21swapper/108:47:561
3239299140,14cyclictest0-21swapper/108:31:371
3239299140,14cyclictest0-21swapper/107:36:341
3239299140,0cyclictest0-21swapper/108:50:401
3239299140,0cyclictest0-21swapper/108:15:041
3239299140,0cyclictest0-21swapper/107:15:101
32391991414,0cyclictest16622-21apt-get07:45:200
32391991414,0cyclictest0-21swapper/008:45:220
32391991414,0cyclictest0-21swapper/008:30:570
3239199140,14cyclictest0-21swapper/008:35:040
3239199140,14cyclictest0-21swapper/008:10:300
3239199140,14cyclictest0-21swapper/007:20:020
3239199140,0cyclictest19978-21ntp_states07:50:260
3239199140,0cyclictest0-21swapper/008:20:390
3239199140,0cyclictest0-21swapper/008:15:430
3239199140,0cyclictest0-21swapper/007:35:170
32391991313,0cyclictest0-21swapper/007:25:390
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional