You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-27 - 23:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot5.osadl.org (updated Sat Apr 27, 2024 12:44:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2767299350,30cyclictest23144-21cron11:00:002
2767299330,32cyclictest20013-21diskmemload09:51:062
2767299330,32cyclictest0-21swapper/212:39:512
27672993228,3cyclictest20013-21diskmemload11:29:122
2767299320,31cyclictest2411-21systemd-journal11:50:012
2767299320,29cyclictest20013-21diskmemload11:08:312
2767299320,29cyclictest20013-21diskmemload09:12:422
2767299320,0cyclictest20013-21diskmemload09:43:032
27677993129,1cyclictest10000-21ntp_states11:55:223
2767799310,30cyclictest31289-21sh09:20:313
2767799310,30cyclictest16930-21sed12:40:013
27672993128,3cyclictest0-21swapper/211:15:252
27672993128,2cyclictest31624-21cpuspeed_turbos12:20:112
27672993128,2cyclictest0-21swapper/210:30:492
27672993128,2cyclictest0-21swapper/210:20:302
27672993127,3cyclictest20013-21diskmemload12:04:532
2767299310,31cyclictest0-21swapper/209:59:222
2767299310,28cyclictest0-21swapper/210:45:162
2767299310,0cyclictest20013-21diskmemload12:16:362
2767299310,0cyclictest20013-21diskmemload11:23:002
2767299310,0cyclictest20013-21diskmemload09:24:402
2767299310,0cyclictest0-21swapper/210:18:532
2767299310,0cyclictest0-21swapper/210:14:452
2766999310,30cyclictest16965-21ssh11:28:001
27666993129,1cyclictest27358-21cron11:39:590
2766699310,30cyclictest4330-21/usr/sbin/munin11:50:270
2766699310,30cyclictest25396-21sh11:00:360
2766699310,30cyclictest13061-21ssh09:36:200
27677993027,2cyclictest15905-21fschecks_time09:40:123
2767799300,29cyclictest20013-21diskmemload12:16:063
2767799300,29cyclictest20013-21diskmemload10:30:033
2767799300,29cyclictest20013-21diskmemload09:45:233
2767799300,29cyclictest0-21swapper/311:35:233
2767799300,1cyclictest20013-21diskmemload10:18:493
27672993028,2cyclictest21250-21basename08:05:012
27672993028,2cyclictest0-21swapper/212:33:262
27672993028,2cyclictest0-21swapper/212:10:072
27672993028,2cyclictest0-21swapper/211:04:202
27672993028,2cyclictest0-21swapper/210:54:552
27672993028,1cyclictest0-21swapper/211:32:042
27672993028,1cyclictest0-21swapper/210:35:132
27672993028,1cyclictest0-21swapper/210:00:392
27672993027,3cyclictest0-21swapper/210:25:102
2767299300,30cyclictest0-21swapper/211:56:332
2767299300,2cyclictest26724-21ssh11:38:492
2767299300,29cyclictest9617-21apt-get07:40:142
2767299300,29cyclictest3732-21apt-get08:35:142
2767299300,29cyclictest30461-21sh11:42:132
2767299300,29cyclictest271rcuc/212:25:132
2767299300,29cyclictest22036-21ssh12:10:012
2767299300,1cyclictest20013-21diskmemload11:50:202
27669993029,1cyclictest28110-21apt-get11:05:131
27669993028,1cyclictest21956-21grep09:10:231
27669993028,1cyclictest20013-21diskmemload10:38:321
27669993028,1cyclictest0-21swapper/109:50:371
27669993028,1cyclictest0-21swapper/109:35:221
2766999300,29cyclictest28947-21apt-get09:55:111
2766999300,29cyclictest28883-21sh12:15:461
2766999300,29cyclictest27776-21apt-get11:40:131
2766999300,29cyclictest20275-21sh12:06:391
2766999300,29cyclictest20013-21diskmemload12:32:491
2766999300,29cyclictest20013-21diskmemload12:28:061
2766999300,29cyclictest20013-21diskmemload11:37:311
2766999300,29cyclictest0-21swapper/111:55:341
2766999300,29cyclictest0-21swapper/111:21:071
2766999300,29cyclictest0-21swapper/109:46:021
2766999300,29cyclictest0-21swapper/109:43:301
2766999300,29cyclictest0-21swapper/109:30:221
2766999300,1cyclictest20013-21diskmemload10:24:501
2766999300,1cyclictest1006-21fschecks_time11:10:161
2766999300,1cyclictest0-21swapper/112:14:341
2766999300,1cyclictest0-21swapper/107:15:011
2766699300,30cyclictest0-21swapper/012:19:160
2766699300,29cyclictest561-21dbus-daemon07:15:010
2766699300,1cyclictest25069-21hddtemp_smartct09:50:180
27677992929,0cyclictest0-21swapper/312:31:213
27677992929,0cyclictest0-21swapper/310:41:413
27677992929,0cyclictest0-21swapper/310:06:213
27677992929,0cyclictest0-21swapper/309:25:483
27677992929,0cyclictest0-21swapper/308:35:143
27677992928,1cyclictest20013-21diskmemload10:55:123
27677992928,1cyclictest0-21swapper/309:18:303
27677992927,1cyclictest20013-21diskmemload11:10:313
27677992927,1cyclictest11636-21cron07:45:003
2767799290,29cyclictest20013-21diskmemload11:01:553
2767799290,29cyclictest0-21swapper/312:25:383
2767799290,29cyclictest0-21swapper/311:47:013
2767799290,29cyclictest0-21swapper/311:15:043
2767799290,29cyclictest0-21swapper/311:05:213
2767799290,29cyclictest0-21swapper/310:51:393
2767799290,29cyclictest0-21swapper/310:25:533
2767799290,29cyclictest0-21swapper/310:00:233
2767799290,29cyclictest0-21swapper/309:10:193
2767799290,28cyclictest10816-21apt-get09:35:113
2767799290,1cyclictest25555-21/usr/sbin/munin09:50:253
2767799290,1cyclictest11422-21ssh11:20:503
2767799290,0cyclictest20013-21diskmemload12:10:203
2767799290,0cyclictest20013-21diskmemload12:01:373
2767799290,0cyclictest20013-21diskmemload11:50:153
2767799290,0cyclictest20013-21diskmemload11:25:473
2767799290,0cyclictest20013-21diskmemload10:46:113
2767799290,0cyclictest20013-21diskmemload10:20:133
2767799290,0cyclictest20013-21diskmemload10:12:143
2767799290,0cyclictest0-21swapper/312:05:153
2767799290,0cyclictest0-21swapper/311:41:033
2767799290,0cyclictest0-21swapper/311:30:123
2767799290,0cyclictest0-21swapper/310:35:073
27672992927,2cyclictest0-21swapper/207:50:102
27672992927,1cyclictest15665-21apt-get09:00:092
2767299290,29cyclictest20013-21diskmemload09:36:092
2767299290,29cyclictest20013-21diskmemload09:30:412
2767299290,29cyclictest0-21swapper/211:10:072
2767299290,29cyclictest0-21swapper/208:30:112
2767299290,1cyclictest0-21swapper/210:07:272
2767299290,0cyclictest20013-21diskmemload10:40:272
2767299290,0cyclictest20013-21diskmemload09:45:072
2767299290,0cyclictest20013-21diskmemload09:25:092
2767299290,0cyclictest0-21swapper/209:15:392
27669992929,0cyclictest0-21swapper/110:41:051
27669992929,0cyclictest0-21swapper/109:05:101
27669992928,1cyclictest14551-21apt-get07:50:111
2766999290,29cyclictest13390-21apt-get12:00:101
2766999290,29cyclictest0-21swapper/112:35:111
2766999290,29cyclictest0-21swapper/112:20:511
2766999290,29cyclictest0-21swapper/111:50:111
2766999290,29cyclictest0-21swapper/111:16:421
2766999290,29cyclictest0-21swapper/110:47:501
2766999290,29cyclictest0-21swapper/110:30:471
2766999290,29cyclictest0-21swapper/110:25:331
2766999290,29cyclictest0-21swapper/110:10:131
2766999290,29cyclictest0-21swapper/110:01:281
2766999290,29cyclictest0-21swapper/109:15:091
2766999290,28cyclictest0-21swapper/109:21:201
2766999290,1cyclictest21675-21sh10:57:101
2766999290,0cyclictest20013-21diskmemload11:45:211
2766999290,0cyclictest20013-21diskmemload11:31:081
2766999290,0cyclictest20013-21diskmemload10:06:231
2766999290,0cyclictest0-21swapper/110:16:401
2766999290,0cyclictest0-21swapper/108:05:121
27666992929,0cyclictest2480-21apt-get07:25:110
27666992929,0cyclictest20013-21diskmemload11:46:390
27666992929,0cyclictest20013-21diskmemload09:45:170
27666992929,0cyclictest0-21swapper/012:25:100
27666992929,0cyclictest0-21swapper/011:27:160
27666992929,0cyclictest0-21swapper/010:38:270
27666992929,0cyclictest0-21swapper/010:30:140
27666992928,1cyclictest0-21swapper/011:40:060
27666992928,1cyclictest0-21swapper/010:45:460
27666992928,1cyclictest0-21swapper/009:30:450
27666992928,1cyclictest0-21swapper/009:20:070
27666992928,0cyclictest0-21swapper/010:55:100
27666992927,1cyclictest21957-21wc09:10:230
27666992927,1cyclictest0-21swapper/009:16:010
2766699291,28cyclictest58550irq/126-eno112:10:190
2766699290,29cyclictest20013-21diskmemload11:10:180
2766699290,29cyclictest20013-21diskmemload10:25:080
2766699290,29cyclictest20013-21diskmemload10:21:080
2766699290,29cyclictest20013-21diskmemload10:02:430
2766699290,29cyclictest0-21swapper/012:21:220
2766699290,29cyclictest0-21swapper/012:06:060
2766699290,29cyclictest0-21swapper/011:55:340
2766699290,29cyclictest0-21swapper/011:21:070
2766699290,29cyclictest0-21swapper/009:25:220
2766699290,29cyclictest0-21swapper/008:40:120
2766699290,28cyclictest0-21swapper/011:30:150
2766699290,28cyclictest0-21swapper/009:00:100
2766699290,1cyclictest0-21swapper/012:31:420
2766699290,0cyclictest20013-21diskmemload11:15:170
2766699290,0cyclictest20013-21diskmemload11:05:120
2766699290,0cyclictest20013-21diskmemload10:42:000
2766699290,0cyclictest20013-21diskmemload10:11:240
2766699290,0cyclictest0-21swapper/012:35:090
2766699290,0cyclictest0-21swapper/012:00:100
2766699290,0cyclictest0-21swapper/010:50:130
2766699290,0cyclictest0-21swapper/010:16:020
2766699290,0cyclictest0-21swapper/009:55:110
2766699290,0cyclictest0-21swapper/009:40:360
27677992828,0cyclictest13024-21apt-get08:55:113
27677992828,0cyclictest13024-21apt-get08:55:113
27677992828,0cyclictest0-21swapper/309:30:243
27677992828,0cyclictest0-21swapper/307:20:103
2767799280,28cyclictest0-21swapper/312:20:473
27672992828,0cyclictest26536-21apt-get08:15:132
27669992828,0cyclictest4802-21apt-get07:30:151
27669992828,0cyclictest0-21swapper/110:50:091
2766999280,28cyclictest0-21swapper/108:00:121
2766999280,0cyclictest0-21swapper/109:00:101
2766999280,0cyclictest0-21swapper/108:40:131
27666992828,0cyclictest0-21swapper/009:05:100
27666992828,0cyclictest0-21swapper/008:15:140
27666992828,0cyclictest0-21swapper/007:50:110
27666992828,0cyclictest0-21swapper/007:30:150
2766699280,28cyclictest0-21swapper/008:00:120
2766699280,0cyclictest0-21swapper/010:05:070
2766699280,0cyclictest0-21swapper/008:05:110
27677992727,0cyclictest0-21swapper/308:45:163
27677992727,0cyclictest0-21swapper/308:10:103
27677992727,0cyclictest0-21swapper/308:10:103
27672992727,0cyclictest0-21swapper/207:45:102
27669992727,0cyclictest0-21swapper/108:15:011
27669992727,0cyclictest0-21swapper/108:15:001
27666992726,1cyclictest26242-21idleruntime-cro08:15:010
27666992726,1cyclictest26242-21idleruntime-cro08:15:010
27672992626,0cyclictest0-21swapper/207:30:152
27669992626,0cyclictest0-21swapper/108:35:131
27669992626,0cyclictest0-21swapper/108:15:141
27669992624,1cyclictest2411-21systemd-journal07:25:011
27666992626,0cyclictest0-21swapper/008:35:130
27666992623,2cyclictest2197-21cron07:25:000
27666992612,13cyclictest151rcu_preempt07:44:190
27677992522,2cyclictest30918-21basename08:25:013
27677992421,2cyclictest28594-21cron08:20:013
27672992424,0cyclictest0-21swapper/208:45:162
27669992424,0cyclictest0-21swapper/108:30:111
27669992424,0cyclictest0-21swapper/108:25:151
27666992424,0cyclictest0-21swapper/008:30:110
27677992323,0cyclictest0-21swapper/307:30:153
27672992323,0cyclictest0-21swapper/207:10:072
27672992321,2cyclictest0-21swapper/208:25:152
27666992323,0cyclictest0-21swapper/008:25:150
27677992222,0cyclictest31509-21apt-get08:25:143
27677992222,0cyclictest0-21swapper/307:15:113
27677992221,1cyclictest23875-21cron08:10:013
27677992121,0cyclictest0-21swapper/308:50:103
27677992120,1cyclictest27909-21apt-get07:10:063
27677992120,1cyclictest1402-21apt-get08:30:113
27672992020,0cyclictest0-21swapper/207:15:112
27669992018,1cyclictest4509-21sh07:30:011
27677991919,0cyclictest0-21swapper/307:55:163
27672991919,0cyclictest0-21swapper/208:50:102
27672991818,0cyclictest0-21swapper/207:55:172
27672991818,0cyclictest0-21swapper/207:20:102
27666991817,1cyclictest30235-21apt-get07:15:100
27669991717,0cyclictest0-21swapper/107:15:101
27669991716,1cyclictest0-21swapper/107:45:021
27666991717,0cyclictest0-21swapper/007:45:100
2766699170,0cyclictest0-21swapper/007:55:310
27672991614,1cyclictest0-21swapper/208:40:172
27677991515,0cyclictest0-21swapper/307:50:103
27677991513,1cyclictest19633-21users09:05:253
27672991513,1cyclictest0-21swapper/208:55:202
27672991513,1cyclictest0-21swapper/208:55:202
27672991513,1cyclictest0-21swapper/207:25:142
2767299150,14cyclictest9447-21munin-run07:40:012
2767299150,0cyclictest0-21swapper/208:08:012
27666991514,1cyclictest0-21swapper/008:20:230
27677991414,0cyclictest0-21swapper/307:28:543
2767799140,14cyclictest0-21swapper/309:01:493
2767799140,14cyclictest0-21swapper/307:39:503
2767799140,0cyclictest0-21swapper/308:40:143
2767299140,14cyclictest0-21swapper/209:06:512
2767299140,14cyclictest0-21swapper/208:12:482
2767299140,14cyclictest0-21swapper/208:12:482
2767299140,0cyclictest0-21swapper/208:23:262
27669991414,0cyclictest0-21swapper/107:56:501
27669991412,1cyclictest13445-21df_inode08:55:131
27669991412,1cyclictest13445-21df_inode08:55:131
2766999140,14cyclictest0-21swapper/108:54:201
2766999140,14cyclictest0-21swapper/107:44:431
2766999140,14cyclictest0-21swapper/107:37:441
2766999140,0cyclictest0-21swapper/108:49:541
2766999140,0cyclictest0-21swapper/108:20:271
27666991414,0cyclictest0-21swapper/008:58:430
27666991414,0cyclictest0-21swapper/008:58:430
2766699140,0cyclictest0-21swapper/008:51:020
2767799130,0cyclictest0-21swapper/308:02:533
2767799130,0cyclictest0-21swapper/307:46:183
27666991313,0cyclictest0-21swapper/007:35:120
2766699130,0cyclictest0-21swapper/008:45:220
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional