You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-09-28 - 19:39
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot5.osadl.org (updated Thu Sep 28, 2023 12:44:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2617899320,31cyclictest0-21swapper/212:20:182
2618399310,30cyclictest17621-21diskmemload11:15:193
2618399310,30cyclictest17621-21diskmemload09:35:233
26178993128,1cyclictest9340-21ssh09:34:142
2617599311,1cyclictest3671-21sendmail-msp08:40:011
2617599311,1cyclictest3671-21sendmail-msp08:40:011
2617599310,30cyclictest3058-21cron07:30:001
2617599310,30cyclictest10414-21awk12:25:011
26173993131,0cyclictest58550irq/126-eno111:17:590
26173993129,1cyclictest17621-21diskmemload12:35:280
26173993129,1cyclictest0-21swapper/012:00:220
26173993128,2cyclictest7188-21rm11:46:080
26173993128,2cyclictest23075-21ssh10:21:330
2617399310,30cyclictest7731-21/usr/sbin/munin10:40:240
2617399310,30cyclictest7118-21ssh11:12:510
26183993028,1cyclictest0-21swapper/311:42:543
26183993028,1cyclictest0-21swapper/311:34:203
26183993028,1cyclictest0-21swapper/308:45:013
2618399300,30cyclictest17621-21diskmemload10:51:453
2618399300,29cyclictest22606-21sh09:14:493
2618399300,29cyclictest19295-21cron09:45:003
2618399300,29cyclictest17621-21diskmemload12:11:583
2618399300,29cyclictest17621-21diskmemload11:37:083
2618399300,29cyclictest10128-21ssh10:08:573
2618399300,1cyclictest17621-21diskmemload10:12:393
2618399300,1cyclictest0-21swapper/312:25:193
2618399300,1cyclictest0-21swapper/309:35:013
2618399300,1cyclictest0-21swapper/308:45:213
26178993028,1cyclictest3551-21ssh11:43:072
26178993028,1cyclictest13755-21ssh10:11:572
26178993028,0cyclictest0-21swapper/212:15:182
26178993028,0cyclictest0-21swapper/211:19:392
2617899300,2cyclictest0-21swapper/210:56:412
2617899300,29cyclictest29279-21apt-get09:55:182
2617899300,29cyclictest17621-21diskmemload11:20:572
2617899300,29cyclictest17621-21diskmemload10:50:072
2617899300,29cyclictest13001-21perf09:00:002
2617899300,29cyclictest11670-21awk09:35:272
2617899300,29cyclictest0-21swapper/209:15:232
2617899300,1cyclictest561-21dbus-daemon12:00:012
2617899300,1cyclictest17621-21diskmemload09:28:172
2617599308,4cyclictest0-21swapper/109:52:531
26175993028,2cyclictest22326-21ssh09:14:201
26175993028,1cyclictest30818-21awk07:20:011
26175993028,1cyclictest12947-21cron09:00:001
26175993027,2cyclictest9419-21sh11:50:011
2617599300,29cyclictest0-21swapper/111:05:271
2617599300,1cyclictest17621-21diskmemload11:12:521
2617599300,1cyclictest17621-21diskmemload11:00:211
2617599300,1cyclictest17621-21diskmemload10:51:061
2617599300,1cyclictest17621-21diskmemload09:31:251
2617599300,1cyclictest0-21swapper/111:24:231
26173993029,1cyclictest0-21swapper/011:09:200
26173993028,1cyclictest11700-21ssh12:25:250
26173993028,1cyclictest0-21swapper/011:34:540
26173993028,1cyclictest0-21swapper/010:02:470
2617399300,29cyclictest28765-21fschecks_count09:20:220
2617399300,29cyclictest26768-21sh11:00:140
2617399300,29cyclictest17621-21diskmemload09:15:030
2617399300,29cyclictest13-21ksoftirqd/012:23:010
2617399300,29cyclictest10232-21ssh11:50:190
2617399300,1cyclictest17621-21diskmemload10:10:280
26183992928,1cyclictest17621-21diskmemload10:22:173
26183992928,1cyclictest0-21swapper/312:03:033
26183992928,1cyclictest0-21swapper/309:56:303
26183992927,1cyclictest12477-21/usr/sbin/munin10:45:253
2618399290,29cyclictest17621-21diskmemload11:25:583
2618399290,29cyclictest17621-21diskmemload11:10:083
2618399290,29cyclictest0-21swapper/312:20:153
2618399290,29cyclictest0-21swapper/312:08:503
2618399290,29cyclictest0-21swapper/311:55:143
2618399290,29cyclictest0-21swapper/311:54:443
2618399290,29cyclictest0-21swapper/311:45:163
2618399290,29cyclictest0-21swapper/310:55:193
2618399290,29cyclictest0-21swapper/310:36:283
2618399290,29cyclictest0-21swapper/310:03:383
2618399290,29cyclictest0-21swapper/309:50:393
2618399290,29cyclictest0-21swapper/309:49:383
2618399290,29cyclictest0-21swapper/309:25:183
2618399290,29cyclictest0-21swapper/309:22:053
2618399290,28cyclictest15661-21apt-get12:30:233
2618399290,28cyclictest0-21swapper/309:15:113
2618399290,1cyclictest0-21swapper/312:15:303
2618399290,0cyclictest17621-21diskmemload12:35:083
2618399290,0cyclictest17621-21diskmemload10:42:033
2618399290,0cyclictest0-21swapper/311:22:473
2618399290,0cyclictest0-21swapper/311:08:013
2618399290,0cyclictest0-21swapper/310:30:473
2618399290,0cyclictest0-21swapper/310:26:573
2618399290,0cyclictest0-21swapper/310:19:433
26178992929,0cyclictest17621-21diskmemload10:30:292
26178992929,0cyclictest0-21swapper/209:40:552
26178992928,1cyclictest31377-21ssh12:11:422
26178992928,1cyclictest17621-21diskmemload11:50:042
26178992927,1cyclictest8350-21perf08:50:012
2617899290,29cyclictest17621-21diskmemload12:35:522
2617899290,29cyclictest17621-21diskmemload12:30:442
2617899290,29cyclictest17621-21diskmemload12:05:472
2617899290,29cyclictest17621-21diskmemload11:47:352
2617899290,29cyclictest17621-21diskmemload11:35:012
2617899290,29cyclictest17621-21diskmemload11:34:242
2617899290,29cyclictest17621-21diskmemload11:10:072
2617899290,29cyclictest17621-21diskmemload10:46:552
2617899290,29cyclictest17621-21diskmemload10:05:032
2617899290,29cyclictest17621-21diskmemload09:10:042
2617899290,29cyclictest0-21swapper/211:26:182
2617899290,29cyclictest0-21swapper/211:05:122
2617899290,29cyclictest0-21swapper/211:00:552
2617899290,29cyclictest0-21swapper/210:41:452
2617899290,29cyclictest0-21swapper/210:20:022
2617899290,29cyclictest0-21swapper/210:15:562
2617899290,29cyclictest0-21swapper/209:45:102
2617899290,28cyclictest0-21swapper/209:50:012
2617899290,1cyclictest0-21swapper/210:25:192
2617899290,1cyclictest0-21swapper/209:23:412
2617899290,0cyclictest17621-21diskmemload10:00:062
2617899290,0cyclictest0-21swapper/210:36:582
2617899290,0cyclictest0-21swapper/209:05:192
26175992929,0cyclictest17621-21diskmemload12:15:541
26175992929,0cyclictest0-21swapper/112:30:361
26175992929,0cyclictest0-21swapper/109:40:081
26175992928,1cyclictest17621-21diskmemload10:36:271
26175992928,1cyclictest0-21swapper/108:40:201
26175992927,1cyclictest24385-21apt-get08:15:191
26175992927,1cyclictest23765-21hddtemp_smartct11:30:241
2617599290,29cyclictest17621-21diskmemload12:25:121
2617599290,29cyclictest17621-21diskmemload12:00:101
2617599290,29cyclictest17621-21diskmemload10:30:111
2617599290,29cyclictest10786-21ssh09:35:191
2617599290,29cyclictest0-21swapper/112:06:101
2617599290,29cyclictest0-21swapper/111:50:251
2617599290,29cyclictest0-21swapper/111:41:001
2617599290,29cyclictest0-21swapper/111:35:041
2617599290,29cyclictest0-21swapper/110:57:001
2617599290,29cyclictest0-21swapper/110:40:511
2617599290,29cyclictest0-21swapper/110:01:451
2617599290,29cyclictest0-21swapper/109:45:301
2617599290,29cyclictest0-21swapper/109:25:541
2617599290,29cyclictest0-21swapper/109:15:571
2617599290,0cyclictest17621-21diskmemload10:45:131
2617599290,0cyclictest17621-21diskmemload10:25:281
2617599290,0cyclictest17621-21diskmemload09:20:191
2617599290,0cyclictest0-21swapper/112:36:141
2617599290,0cyclictest0-21swapper/112:14:011
2617599290,0cyclictest0-21swapper/111:55:091
2617599290,0cyclictest0-21swapper/111:25:161
2617599290,0cyclictest0-21swapper/111:15:021
2617599290,0cyclictest0-21swapper/110:22:431
2617599290,0cyclictest0-21swapper/110:10:021
2617599290,0cyclictest0-21swapper/110:05:031
2617599290,0cyclictest0-21swapper/109:58:221
26173992929,0cyclictest0-21swapper/010:25:510
26173992929,0cyclictest0-21swapper/009:55:330
26173992929,0cyclictest0-21swapper/009:50:200
26173992928,1cyclictest30750-21ssh12:10:400
26173992928,0cyclictest0-21swapper/010:15:310
2617399290,29cyclictest17621-21diskmemload11:55:380
2617399290,29cyclictest17621-21diskmemload10:57:130
2617399290,29cyclictest17621-21diskmemload09:45:540
2617399290,29cyclictest17621-21diskmemload09:35:270
2617399290,29cyclictest17621-21diskmemload09:30:130
2617399290,29cyclictest141rcuc/012:05:410
2617399290,29cyclictest0-21swapper/011:40:210
2617399290,29cyclictest0-21swapper/011:36:570
2617399290,29cyclictest0-21swapper/010:51:080
2617399290,29cyclictest0-21swapper/010:45:060
2617399290,29cyclictest0-21swapper/010:06:370
2617399290,29cyclictest0-21swapper/009:27:010
2617399290,28cyclictest0-21swapper/011:20:410
2617399290,1cyclictest20628-21ssh11:26:310
2617399290,1cyclictest0-21swapper/012:15:180
2617399290,1cyclictest0-21swapper/010:30:070
2617399290,0cyclictest3359-21apt-get07:30:210
2617399290,0cyclictest19490-21sshd09:10:280
2617399290,0cyclictest17621-21diskmemload12:30:170
2617399290,0cyclictest17621-21diskmemload10:36:160
2617399290,0cyclictest15031-21apt-get09:40:210
26183992828,0cyclictest17621-21diskmemload11:00:093
26183992828,0cyclictest0-21swapper/307:15:203
2617899280,0cyclictest0-21swapper/212:25:392
2617899280,0cyclictest0-21swapper/207:25:012
26175992828,0cyclictest15589-21apt-get09:05:191
26175992828,0cyclictest0-21swapper/107:10:221
2617599280,0cyclictest0-21swapper/110:15:151
26173992828,0cyclictest0-21swapper/007:40:180
2617399280,0cyclictest0-21swapper/008:30:180
26183992727,0cyclictest0-21swapper/308:30:183
26183992725,1cyclictest14780-21cron07:55:013
26178992726,0cyclictest19737-21apt-get08:05:192
26178992726,0cyclictest1631-21apt-get08:35:202
26178992726,0cyclictest1631-21apt-get08:35:202
26183992626,0cyclictest31133-21apt-get07:20:183
26183992626,0cyclictest0-21swapper/307:35:193
26178992626,0cyclictest10664-21perf08:55:012
26178992625,1cyclictest17419-21apt-get08:00:192
26175992525,0cyclictest0-21swapper/108:05:191
26175992523,1cyclictest7827-21cron07:40:011
26173992525,0cyclictest0-21swapper/009:00:180
26183992424,0cyclictest8126-21apt-get07:40:183
26183992424,0cyclictest10935-21apt-get08:55:213
26183992424,0cyclictest0-21swapper/308:50:193
26183992424,0cyclictest0-21swapper/308:20:213
26178992423,1cyclictest1028-21apt-get07:25:192
26178992422,1cyclictest0-21swapper/207:35:182
26175992424,0cyclictest0-21swapper/108:25:211
26173992424,0cyclictest0-21swapper/007:45:190
26183992220,1cyclictest23282-21processes08:10:293
26175992222,0cyclictest0-21swapper/107:50:191
26175992221,1cyclictest28768-21apt-get08:25:011
26173992221,1cyclictest8614-21apt-get08:50:190
26178992121,0cyclictest30800-21perf07:20:012
26175992121,0cyclictest15314-21perf09:05:001
26175992020,0cyclictest0-21swapper/107:20:181
26173991715,2cyclictest0-21swapper/008:35:210
26173991715,2cyclictest0-21swapper/008:35:200
26183991613,2cyclictest755-21snmpd07:29:473
26178991616,0cyclictest26425-21apt-get07:10:212
26178991616,0cyclictest0-21swapper/208:40:202
26178991613,2cyclictest24145-21cut08:15:012
26173991615,1cyclictest1028-21apt-get07:25:190
26183991514,1cyclictest26561-21ls08:20:013
2618399150,1cyclictest2156-21perl08:35:223
2618399150,1cyclictest2156-21perl08:35:223
2618399150,1cyclictest0-21swapper/308:25:253
26178991515,0cyclictest0-21swapper/208:15:192
26175991514,1cyclictest24118-21munin-run08:15:001
26175991512,2cyclictest561-21dbus-daemon08:55:001
2617599150,14cyclictest10445-21apt-get07:45:191
2617599150,14cyclictest0-21swapper/107:30:211
26173991513,1cyclictest19064-21users08:00:310
26173991513,1cyclictest17001-21cat09:05:290
2617399150,1cyclictest0-21swapper/008:30:010
2617399150,14cyclictest74902sleep007:37:270
26183991414,0cyclictest0-21swapper/309:00:183
2618399140,14cyclictest0-21swapper/309:06:383
2618399140,14cyclictest0-21swapper/308:06:443
2618399140,14cyclictest0-21swapper/308:00:523
2618399140,14cyclictest0-21swapper/307:59:053
2618399140,14cyclictest0-21swapper/307:48:333
2618399140,14cyclictest0-21swapper/307:32:003
2618399140,14cyclictest0-21swapper/307:12:213
26178991414,0cyclictest0-21swapper/208:31:572
26178991413,1cyclictest31445-21perf08:30:012
2617899140,0cyclictest0-21swapper/209:00:082
2617899140,0cyclictest0-21swapper/207:55:272
2617899140,0cyclictest0-21swapper/207:50:392
2617899140,0cyclictest0-21swapper/207:43:262
26175991413,1cyclictest6476-21expr08:45:221
2617599140,14cyclictest0-21swapper/108:32:131
2617599140,14cyclictest0-21swapper/108:04:171
2617599140,0cyclictest0-21swapper/107:55:571
2617599140,0cyclictest0-21swapper/107:43:231
26173991414,0cyclictest0-21swapper/008:46:530
26173991414,0cyclictest0-21swapper/007:53:500
2617399140,14cyclictest0-21swapper/008:55:380
2617399140,14cyclictest0-21swapper/008:41:310
2617399140,14cyclictest0-21swapper/008:20:560
2617399140,14cyclictest0-21swapper/008:11:580
2617399140,14cyclictest0-21swapper/008:05:300
2617399140,14cyclictest0-21swapper/007:59:380
2617399140,14cyclictest0-21swapper/007:21:300
2617399140,14cyclictest0-21swapper/007:11:570
2617399140,0cyclictest0-21swapper/008:15:380
2617399140,0cyclictest0-21swapper/007:15:540
26178991313,0cyclictest0-21swapper/207:46:262
2617899130,13cyclictest0-21swapper/207:30:072
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional