You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-26 - 02:22
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot5.osadl.org (updated Thu Apr 25, 2024 12:44:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
662399332,2cyclictest1-21systemd08:40:013
661999330,0cyclictest12578-21apt-get09:25:102
662399320,31cyclictest0-21swapper/312:30:133
661999320,29cyclictest2989-21ssh11:36:262
661999320,1cyclictest0-21swapper/212:15:232
6623993129,1cyclictest18530-21sh10:42:253
6623993129,1cyclictest0-21swapper/309:49:093
6623993129,1cyclictest0-21swapper/309:17:093
662399310,30cyclictest31125-21diskmemload11:35:193
662399310,30cyclictest28985-21dump-pmu-power10:55:003
662399310,30cyclictest22825-21ssh11:23:283
662399310,30cyclictest16133-21sh12:26:063
6619993129,1cyclictest90022sleep211:43:442
6619993128,2cyclictest0-21swapper/212:07:262
6619993127,3cyclictest31125-21diskmemload09:16:332
6619993127,3cyclictest0-21swapper/210:57:002
661999310,31cyclictest0-21swapper/211:50:562
661999310,0cyclictest31125-21diskmemload11:02:332
661999310,0cyclictest31125-21diskmemload10:53:072
6618993129,1cyclictest4454-21sh10:26:171
6618993128,1cyclictest7025-21ssh12:16:011
661899310,30cyclictest26748-21sh10:15:191
661899310,30cyclictest13010-21sh11:47:521
661399310,30cyclictest22890-21sh11:23:340
6623993028,1cyclictest31125-21diskmemload11:00:243
6623993028,1cyclictest0-21swapper/311:06:313
662399300,2cyclictest14753-21ssh10:02:123
662399300,29cyclictest31125-21diskmemload11:13:193
662399300,29cyclictest31125-21diskmemload10:45:543
662399300,29cyclictest31125-21diskmemload10:10:483
662399300,29cyclictest15411-21sendmail10:40:013
662399300,1cyclictest30446-21ntp_states10:55:193
662399300,1cyclictest23882-21fschecks_count12:35:133
6619993028,2cyclictest31125-21diskmemload11:55:322
6619993028,2cyclictest31125-21diskmemload11:55:322
6619993028,2cyclictest10915-21ssh09:58:322
6619993028,2cyclictest0-21swapper/212:38:082
6619993028,2cyclictest0-21swapper/210:11:552
6619993028,2cyclictest0-21swapper/209:40:472
6619993028,2cyclictest0-21swapper/208:50:132
6619993028,1cyclictest19092-21cron08:45:002
6619993028,1cyclictest0-21swapper/212:21:212
6619993028,0cyclictest0-21swapper/210:24:372
6619993027,3cyclictest31125-21diskmemload12:31:152
6619993027,3cyclictest31125-21diskmemload12:27:202
6619993027,3cyclictest0-21swapper/212:04:392
6619993027,2cyclictest0-21swapper/210:03:512
661999300,2cyclictest2982-21if_enp1s010:25:152
661999300,2cyclictest21549-21ssh11:21:002
661999300,29cyclictest31125-21diskmemload09:10:132
661999300,29cyclictest23143-21sh10:47:342
661999300,0cyclictest0-21swapper/211:09:512
6618993028,1cyclictest7587-21sh11:40:591
6618993028,1cyclictest12250-21sh12:22:221
661899300,30cyclictest31125-21diskmemload12:38:021
661899300,30cyclictest31125-21diskmemload11:21:271
661899300,29cyclictest31125-21diskmemload09:40:331
661899300,29cyclictest24081-21munin-run08:55:021
661899300,29cyclictest19718-21ssh10:44:421
661899300,29cyclictest1868-21cron10:25:011
661899300,29cyclictest17219-21sh11:16:231
661899300,29cyclictest12479-21sh09:25:011
661899300,29cyclictest0-21swapper/110:55:201
6613993029,1cyclictest58550irq/126-eno112:29:510
6613993028,1cyclictest14173-21latency_hist08:35:000
661399300,2cyclictest19897-21ssh10:08:280
661399300,29cyclictest8088-21/usr/sbin/munin09:20:230
661399300,29cyclictest6996-21ssh09:54:400
661399300,29cyclictest3570-21sh11:01:080
661399300,29cyclictest31125-21diskmemload11:54:510
661399300,29cyclictest31125-21diskmemload10:21:230
661399300,29cyclictest19676-21ntpq12:30:240
661399300,29cyclictest0-21swapper/011:45:130
661399300,1cyclictest31125-21diskmemload11:58:170
661399300,1cyclictest31125-21diskmemload11:58:170
661399300,1cyclictest31125-21diskmemload11:05:230
661399300,1cyclictest31125-21diskmemload09:38:400
6623992928,1cyclictest9994-21sh11:45:103
6623992927,1cyclictest23838-21sh09:35:463
662399290,29cyclictest31125-21diskmemload12:17:023
662399290,29cyclictest31125-21diskmemload11:51:203
662399290,29cyclictest31125-21diskmemload09:40:233
662399290,29cyclictest31125-21diskmemload09:25:483
662399290,29cyclictest0-21swapper/312:00:033
662399290,29cyclictest0-21swapper/311:40:033
662399290,29cyclictest0-21swapper/311:15:183
662399290,29cyclictest0-21swapper/310:34:133
662399290,29cyclictest0-21swapper/310:21:283
662399290,29cyclictest0-21swapper/310:18:303
662399290,29cyclictest0-21swapper/309:55:153
662399290,29cyclictest0-21swapper/309:30:533
662399290,29cyclictest0-21swapper/309:10:113
662399290,1cyclictest17345-21cat10:05:193
662399290,0cyclictest31125-21diskmemload12:21:453
662399290,0cyclictest31125-21diskmemload12:12:113
662399290,0cyclictest31125-21diskmemload11:56:253
662399290,0cyclictest31125-21diskmemload11:56:253
662399290,0cyclictest31125-21diskmemload11:25:023
662399290,0cyclictest0-21swapper/311:30:133
662399290,0cyclictest0-21swapper/310:25:253
662399290,0cyclictest0-21swapper/309:51:263
661999290,29cyclictest0-21swapper/211:30:222
661999290,29cyclictest0-21swapper/211:11:472
661999290,29cyclictest0-21swapper/210:35:082
661999290,29cyclictest0-21swapper/210:17:222
661999290,29cyclictest0-21swapper/210:05:412
661999290,29cyclictest0-21swapper/209:53:142
661999290,0cyclictest31125-21diskmemload11:46:122
661999290,0cyclictest31125-21diskmemload11:15:162
661999290,0cyclictest31125-21diskmemload09:36:002
661999290,0cyclictest0-21swapper/211:25:092
661999290,0cyclictest0-21swapper/209:30:102
6618992929,0cyclictest31125-21diskmemload10:10:141
6618992929,0cyclictest0-21swapper/112:00:231
661899290,29cyclictest31125-21diskmemload11:10:201
661899290,29cyclictest31125-21diskmemload10:35:481
661899290,29cyclictest31125-21diskmemload09:50:591
661899290,29cyclictest31125-21diskmemload09:17:391
661899290,29cyclictest0-21swapper/112:26:181
661899290,29cyclictest0-21swapper/112:05:271
661899290,29cyclictest0-21swapper/111:32:191
661899290,29cyclictest0-21swapper/111:25:211
661899290,29cyclictest0-21swapper/110:46:051
661899290,29cyclictest0-21swapper/110:30:521
661899290,29cyclictest0-21swapper/109:45:191
661899290,29cyclictest0-21swapper/109:32:491
661899290,28cyclictest32603-21apt-get12:10:131
661899290,1cyclictest903-21ssh09:10:341
661899290,1cyclictest0-21swapper/111:36:021
661899290,1cyclictest0-21swapper/111:06:071
661899290,0cyclictest31125-21diskmemload11:58:291
661899290,0cyclictest31125-21diskmemload11:58:291
661899290,0cyclictest31125-21diskmemload09:36:291
661899290,0cyclictest0-21swapper/112:30:071
661899290,0cyclictest0-21swapper/111:00:121
661899290,0cyclictest0-21swapper/110:50:391
661899290,0cyclictest0-21swapper/110:05:031
661899290,0cyclictest0-21swapper/110:04:321
661899290,0cyclictest0-21swapper/109:57:431
661899290,0cyclictest0-21swapper/109:20:101
6613992929,0cyclictest31125-21diskmemload12:00:480
6613992929,0cyclictest31125-21diskmemload10:16:240
6613992929,0cyclictest0-21swapper/012:16:030
6613992928,1cyclictest31639-21ssh10:56:280
6613992928,1cyclictest31125-21diskmemload09:26:380
6613992928,1cyclictest0-21swapper/009:16:040
661399290,29cyclictest31125-21diskmemload12:23:060
661399290,29cyclictest31125-21diskmemload11:30:010
661399290,29cyclictest31125-21diskmemload09:30:140
661399290,29cyclictest31125-21diskmemload09:10:210
661399290,29cyclictest0-21swapper/012:11:560
661399290,29cyclictest0-21swapper/012:06:100
661399290,29cyclictest0-21swapper/011:40:310
661399290,29cyclictest0-21swapper/010:50:210
661399290,29cyclictest0-21swapper/010:45:180
661399290,29cyclictest0-21swapper/010:40:160
661399290,29cyclictest0-21swapper/009:55:270
661399290,29cyclictest0-21swapper/009:45:440
661399290,29cyclictest0-21swapper/009:44:300
661399290,28cyclictest2615-21sh11:35:440
661399290,28cyclictest0-21swapper/010:31:510
661399290,0cyclictest31125-21diskmemload11:25:300
661399290,0cyclictest31125-21diskmemload10:00:030
661399290,0cyclictest0-21swapper/012:35:190
661399290,0cyclictest0-21swapper/011:15:030
661399290,0cyclictest0-21swapper/011:10:080
661399290,0cyclictest0-21swapper/010:35:130
661399290,0cyclictest0-21swapper/010:26:140
661399290,0cyclictest0-21swapper/010:10:380
6623992828,0cyclictest31125-21diskmemload12:05:063
662399280,0cyclictest0-21swapper/308:30:113
6619992828,0cyclictest0-21swapper/210:41:192
6619992828,0cyclictest0-21swapper/208:55:102
6619992828,0cyclictest0-21swapper/208:05:092
661999280,0cyclictest0-21swapper/209:21:362
6618992828,0cyclictest0-21swapper/111:50:311
6618992828,0cyclictest0-21swapper/107:15:111
661899280,0cyclictest0-21swapper/108:35:131
6613992828,0cyclictest0-21swapper/008:45:110
6623992727,0cyclictest16455-21apt-get07:30:103
6623992727,0cyclictest0-21swapper/307:15:113
6623992725,1cyclictest0-21swapper/308:25:003
6619992727,0cyclictest0-21swapper/208:35:142
6619992725,1cyclictest23292-21perf07:45:012
6618992727,0cyclictest0-21swapper/109:05:131
6618992727,0cyclictest0-21swapper/108:15:111
6613992727,0cyclictest0-21swapper/007:25:140
6619992624,1cyclictest9175-21apt-get07:15:122
6613992626,0cyclictest0-21swapper/009:00:100
6613992626,0cyclictest0-21swapper/008:20:120
6613992626,0cyclictest0-21swapper/007:55:100
6618992525,0cyclictest17063-21apt-get08:40:101
6613992525,0cyclictest437-21apt-get08:05:100
6613992525,0cyclictest0-21swapper/007:50:100
6623992423,1cyclictest30579-21apt-get08:00:143
6623992423,1cyclictest30579-21apt-get08:00:143
6619992424,0cyclictest0-21swapper/207:35:122
6619992422,2cyclictest18505-21perf07:35:012
6619992422,1cyclictest27954-21awk07:55:012
6618992424,0cyclictest0-21swapper/108:10:131
6618992424,0cyclictest0-21swapper/107:30:111
6613992323,0cyclictest0-21swapper/007:45:120
6613992321,1cyclictest11255-21munin-run07:20:010
6623992222,0cyclictest5110-21apt-get08:15:113
6623992222,0cyclictest0-21swapper/308:45:113
6619992222,0cyclictest13564-21perf07:25:002
6613992222,0cyclictest0-21swapper/008:25:100
6619991919,0cyclictest0-21swapper/208:15:112
6618991919,0cyclictest0-21swapper/107:50:101
6618991818,0cyclictest0-21swapper/108:00:151
6618991818,0cyclictest0-21swapper/108:00:151
6618991818,0cyclictest0-21swapper/107:45:111
6618991716,1cyclictest11804-21cron08:30:011
6613991717,0cyclictest0-21swapper/009:05:110
6613991717,0cyclictest0-21swapper/007:35:120
6623991616,0cyclictest0-21swapper/308:10:113
6623991614,1cyclictest0-21swapper/308:05:123
6613991614,1cyclictest0-21swapper/007:40:130
661399160,15cyclictest2983-21expr08:10:130
6623991513,1cyclictest0-21swapper/308:55:153
662399150,14cyclictest16205-21awk07:30:013
662399150,14cyclictest0-21swapper/309:00:573
662399150,14cyclictest0-21swapper/307:25:013
661999150,15cyclictest0-21swapper/208:34:132
661999150,0cyclictest0-21swapper/207:55:472
661899150,14cyclictest27678-21memory09:00:171
6613991512,2cyclictest11925-21expr07:20:130
6623991414,0cyclictest0-21swapper/307:40:123
662399140,14cyclictest0-21swapper/309:05:373
662399140,14cyclictest0-21swapper/308:50:293
662399140,14cyclictest0-21swapper/308:41:473
662399140,14cyclictest0-21swapper/308:27:543
662399140,14cyclictest0-21swapper/307:57:103
662399140,14cyclictest0-21swapper/307:36:093
662399140,14cyclictest0-21swapper/307:12:053
662399140,0cyclictest0-21swapper/307:46:393
6619991414,0cyclictest0-21swapper/209:04:052
6619991413,1cyclictest0-21swapper/208:47:132
661999140,14cyclictest0-21swapper/209:06:232
661999140,14cyclictest0-21swapper/208:25:212
661999140,14cyclictest0-21swapper/208:12:192
661999140,14cyclictest0-21swapper/208:01:272
661999140,14cyclictest0-21swapper/208:01:272
661999140,14cyclictest0-21swapper/207:26:002
661999140,14cyclictest0-21swapper/207:11:212
661999140,0cyclictest0-21swapper/208:23:172
661999140,0cyclictest0-21swapper/207:46:112
6618991413,1cyclictest19384-21apt-get08:45:101
661899140,14cyclictest0-21swapper/108:59:151
661899140,14cyclictest0-21swapper/108:32:111
661899140,14cyclictest0-21swapper/107:55:111
661899140,14cyclictest0-21swapper/107:41:271
661899140,14cyclictest0-21swapper/107:25:111
661899140,14cyclictest0-21swapper/107:20:201
661899140,0cyclictest0-21swapper/108:20:061
661899140,0cyclictest0-21swapper/108:06:011
661899140,0cyclictest0-21swapper/107:35:451
661899140,0cyclictest0-21swapper/107:11:261
6613991414,0cyclictest0-21swapper/008:57:190
6613991414,0cyclictest0-21swapper/008:52:090
661399140,14cyclictest0-21swapper/008:40:040
661399140,14cyclictest0-21swapper/008:35:210
661399140,14cyclictest0-21swapper/008:18:000
661399140,14cyclictest0-21swapper/007:30:060
661399140,14cyclictest0-21swapper/007:13:270
661399140,0cyclictest0-21swapper/008:00:400
661399140,0cyclictest0-21swapper/008:00:400
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional