You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2021-07-29 - 16:39

Intel(R) Core(TM) i3-8145UE CPU @ 2.20GHz, Linux 5.10.27-rt36 (Profile)

Latency plot of system in rack #e, slot #5
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackeslot5.osadl.org (updated Thu Jul 29, 2021 00:44:21)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2486099350,2cyclictest6585-21awk20:45:012
2486099340,2cyclictest7451-21fschecks_count00:15:142
2486099330,32cyclictest12105-21ssh23:22:572
24859993332,1cyclictest30221-21ssh21:46:461
2485999330,1cyclictest0-21swapper/120:10:161
24858993332,1cyclictest24042-21kworker/0:222:40:170
24858993332,1cyclictest24042-21kworker/0:222:25:170
24858993332,1cyclictest24042-21kworker/0:222:20:260
24860993228,4cyclictest28007-21sort20:20:202
24860993228,3cyclictest18622-21diskmemload00:37:172
24860993227,4cyclictest30412-21ssh22:42:482
2486099320,32cyclictest18622-21diskmemload23:33:352
2486099320,31cyclictest18622-21diskmemload23:40:292
2486099320,31cyclictest0-21swapper/222:21:412
2486099320,31cyclictest0-21swapper/221:25:062
2486099320,29cyclictest26755-21ssh21:15:372
2486099320,0cyclictest0-21swapper/222:59:092
2486099320,0cyclictest0-21swapper/221:59:392
24858993232,0cyclictest24042-21kworker/0:223:40:160
24858993232,0cyclictest22325-21kworker/0:020:00:210
2485899320,2cyclictest314-21systemd-journal23:05:000
2485899320,0cyclictest0-21swapper/022:55:150
24862993131,0cyclictest36-1kworker/3:0H22:20:253
24862993130,1cyclictest36-1kworker/3:0H21:40:153
24862993130,1cyclictest36-1kworker/3:0H00:25:193
24862993129,1cyclictest11125-21ntp_states21:30:233
2486299310,30cyclictest541-21avahi-daemon00:05:013
24860993130,1cyclictest24260-21kworker/2:022:00:162
24860993128,3cyclictest18622-21diskmemload21:33:072
24860993128,3cyclictest0-21swapper/222:35:552
24860993128,1cyclictest0-21swapper/222:05:152
24860993127,3cyclictest13928-21ssh23:25:012
2486099310,31cyclictest0-21swapper/223:50:052
2486099310,30cyclictest0-21swapper/200:08:252
2486099310,28cyclictest27589-21ssh00:32:112
2486099310,0cyclictest0-21swapper/222:51:222
2486099310,0cyclictest0-21swapper/222:25:212
2486099310,0cyclictest0-21swapper/221:54:542
2486099310,0cyclictest0-21swapper/221:47:482
2486099310,0cyclictest0-21swapper/200:02:152
24859993130,1cyclictest100-1kworker/1:1H00:05:231
2485999310,30cyclictest16193-21sed23:55:011
2485999310,30cyclictest0-21swapper/121:15:001
2485999310,1cyclictest0-21swapper/121:35:001
24858993131,0cyclictest22325-21kworker/0:019:25:130
24858993131,0cyclictest13371-21kworker/0:000:35:170
24858993130,1cyclictest59050irq/126-eno122:47:300
24858993128,2cyclictest0-21swapper/023:15:140
24858993128,2cyclictest0-21swapper/000:23:470
24862993028,2cyclictest806-21snmpd00:34:413
24862993028,2cyclictest10462-21ssh23:20:473
24862993028,1cyclictest4796-21apt-get23:45:153
24862993028,1cyclictest11172-21ssh22:25:453
24862993028,1cyclictest0-21swapper/321:50:173
2486299300,2cyclictest19954-21ssh22:34:403
2486299300,29cyclictest7413-21df_inode00:15:143
2486299300,29cyclictest29446-21ssh23:37:593
2486299300,29cyclictest14049-21sed22:00:253
2486299300,29cyclictest0-21swapper/322:35:263
2486299300,1cyclictest9852-21apt-get19:45:193
2486299300,1cyclictest25282-21grep22:10:203
24860993029,1cyclictest74-1kworker/2:1H19:30:222
24860993027,3cyclictest0-21swapper/222:49:552
24860993027,2cyclictest544-21dbus-daemon19:55:012
24860993027,2cyclictest0-21swapper/222:11:362
24860993027,1cyclictest678-21ssh23:13:082
24860993026,4cyclictest0-21swapper/221:36:102
2486099300,30cyclictest0-21swapper/223:01:002
2486099300,2cyclictest18004-21switchtime23:55:292
2486099300,29cyclictest0-21swapper/223:15:322
2486099300,29cyclictest0-21swapper/222:20:012
2486099300,0cyclictest0-21swapper/200:25:362
2486099300,0cyclictest0-21swapper/200:13:382
24859993028,2cyclictest20959-21cstates22:35:221
24859993028,1cyclictest0-21swapper/122:14:291
24859993027,2cyclictest12046-21ssh22:26:541
2485999300,29cyclictest3943-21munin-run20:40:011
2485999300,29cyclictest23295-21/usr/sbin/munin23:05:141
2485999300,29cyclictest18622-21diskmemload23:30:131
2485999300,29cyclictest18622-21diskmemload22:56:191
2485999300,29cyclictest18622-21diskmemload22:50:151
2485999300,29cyclictest18622-21diskmemload00:26:021
2485999300,29cyclictest11681-21apt-get20:55:141
2485999300,29cyclictest0-21swapper/123:25:101
2485999300,29cyclictest0-21swapper/123:00:151
2485999300,29cyclictest0-21swapper/122:20:131
2485999300,29cyclictest0-21swapper/122:15:151
2485999300,29cyclictest0-21swapper/121:40:221
2485999300,29cyclictest0-21swapper/121:20:441
2485999300,29cyclictest0-21swapper/100:37:241
24858993028,2cyclictest0-21swapper/022:07:110
24858993028,1cyclictest9495-21perf21:30:000
24858993028,1cyclictest9069-21hddtemp_smartct23:20:160
24858993028,1cyclictest0-21swapper/022:30:450
2485899302,0cyclictest59050irq/126-eno100:16:380
2485899300,29cyclictest18622-21diskmemload23:10:500
2485899300,29cyclictest18622-21diskmemload21:55:160
2485899300,29cyclictest12631-21ssh23:50:390
2485899300,29cyclictest10492sleep021:21:350
2485899300,1cyclictest26529-21ssh00:30:470
2485899300,1cyclictest20898-21ssh21:39:440
24862992929,0cyclictest0-21swapper/300:05:113
24862992928,1cyclictest1257-21apt-get00:10:113
24862992928,1cyclictest0-21swapper/300:22:283
2486299290,29cyclictest18622-21diskmemload22:57:563
2486299290,29cyclictest0-21swapper/323:05:483
2486299290,29cyclictest0-21swapper/322:17:463
2486299290,29cyclictest0-21swapper/321:55:023
2486299290,29cyclictest0-21swapper/321:15:223
2486299290,29cyclictest0-21swapper/319:20:223
2486299290,28cyclictest18622-21diskmemload23:55:043
2486299290,28cyclictest15486-21sort23:25:233
2486299290,28cyclictest0-21swapper/320:15:133
2486299290,1cyclictest19503-21ssh23:00:333
2486299290,1cyclictest1588-21rm23:41:213
2486299290,0cyclictest26714-21apt-get20:20:133
2486299290,0cyclictest18622-21diskmemload23:50:263
2486299290,0cyclictest18622-21diskmemload23:15:033
2486299290,0cyclictest18622-21diskmemload22:46:003
2486299290,0cyclictest18622-21diskmemload22:40:523
2486299290,0cyclictest18622-21diskmemload21:45:103
2486299290,0cyclictest18622-21diskmemload21:26:053
2486299290,0cyclictest18622-21diskmemload21:20:063
2486299290,0cyclictest0-21swapper/323:11:113
2486299290,0cyclictest0-21swapper/322:54:363
2486299290,0cyclictest0-21swapper/322:05:143
2486299290,0cyclictest0-21swapper/321:35:193
2486299290,0cyclictest0-21swapper/321:13:243
24860992927,2cyclictest0-21swapper/219:10:122
2486099290,29cyclictest0-21swapper/223:05:212
2486099290,29cyclictest0-21swapper/221:40:122
2486099290,29cyclictest0-21swapper/221:12:072
2486099290,29cyclictest0-21swapper/200:20:142
2486099290,28cyclictest0-21swapper/221:20:042
2486099290,1cyclictest17796-21ssh22:31:502
2486099290,0cyclictest18622-21diskmemload23:38:162
2486099290,0cyclictest15944-21sort19:55:212
24859992929,0cyclictest18622-21diskmemload22:05:211
24859992929,0cyclictest0-21swapper/121:35:281
24859992928,1cyclictest0-21swapper/121:50:041
24859992928,0cyclictest18622-21diskmemload00:00:021
2485999290,29cyclictest0-21swapper/123:57:191
2485999290,29cyclictest0-21swapper/123:45:041
2485999290,29cyclictest0-21swapper/123:20:281
2485999290,29cyclictest0-21swapper/123:15:481
2485999290,29cyclictest0-21swapper/123:10:121
2485999290,29cyclictest0-21swapper/121:25:361
2485999290,29cyclictest0-21swapper/100:32:471
2485999290,29cyclictest0-21swapper/100:20:591
2485999290,29cyclictest0-21swapper/100:15:281
2485999290,29cyclictest0-21swapper/100:11:031
2485999290,28cyclictest7952-21sort21:55:311
2485999290,28cyclictest0-21swapper/122:30:041
2485999290,1cyclictest0-21swapper/122:45:081
2485999290,0cyclictest18622-21diskmemload23:40:531
2485999290,0cyclictest18622-21diskmemload22:03:111
2485999290,0cyclictest18622-21diskmemload21:15:131
2485999290,0cyclictest0-21swapper/123:36:221
24858992929,0cyclictest18622-21diskmemload00:05:090
24858992929,0cyclictest0-21swapper/023:30:070
24858992928,1cyclictest0-21swapper/023:37:180
2485899290,29cyclictest18622-21diskmemload23:45:560
2485899290,29cyclictest0-21swapper/022:35:300
2485899290,29cyclictest0-21swapper/022:01:420
2485899290,29cyclictest0-21swapper/021:45:020
2485899290,29cyclictest0-21swapper/021:40:290
2485899290,29cyclictest0-21swapper/021:11:360
2485899290,29cyclictest0-21swapper/000:11:080
2485899290,29cyclictest0-21swapper/000:01:120
2485899290,0cyclictest18622-21diskmemload22:50:370
2485899290,0cyclictest18622-21diskmemload22:15:550
2485899290,0cyclictest18622-21diskmemload00:25:410
2485899290,0cyclictest11326-21sort21:30:240
2485899290,0cyclictest0-21swapper/023:56:310
2485899290,0cyclictest0-21swapper/023:25:220
2485899290,0cyclictest0-21swapper/023:05:110
2485899290,0cyclictest0-21swapper/022:10:380
2485899290,0cyclictest0-21swapper/021:16:080
24862992828,0cyclictest0-21swapper/320:35:243
24862992827,1cyclictest36-1kworker/3:0H21:05:153
24862992827,0cyclictest36-1kworker/3:0H20:00:213
24860992828,0cyclictest0-21swapper/219:45:192
24860992827,1cyclictest21879-21apt-get20:10:142
24860992826,2cyclictest0-21swapper/219:25:192
24859992828,0cyclictest0-21swapper/121:00:181
24859992828,0cyclictest0-21swapper/119:50:131
24858992828,0cyclictest28014-21sort20:20:220
24858992828,0cyclictest22325-21kworker/0:019:15:170
24858992828,0cyclictest16164-21kworker/0:121:05:150
24858992828,0cyclictest0-21swapper/019:35:230
24858992827,1cyclictest6520-21kworker/0:120:50:170
2485899280,0cyclictest3075-21sort20:35:230
2485899280,0cyclictest0-21swapper/019:55:140
2485899280,0cyclictest0-21swapper/019:30:290
24862992727,0cyclictest27519-21apt-get19:15:153
24862992727,0cyclictest0-21swapper/320:30:023
24862992727,0cyclictest0-21swapper/320:05:133
24862992727,0cyclictest0-21swapper/319:55:223
24862992727,0cyclictest0-21swapper/319:35:153
24860992727,0cyclictest0-21swapper/220:35:152
24859992726,1cyclictest0-21swapper/119:40:161
24858992727,0cyclictest0-21swapper/020:30:280
24858992727,0cyclictest0-21swapper/020:10:140
24858992726,1cyclictest6520-21kworker/0:120:45:220
24862992626,0cyclictest0-21swapper/320:55:223
24862992626,0cyclictest0-21swapper/319:10:203
24860992525,0cyclictest9277-21apt-get20:50:152
24860992525,0cyclictest0-21swapper/221:05:132
24860992524,0cyclictest24282-21apt-get20:15:132
24859992525,0cyclictest31809-21apt-get20:30:191
24858992525,0cyclictest5767-21sort20:40:220
24858992525,0cyclictest0-21swapper/019:10:120
24862992424,0cyclictest7179-21http19:40:143
24862992424,0cyclictest0-21swapper/320:45:283
24862992424,0cyclictest0-21swapper/320:40:223
24862992423,1cyclictest36-1kworker/3:0H19:30:223
24860992424,0cyclictest74-1kworker/2:1H19:35:182
24859992424,0cyclictest0-21swapper/120:20:131
24859992422,1cyclictest0-21swapper/119:20:151
24858992424,0cyclictest22325-21kworker/0:019:20:160
24859992323,0cyclictest0-21swapper/120:00:271
24859992323,0cyclictest0-21swapper/119:35:171
24858992323,0cyclictest0-21swapper/020:05:150
24858992323,0cyclictest0-21swapper/019:45:190
24862992222,0cyclictest13540-21sort19:50:223
24862992221,1cyclictest36-1kworker/3:0H21:00:213
24860992222,0cyclictest0-21swapper/220:05:172
24859992222,0cyclictest0-21swapper/121:05:131
24858992222,0cyclictest0-21swapper/019:40:130
2486099218,3cyclictest7693-21tune2fs19:40:162
24860992121,0cyclictest0-21swapper/219:15:232
24859992121,0cyclictest28817-21sort19:15:221
24859992121,0cyclictest0-21swapper/120:25:171
24859992120,1cyclictest0-21swapper/120:50:171
2486099208,3cyclictest7352-21tune2fs20:45:222
24860992020,0cyclictest0-21swapper/220:55:222
24859992020,0cyclictest0-21swapper/120:05:221
24858992020,0cyclictest0-21swapper/019:50:140
24860991919,0cyclictest0-21swapper/221:00:282
24858991919,0cyclictest0-21swapper/020:15:130
24862991818,0cyclictest0-21swapper/320:25:203
2486099180,15cyclictest31773-21/usr/sbin/munin20:30:212
24858991818,0cyclictest0-21swapper/020:25:260
24860991716,1cyclictest74-1kworker/2:1H20:25:202
24860991616,0cyclictest0-21swapper/220:05:012
24862991515,0cyclictest0-21swapper/320:50:223
24860991515,0cyclictest0-21swapper/219:20:222
2485999150,1cyclictest24671-21df_inode20:15:151
2485999150,14cyclictest0-21swapper/120:45:391
24858991515,0cyclictest13582-21kworker/0:221:00:210
2486299140,0cyclictest0-21swapper/320:10:023
2485999140,14cyclictest0-21swapper/119:46:451
2485999140,0cyclictest0-21swapper/120:41:271
2485999140,0cyclictest0-21swapper/119:55:161
2485999140,0cyclictest0-21swapper/119:30:531
2485999140,0cyclictest0-21swapper/119:25:181
2485899140,0cyclictest0-21swapper/020:55:590
24862991313,0cyclictest0-21swapper/319:27:393
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional