You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2021-09-17 - 21:52

Intel(R) Atom(TM) CPU E3845 @ 1.91GHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #3
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 100 highest latencies:
System rackdslot3.osadl.org (updated Fri Sep 17, 2021 12:46:07)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1283912060,10ptp4l5319-21kworker/3:007:09:593
746221700,8sleep2207399cyclictest07:15:122
566981200,44rtkit-daemon0-21swapper/207:05:412
1540211190,10sleep10-21swapper/107:08:281
14622804,19sleep00-21swapper/007:07:340
61692750,4sleep1241ktimersoftd/111:15:011
207499701,29cyclictest2022-21/usr/sbin/munin07:50:113
207499700,26cyclictest28385-21cat09:00:163
2073996813,23cyclictest6626-21smartctl09:55:022
2072996853,8cyclictest25-21ksoftirqd/112:35:131
2072996853,8cyclictest25-21ksoftirqd/112:35:121
2072996754,7cyclictest25-21ksoftirqd/107:25:121
2072996752,8cyclictest25-21ksoftirqd/111:55:131
2072996553,6cyclictest25-21ksoftirqd/109:05:191
293322640,6sleep3207499cyclictest09:40:303
207399641,4cyclictest32278-21/usr/sbin/munin09:05:142
2072996453,6cyclictest25-21ksoftirqd/107:50:141
2072996328,9cyclictest25-21ksoftirqd/111:20:101
2072996328,9cyclictest25-21ksoftirqd/111:20:101
2072996241,4cyclictest25-21ksoftirqd/112:15:141
2072996229,7cyclictest25-21ksoftirqd/110:15:101
4412610,2sleep20-21swapper/210:25:192
2072996151,5cyclictest25-21ksoftirqd/108:40:131
2072996151,5cyclictest25-21ksoftirqd/108:40:131
2072996129,9cyclictest25-21ksoftirqd/112:25:141
2072996027,8cyclictest25-21ksoftirqd/109:00:021
2072996027,10cyclictest25-21ksoftirqd/112:05:141
2072996026,9cyclictest25-21ksoftirqd/108:55:131
2072996026,9cyclictest25-21ksoftirqd/107:25:011
2072996026,8cyclictest25-21ksoftirqd/110:30:281
2072996024,8cyclictest25-21ksoftirqd/109:40:241
2072995951,4cyclictest25-21ksoftirqd/111:35:151
2072995928,9cyclictest25-21ksoftirqd/110:10:311
2072995928,10cyclictest25-21ksoftirqd/109:10:091
2072995927,10cyclictest25-21ksoftirqd/108:20:261
2072995924,8cyclictest25-21ksoftirqd/110:45:291
2072995924,8cyclictest25-21ksoftirqd/110:40:411
2072995912,4cyclictest25-21ksoftirqd/111:30:061
212522580,2sleep30-21swapper/310:10:263
207499580,25cyclictest0-21swapper/307:45:303
2072995830,8cyclictest25-21ksoftirqd/112:00:331
2072995830,8cyclictest25-21ksoftirqd/107:40:081
2072995829,9cyclictest25-21ksoftirqd/111:25:211
2072995828,8cyclictest25-21ksoftirqd/109:25:261
2072995828,4cyclictest25-21ksoftirqd/107:45:121
207299579,8cyclictest25-21ksoftirqd/108:15:181
2072995729,8cyclictest25-21ksoftirqd/108:25:191
2072995728,8cyclictest25-21ksoftirqd/112:20:121
2072995727,4cyclictest25-21ksoftirqd/112:32:341
2072995723,8cyclictest25-21ksoftirqd/107:30:101
2072995723,8cyclictest25-21ksoftirqd/107:30:101
2072995722,9cyclictest25-21ksoftirqd/110:00:061
2072995722,8cyclictest25-21ksoftirqd/110:35:071
2072995722,7cyclictest25-21ksoftirqd/109:30:131
34212560,4sleep23424-21missed_timers09:10:112
2072995646,3cyclictest25-21ksoftirqd/111:40:121
2072995628,8cyclictest25-21ksoftirqd/109:50:031
2072995625,9cyclictest25-21ksoftirqd/110:05:071
2072995625,7cyclictest25-21ksoftirqd/107:35:341
2072995624,9cyclictest25-21ksoftirqd/110:20:061
2072995624,11cyclictest25-21ksoftirqd/111:50:001
2072995623,9cyclictest25-21ksoftirqd/110:50:211
2072995623,8cyclictest25-21ksoftirqd/111:50:041
2072995623,8cyclictest25-21ksoftirqd/109:45:261
128391560,1ptp4l391rcuc/308:12:563
128391560,17ptp4l3213-21kworker/3:107:40:403
2072995532,11cyclictest25-21ksoftirqd/110:55:061
2072995526,8cyclictest25-21ksoftirqd/108:10:201
128391550,1ptp4l391rcuc/309:22:293
2072995443,4cyclictest25-21ksoftirqd/109:20:071
2072995443,3cyclictest25-21ksoftirqd/109:55:271
2072995442,4cyclictest25-21ksoftirqd/108:50:021
2072995428,8cyclictest25-21ksoftirqd/111:15:111
2072995424,8cyclictest25-21ksoftirqd/108:45:011
2072995421,8cyclictest25-21ksoftirqd/108:00:051
71242530,2sleep00-21swapper/011:55:100
2074995238,7cyclictest41-21ksoftirqd/312:30:153
207299527,8cyclictest25-21ksoftirqd/109:35:091
207299526,7cyclictest25-21ksoftirqd/107:55:141
207299524,10cyclictest25-21ksoftirqd/107:10:171
2072995223,8cyclictest25-21ksoftirqd/112:10:401
2072995219,8cyclictest25-21ksoftirqd/111:00:101
2072995210,4cyclictest25-21ksoftirqd/108:05:291
2072995141,3cyclictest25-21ksoftirqd/108:35:031
2072995138,4cyclictest25-21ksoftirqd/110:25:061
2072995124,4cyclictest25-21ksoftirqd/107:19:451
2072995121,8cyclictest25-21ksoftirqd/111:05:021
207299507,7cyclictest25-21ksoftirqd/109:15:231
207299493,5cyclictest25-21ksoftirqd/108:30:081
207399477,35cyclictest0-21swapper/212:15:132
207399475,26cyclictest15730-21/usr/sbin/munin08:05:132
2073994734,10cyclictest22589-21cron10:15:002
128391470,2ptp4l8540-21hwlatdetect07:15:253
207499462,38cyclictest23923-21apt-get12:15:133
207499462,38cyclictest15982-21apt-get11:25:143
207499462,37cyclictest3836-21apt-get09:10:133
207399463,33cyclictest11658-21apt-get08:00:142
207399461,29cyclictest30190-21/usr/sbin/munin08:25:142
128391460,1ptp4l401ktimersoftd/308:55:283
2073994537,5cyclictest30087-21sshd09:03:452
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional