You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-07-07 - 12:59

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #2
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Mon Mar 07, 2022 12:46:02)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
616623150,4sleep20-21swapper/207:05:262
7670999683,7cyclictest25-21ksoftirqd/107:25:181
723029676,9sleep30-21swapper/307:08:033
70852765,18sleep10-21swapper/107:06:111
297532760,3sleep10-21swapper/107:35:191
72672752,18sleep00-21swapper/007:08:320
211752730,3sleep00-21swapper/012:05:140
7670997158,8cyclictest25-21ksoftirqd/108:50:191
260242660,3sleep10-21swapper/109:30:211
260242660,3sleep10-21swapper/109:30:211
7669996427,7cyclictest9-21ksoftirqd/011:20:000
7670996146,7cyclictest25-21ksoftirqd/109:35:191
7669996125,5cyclictest9-21ksoftirqd/012:15:140
766999597,10cyclictest9-21ksoftirqd/011:45:080
7669995928,5cyclictest9-21ksoftirqd/007:15:120
7669995927,5cyclictest9-21ksoftirqd/010:50:130
7669995927,5cyclictest9-21ksoftirqd/010:50:130
7669995925,10cyclictest9-21ksoftirqd/008:50:220
7670995849,4cyclictest25-21ksoftirqd/108:40:191
7670995843,8cyclictest25-21ksoftirqd/109:05:191
766999585,8cyclictest9-21ksoftirqd/009:05:190
7669995828,9cyclictest9-21ksoftirqd/009:15:000
7669995827,5cyclictest9-21ksoftirqd/011:10:130
141682580,2sleep30-21swapper/307:55:243
766999577,9cyclictest9-21ksoftirqd/011:50:280
766999577,10cyclictest9-21ksoftirqd/009:35:080
766999575,8cyclictest9-21ksoftirqd/012:00:160
7669995723,9cyclictest9-21ksoftirqd/007:35:160
7670995641,9cyclictest25-21ksoftirqd/107:45:171
766999567,9cyclictest9-21ksoftirqd/008:05:130
766999567,10cyclictest9-21ksoftirqd/011:25:120
766999565,7cyclictest9-21ksoftirqd/008:25:110
766999564,12cyclictest9-21ksoftirqd/008:30:200
7669995626,5cyclictest9-21ksoftirqd/011:40:290
766999557,9cyclictest9-21ksoftirqd/010:45:170
766999557,9cyclictest9-21ksoftirqd/010:00:230
766999557,9cyclictest9-21ksoftirqd/008:00:010
766999556,9cyclictest9-21ksoftirqd/012:20:380
766999556,9cyclictest9-21ksoftirqd/011:10:000
766999556,9cyclictest9-21ksoftirqd/010:30:110
766999556,10cyclictest9-21ksoftirqd/010:10:050
766999556,10cyclictest9-21ksoftirqd/009:00:200
766999555,7cyclictest9-21ksoftirqd/007:50:190
766999554,7cyclictest9-21ksoftirqd/008:50:010
7669995544,6cyclictest9-21ksoftirqd/010:40:050
766999547,9cyclictest9-21ksoftirqd/011:20:060
766999547,12cyclictest9-21ksoftirqd/012:25:140
766999547,12cyclictest9-21ksoftirqd/008:40:080
766999546,9cyclictest9-21ksoftirqd/010:35:150
766999546,9cyclictest9-21ksoftirqd/009:45:120
766999546,9cyclictest9-21ksoftirqd/008:00:060
766999546,10cyclictest9-21ksoftirqd/012:30:260
766999546,10cyclictest9-21ksoftirqd/011:35:300
766999546,10cyclictest9-21ksoftirqd/008:55:180
766999545,7cyclictest9-21ksoftirqd/009:30:240
766999545,7cyclictest9-21ksoftirqd/009:30:240
766999545,10cyclictest9-21ksoftirqd/009:55:220
766999545,10cyclictest9-21ksoftirqd/008:15:200
766999544,8cyclictest9-21ksoftirqd/009:15:190
766999544,7cyclictest9-21ksoftirqd/011:55:260
766999543,8cyclictest9-21ksoftirqd/007:15:010
766999543,7cyclictest9-21ksoftirqd/007:25:130
766999542,7cyclictest9-21ksoftirqd/010:20:130
767299536,16cyclictest12099-21hddtemp_smartct09:55:073
767299535,13cyclictest29507-21/usr/sbin/munin11:35:263
766999537,10cyclictest9-21ksoftirqd/008:10:290
766999537,10cyclictest9-21ksoftirqd/008:10:280
766999536,9cyclictest9-21ksoftirqd/011:30:070
766999536,9cyclictest9-21ksoftirqd/010:15:190
766999536,9cyclictest9-21ksoftirqd/009:50:150
766999535,10cyclictest9-21ksoftirqd/009:25:060
766999534,8cyclictest9-21ksoftirqd/012:35:080
7669995324,4cyclictest9-21ksoftirqd/010:55:200
7669995323,5cyclictest9-21ksoftirqd/010:05:120
766999527,9cyclictest9-21ksoftirqd/009:20:130
766999527,9cyclictest5206-21apt-get07:45:180
766999526,9cyclictest9-21ksoftirqd/009:40:190
766999526,9cyclictest9-21ksoftirqd/007:40:060
766999525,9cyclictest9-21ksoftirqd/007:30:270
766999524,9cyclictest9-21ksoftirqd/008:35:190
766999524,7cyclictest9-21ksoftirqd/008:20:090
766999516,8cyclictest9-21ksoftirqd/007:20:150
766999513,7cyclictest9-21ksoftirqd/012:10:130
766999513,7cyclictest9-21ksoftirqd/012:10:130
766999513,7cyclictest9-21ksoftirqd/010:25:190
766999512,7cyclictest9-21ksoftirqd/011:00:080
7670994835,7cyclictest25-21ksoftirqd/109:00:181
7670994635,6cyclictest25-21ksoftirqd/108:00:181
7670994328,8cyclictest25-21ksoftirqd/108:15:191
767299406,10cyclictest12647-21processes08:35:123
7672993921,11cyclictest983-21apt-get09:40:183
7672993910,27cyclictest0-21swapper/308:10:263
7672993910,27cyclictest0-21swapper/308:10:263
767299389,27cyclictest0-21swapper/312:31:073
7672993820,12cyclictest25366-21apt-get09:30:193
7672993820,12cyclictest25366-21apt-get09:30:183
7670993833,3cyclictest25-21ksoftirqd/111:45:181
7670993832,4cyclictest25-21ksoftirqd/108:35:001
7670993831,4cyclictest25-21ksoftirqd/109:55:181
7670993731,4cyclictest25-21ksoftirqd/109:15:061
7670993731,4cyclictest25-21ksoftirqd/108:35:191
50052370,2sleep20-21swapper/211:45:162
7672993617,13cyclictest5064-21apt-get11:05:173
767199367,27cyclictest0-21swapper/207:40:162
7670993631,3cyclictest25-21ksoftirqd/108:45:171
7670993630,4cyclictest25-21ksoftirqd/112:00:301
7670993630,4cyclictest25-21ksoftirqd/110:30:201
7670993630,4cyclictest25-21ksoftirqd/110:10:061
7670993630,3cyclictest25-21ksoftirqd/107:50:051
7670993629,4cyclictest25-21ksoftirqd/112:30:181
767299356,27cyclictest0-21swapper/312:36:463
7672993522,7cyclictest21304-21apt-get08:05:173
7672993521,8cyclictest5156-21apt-get12:25:173
7672993517,11cyclictest13719-21apt-get11:55:213
7671993528,4cyclictest33-21ksoftirqd/208:30:182
7670993529,3cyclictest25-21ksoftirqd/109:10:271
7670993529,3cyclictest25-21ksoftirqd/108:20:191
7670993529,3cyclictest25-21ksoftirqd/107:30:261
7670993528,4cyclictest25-21ksoftirqd/111:45:011
7670993528,4cyclictest25-21ksoftirqd/110:50:281
7670993528,4cyclictest25-21ksoftirqd/110:50:271
7670993528,4cyclictest25-21ksoftirqd/108:10:011
7670993523,7cyclictest25-21ksoftirqd/111:00:181
7672993427,4cyclictest41-21ksoftirqd/310:10:193
7672993422,9cyclictest9656-21df_abs09:10:213
7672993413,17cyclictest32435-21cat10:20:103
7672993411,19cyclictest8993-21strings11:10:163
7670993428,4cyclictest25-21ksoftirqd/110:20:361
7670993427,4cyclictest25-21ksoftirqd/111:25:191
7670993427,4cyclictest25-21ksoftirqd/109:25:051
7670993427,4cyclictest25-21ksoftirqd/107:15:201
767299334,27cyclictest0-21swapper/311:46:263
767299334,27cyclictest0-21swapper/311:31:263
7672993326,4cyclictest41-21ksoftirqd/312:07:303
7672993318,10cyclictest13438-21apt-get11:15:243
7671993326,4cyclictest33-21ksoftirqd/212:35:192
7671993324,4cyclictest33-21ksoftirqd/208:55:122
7670993328,3cyclictest25-21ksoftirqd/110:35:201
7670993327,4cyclictest25-21ksoftirqd/112:25:171
7670993327,4cyclictest25-21ksoftirqd/111:55:321
7670993327,4cyclictest25-21ksoftirqd/110:48:321
7670993327,4cyclictest25-21ksoftirqd/110:40:141
7670993327,4cyclictest25-21ksoftirqd/110:15:221
7670993327,3cyclictest25-21ksoftirqd/109:40:171
7670993327,3cyclictest25-21ksoftirqd/108:15:001
7670993327,3cyclictest25-21ksoftirqd/108:15:001
7670993327,3cyclictest25-21ksoftirqd/107:10:051
7670993326,4cyclictest25-21ksoftirqd/111:20:181
7672993226,3cyclictest41-21ksoftirqd/307:27:473
7672993225,4cyclictest41-21ksoftirqd/307:34:323
7672993224,5cyclictest41-21ksoftirqd/311:51:443
7672993224,5cyclictest41-21ksoftirqd/308:02:113
767299322,28cyclictest0-21swapper/307:51:063
7672993219,7cyclictest5100-21apt-get08:25:183
7672993219,7cyclictest5076-21apt-get09:05:173
7672993219,7cyclictest29391-21apt-get08:15:193
7672993216,11cyclictest17383-21tr10:40:193
7672993213,15cyclictest3532-21munin-node09:00:163
7672993212,15cyclictest19904-21irqrtprio09:25:053
7672993210,20cyclictest0-21swapper/311:25:263
767199323,19cyclictest5073-21if_err_enp1s011:05:182
7671993227,3cyclictest33-21ksoftirqd/207:27:512
7671993226,4cyclictest33-21ksoftirqd/209:30:382
7671993226,4cyclictest33-21ksoftirqd/209:30:382
7671993225,4cyclictest33-21ksoftirqd/210:55:112
7671993225,4cyclictest33-21ksoftirqd/210:41:332
7671993225,4cyclictest33-21ksoftirqd/209:50:022
7671993225,4cyclictest33-21ksoftirqd/208:27:292
7671993225,4cyclictest33-21ksoftirqd/207:19:192
7671993224,5cyclictest33-21ksoftirqd/208:51:122
7670993227,3cyclictest25-21ksoftirqd/111:30:151
7670993227,3cyclictest25-21ksoftirqd/108:55:161
7670993226,4cyclictest25-21ksoftirqd/112:18:521
7670993226,4cyclictest25-21ksoftirqd/112:10:301
7670993226,4cyclictest25-21ksoftirqd/112:10:291
7670993226,4cyclictest25-21ksoftirqd/111:15:421
7670993226,4cyclictest25-21ksoftirqd/109:50:291
7670993225,4cyclictest25-21ksoftirqd/110:02:541
7670993225,4cyclictest25-21ksoftirqd/109:49:331
7672993124,5cyclictest41-21ksoftirqd/310:52:373
7672993124,5cyclictest41-21ksoftirqd/310:52:373
7672993124,4cyclictest41-21ksoftirqd/311:43:493
7672993124,4cyclictest41-21ksoftirqd/310:56:113
7672993124,4cyclictest41-21ksoftirqd/310:46:443
7672993124,4cyclictest41-21ksoftirqd/309:39:023
7672993118,7cyclictest5151-21apt-get07:45:173
7672993118,6cyclictest25469-21apt-get08:50:183
7671993125,4cyclictest33-21ksoftirqd/210:05:192
7671993125,3cyclictest33-21ksoftirqd/210:18:352
7671993124,4cyclictest33-21ksoftirqd/212:24:282
7671993124,4cyclictest33-21ksoftirqd/212:12:512
7671993124,4cyclictest33-21ksoftirqd/212:12:512
7671993124,4cyclictest33-21ksoftirqd/211:25:592
7671993124,4cyclictest33-21ksoftirqd/211:24:212
7671993124,4cyclictest33-21ksoftirqd/210:37:432
7671993124,4cyclictest33-21ksoftirqd/209:44:082
7671993124,4cyclictest33-21ksoftirqd/209:21:322
7671993124,4cyclictest33-21ksoftirqd/208:36:152
7671993122,5cyclictest33-21ksoftirqd/212:25:182
7670993126,3cyclictest25-21ksoftirqd/112:35:071
7670993126,3cyclictest25-21ksoftirqd/111:10:281
7670993126,3cyclictest25-21ksoftirqd/107:40:161
7670993125,4cyclictest7304-21cron10:29:591
7670993125,4cyclictest25-21ksoftirqd/112:23:331
7670993125,4cyclictest25-21ksoftirqd/108:25:191
7670993124,4cyclictest25-21ksoftirqd/111:39:271
767099312,27cyclictest23221-21kworker/1:011:05:121
7672993023,4cyclictest41-21ksoftirqd/311:24:283
7672993023,4cyclictest41-21ksoftirqd/309:53:403
7672993023,4cyclictest41-21ksoftirqd/307:15:503
7672993022,5cyclictest41-21ksoftirqd/308:41:013
7672993022,5cyclictest41-21ksoftirqd/307:40:553
7672993018,7cyclictest5083-21apt-get09:45:203
7672993013,12cyclictest0-21swapper/307:35:173
7671993024,4cyclictest33-21ksoftirqd/208:47:092
7671993024,3cyclictest33-21ksoftirqd/211:41:212
7671993023,4cyclictest33-21ksoftirqd/211:53:122
7671993023,4cyclictest33-21ksoftirqd/210:54:582
7671993023,4cyclictest33-21ksoftirqd/210:54:582
7671993023,4cyclictest33-21ksoftirqd/209:57:442
7671993023,4cyclictest33-21ksoftirqd/208:41:052
7671993023,4cyclictest33-21ksoftirqd/208:17:472
7671993023,4cyclictest33-21ksoftirqd/207:37:372
7671993022,5cyclictest33-21ksoftirqd/208:21:062
7671993020,3cyclictest33-21ksoftirqd/207:20:542
767199300,3cyclictest121rcu_preempt07:55:002
7670993025,3cyclictest25-21ksoftirqd/109:20:081
7670993024,4cyclictest25-21ksoftirqd/110:55:191
7670993023,5cyclictest25-21ksoftirqd/112:09:211
7670993023,4cyclictest25-21ksoftirqd/111:50:211
7670993023,4cyclictest25-21ksoftirqd/107:59:591
7672992922,4cyclictest41-21ksoftirqd/312:15:213
7672992922,4cyclictest41-21ksoftirqd/310:08:583
7672992922,4cyclictest41-21ksoftirqd/307:12:533
7672992918,6cyclictest29445-21apt-get08:55:163
7672992918,6cyclictest29187-21apt-get10:15:173
7672992918,6cyclictest17490-21apt-get10:00:203
7671992923,4cyclictest33-21ksoftirqd/211:30:552
7671992923,3cyclictest33-21ksoftirqd/210:01:422
7671992922,4cyclictest33-21ksoftirqd/212:00:462
7671992922,4cyclictest33-21ksoftirqd/210:12:012
7671992922,4cyclictest33-21ksoftirqd/209:45:022
7671992922,4cyclictest33-21ksoftirqd/207:57:022
767199292,23cyclictest5442-21cpuspeed_turbos07:45:192
7670992921,5cyclictest25-21ksoftirqd/110:07:351
7672992821,4cyclictest41-21ksoftirqd/311:03:343
7672992821,4cyclictest41-21ksoftirqd/308:47:243
7672992818,7cyclictest0-21swapper/310:30:273
7672992815,7cyclictest17121-21apt-get07:20:173
767199286,15cyclictest21620-21cpuspeed_turbos12:05:182
7671992822,4cyclictest33-21ksoftirqd/207:12:582
7671992822,3cyclictest33-21ksoftirqd/212:16:062
7671992822,3cyclictest33-21ksoftirqd/210:22:192
7671992822,3cyclictest33-21ksoftirqd/209:28:482
7671992821,4cyclictest33-21ksoftirqd/210:48:522
7671992821,4cyclictest33-21ksoftirqd/209:03:492
7670992823,3cyclictest25-21ksoftirqd/107:20:091
7672992721,3cyclictest41-21ksoftirqd/312:11:323
7672992721,3cyclictest41-21ksoftirqd/312:11:323
7672992720,4cyclictest41-21ksoftirqd/308:30:013
7672992715,8cyclictest32680-21timerandwakeup12:20:093
7672992714,9cyclictest3534-21ps10:25:063
7672992713,10cyclictest17051-21/usr/sbin/munin12:00:153
7672992713,10cyclictest126991phc2sys08:20:203
7672992713,10cyclictest0-21swapper/309:20:223
7671992721,4cyclictest33-21ksoftirqd/208:11:562
7671992721,4cyclictest33-21ksoftirqd/208:11:562
7671992721,4cyclictest33-21ksoftirqd/208:02:082
7671992721,3cyclictest33-21ksoftirqd/211:37:282
7671992720,4cyclictest33-21ksoftirqd/211:56:322
7671992720,4cyclictest33-21ksoftirqd/211:19:352
7671992720,4cyclictest33-21ksoftirqd/207:31:142
7671992719,4cyclictest9173-21tr11:10:182
7671992620,3cyclictest33-21ksoftirqd/210:34:012
7671992618,5cyclictest33-21ksoftirqd/209:11:522
7672992512,9cyclictest11891-21sed09:15:063
7672992512,9cyclictest0-21swapper/310:35:173
7671992519,4cyclictest33-21ksoftirqd/209:05:352
7671992518,4cyclictest33-21ksoftirqd/208:08:282
7671992418,4cyclictest33-21ksoftirqd/209:36:322
7671992417,4cyclictest33-21ksoftirqd/209:18:422
7671992317,3cyclictest33-21ksoftirqd/212:34:092
7671992116,3cyclictest33-21ksoftirqd/210:25:062
33672210,2sleep20-21swapper/211:04:582
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional