You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-07-05 - 18:14

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot4.osadl.org (updated Mon Mar 07, 2022 12:46:05)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1487628813,19sleep10-21swapper/107:06:031
124932790,8sleep01547199cyclictest07:45:140
151322754,59sleep30-21swapper/307:09:203
268362740,7sleep31547499cyclictest12:00:143
151732737,10sleep20-21swapper/207:09:512
222472690,4sleep233-21ksoftirqd/211:55:122
297172660,8sleep11547299cyclictest10:45:091
138662650,4sleep125-21ksoftirqd/110:25:131
15474996453,6cyclictest41-21ksoftirqd/307:15:213
15474996051,5cyclictest41-21ksoftirqd/309:40:183
294472570,2sleep30-21swapper/310:45:073
15473995612,5cyclictest33-21ksoftirqd/207:15:202
220232540,2sleep20-21swapper/209:55:162
204692540,2sleep30-21swapper/311:50:393
15473995443,5cyclictest33-21ksoftirqd/210:50:192
56598530,13rtkit-daemon0-21swapper/107:22:431
15474995343,4cyclictest41-21ksoftirqd/308:35:143
15473995338,4cyclictest33-21ksoftirqd/207:45:172
15473995324,4cyclictest33-21ksoftirqd/207:55:172
15474995242,5cyclictest41-21ksoftirqd/307:25:173
15474995242,5cyclictest41-21ksoftirqd/307:25:173
15472995238,11cyclictest801-21cron11:30:001
15472995238,11cyclictest801-21cron11:29:591
178402510,2sleep10-21swapper/111:50:091
56598490,10rtkit-daemon0-21swapper/107:37:281
301242490,2sleep230126-21cat07:25:252
301242490,2sleep230126-21cat07:25:242
15474994932,4cyclictest41-21ksoftirqd/307:55:133
15474994927,4cyclictest41-21ksoftirqd/307:45:113
15473994942,3cyclictest33-21ksoftirqd/208:35:172
15473994919,6cyclictest33-21ksoftirqd/212:00:172
264182480,2sleep20-21swapper/210:40:152
15474994831,4cyclictest41-21ksoftirqd/310:30:183
1547399484,4cyclictest121rcu_preempt12:10:112
15471994841,4cyclictest9-21ksoftirqd/008:00:170
1547499470,10cyclictest41-21ksoftirqd/310:35:183
15473994737,4cyclictest33-21ksoftirqd/209:35:192
15474994640,3cyclictest41-21ksoftirqd/308:05:183
15474994637,5cyclictest41-21ksoftirqd/309:35:183
15474994631,4cyclictest41-21ksoftirqd/308:20:403
15474994627,5cyclictest41-21ksoftirqd/308:25:123
15474994626,7cyclictest41-21ksoftirqd/309:00:113
1547399467,7cyclictest33-21ksoftirqd/208:15:012
1547399466,8cyclictest33-21ksoftirqd/208:10:552
1547399466,5cyclictest33-21ksoftirqd/208:00:072
15473994628,4cyclictest33-21ksoftirqd/211:30:292
15473994619,3cyclictest33-21ksoftirqd/209:00:192
1547399461,11cyclictest33-21ksoftirqd/208:55:172
15474994538,4cyclictest41-21ksoftirqd/307:35:173
15474994537,4cyclictest41-21ksoftirqd/311:15:153
15474994530,4cyclictest41-21ksoftirqd/311:10:093
15474994528,4cyclictest41-21ksoftirqd/310:40:133
1547499450,11cyclictest41-21ksoftirqd/311:20:073
1547499450,11cyclictest41-21ksoftirqd/311:20:073
1547499450,11cyclictest41-21ksoftirqd/307:30:193
15473994538,4cyclictest33-21ksoftirqd/207:35:172
15473994537,4cyclictest33-21ksoftirqd/207:50:052
15473994530,4cyclictest33-21ksoftirqd/208:05:162
15473994530,4cyclictest33-21ksoftirqd/207:10:142
1499424516,17sleep00-21swapper/007:07:310
1547499444,7cyclictest121rcu_preempt09:17:443
1547499444,4cyclictest121rcu_preempt09:10:183
15474994433,5cyclictest41-21ksoftirqd/310:15:203
15474994429,4cyclictest41-21ksoftirqd/308:10:163
15474994427,4cyclictest41-21ksoftirqd/309:30:363
1547399446,4cyclictest121rcu_preempt10:35:372
15473994433,6cyclictest33-21ksoftirqd/211:40:142
15473994427,4cyclictest33-21ksoftirqd/209:20:152
15473994425,5cyclictest33-21ksoftirqd/208:45:142
15473994425,5cyclictest33-21ksoftirqd/208:45:132
58462430,2sleep20-21swapper/210:55:132
15474994337,3cyclictest41-21ksoftirqd/309:25:203
15474994335,4cyclictest41-21ksoftirqd/308:00:153
15474994328,4cyclictest41-21ksoftirqd/310:00:073
15474994328,4cyclictest41-21ksoftirqd/310:00:073
15474994323,16cyclictest41-21ksoftirqd/310:25:123
1547499431,4cyclictest121rcu_preempt10:05:073
1547499430,3cyclictest41-21ksoftirqd/312:05:173
15473994334,5cyclictest33-21ksoftirqd/210:05:162
15473994333,5cyclictest33-21ksoftirqd/207:40:152
15473994322,8cyclictest33-21ksoftirqd/210:45:092
15473994311,5cyclictest33-21ksoftirqd/211:45:422
1547399430,4cyclictest33-21ksoftirqd/208:50:182
114391430,7getstats1547499cyclictest08:43:413
56598420,2rtkit-daemon0-21swapper/111:15:241
1547499424,10cyclictest41-21ksoftirqd/309:05:173
15474994235,4cyclictest41-21ksoftirqd/307:10:183
15474994232,4cyclictest41-21ksoftirqd/311:35:143
15474994224,4cyclictest41-21ksoftirqd/308:55:093
15473994233,5cyclictest33-21ksoftirqd/209:30:042
15473994225,4cyclictest33-21ksoftirqd/211:35:132
1547399421,5cyclictest33-21ksoftirqd/209:45:172
1547499415,4cyclictest121rcu_preempt08:50:213
15474994135,4cyclictest41-21ksoftirqd/307:50:143
15474994132,5cyclictest41-21ksoftirqd/312:25:143
15474994127,5cyclictest41-21ksoftirqd/308:20:003
15474994126,4cyclictest41-21ksoftirqd/311:45:473
15474994123,5cyclictest41-21ksoftirqd/312:20:113
1547399418,5cyclictest33-21ksoftirqd/209:05:192
15473994134,4cyclictest33-21ksoftirqd/212:35:172
15473994134,4cyclictest33-21ksoftirqd/212:35:172
15473994134,3cyclictest33-21ksoftirqd/211:10:182
15473994133,5cyclictest33-21ksoftirqd/212:25:172
15473994133,4cyclictest33-21ksoftirqd/207:20:202
15473994131,5cyclictest33-21ksoftirqd/211:15:212
15473994119,3cyclictest33-21ksoftirqd/208:30:122
111722410,2sleep10-21swapper/108:20:401
15474994032,4cyclictest41-21ksoftirqd/307:40:173
15474994029,9cyclictest41-21ksoftirqd/310:10:173
15474994029,4cyclictest41-21ksoftirqd/311:05:053
1547399403,4cyclictest121rcu_preempt09:10:172
15473994034,4cyclictest33-21ksoftirqd/207:30:162
15473994034,3cyclictest33-21ksoftirqd/209:15:042
1547399403,3cyclictest33-21ksoftirqd/210:10:382
15473994026,4cyclictest33-21ksoftirqd/208:20:122
15473994022,5cyclictest33-21ksoftirqd/212:20:092
1547499397,3cyclictest121rcu_preempt10:24:023
15474993933,3cyclictest41-21ksoftirqd/312:15:193
15474993931,4cyclictest41-21ksoftirqd/312:10:203
15474993923,7cyclictest41-21ksoftirqd/310:55:143
15474993923,6cyclictest41-21ksoftirqd/309:50:063
15474993923,13cyclictest41-21ksoftirqd/312:30:193
1547399393,4cyclictest33-21ksoftirqd/211:50:332
15473993933,4cyclictest33-21ksoftirqd/212:05:122
15473993931,4cyclictest33-21ksoftirqd/208:25:182
15473993926,4cyclictest33-21ksoftirqd/210:15:052
1547399390,3cyclictest121rcu_preempt11:00:252
15474993833,3cyclictest41-21ksoftirqd/308:30:183
15474993832,4cyclictest41-21ksoftirqd/308:50:003
15474993832,4cyclictest41-21ksoftirqd/308:50:003
15474993832,3cyclictest41-21ksoftirqd/312:35:293
15474993832,3cyclictest41-21ksoftirqd/312:35:293
15474993830,3cyclictest41-21ksoftirqd/311:25:393
15474993830,3cyclictest41-21ksoftirqd/311:25:393
15474993829,4cyclictest41-21ksoftirqd/311:00:143
15474993820,4cyclictest41-21ksoftirqd/311:40:493
1547499380,7cyclictest121rcu_preempt09:55:573
1547399384,8cyclictest33-21ksoftirqd/209:50:192
15473993832,4cyclictest33-21ksoftirqd/212:30:182
15473993832,3cyclictest25923-21cstates11:20:092
15473993832,3cyclictest25923-21cstates11:20:082
15473993820,4cyclictest33-21ksoftirqd/209:40:162
15474993731,4cyclictest41-21ksoftirqd/307:20:183
15474993730,3cyclictest41-21ksoftirqd/309:45:233
1547499372,10cyclictest41-21ksoftirqd/311:30:283
1547399377,4cyclictest121rcu_preempt10:30:132
15473993732,3cyclictest33-21ksoftirqd/210:25:022
15473993731,3cyclictest33-21ksoftirqd/212:15:122
15473993730,4cyclictest33-21ksoftirqd/208:40:122
15473993724,4cyclictest33-21ksoftirqd/211:05:122
15472993731,4cyclictest25-21ksoftirqd/109:59:591
15474993631,3cyclictest41-21ksoftirqd/310:50:073
15474993630,3cyclictest41-21ksoftirqd/309:20:073
1547499361,4cyclictest121rcu_preempt11:55:063
15473993628,4cyclictest33-21ksoftirqd/211:25:152
15473993628,4cyclictest33-21ksoftirqd/211:25:152
15473993616,8cyclictest33-21ksoftirqd/210:00:382
15473993616,8cyclictest33-21ksoftirqd/210:00:372
15473993530,3cyclictest33-21ksoftirqd/210:25:132
15473993529,4cyclictest33-21ksoftirqd/209:25:102
15472993529,4cyclictest25-21ksoftirqd/110:05:181
15472993529,4cyclictest25-21ksoftirqd/108:55:181
15472993528,4cyclictest20813-21cron10:34:591
15471993524,4cyclictest9-21ksoftirqd/010:22:110
15472993426,5cyclictest25-21ksoftirqd/110:23:291
15471993428,4cyclictest9-21ksoftirqd/008:30:170
15472993327,4cyclictest25-21ksoftirqd/107:30:171
15472993326,5cyclictest25-21ksoftirqd/111:06:001
15472993326,4cyclictest25-21ksoftirqd/112:07:561
15472993326,4cyclictest25-21ksoftirqd/110:17:351
15472993227,3cyclictest25-21ksoftirqd/109:10:191
15472993226,4cyclictest25-21ksoftirqd/110:50:191
15472993225,4cyclictest25-21ksoftirqd/111:34:301
15472993225,4cyclictest25-21ksoftirqd/110:38:311
15472993225,4cyclictest25-21ksoftirqd/109:36:511
15472993225,4cyclictest25-21ksoftirqd/108:47:021
15472993225,4cyclictest25-21ksoftirqd/108:47:011
15472993224,5cyclictest25-21ksoftirqd/110:12:531
15472993224,5cyclictest25-21ksoftirqd/109:19:501
15471993227,3cyclictest9-21ksoftirqd/012:35:190
15471993227,3cyclictest9-21ksoftirqd/012:35:190
15471993227,3cyclictest9-21ksoftirqd/011:05:000
15471993226,4cyclictest9-21ksoftirqd/009:09:210
15471993226,4cyclictest9-21ksoftirqd/007:41:490
15471993225,4cyclictest9-21ksoftirqd/012:34:520
15471993225,4cyclictest9-21ksoftirqd/009:16:140
15471993225,4cyclictest9-21ksoftirqd/009:11:300
15471993225,4cyclictest9-21ksoftirqd/008:53:060
56598310,2rtkit-daemon0-21swapper/112:32:271
15472993126,3cyclictest25-21ksoftirqd/109:45:191
15472993126,3cyclictest25-21ksoftirqd/107:55:281
15472993125,4cyclictest25-21ksoftirqd/109:20:191
15472993125,4cyclictest25-21ksoftirqd/109:00:181
15472993124,4cyclictest25-21ksoftirqd/111:56:471
15472993124,4cyclictest25-21ksoftirqd/109:30:161
15472993124,4cyclictest25-21ksoftirqd/109:05:171
15472993124,4cyclictest25-21ksoftirqd/107:18:161
15472993123,5cyclictest25-21ksoftirqd/111:00:381
15471993125,4cyclictest9-21ksoftirqd/010:16:590
15471993125,4cyclictest9-21ksoftirqd/009:24:560
15471993125,4cyclictest9-21ksoftirqd/007:57:210
15471993125,3cyclictest9-21ksoftirqd/009:38:240
15471993124,4cyclictest9-21ksoftirqd/011:41:040
15471993124,4cyclictest9-21ksoftirqd/011:23:340
15471993124,4cyclictest9-21ksoftirqd/011:23:330
15471993124,4cyclictest9-21ksoftirqd/009:57:390
15471993124,4cyclictest9-21ksoftirqd/009:47:430
15471993124,4cyclictest9-21ksoftirqd/009:27:200
15471993124,4cyclictest9-21ksoftirqd/008:49:300
15471993124,4cyclictest9-21ksoftirqd/008:49:290
15471993124,4cyclictest9-21ksoftirqd/008:25:400
56598300,2rtkit-daemon0-21swapper/107:26:291
56598300,2rtkit-daemon0-21swapper/107:26:291
15472993024,3cyclictest25-21ksoftirqd/110:42:041
15472993024,3cyclictest25-21ksoftirqd/108:37:421
15472993023,4cyclictest25-21ksoftirqd/112:14:381
15472993023,4cyclictest25-21ksoftirqd/111:47:401
15472993023,4cyclictest25-21ksoftirqd/109:28:211
15472993023,4cyclictest25-21ksoftirqd/108:13:491
15472993022,5cyclictest25-21ksoftirqd/111:13:561
15471993025,3cyclictest9-21ksoftirqd/011:50:160
15471993024,4cyclictest9-21ksoftirqd/010:54:470
15471993024,4cyclictest9-21ksoftirqd/008:08:420
15471993024,4cyclictest9-21ksoftirqd/007:34:010
15471993024,4cyclictest9-21ksoftirqd/007:20:110
15471993024,3cyclictest9-21ksoftirqd/011:06:590
15471993023,4cyclictest9-21ksoftirqd/011:58:300
15471993023,4cyclictest9-21ksoftirqd/010:58:000
15471993023,4cyclictest9-21ksoftirqd/009:03:100
15471993023,4cyclictest9-21ksoftirqd/008:14:120
15471993023,4cyclictest9-21ksoftirqd/007:39:110
15472992924,3cyclictest25-21ksoftirqd/108:05:081
15472992924,3cyclictest25-21ksoftirqd/108:00:161
15472992923,4cyclictest25-21ksoftirqd/110:55:071
15472992922,4cyclictest25-21ksoftirqd/111:39:001
15472992922,4cyclictest25-21ksoftirqd/107:53:391
15472992921,5cyclictest25-21ksoftirqd/107:46:301
15471992924,3cyclictest9-21ksoftirqd/011:18:270
15471992924,3cyclictest9-21ksoftirqd/008:35:200
15471992923,4cyclictest9-21ksoftirqd/011:38:040
15471992923,4cyclictest9-21ksoftirqd/010:27:250
15471992923,4cyclictest9-21ksoftirqd/009:40:560
15471992923,4cyclictest9-21ksoftirqd/008:40:550
15471992923,4cyclictest9-21ksoftirqd/007:17:360
15471992923,3cyclictest9-21ksoftirqd/012:28:320
15471992923,3cyclictest9-21ksoftirqd/012:19:420
15471992923,3cyclictest9-21ksoftirqd/011:46:560
15471992922,4cyclictest9-21ksoftirqd/010:14:170
15471992922,4cyclictest9-21ksoftirqd/010:01:480
15471992922,4cyclictest9-21ksoftirqd/010:01:470
15472992822,4cyclictest25-21ksoftirqd/108:40:181
15472992821,5cyclictest25-21ksoftirqd/111:42:101
15472992821,4cyclictest25-21ksoftirqd/112:23:251
15471992823,3cyclictest9-21ksoftirqd/007:14:550
15471992822,4cyclictest9-21ksoftirqd/012:08:310
15471992822,4cyclictest9-21ksoftirqd/010:33:460
15471992822,4cyclictest9-21ksoftirqd/008:24:080
15471992822,3cyclictest9-21ksoftirqd/009:52:190
15471992820,5cyclictest9-21ksoftirqd/009:33:570
15472992722,3cyclictest25-21ksoftirqd/112:35:281
15472992722,3cyclictest25-21ksoftirqd/112:35:281
15472992722,3cyclictest25-21ksoftirqd/110:02:341
15472992722,3cyclictest25-21ksoftirqd/110:02:341
15472992721,3cyclictest25-21ksoftirqd/107:41:431
15472992720,4cyclictest25-21ksoftirqd/112:27:391
15472992720,4cyclictest25-21ksoftirqd/112:17:001
15471992722,3cyclictest9-21ksoftirqd/008:58:330
15471992721,4cyclictest9-21ksoftirqd/012:23:080
15471992721,4cyclictest9-21ksoftirqd/008:15:530
15471992720,4cyclictest9-21ksoftirqd/007:52:200
15472992620,4cyclictest25-21ksoftirqd/108:30:191
15471992620,3cyclictest9-21ksoftirqd/010:49:470
15471992620,3cyclictest9-21ksoftirqd/010:35:430
15471992619,5cyclictest9-21ksoftirqd/011:33:380
15471992619,4cyclictest9-21ksoftirqd/012:12:520
15472992520,3cyclictest25-21ksoftirqd/108:15:171
15472992519,4cyclictest25-21ksoftirqd/108:25:451
15472992518,4cyclictest25-21ksoftirqd/111:21:221
15472992518,4cyclictest25-21ksoftirqd/111:21:221
15471992518,4cyclictest9-21ksoftirqd/007:27:120
15471992518,4cyclictest9-21ksoftirqd/007:27:110
1547299247,11cyclictest17045-21smartctl07:10:181
15472992418,4cyclictest25-21ksoftirqd/109:52:081
15472992418,4cyclictest25-21ksoftirqd/109:40:171
1547199244,18cyclictest31775-21cut11:26:070
1547199244,18cyclictest31775-21cut11:26:070
15471992418,3cyclictest9-21ksoftirqd/011:10:570
15472992316,4cyclictest25-21ksoftirqd/112:02:551
15472992316,4cyclictest25-21ksoftirqd/108:50:061
15471992316,4cyclictest9-21ksoftirqd/010:09:030
15471992217,3cyclictest9-21ksoftirqd/012:04:170
15471992216,4cyclictest9-21ksoftirqd/010:40:150
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional