You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-06-11 - 01:46

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Sat Jun 10, 2023 12:45:58)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2224321680,8sleep33203499cyclictest07:55:343
1009321670,7sleep23203399cyclictest08:40:252
830921580,6sleep03203199cyclictest10:55:230
320349911093,9cyclictest41-21ksoftirqd/311:55:203
320349910490,8cyclictest41-21ksoftirqd/312:00:163
320349910390,7cyclictest41-21ksoftirqd/309:40:183
320349910389,8cyclictest41-21ksoftirqd/309:55:173
32034999785,7cyclictest41-21ksoftirqd/309:15:243
32034999784,7cyclictest41-21ksoftirqd/310:55:193
32034999688,4cyclictest41-21ksoftirqd/310:15:183
32034999583,6cyclictest41-21ksoftirqd/310:10:193
129991950,13ptp4l0-21swapper/307:08:523
32034999380,7cyclictest41-21ksoftirqd/310:25:193
32034999281,6cyclictest41-21ksoftirqd/310:50:173
32034999280,6cyclictest41-21ksoftirqd/307:50:183
32034998775,6cyclictest41-21ksoftirqd/310:30:193
32034998676,5cyclictest41-21ksoftirqd/311:35:193
32034998471,8cyclictest41-21ksoftirqd/310:45:203
32034998371,6cyclictest41-21ksoftirqd/307:40:173
32034998371,6cyclictest41-21ksoftirqd/307:40:173
32034997765,6cyclictest41-21ksoftirqd/308:20:143
32034997563,7cyclictest41-21ksoftirqd/307:45:153
32032997537,7cyclictest25-21ksoftirqd/111:08:031
32034997264,4cyclictest41-21ksoftirqd/312:05:193
32032997234,8cyclictest25-21ksoftirqd/108:48:511
32032997135,7cyclictest25-21ksoftirqd/111:41:491
32032997133,8cyclictest25-21ksoftirqd/109:09:141
32032997035,4cyclictest25-21ksoftirqd/110:15:511
32032997034,5cyclictest25-21ksoftirqd/111:55:271
3166027038,13sleep233-21ksoftirqd/207:08:592
3203399690,4cyclictest1258-21lldpd09:56:132
32032996934,5cyclictest25-21ksoftirqd/108:58:491
32032996934,5cyclictest25-21ksoftirqd/108:58:481
32032996934,4cyclictest25-21ksoftirqd/110:36:491
32032996934,4cyclictest25-21ksoftirqd/107:51:091
32032996933,5cyclictest25-21ksoftirqd/112:20:571
32032996933,5cyclictest25-21ksoftirqd/112:20:561
32032996933,5cyclictest25-21ksoftirqd/110:28:321
32032996932,10cyclictest25-21ksoftirqd/112:17:361
32032996833,5cyclictest25-21ksoftirqd/111:36:061
32032996833,5cyclictest25-21ksoftirqd/107:32:311
32032996833,4cyclictest25-21ksoftirqd/109:03:161
32032996833,4cyclictest25-21ksoftirqd/109:03:161
32032996832,7cyclictest25-21ksoftirqd/107:20:591
32032996832,5cyclictest25-21ksoftirqd/110:00:091
32034996756,6cyclictest41-21ksoftirqd/312:30:213
32032996734,4cyclictest25-21ksoftirqd/110:41:521
32032996733,4cyclictest25-21ksoftirqd/110:30:381
32032996733,4cyclictest25-21ksoftirqd/110:22:151
32032996733,4cyclictest25-21ksoftirqd/108:22:471
32032996733,4cyclictest25-21ksoftirqd/107:55:071
32032996733,4cyclictest25-21ksoftirqd/107:41:351
32032996733,4cyclictest25-21ksoftirqd/107:41:351
32032996732,5cyclictest25-21ksoftirqd/111:29:231
32032996732,5cyclictest25-21ksoftirqd/111:03:181
32032996732,5cyclictest25-21ksoftirqd/110:55:421
32032996732,5cyclictest25-21ksoftirqd/109:57:361
32032996732,5cyclictest25-21ksoftirqd/109:46:441
32032996732,5cyclictest25-21ksoftirqd/108:06:141
32032996732,5cyclictest25-21ksoftirqd/108:01:111
32032996732,5cyclictest25-21ksoftirqd/107:48:181
32032996732,4cyclictest25-21ksoftirqd/109:38:081
32032996731,5cyclictest25-21ksoftirqd/109:50:121
32032996731,5cyclictest25-21ksoftirqd/108:10:321
32032996731,4cyclictest25-21ksoftirqd/111:18:261
32032996731,4cyclictest25-21ksoftirqd/108:53:081
32032996731,10cyclictest25-21ksoftirqd/109:17:071
32034996655,5cyclictest41-21ksoftirqd/309:05:213
32032996633,4cyclictest25-21ksoftirqd/108:27:331
32032996632,5cyclictest25-21ksoftirqd/111:34:431
32032996632,5cyclictest25-21ksoftirqd/110:14:371
32032996632,4cyclictest25-21ksoftirqd/110:49:121
32032996632,4cyclictest25-21ksoftirqd/109:26:371
32032996632,4cyclictest25-21ksoftirqd/109:12:441
32032996632,4cyclictest25-21ksoftirqd/108:30:361
32032996631,4cyclictest25-21ksoftirqd/110:07:181
32032996631,4cyclictest25-21ksoftirqd/109:30:531
32032996629,4cyclictest25-21ksoftirqd/112:07:231
32032996532,4cyclictest25-21ksoftirqd/111:46:191
32032996532,4cyclictest25-21ksoftirqd/109:43:191
32032996531,5cyclictest25-21ksoftirqd/112:38:161
32032996531,4cyclictest25-21ksoftirqd/111:52:011
32032996531,4cyclictest25-21ksoftirqd/108:43:081
32032996530,4cyclictest25-21ksoftirqd/112:14:051
32034996450,6cyclictest41-21ksoftirqd/308:55:183
32034996450,6cyclictest41-21ksoftirqd/308:55:183
32034996428,4cyclictest41-21ksoftirqd/309:25:353
32034996426,5cyclictest41-21ksoftirqd/308:30:323
32032996430,4cyclictest25-21ksoftirqd/107:29:021
32034996353,4cyclictest41-21ksoftirqd/311:10:203
32034996349,6cyclictest41-21ksoftirqd/307:25:183
32034996328,9cyclictest41-21ksoftirqd/308:05:273
32034996327,5cyclictest41-21ksoftirqd/309:45:243
32034996320,8cyclictest41-21ksoftirqd/311:45:183
32034996313,4cyclictest41-21ksoftirqd/312:12:493
32032996330,4cyclictest25-21ksoftirqd/107:38:291
32032996329,4cyclictest25-21ksoftirqd/111:13:191
32032996329,4cyclictest25-21ksoftirqd/107:13:271
32032996328,9cyclictest25-21ksoftirqd/112:31:061
32034996253,4cyclictest41-21ksoftirqd/310:40:063
32034996228,4cyclictest41-21ksoftirqd/307:20:313
32034996227,4cyclictest41-21ksoftirqd/311:30:343
32034996227,4cyclictest41-21ksoftirqd/309:50:373
32034996227,4cyclictest41-21ksoftirqd/309:35:003
32034996226,5cyclictest41-21ksoftirqd/311:05:543
32034996225,9cyclictest41-21ksoftirqd/312:25:283
3203399620,28cyclictest1258-21lldpd10:33:202
32034996154,4cyclictest41-21ksoftirqd/309:10:183
32034996152,4cyclictest41-21ksoftirqd/311:00:203
32034996142,8cyclictest41-21ksoftirqd/311:30:003
32034996124,5cyclictest41-21ksoftirqd/308:25:333
32034996115,8cyclictest41-21ksoftirqd/310:25:003
3203399610,4cyclictest1258-21lldpd09:17:122
32032996128,4cyclictest25-21ksoftirqd/109:21:061
32034996045,6cyclictest41-21ksoftirqd/308:50:183
32034996025,4cyclictest41-21ksoftirqd/312:38:533
32034995951,5cyclictest41-21ksoftirqd/312:20:193
32034995951,5cyclictest41-21ksoftirqd/312:20:193
32034995944,5cyclictest41-21ksoftirqd/307:15:013
32034995924,4cyclictest41-21ksoftirqd/310:05:303
32032995929,10cyclictest25-21ksoftirqd/110:51:061
32034995852,4cyclictest41-21ksoftirqd/308:40:213
32034995840,8cyclictest41-21ksoftirqd/308:00:203
32034995836,8cyclictest41-21ksoftirqd/310:35:353
32034995823,4cyclictest41-21ksoftirqd/308:15:203
32034995821,8cyclictest41-21ksoftirqd/308:35:313
32034995820,8cyclictest41-21ksoftirqd/311:40:353
3203299583,8cyclictest25-21ksoftirqd/112:00:261
32032995826,7cyclictest25-21ksoftirqd/108:35:041
32034995751,3cyclictest41-21ksoftirqd/308:10:183
32034995742,6cyclictest41-21ksoftirqd/311:15:453
32034995721,8cyclictest41-21ksoftirqd/311:20:413
32034995717,5cyclictest41-21ksoftirqd/309:00:213
32034995717,5cyclictest41-21ksoftirqd/309:00:213
32034995713,8cyclictest41-21ksoftirqd/309:25:013
32032995725,9cyclictest25-21ksoftirqd/108:15:101
32031995745,7cyclictest9-21ksoftirqd/012:20:210
32031995745,7cyclictest9-21ksoftirqd/012:20:210
32034995650,3cyclictest41-21ksoftirqd/310:00:163
32034995649,4cyclictest41-21ksoftirqd/311:55:003
32034995621,4cyclictest41-21ksoftirqd/307:30:323
32034995538,7cyclictest41-21ksoftirqd/309:35:253
32034995521,4cyclictest41-21ksoftirqd/308:45:363
32034995521,4cyclictest41-21ksoftirqd/307:35:193
32032995534,10cyclictest25-21ksoftirqd/107:19:161
3203299550,7cyclictest216192chrt11:24:301
32032995423,9cyclictest25-21ksoftirqd/112:28:161
32034995219,8cyclictest41-21ksoftirqd/307:15:223
32034995140,4cyclictest41-21ksoftirqd/312:15:293
3203399490,4cyclictest1258-21lldpd11:12:222
3203399490,4cyclictest1258-21lldpd08:05:572
3203399490,2cyclictest0-21swapper/211:23:092
3203399480,4cyclictest1258-21lldpd10:38:012
32031994841,4cyclictest9-21ksoftirqd/010:20:000
95052477,3sleep2121rcu_preempt07:30:282
3203399465,20cyclictest561-21rs:main2
32031994639,5cyclictest9-21ksoftirqd/008:20:340
3203199461,5cyclictest121rcu_preempt09:05:340
32033994538,4cyclictest33-21ksoftirqd/211:49:322
32031994538,4cyclictest9-21ksoftirqd/008:40:590
32031994538,4cyclictest9-21ksoftirqd/008:00:010
3203399440,4cyclictest1258-21lldpd09:11:172
32031994438,4cyclictest9-21ksoftirqd/010:00:000
32031994437,4cyclictest9-21ksoftirqd/012:11:030
3203199440,3cyclictest121rcu_preempt09:40:300
32033994336,4cyclictest33-21ksoftirqd/210:59:452
32033994336,4cyclictest33-21ksoftirqd/210:50:392
3203399433,19cyclictest561-21rs:main2
3203399430,7cyclictest0-21swapper/210:40:032
32031994338,3cyclictest9-21ksoftirqd/010:00:260
32031994338,3cyclictest9-21ksoftirqd/008:20:000
32031994336,4cyclictest9-21ksoftirqd/011:18:390
32031994336,4cyclictest9-21ksoftirqd/009:54:590
32031994332,5cyclictest9-21ksoftirqd/010:35:200
32033994237,3cyclictest33-21ksoftirqd/210:12:312
32033994236,3cyclictest33-21ksoftirqd/211:06:102
32033994235,4cyclictest33-21ksoftirqd/211:25:472
32033994235,4cyclictest33-21ksoftirqd/211:16:522
3203399423,32cyclictest28279-21apt-get09:20:192
3203399422,32cyclictest474-21apt-get09:30:152
3203399420,4cyclictest1258-21lldpd12:30:492
3203399420,4cyclictest1258-21lldpd10:20:542
3203399420,4cyclictest1258-21lldpd08:14:022
3203399420,2cyclictest0-21swapper/208:20:132
32031994236,3cyclictest9-21ksoftirqd/007:19:410
32031994235,4cyclictest9-21ksoftirqd/010:06:080
32031994235,4cyclictest9-21ksoftirqd/008:48:430
32031994235,4cyclictest9-21ksoftirqd/008:08:230
32031994235,4cyclictest1242-21snmpd11:25:010
3203199421,9cyclictest1242-21snmpd11:05:230
3203199420,3cyclictest121rcu_preempt09:15:500
32033994135,3cyclictest33-21ksoftirqd/208:31:332
32033994134,4cyclictest33-21ksoftirqd/212:16:122
3203399413,31cyclictest20886-21apt-get07:55:172
3203399412,32cyclictest18506-21apt-get07:50:192
3203399412,30cyclictest6779-21apt-get07:25:172
32031994135,4cyclictest9-21ksoftirqd/011:30:010
32031994135,4cyclictest9-21ksoftirqd/008:00:290
32031994134,4cyclictest9-21ksoftirqd/011:45:170
520224032,4sleep09-21ksoftirqd/010:49:010
32033994033,4cyclictest33-21ksoftirqd/212:11:052
32033994033,4cyclictest33-21ksoftirqd/211:53:422
32033994033,4cyclictest33-21ksoftirqd/209:36:462
32033994033,4cyclictest33-21ksoftirqd/208:17:372
3203399402,31cyclictest26630-21apt-get11:35:202
3203399402,30cyclictest21610-21apt-get10:15:182
32031994035,3cyclictest9-21ksoftirqd/008:50:450
32031994034,3cyclictest9-21ksoftirqd/009:25:300
32031994033,4cyclictest9-21ksoftirqd/012:34:560
32031994033,4cyclictest9-21ksoftirqd/012:00:260
32031994033,4cyclictest9-21ksoftirqd/010:35:000
32031994026,8cyclictest9-21ksoftirqd/012:35:220
32033993933,4cyclictest33-21ksoftirqd/210:02:012
32033993932,4cyclictest33-21ksoftirqd/210:48:062
32033993932,4cyclictest33-21ksoftirqd/209:53:372
3203199395,4cyclictest9-21ksoftirqd/008:55:170
3203199395,4cyclictest9-21ksoftirqd/008:55:170
32031993934,3cyclictest9-21ksoftirqd/011:55:340
32031993933,4cyclictest9-21ksoftirqd/007:20:340
32031993932,4cyclictest9-21ksoftirqd/012:15:230
32031993932,4cyclictest9-21ksoftirqd/012:10:000
32031993932,4cyclictest9-21ksoftirqd/009:50:000
32031993932,4cyclictest9-21ksoftirqd/009:30:230
32031993932,4cyclictest9-21ksoftirqd/009:20:020
32031993932,4cyclictest9-21ksoftirqd/008:11:560
2826523932,3sleep09-21ksoftirqd/010:29:490
222123933,3sleep09-21ksoftirqd/010:40:380
32033993833,3cyclictest33-21ksoftirqd/211:57:402
32033993832,4cyclictest33-21ksoftirqd/208:53:492
32033993832,3cyclictest33-21ksoftirqd/209:40:102
3203399382,30cyclictest4456-21taskset07:20:192
32031993832,4cyclictest9-21ksoftirqd/008:30:300
32031993832,3cyclictest9-21ksoftirqd/011:45:020
32031993832,3cyclictest9-21ksoftirqd/007:50:000
32031993831,4cyclictest1242-21snmpd07:30:380
3153623812,15sleep01242-21snmpd07:07:250
3203399373,28cyclictest0-21swapper/208:45:172
32033993730,4cyclictest33-21ksoftirqd/212:23:192
32033993730,4cyclictest33-21ksoftirqd/212:23:192
32033993730,4cyclictest33-21ksoftirqd/209:00:572
32033993730,4cyclictest33-21ksoftirqd/209:00:572
3203399371,32cyclictest1975-21/usr/sbin/munin07:15:312
3203399370,4cyclictest21339-21cpuspeed09:05:212
32031993732,3cyclictest9-21ksoftirqd/012:25:370
32031993730,4cyclictest9-21ksoftirqd/011:02:570
32031993730,4cyclictest9-21ksoftirqd/008:37:170
32031993730,4cyclictest9-21ksoftirqd/007:50:270
32031993730,4cyclictest9-21ksoftirqd/007:25:410
3203399364,26cyclictest1258-21lldpd08:35:192
32033993630,3cyclictest33-21ksoftirqd/210:26:202
3203399362,29cyclictest8280-21apt-get12:05:192
3203399362,29cyclictest16156-21apt-get07:45:142
3203399361,32cyclictest11857-21df_abs07:35:232
32031993631,3cyclictest9-21ksoftirqd/010:50:320
32031993630,4cyclictest9-21ksoftirqd/007:40:000
32031993629,4cyclictest9-21ksoftirqd/010:11:590
32031993629,4cyclictest9-21ksoftirqd/009:37:410
32031993629,4cyclictest9-21ksoftirqd/007:45:000
32031993629,4cyclictest9-21ksoftirqd/007:44:590
3203399352,26cyclictest2558-21apt-get08:25:192
3203399351,30cyclictest1258-21lldpd08:58:552
3203399351,30cyclictest1258-21lldpd08:58:542
3203399350,4cyclictest18531-21latency12:25:302
3203399347,23cyclictest1258-21lldpd10:05:232
32033993428,3cyclictest33-21ksoftirqd/212:01:152
3203399341,30cyclictest10438-21grep11:00:212
3203399340,4cyclictest8770-21ps09:45:332
3203399340,4cyclictest1242-21snmpd09:27:292
3203399340,3cyclictest121rcu_preempt11:42:192
32031993427,4cyclictest9-21ksoftirqd/008:25:200
32031993427,4cyclictest9-21ksoftirqd/007:11:530
3203399332,25cyclictest13836-21apt-get07:40:172
3203399332,25cyclictest13836-21apt-get07:40:172
3203399332,25cyclictest0-21swapper/211:30:192
3203399330,4cyclictest1258-21lldpd08:00:162
32031993327,3cyclictest9-21ksoftirqd/010:25:010
314582336,14sleep10-21swapper/107:06:251
32031993226,3cyclictest9-21ksoftirqd/011:50:210
32031993225,4cyclictest1242-21snmpd09:14:280
3203199314,3cyclictest121rcu_preempt11:13:590
32031993125,3cyclictest9-21ksoftirqd/009:00:350
32031993125,3cyclictest9-21ksoftirqd/009:00:340
3203199304,3cyclictest121rcu_preempt11:30:260
32031992924,3cyclictest9-21ksoftirqd/011:35:230
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional