You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-12-05 - 01:47

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #2
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Sun Dec 04, 2022 12:46:18)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1339911380,4ptp4l401ktimersoftd/307:08:473
201582133112,10sleep10-21swapper/107:07:551
20014210381,10sleep20-21swapper/207:06:022
297252770,8sleep32074899cyclictest12:05:003
200322777,58sleep00-21swapper/007:06:150
20745996957,7cyclictest9-21ksoftirqd/009:05:110
20745996957,7cyclictest9-21ksoftirqd/009:05:110
39692640,8sleep12074699cyclictest10:00:211
133991620,1ptp4l401ktimersoftd/311:45:213
252022610,6sleep02074599cyclictest10:45:160
20745995743,8cyclictest9-21ksoftirqd/009:00:150
133991570,1ptp4l391rcuc/312:10:313
192672560,5sleep341-21ksoftirqd/310:30:423
20745995541,7cyclictest9-21ksoftirqd/009:30:150
133991550,1ptp4l391rcuc/309:11:243
20745995340,7cyclictest9-21ksoftirqd/008:55:130
129891530,3getstats2074899cyclictest11:21:313
133991520,1ptp4l401ktimersoftd/311:34:123
133991520,1ptp4l401ktimersoftd/308:02:373
133991500,1ptp4l401ktimersoftd/309:44:453
20745994937,6cyclictest9-21ksoftirqd/010:35:130
20745994739,4cyclictest9-21ksoftirqd/008:45:000
133991460,1ptp4l401ktimersoftd/309:55:003
20745994437,4cyclictest9-21ksoftirqd/007:40:220
133991440,1ptp4l401ktimersoftd/310:17:353
20745994336,4cyclictest9-21ksoftirqd/008:40:000
133991430,1ptp4l401ktimersoftd/307:52:253
133991420,1ptp4l401ktimersoftd/307:27:493
55498410,9rtkit-daemon0-21swapper/108:40:511
20748994134,4cyclictest41-21ksoftirqd/307:55:143
20747994110,4cyclictest33-21ksoftirqd/208:40:302
20745994128,7cyclictest9-21ksoftirqd/007:35:120
20747994033,4cyclictest33-21ksoftirqd/212:15:182
20745994034,3cyclictest9-21ksoftirqd/008:30:230
20745994033,4cyclictest9-21ksoftirqd/007:15:200
20745994030,6cyclictest9-21ksoftirqd/010:10:210
133991400,1ptp4l401ktimersoftd/307:31:213
20748993932,4cyclictest41-21ksoftirqd/309:20:243
20747993931,5cyclictest33-21ksoftirqd/209:35:122
20745993934,3cyclictest9-21ksoftirqd/011:25:000
20745993934,3cyclictest9-21ksoftirqd/007:45:280
20745993933,4cyclictest9-21ksoftirqd/010:25:260
20745993933,3cyclictest9-21ksoftirqd/011:40:010
20745993933,3cyclictest9-21ksoftirqd/011:40:000
133991390,1ptp4l401ktimersoftd/311:35:153
133991390,1ptp4l401ktimersoftd/311:35:153
133991390,1ptp4l401ktimersoftd/311:00:383
133991390,1ptp4l401ktimersoftd/309:45:333
133991390,1ptp4l401ktimersoftd/309:15:273
20748993831,4cyclictest41-21ksoftirqd/308:20:013
20747993833,3cyclictest33-21ksoftirqd/207:45:002
20747993831,4cyclictest33-21ksoftirqd/209:45:012
20747993830,4cyclictest33-21ksoftirqd/209:20:162
20745993832,4cyclictest9-21ksoftirqd/012:25:160
20745993831,4cyclictest9-21ksoftirqd/011:10:160
20745993831,4cyclictest9-21ksoftirqd/009:20:000
20745993831,4cyclictest9-21ksoftirqd/008:50:140
133991380,1ptp4l401ktimersoftd/310:23:323
133991380,1ptp4l401ktimersoftd/310:23:323
20748993730,4cyclictest41-21ksoftirqd/311:40:283
20747993731,4cyclictest33-21ksoftirqd/212:05:012
20747993731,3cyclictest33-21ksoftirqd/212:10:002
20747993730,4cyclictest33-21ksoftirqd/208:35:162
20747993729,4cyclictest33-21ksoftirqd/209:45:132
20747993718,5cyclictest33-21ksoftirqd/208:05:262
2074599373,4cyclictest121rcu_preempt10:57:460
20745993731,4cyclictest9-21ksoftirqd/009:25:010
20745993731,3cyclictest9-21ksoftirqd/012:05:010
20745993730,4cyclictest9-21ksoftirqd/011:05:240
20745993730,4cyclictest9-21ksoftirqd/010:45:000
20745993730,4cyclictest9-21ksoftirqd/008:30:000
20748993631,3cyclictest41-21ksoftirqd/308:25:223
20748993630,3cyclictest41-21ksoftirqd/312:40:003
20748993629,4cyclictest41-21ksoftirqd/310:53:293
20748993629,4cyclictest41-21ksoftirqd/310:35:123
20747993631,3cyclictest33-21ksoftirqd/210:30:012
20747993631,3cyclictest33-21ksoftirqd/209:55:192
20747993630,4cyclictest33-21ksoftirqd/210:55:212
20747993630,4cyclictest33-21ksoftirqd/209:05:202
20747993630,4cyclictest33-21ksoftirqd/209:05:192
20747993630,3cyclictest33-21ksoftirqd/211:24:592
20747993628,4cyclictest33-21ksoftirqd/208:30:142
20747993623,10cyclictest33-21ksoftirqd/209:50:352
20746993630,4cyclictest25-21ksoftirqd/107:40:211
20746993625,4cyclictest25-21ksoftirqd/111:16:081
20745993631,3cyclictest9-21ksoftirqd/007:50:330
20745993631,3cyclictest9-21ksoftirqd/007:10:120
20745993630,4cyclictest9-21ksoftirqd/011:30:190
20745993630,4cyclictest9-21ksoftirqd/010:05:150
20745993630,4cyclictest9-21ksoftirqd/010:00:000
20745993630,4cyclictest9-21ksoftirqd/009:10:210
20745993630,3cyclictest9-21ksoftirqd/011:25:200
20745993629,4cyclictest9-21ksoftirqd/012:10:000
20745993629,4cyclictest9-21ksoftirqd/008:45:150
133991360,28ptp4l35292irq/88-enp1s0-T11:55:393
1338913629,3phc2sys41-21ksoftirqd/308:20:193
20748993530,3cyclictest41-21ksoftirqd/307:45:213
20748993529,3cyclictest41-21ksoftirqd/308:55:213
20748993528,4cyclictest41-21ksoftirqd/307:35:143
20747993529,4cyclictest33-21ksoftirqd/210:00:182
20747993529,4cyclictest33-21ksoftirqd/207:50:472
20747993529,3cyclictest33-21ksoftirqd/212:25:222
20747993528,4cyclictest33-21ksoftirqd/212:20:232
20747993528,4cyclictest33-21ksoftirqd/211:56:582
20747993528,4cyclictest33-21ksoftirqd/211:30:162
20747993528,4cyclictest33-21ksoftirqd/210:50:172
20747993528,4cyclictest33-21ksoftirqd/208:59:402
20747993528,4cyclictest33-21ksoftirqd/208:50:002
20747993528,4cyclictest33-21ksoftirqd/207:35:002
20746993527,5cyclictest25-21ksoftirqd/109:57:531
20745993530,3cyclictest9-21ksoftirqd/009:25:200
20745993529,4cyclictest9-21ksoftirqd/010:35:000
20745993529,3cyclictest9-21ksoftirqd/007:55:210
20745993528,4cyclictest9-21ksoftirqd/010:20:320
20745993528,4cyclictest9-21ksoftirqd/010:20:320
20745993528,4cyclictest9-21ksoftirqd/010:00:390
20745993528,4cyclictest9-21ksoftirqd/008:05:180
133991350,1ptp4l401ktimersoftd/311:17:383
133991350,1ptp4l401ktimersoftd/310:40:183
20748993428,4cyclictest41-21ksoftirqd/310:59:463
20748993428,4cyclictest41-21ksoftirqd/308:35:153
20748993427,4cyclictest41-21ksoftirqd/311:06:203
20747993429,3cyclictest33-21ksoftirqd/211:30:012
20747993429,3cyclictest33-21ksoftirqd/209:00:162
20747993428,4cyclictest33-21ksoftirqd/211:00:282
20747993428,4cyclictest33-21ksoftirqd/210:05:272
20747993428,4cyclictest33-21ksoftirqd/208:00:012
20747993427,4cyclictest33-21ksoftirqd/208:10:212
20747993427,4cyclictest33-21ksoftirqd/207:25:142
20747993426,5cyclictest33-21ksoftirqd/211:41:072
20747993426,5cyclictest33-21ksoftirqd/209:10:122
20746993428,4cyclictest25-21ksoftirqd/110:12:471
20746993427,4cyclictest25-21ksoftirqd/111:31:541
20746993427,4cyclictest25-21ksoftirqd/110:22:431
20746993427,4cyclictest25-21ksoftirqd/110:22:421
20746993427,4cyclictest25-21ksoftirqd/109:39:301
20746993427,4cyclictest25-21ksoftirqd/108:47:231
20746993427,4cyclictest25-21ksoftirqd/108:17:561
20746993426,5cyclictest25-21ksoftirqd/110:08:281
20745993429,3cyclictest9-21ksoftirqd/009:40:010
20745993428,3cyclictest9-21ksoftirqd/011:55:290
20745993428,3cyclictest9-21ksoftirqd/009:45:100
20745993427,4cyclictest9-21ksoftirqd/008:15:010
133991340,1ptp4l401ktimersoftd/309:25:223
133991340,1ptp4l401ktimersoftd/308:44:373
20748993327,4cyclictest41-21ksoftirqd/312:20:243
20748993327,4cyclictest41-21ksoftirqd/311:53:553
20748993327,4cyclictest41-21ksoftirqd/309:56:053
20748993327,4cyclictest41-21ksoftirqd/309:35:133
20748993327,4cyclictest41-21ksoftirqd/308:50:153
20748993326,4cyclictest41-21ksoftirqd/309:07:283
20748993326,4cyclictest41-21ksoftirqd/309:07:283
20748993326,4cyclictest41-21ksoftirqd/307:18:443
20748993325,4cyclictest41-21ksoftirqd/309:00:243
20748993322,3cyclictest41-21ksoftirqd/308:10:163
20747993328,3cyclictest33-21ksoftirqd/211:45:152
20747993327,4cyclictest33-21ksoftirqd/208:15:132
20747993327,4cyclictest33-21ksoftirqd/208:03:462
20747993327,3cyclictest33-21ksoftirqd/211:14:452
20747993327,3cyclictest33-21ksoftirqd/210:33:382
20747993327,3cyclictest33-21ksoftirqd/210:10:462
20747993327,3cyclictest33-21ksoftirqd/208:51:462
20747993326,4cyclictest33-21ksoftirqd/210:48:002
20747993326,4cyclictest33-21ksoftirqd/210:20:192
20747993326,4cyclictest33-21ksoftirqd/210:20:192
20746993327,4cyclictest25-21ksoftirqd/112:14:181
20746993327,4cyclictest25-21ksoftirqd/112:01:531
20746993327,4cyclictest25-21ksoftirqd/111:25:481
20746993327,4cyclictest25-21ksoftirqd/110:18:001
20746993327,4cyclictest25-21ksoftirqd/107:23:281
20746993326,4cyclictest25-21ksoftirqd/111:36:451
20746993326,4cyclictest25-21ksoftirqd/111:36:441
20746993326,4cyclictest25-21ksoftirqd/110:51:431
20746993326,4cyclictest25-21ksoftirqd/109:06:581
20746993326,4cyclictest25-21ksoftirqd/109:06:571
20745993328,3cyclictest9-21ksoftirqd/011:50:280
20745993328,3cyclictest9-21ksoftirqd/010:50:170
20745993328,3cyclictest9-21ksoftirqd/008:00:180
20745993327,4cyclictest9-21ksoftirqd/011:15:230
20745993327,4cyclictest9-21ksoftirqd/011:00:290
20745993327,4cyclictest9-21ksoftirqd/007:26:460
20745993327,3cyclictest9-21ksoftirqd/008:23:320
133991330,1ptp4l401ktimersoftd/310:46:093
133991330,1ptp4l401ktimersoftd/309:30:403
133991330,1ptp4l401ktimersoftd/308:48:493
133991330,13ptp4l401ktimersoftd/307:22:413
20748993226,3cyclictest41-21ksoftirqd/311:14:513
20748993225,4cyclictest41-21ksoftirqd/312:15:203
20748993225,4cyclictest41-21ksoftirqd/307:10:233
20748993224,5cyclictest41-21ksoftirqd/308:09:433
20747993226,4cyclictest33-21ksoftirqd/211:50:252
20747993226,4cyclictest33-21ksoftirqd/208:20:342
20747993225,4cyclictest33-21ksoftirqd/211:20:002
20747993225,4cyclictest33-21ksoftirqd/211:05:242
20747993225,4cyclictest33-21ksoftirqd/210:35:212
20747993225,4cyclictest33-21ksoftirqd/210:20:002
20747993225,4cyclictest33-21ksoftirqd/207:14:592
20747993225,3cyclictest33-21ksoftirqd/210:40:152
20747993220,10cyclictest33-21ksoftirqd/208:30:012
20746993227,3cyclictest25-21ksoftirqd/112:32:401
20746993227,3cyclictest25-21ksoftirqd/108:29:201
20746993226,4cyclictest25-21ksoftirqd/112:25:461
20746993226,4cyclictest25-21ksoftirqd/111:43:231
20746993226,4cyclictest25-21ksoftirqd/109:33:071
20746993226,4cyclictest25-21ksoftirqd/108:20:441
20746993226,4cyclictest25-21ksoftirqd/107:30:151
20746993226,3cyclictest25-21ksoftirqd/111:11:041
20746993226,3cyclictest25-21ksoftirqd/108:04:521
20746993225,4cyclictest25-21ksoftirqd/111:03:091
20746993225,4cyclictest25-21ksoftirqd/110:48:391
20746993225,4cyclictest25-21ksoftirqd/109:50:411
20746993225,4cyclictest25-21ksoftirqd/109:25:141
20746993225,4cyclictest25-21ksoftirqd/108:57:061
20746993224,5cyclictest25-21ksoftirqd/108:53:531
20745993226,4cyclictest9-21ksoftirqd/012:19:350
20745993226,3cyclictest9-21ksoftirqd/012:10:160
20745993226,3cyclictest9-21ksoftirqd/010:20:000
20745993226,3cyclictest9-21ksoftirqd/009:41:220
20745993226,3cyclictest9-21ksoftirqd/008:15:540
133991320,1ptp4l401ktimersoftd/310:07:453
20748993126,3cyclictest41-21ksoftirqd/310:00:373
20748993126,3cyclictest41-21ksoftirqd/307:40:243
20748993125,4cyclictest41-21ksoftirqd/308:31:233
20747993126,3cyclictest33-21ksoftirqd/211:40:002
20747993126,3cyclictest33-21ksoftirqd/211:40:002
20747993126,3cyclictest33-21ksoftirqd/209:25:202
20747993125,4cyclictest33-21ksoftirqd/212:35:232
20747993125,4cyclictest33-21ksoftirqd/209:30:282
20747993125,3cyclictest33-21ksoftirqd/207:49:192
20747993124,4cyclictest33-21ksoftirqd/212:13:152
20747993124,4cyclictest33-21ksoftirqd/207:21:082
20746993126,3cyclictest25-21ksoftirqd/109:45:431
20746993125,4cyclictest25-21ksoftirqd/112:23:461
20746993125,4cyclictest25-21ksoftirqd/109:43:141
20746993125,3cyclictest25-21ksoftirqd/109:04:021
20746993125,3cyclictest25-21ksoftirqd/108:38:241
20746993125,3cyclictest25-21ksoftirqd/107:16:511
20746993124,4cyclictest25-21ksoftirqd/112:38:311
20746993124,4cyclictest25-21ksoftirqd/112:05:111
20746993124,4cyclictest25-21ksoftirqd/110:26:211
20745993126,3cyclictest9-21ksoftirqd/011:45:250
20745993125,4cyclictest9-21ksoftirqd/012:23:530
20745993125,3cyclictest9-21ksoftirqd/007:21:170
20745993124,4cyclictest9-21ksoftirqd/012:36:260
20745993124,4cyclictest9-21ksoftirqd/011:43:420
20745993124,4cyclictest9-21ksoftirqd/007:30:160
20748993025,3cyclictest41-21ksoftirqd/312:31:273
20748993024,4cyclictest41-21ksoftirqd/310:25:273
20747993023,4cyclictest33-21ksoftirqd/207:36:572
20746993024,4cyclictest25-21ksoftirqd/110:56:141
20746993024,4cyclictest25-21ksoftirqd/107:47:331
20746993024,4cyclictest25-21ksoftirqd/107:39:381
20746993024,4cyclictest25-21ksoftirqd/107:27:141
20746993024,3cyclictest25-21ksoftirqd/111:06:021
20746993024,3cyclictest25-21ksoftirqd/109:13:251
20745993025,3cyclictest9-21ksoftirqd/009:50:180
20747992924,3cyclictest33-21ksoftirqd/212:30:012
20746992924,3cyclictest25-21ksoftirqd/109:16:291
20746992923,4cyclictest25-21ksoftirqd/111:46:321
20746992923,4cyclictest25-21ksoftirqd/108:32:411
20746992923,4cyclictest25-21ksoftirqd/108:11:341
20746992923,4cyclictest25-21ksoftirqd/107:50:501
20746992923,3cyclictest25-21ksoftirqd/111:21:201
20746992922,4cyclictest25-21ksoftirqd/112:18:231
2074699290,27cyclictest0-21swapper/110:37:221
20745992923,3cyclictest9694-21cstates12:30:210
20748992824,3cyclictest41-21ksoftirqd/311:25:353
20748992823,3cyclictest41-21ksoftirqd/312:05:293
20748992822,4cyclictest41-21ksoftirqd/312:25:223
20747992823,3cyclictest33-21ksoftirqd/207:15:002
20747992822,4cyclictest33-21ksoftirqd/209:15:172
20746992822,4cyclictest25-21ksoftirqd/111:55:521
20746992820,5cyclictest25-21ksoftirqd/110:41:531
20748992721,3cyclictest41-21ksoftirqd/310:11:303
20746992721,4cyclictest25-21ksoftirqd/108:06:201
20746992721,4cyclictest25-21ksoftirqd/107:56:481
20746992721,4cyclictest25-21ksoftirqd/107:12:001
20746992620,4cyclictest25-21ksoftirqd/111:51:021
20746992620,4cyclictest25-21ksoftirqd/109:24:151
2074699211,3cyclictest0-21swapper/110:30:531
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional