You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-12-02 - 17:05

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot4.osadl.org (updated Fri Dec 02, 2022 12:46:16)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3274922080,6sleep30-21swapper/307:05:193
564981540,11rtkit-daemon563-21rtkit-daemon07:08:061
178529068,10sleep20-21swapper/207:09:262
10182780,8sleep01022-21ptp4l-jitter07:05:270
2119997721,8cyclictest41-21ksoftirqd/310:20:003
2119997435,7cyclictest41-21ksoftirqd/308:00:203
2119997355,4cyclictest41-21ksoftirqd/312:00:003
2119997336,7cyclictest41-21ksoftirqd/308:35:003
2119997335,8cyclictest41-21ksoftirqd/310:45:173
2119997331,5cyclictest41-21ksoftirqd/309:45:003
2118997335,9cyclictest33-21ksoftirqd/207:35:002
119512730,7sleep2211899cyclictest12:05:202
2119997235,7cyclictest41-21ksoftirqd/311:35:203
2119997233,8cyclictest41-21ksoftirqd/309:00:253
2119997233,5cyclictest41-21ksoftirqd/309:35:173
2119997233,5cyclictest41-21ksoftirqd/309:35:173
2119997232,5cyclictest41-21ksoftirqd/308:20:143
2119997229,9cyclictest41-21ksoftirqd/310:20:133
2118997228,9cyclictest33-21ksoftirqd/208:55:152
2118997136,9cyclictest33-21ksoftirqd/207:50:222
55032700,7sleep0211699cyclictest07:15:210
2119997036,4cyclictest41-21ksoftirqd/308:25:143
2119997033,7cyclictest41-21ksoftirqd/312:25:233
2118997034,9cyclictest33-21ksoftirqd/211:45:342
2118997032,5cyclictest33-21ksoftirqd/210:45:002
2119996935,4cyclictest41-21ksoftirqd/307:15:203
2119996930,5cyclictest41-21ksoftirqd/308:15:013
2118996932,9cyclictest33-21ksoftirqd/212:30:222
2118996932,10cyclictest33-21ksoftirqd/210:50:212
2119996827,5cyclictest41-21ksoftirqd/311:00:003
2119996825,5cyclictest41-21ksoftirqd/312:15:013
2118996830,10cyclictest33-21ksoftirqd/212:20:152
2118996823,4cyclictest33-21ksoftirqd/210:34:592
2119996756,6cyclictest41-21ksoftirqd/311:50:153
2118996732,9cyclictest33-21ksoftirqd/208:35:252
211899670,9cyclictest321ktimersoftd/209:20:302
2119996626,5cyclictest41-21ksoftirqd/311:30:293
211899664,9cyclictest321ktimersoftd/211:05:162
211899664,9cyclictest321ktimersoftd/211:05:162
2118996631,9cyclictest33-21ksoftirqd/208:45:292
2118996631,5cyclictest33-21ksoftirqd/210:35:142
2118996629,5cyclictest33-21ksoftirqd/210:25:202
2119996554,6cyclictest41-21ksoftirqd/311:15:153
2119996526,11cyclictest41-21ksoftirqd/310:50:243
2119996511,10cyclictest41-21ksoftirqd/310:30:183
2118996528,9cyclictest33-21ksoftirqd/210:45:202
211899652,7cyclictest321ktimersoftd/208:50:212
2119996454,6cyclictest41-21ksoftirqd/311:00:143
2119996453,6cyclictest41-21ksoftirqd/309:50:173
2119996428,4cyclictest41-21ksoftirqd/308:50:253
2119996411,9cyclictest41-21ksoftirqd/307:20:153
211899645,7cyclictest33-21ksoftirqd/210:10:292
211899644,8cyclictest33-21ksoftirqd/212:25:232
211899643,8cyclictest321ktimersoftd/211:10:162
2118996428,5cyclictest33-21ksoftirqd/207:45:262
211899640,8cyclictest33-21ksoftirqd/211:35:192
2119996347,4cyclictest41-21ksoftirqd/308:45:273
2118996355,4cyclictest33-21ksoftirqd/212:10:042
211899634,8cyclictest33-21ksoftirqd/209:05:002
211899632,9cyclictest321ktimersoftd/211:00:272
2118996327,9cyclictest33-21ksoftirqd/209:05:222
2118996327,10cyclictest33-21ksoftirqd/208:20:152
211899631,9cyclictest321ktimersoftd/211:40:192
211899631,7cyclictest321ktimersoftd/210:25:012
2119996257,3cyclictest41-21ksoftirqd/308:40:583
2119996252,6cyclictest41-21ksoftirqd/311:45:173
211899622,8cyclictest321ktimersoftd/210:00:352
2118996225,5cyclictest33-21ksoftirqd/210:05:132
2118996225,5cyclictest33-21ksoftirqd/209:10:292
2118996223,10cyclictest33-21ksoftirqd/209:50:292
2118996223,10cyclictest33-21ksoftirqd/207:35:172
211899621,8cyclictest6977-21sed08:25:282
211899621,8cyclictest321ktimersoftd/212:20:012
211899621,8cyclictest321ktimersoftd/211:30:002
2118996211,4cyclictest33-21ksoftirqd/207:20:302
211899620,8cyclictest321ktimersoftd/208:35:012
2119996149,7cyclictest41-21ksoftirqd/307:30:133
2119996148,5cyclictest41-21ksoftirqd/307:25:213
211999611,7cyclictest41-21ksoftirqd/312:00:223
211899615,9cyclictest33-21ksoftirqd/209:45:202
211899612,8cyclictest321ktimersoftd/211:30:262
211899611,7cyclictest321ktimersoftd/209:19:592
196102610,4sleep341-21ksoftirqd/311:10:283
2119996046,4cyclictest41-21ksoftirqd/310:05:283
2119996045,7cyclictest41-21ksoftirqd/311:25:183
2119996044,7cyclictest41-21ksoftirqd/310:25:213
2118996037,10cyclictest33-21ksoftirqd/210:00:012
211899601,8cyclictest321ktimersoftd/207:15:132
211899601,6cyclictest0-21swapper/208:10:242
211899600,8cyclictest321ktimersoftd/212:35:302
211899600,8cyclictest321ktimersoftd/212:35:302
211899600,8cyclictest321ktimersoftd/212:00:352
211899600,10cyclictest321ktimersoftd/209:30:302
2119995952,4cyclictest41-21ksoftirqd/309:15:123
2119995942,7cyclictest41-21ksoftirqd/307:40:163
211999592,8cyclictest41-21ksoftirqd/311:40:323
211999590,9cyclictest15963-21awk07:40:003
211899594,7cyclictest33-21ksoftirqd/210:55:122
211899593,7cyclictest321ktimersoftd/208:15:202
211899593,7cyclictest321ktimersoftd/207:55:172
2118995922,9cyclictest33-21ksoftirqd/209:25:282
2118995922,5cyclictest33-21ksoftirqd/208:00:192
129991590,1ptp4l401ktimersoftd/308:56:303
258212580,8sleep1211799cyclictest09:05:341
2119995844,4cyclictest41-21ksoftirqd/312:40:003
2119995844,4cyclictest41-21ksoftirqd/312:39:593
211899582,7cyclictest321ktimersoftd/208:40:212
211899580,10cyclictest321ktimersoftd/211:50:242
2119995752,3cyclictest41-21ksoftirqd/307:55:003
2119995750,4cyclictest41-21ksoftirqd/308:00:003
2119995745,4cyclictest41-21ksoftirqd/310:05:013
211999573,7cyclictest121rcu_preempt09:30:163
2119995737,8cyclictest41-21ksoftirqd/308:05:173
211999573,4cyclictest41-21ksoftirqd/309:05:143
211999572,7cyclictest41-21ksoftirqd/309:55:313
211999572,7cyclictest41-21ksoftirqd/307:45:243
2119995722,4cyclictest41-21ksoftirqd/311:05:283
2119995722,4cyclictest41-21ksoftirqd/311:05:283
211899574,9cyclictest33-21ksoftirqd/207:40:272
2118995721,9cyclictest33-21ksoftirqd/211:20:272
211899571,8cyclictest321ktimersoftd/211:55:162
164412570,2sleep10-21swapper/109:55:321
2119995650,4cyclictest41-21ksoftirqd/308:35:143
2119995645,7cyclictest41-21ksoftirqd/311:25:013
2119995643,5cyclictest41-21ksoftirqd/307:10:253
2119995643,3cyclictest41-21ksoftirqd/308:15:183
211899566,9cyclictest33-21ksoftirqd/207:10:122
211899564,8cyclictest33-21ksoftirqd/207:25:182
211899564,7cyclictest33-21ksoftirqd/210:15:272
211899562,7cyclictest321ktimersoftd/209:35:162
211899562,7cyclictest321ktimersoftd/209:35:162
211899560,8cyclictest321ktimersoftd/211:15:152
211899560,8cyclictest321ktimersoftd/208:05:282
211999554,8cyclictest41-21ksoftirqd/309:10:173
2119995542,4cyclictest41-21ksoftirqd/310:35:153
211999553,8cyclictest121rcu_preempt12:20:203
2119995517,9cyclictest41-21ksoftirqd/310:12:113
2118995537,5cyclictest33-21ksoftirqd/209:40:162
2119995448,3cyclictest41-21ksoftirqd/312:15:213
2119995448,3cyclictest41-21ksoftirqd/310:40:203
2119995341,3cyclictest41-21ksoftirqd/309:20:143
2119995339,4cyclictest41-21ksoftirqd/309:25:133
2119995338,4cyclictest41-21ksoftirqd/309:45:193
211999521,8cyclictest41-21ksoftirqd/312:05:203
2119995146,3cyclictest41-21ksoftirqd/312:30:233
56498440,3rtkit-daemon563-21rtkit-daemon09:13:310
2116994437,4cyclictest9-21ksoftirqd/008:40:300
2116994337,4cyclictest9-21ksoftirqd/011:25:010
2116994336,4cyclictest9-21ksoftirqd/009:55:010
2117994236,3cyclictest25-21ksoftirqd/109:42:131
2117994236,3cyclictest25-21ksoftirqd/109:32:051
2117994235,4cyclictest25-21ksoftirqd/110:10:281
2117994235,4cyclictest25-21ksoftirqd/107:42:351
2117994235,4cyclictest25-21ksoftirqd/107:28:141
2116994235,4cyclictest9-21ksoftirqd/012:15:040
56498410,3rtkit-daemon563-21rtkit-daemon08:17:230
2116994135,4cyclictest9-21ksoftirqd/008:33:450
2116994135,3cyclictest9-21ksoftirqd/012:20:460
2116994134,4cyclictest9-21ksoftirqd/009:18:000
2117994034,3cyclictest25-21ksoftirqd/111:40:541
2117994033,4cyclictest25-21ksoftirqd/112:15:151
2117994033,4cyclictest25-21ksoftirqd/110:37:561
2117994033,4cyclictest25-21ksoftirqd/109:37:131
2117994033,4cyclictest25-21ksoftirqd/109:37:131
2117994033,4cyclictest25-21ksoftirqd/108:57:591
2117994033,4cyclictest25-21ksoftirqd/108:46:161
2116994034,3cyclictest9-21ksoftirqd/010:04:280
2117993933,4cyclictest25-21ksoftirqd/112:20:241
2117993933,4cyclictest25-21ksoftirqd/111:53:021
2117993933,4cyclictest25-21ksoftirqd/110:51:561
2117993933,3cyclictest25-21ksoftirqd/109:00:451
2117993933,3cyclictest25-21ksoftirqd/107:57:351
2117993932,4cyclictest25-21ksoftirqd/110:56:011
2117993932,4cyclictest25-21ksoftirqd/110:27:561
2117993932,4cyclictest25-21ksoftirqd/110:08:001
2117993932,4cyclictest25-21ksoftirqd/109:13:331
2117993932,4cyclictest25-21ksoftirqd/108:39:211
2117993932,4cyclictest25-21ksoftirqd/108:02:471
2117993931,5cyclictest25-21ksoftirqd/107:39:271
2116993933,3cyclictest9-21ksoftirqd/010:28:160
2116993933,3cyclictest9-21ksoftirqd/009:01:230
2116993932,4cyclictest9-21ksoftirqd/011:32:380
2116993932,4cyclictest9-21ksoftirqd/011:19:110
2116993932,4cyclictest9-21ksoftirqd/010:50:110
2116993932,4cyclictest9-21ksoftirqd/008:24:430
2116993932,4cyclictest9-21ksoftirqd/007:38:380
2116993931,5cyclictest9-21ksoftirqd/011:49:360
2117993832,4cyclictest25-21ksoftirqd/108:21:591
2117993832,3cyclictest25-21ksoftirqd/108:06:511
2117993831,4cyclictest25-21ksoftirqd/111:18:181
2117993831,4cyclictest25-21ksoftirqd/111:00:431
2117993831,4cyclictest25-21ksoftirqd/108:18:041
2116993832,4cyclictest9-21ksoftirqd/010:55:290
2116993832,4cyclictest9-21ksoftirqd/008:05:200
2116993832,3cyclictest9-21ksoftirqd/011:03:130
2116993832,3cyclictest9-21ksoftirqd/007:57:250
2116993831,4cyclictest9-21ksoftirqd/012:08:340
2116993831,4cyclictest9-21ksoftirqd/011:42:110
2116993831,4cyclictest9-21ksoftirqd/007:41:070
2117993731,4cyclictest25-21ksoftirqd/110:25:011
2117993731,4cyclictest25-21ksoftirqd/107:31:491
2117993731,3cyclictest25-21ksoftirqd/112:05:021
2117993730,4cyclictest25-21ksoftirqd/112:29:441
2117993730,4cyclictest25-21ksoftirqd/111:31:461
2117993730,4cyclictest25-21ksoftirqd/111:21:081
2117993730,4cyclictest25-21ksoftirqd/110:48:591
2117993730,4cyclictest25-21ksoftirqd/110:33:501
2117993730,4cyclictest25-21ksoftirqd/108:26:571
2117993730,4cyclictest25-21ksoftirqd/107:53:201
2117993730,4cyclictest25-21ksoftirqd/107:47:311
2117993730,4cyclictest25-21ksoftirqd/107:17:071
2117993730,4cyclictest25-21ksoftirqd/107:14:301
2116993732,3cyclictest9-21ksoftirqd/012:25:290
2116993732,3cyclictest9-21ksoftirqd/011:50:330
2116993732,3cyclictest9-21ksoftirqd/007:10:290
2116993731,4cyclictest9-21ksoftirqd/012:31:150
2116993731,4cyclictest9-21ksoftirqd/010:09:520
2116993731,4cyclictest9-21ksoftirqd/008:35:110
2116993731,3cyclictest9-21ksoftirqd/007:53:520
2116993730,4cyclictest9-21ksoftirqd/010:39:190
2116993730,4cyclictest9-21ksoftirqd/007:46:440
2116993729,5cyclictest9-21ksoftirqd/010:18:360
2117993630,4cyclictest25-21ksoftirqd/108:53:581
2117993630,4cyclictest25-21ksoftirqd/108:42:251
2117993630,3cyclictest25-21ksoftirqd/111:48:021
2117993629,4cyclictest25-21ksoftirqd/112:13:451
2117993629,4cyclictest25-21ksoftirqd/111:11:471
2117993628,5cyclictest25-21ksoftirqd/111:35:121
2116993631,3cyclictest9-21ksoftirqd/011:25:280
2116993631,3cyclictest9-21ksoftirqd/009:05:170
2116993630,3cyclictest9-21ksoftirqd/010:22:230
2116993629,4cyclictest9-21ksoftirqd/011:59:230
2116993629,4cyclictest9-21ksoftirqd/010:47:170
2116993629,4cyclictest9-21ksoftirqd/010:40:070
2116993629,4cyclictest9-21ksoftirqd/008:55:120
2116993629,4cyclictest9-21ksoftirqd/008:01:350
2116993628,5cyclictest9-21ksoftirqd/008:52:560
2117993528,4cyclictest25-21ksoftirqd/112:38:411
2117993528,4cyclictest25-21ksoftirqd/112:38:411
2117993528,4cyclictest25-21ksoftirqd/109:26:381
2117993528,4cyclictest25-21ksoftirqd/108:10:541
2117993527,5cyclictest25-21ksoftirqd/107:22:171
2116993529,4cyclictest9-21ksoftirqd/009:58:430
2116993529,3cyclictest9-21ksoftirqd/009:24:430
2116993528,5cyclictest9-21ksoftirqd/012:04:410
2116993528,4cyclictest9-21ksoftirqd/012:15:000
2116993528,4cyclictest9-21ksoftirqd/011:12:510
2116993528,4cyclictest9-21ksoftirqd/008:49:270
2117993428,4cyclictest25-21ksoftirqd/109:23:401
2116993429,3cyclictest9-21ksoftirqd/011:39:200
2116993428,4cyclictest9-21ksoftirqd/010:14:330
2116993428,3cyclictest9-21ksoftirqd/007:28:320
2117993328,3cyclictest25-21ksoftirqd/109:20:001
2117993327,3cyclictest25-21ksoftirqd/110:19:071
2117993326,4cyclictest25-21ksoftirqd/109:54:241
2116993327,4cyclictest9-21ksoftirqd/012:36:570
2116993327,4cyclictest9-21ksoftirqd/012:36:570
2116993326,4cyclictest9-21ksoftirqd/010:32:200
2117993226,3cyclictest25-21ksoftirqd/111:07:241
2117993226,3cyclictest25-21ksoftirqd/111:07:241
2117993225,4cyclictest25-21ksoftirqd/111:25:041
2117993225,4cyclictest25-21ksoftirqd/110:41:281
2117993225,4cyclictest25-21ksoftirqd/108:32:141
2116993227,3cyclictest9-21ksoftirqd/011:07:550
2116993227,3cyclictest9-21ksoftirqd/011:07:540
2116993226,4cyclictest9-21ksoftirqd/008:29:410
2116993224,5cyclictest9-21ksoftirqd/007:20:040
2117993125,4cyclictest25-21ksoftirqd/112:00:201
2117993124,5cyclictest25-21ksoftirqd/111:59:031
2117993123,5cyclictest25-21ksoftirqd/112:32:561
2117993025,3cyclictest25-21ksoftirqd/109:49:501
2116993024,4cyclictest9-21ksoftirqd/007:30:150
2116993023,4cyclictest9-21ksoftirqd/009:29:250
2117992923,4cyclictest25-21ksoftirqd/110:02:021
2116992821,4cyclictest9-21ksoftirqd/008:13:180
2116992621,3cyclictest9-21ksoftirqd/009:40:000
2116992621,3cyclictest9-21ksoftirqd/009:40:000
2116992619,4cyclictest9-21ksoftirqd/009:34:120
2116992014,4cyclictest9275-21nfs4_client09:40:280
2116991811,4cyclictest10998-21fschecks_time09:45:160
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional