You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2021-10-17 - 05:58

Intel(R) Atom(TM) CPU E3845 @ 1.91GHz, Linux 4.19.37-rt20 (Profile)

Latency plot of system in rack #b, slot #6
Data to construct the above plot have been generated using the RT test utility cyclictest.
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the alll highest latencies:
System rackbslot6.osadl.org (updated Fri Oct 15, 2021 12:43:33)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2742522130,2sleep20-21swapper/207:11:222
2457921500,5sleep02908199cyclictest09:50:280
998321390,4sleep02908199cyclictest07:41:130
911911080,4ptp4l401ktimersoftd/307:15:433
116692780,2sleep30-21swapper/311:46:463
273752710,1sleep10-21swapper/109:20:501
273752710,1sleep10-21swapper/109:20:501
221942690,2sleep10-21swapper/112:31:161
221942690,2sleep10-21swapper/112:31:161
310772620,5sleep12908299cyclictest08:25:541
116712600,1sleep00-21swapper/010:41:350
2908499585,9cyclictest12382-21apt-get09:36:543
2908499565,6cyclictest41-21ksoftirqd/309:21:103
29084995625,7cyclictest41-21ksoftirqd/307:45:523
2908499555,9cyclictest41-21ksoftirqd/309:41:313
29084995522,7cyclictest41-21ksoftirqd/311:31:363
29084995522,7cyclictest41-21ksoftirqd/309:48:243
286012554,40sleep00-21swapper/007:13:020
29084995421,10cyclictest41-21ksoftirqd/309:26:083
29084995420,8cyclictest41-21ksoftirqd/311:16:243
247912540,1sleep10-21swapper/111:27:281
29084995325,4cyclictest41-21ksoftirqd/312:25:583
29084995319,7cyclictest41-21ksoftirqd/310:26:183
2908499524,7cyclictest41-21ksoftirqd/307:35:563
29084995221,10cyclictest41-21ksoftirqd/309:01:163
29084995122,9cyclictest41-21ksoftirqd/309:51:173
29084995121,8cyclictest41-21ksoftirqd/310:21:273
29084995121,10cyclictest41-21ksoftirqd/312:26:233
29084995120,8cyclictest41-21ksoftirqd/312:14:253
29084995120,8cyclictest41-21ksoftirqd/308:21:193
29084995119,8cyclictest41-21ksoftirqd/310:41:403
29084995119,7cyclictest41-21ksoftirqd/311:21:213
91191500,1ptp4l401ktimersoftd/309:15:553
91191500,1ptp4l401ktimersoftd/309:15:553
29084995033,8cyclictest41-21ksoftirqd/307:46:243
29084995020,10cyclictest41-21ksoftirqd/307:20:553
29084995018,7cyclictest41-21ksoftirqd/312:16:293
29082995038,6cyclictest25-21ksoftirqd/112:41:151
29084994943,3cyclictest41-21ksoftirqd/310:06:003
29084994927,3cyclictest41-21ksoftirqd/310:51:113
29084994927,3cyclictest41-21ksoftirqd/310:51:113
29084994921,9cyclictest41-21ksoftirqd/310:34:463
29084994921,7cyclictest41-21ksoftirqd/308:31:283
29084994921,7cyclictest41-21ksoftirqd/308:11:283
29084994920,9cyclictest41-21ksoftirqd/310:16:273
29084994920,10cyclictest41-21ksoftirqd/311:06:123
29084994919,4cyclictest41-21ksoftirqd/308:36:243
29084994917,9cyclictest41-21ksoftirqd/311:59:463
91191480,1ptp4l401ktimersoftd/307:52:393
29084994841,3cyclictest41-21ksoftirqd/308:41:083
29084994828,3cyclictest41-21ksoftirqd/311:41:193
29084994825,6cyclictest41-21ksoftirqd/310:01:033
2908499476,7cyclictest19972-21awk09:10:543
29084994741,3cyclictest41-21ksoftirqd/308:25:573
29084994724,4cyclictest41-21ksoftirqd/312:42:233
29084994721,4cyclictest41-21ksoftirqd/311:51:123
29084994720,4cyclictest41-21ksoftirqd/311:26:063
29084994719,4cyclictest41-21ksoftirqd/308:46:203
29084994719,10cyclictest41-21ksoftirqd/312:37:313
29084994717,10cyclictest41-21ksoftirqd/309:31:123
29084994716,8cyclictest41-21ksoftirqd/311:01:063
29084994715,10cyclictest41-21ksoftirqd/310:14:203
2908499464,3cyclictest121rcu_preempt07:35:523
29084994627,3cyclictest41-21ksoftirqd/311:00:573
29084994624,7cyclictest41-21ksoftirqd/311:12:323
29084994618,9cyclictest41-21ksoftirqd/311:36:153
29084994615,5cyclictest41-21ksoftirqd/310:48:273
29084994614,10cyclictest41-21ksoftirqd/312:10:213
29084994535,3cyclictest41-21ksoftirqd/309:11:113
29084994533,3cyclictest41-21ksoftirqd/308:06:203
29084994521,7cyclictest41-21ksoftirqd/312:35:593
29084994521,7cyclictest41-21ksoftirqd/312:35:593
29084994516,8cyclictest41-21ksoftirqd/312:01:393
27132450,1sleep20-21swapper/211:38:212
29084994434,3cyclictest41-21ksoftirqd/310:36:163
29084994429,9cyclictest41-21ksoftirqd/309:56:243
29084994414,8cyclictest41-21ksoftirqd/309:00:063
91191420,1ptp4l401ktimersoftd/307:56:283
2908499425,3cyclictest41-21ksoftirqd/307:26:183
2908499425,3cyclictest41-21ksoftirqd/307:26:183
29084994229,4cyclictest41-21ksoftirqd/308:51:213
29084994215,5cyclictest41-21ksoftirqd/307:18:103
2908499416,7cyclictest899-21runrttasks08:01:203
2908499413,3cyclictest121rcu_preempt08:16:223
29082993934,3cyclictest25-21ksoftirqd/108:25:531
29082993731,3cyclictest25-21ksoftirqd/111:25:571
29082993725,6cyclictest25-21ksoftirqd/110:36:101
29082993623,7cyclictest25-21ksoftirqd/110:21:061
2872323615,9sleep10-21swapper/107:14:371
2908299353,2cyclictest121rcu_preempt10:33:561
29082993529,3cyclictest25-21ksoftirqd/109:10:541
29083993328,3cyclictest33-21ksoftirqd/210:36:172
29083993327,3cyclictest33-21ksoftirqd/210:05:562
2908399330,3cyclictest121rcu_preempt12:19:462
29082993328,3cyclictest25-21ksoftirqd/111:10:571
29082993327,3cyclictest25-21ksoftirqd/111:51:131
29082993327,3cyclictest25-21ksoftirqd/111:36:181
29083993223,7cyclictest33-21ksoftirqd/212:06:372
2908299323,6cyclictest899-21runrttasks07:51:131
29082993227,3cyclictest25-21ksoftirqd/110:20:561
29082993227,3cyclictest25-21ksoftirqd/109:05:531
29083993126,3cyclictest33-21ksoftirqd/209:25:542
29083993125,4cyclictest33-21ksoftirqd/207:21:182
29083993124,4cyclictest33-21ksoftirqd/209:16:242
29083993124,4cyclictest33-21ksoftirqd/209:16:242
2908399311,3cyclictest121rcu_preempt09:32:092
29082993126,3cyclictest25-21ksoftirqd/109:46:201
29082993126,3cyclictest25-21ksoftirqd/108:36:151
29082993126,3cyclictest25-21ksoftirqd/107:35:521
29082993125,4cyclictest25-21ksoftirqd/111:11:271
29082993124,5cyclictest25-21ksoftirqd/110:56:371
29082993124,4cyclictest25-21ksoftirqd/109:51:221
61452300,2sleep20-21swapper/211:41:312
29083993025,3cyclictest33-21ksoftirqd/209:51:222
29083993024,3cyclictest33-21ksoftirqd/211:31:432
29083993024,3cyclictest33-21ksoftirqd/210:51:092
29083993024,3cyclictest33-21ksoftirqd/210:51:092
29083993024,3cyclictest33-21ksoftirqd/208:46:172
29082993025,3cyclictest25-21ksoftirqd/111:56:201
29082993025,3cyclictest25-21ksoftirqd/111:31:201
29082993025,3cyclictest25-21ksoftirqd/109:31:301
29082993025,3cyclictest25-21ksoftirqd/109:21:191
29082993025,3cyclictest25-21ksoftirqd/107:20:511
29082993024,3cyclictest25-21ksoftirqd/112:11:231
29082993024,3cyclictest25-21ksoftirqd/111:16:201
29082993024,3cyclictest25-21ksoftirqd/110:11:161
29082993023,4cyclictest25-21ksoftirqd/110:29:551
29082993018,6cyclictest25-21ksoftirqd/107:56:111
29081993024,3cyclictest9-21ksoftirqd/010:10:560
29083992924,3cyclictest33-21ksoftirqd/212:11:382
29083992924,3cyclictest33-21ksoftirqd/211:56:262
29083992922,4cyclictest33-21ksoftirqd/207:54:042
29082992925,3cyclictest25-21ksoftirqd/112:01:291
29082992924,3cyclictest25-21ksoftirqd/112:26:281
29082992924,3cyclictest25-21ksoftirqd/110:06:191
29082992924,3cyclictest25-21ksoftirqd/109:36:191
29082992924,3cyclictest25-21ksoftirqd/109:26:141
29082992924,3cyclictest25-21ksoftirqd/107:41:321
29082992923,3cyclictest25-21ksoftirqd/111:41:231
29082992923,3cyclictest25-21ksoftirqd/110:41:231
29082992922,5cyclictest25-21ksoftirqd/112:37:241
29082992921,5cyclictest25-21ksoftirqd/110:51:351
29082992921,5cyclictest25-21ksoftirqd/110:51:351
178162290,1sleep10-21swapper/109:42:261
29083992823,3cyclictest33-21ksoftirqd/211:51:212
29083992823,3cyclictest33-21ksoftirqd/210:10:562
29083992823,3cyclictest33-21ksoftirqd/209:28:142
29083992823,3cyclictest33-21ksoftirqd/208:51:202
29083992823,3cyclictest33-21ksoftirqd/207:56:192
29083992822,3cyclictest33-21ksoftirqd/210:41:292
29083992822,3cyclictest33-21ksoftirqd/207:41:072
29082992823,3cyclictest25-21ksoftirqd/108:41:261
29082992823,3cyclictest25-21ksoftirqd/108:11:171
29082992822,3cyclictest25-21ksoftirqd/109:56:081
29082992821,5cyclictest25-21ksoftirqd/112:18:021
29082992821,5cyclictest25-21ksoftirqd/112:06:561
29082992821,5cyclictest25-21ksoftirqd/110:01:061
29082992821,4cyclictest25-21ksoftirqd/107:37:081
29083992723,2cyclictest33-21ksoftirqd/209:46:312
29083992722,3cyclictest33-21ksoftirqd/209:56:082
29083992722,3cyclictest33-21ksoftirqd/209:41:212
29083992722,3cyclictest33-21ksoftirqd/207:16:282
29082992722,3cyclictest25-21ksoftirqd/112:25:111
29082992722,3cyclictest25-21ksoftirqd/108:20:531
29082992721,3cyclictest25-21ksoftirqd/111:01:211
29082992721,3cyclictest25-21ksoftirqd/107:23:401
29082992719,6cyclictest25-21ksoftirqd/110:46:051
29081992722,3cyclictest9-21ksoftirqd/007:40:520
29081992721,3cyclictest9-21ksoftirqd/012:27:460
29081992721,3cyclictest9-21ksoftirqd/009:37:350
29081992721,3cyclictest9-21ksoftirqd/007:24:530
29081992720,4cyclictest9-21ksoftirqd/008:59:010
29083992621,3cyclictest33-21ksoftirqd/211:26:162
29083992621,3cyclictest33-21ksoftirqd/211:25:582
29083992621,3cyclictest33-21ksoftirqd/211:16:322
29083992621,3cyclictest33-21ksoftirqd/211:11:262
29083992621,3cyclictest33-21ksoftirqd/210:46:272
29083992621,3cyclictest33-21ksoftirqd/209:06:252
29083992620,3cyclictest33-21ksoftirqd/211:06:182
29083992620,3cyclictest33-21ksoftirqd/209:02:202
29083992615,6cyclictest321ktimersoftd/212:21:122
29082992621,3cyclictest25-21ksoftirqd/111:47:231
29082992620,4cyclictest25-21ksoftirqd/108:50:431
29082992620,3cyclictest25-21ksoftirqd/108:51:031
29082992619,4cyclictest25-21ksoftirqd/108:05:591
29081992621,3cyclictest9-21ksoftirqd/011:01:230
29081992620,4cyclictest9-21ksoftirqd/012:16:180
29081992620,3cyclictest9-21ksoftirqd/008:41:230
29081992620,3cyclictest9-21ksoftirqd/008:14:280
29081992619,4cyclictest9-21ksoftirqd/009:02:420
2908399259,9cyclictest18037-21ssh10:16:252
29083992520,3cyclictest33-21ksoftirqd/209:36:252
29083992520,3cyclictest33-21ksoftirqd/209:11:052
29083992519,3cyclictest33-21ksoftirqd/207:35:132
29083992518,4cyclictest33-21ksoftirqd/208:12:342
29082992519,3cyclictest25-21ksoftirqd/107:26:171
29082992519,3cyclictest25-21ksoftirqd/107:26:171
2908199253,14cyclictest26902-21ssh12:36:120
29081992520,3cyclictest9-21ksoftirqd/011:41:270
29081992519,3cyclictest9-21ksoftirqd/012:03:450
29081992519,3cyclictest9-21ksoftirqd/009:12:580
29081992519,3cyclictest9-21ksoftirqd/008:29:220
28102250,21sleep022485-21diskmemload10:01:210
9872240,5sleep0995-21needreboot11:36:310
29083992419,3cyclictest33-21ksoftirqd/212:26:342
29083992419,3cyclictest33-21ksoftirqd/210:56:252
29083992419,3cyclictest33-21ksoftirqd/210:31:282
29083992419,3cyclictest33-21ksoftirqd/208:10:532
29083992418,4cyclictest33-21ksoftirqd/208:41:452
29083992418,3cyclictest33-21ksoftirqd/212:35:592
29083992418,3cyclictest33-21ksoftirqd/212:35:592
29083992418,3cyclictest33-21ksoftirqd/210:10:562
29083992418,3cyclictest33-21ksoftirqd/208:56:302
29083992418,3cyclictest33-21ksoftirqd/207:47:592
29083992418,3cyclictest33-21ksoftirqd/207:28:442
29083992418,3cyclictest33-21ksoftirqd/207:28:442
29082992417,4cyclictest25-21ksoftirqd/108:32:401
29081992419,3cyclictest9-21ksoftirqd/012:21:190
29081992419,3cyclictest9-21ksoftirqd/007:32:260
29081992419,3cyclictest9-21ksoftirqd/007:27:120
29081992419,3cyclictest9-21ksoftirqd/007:27:120
29081992418,3cyclictest9-21ksoftirqd/009:53:110
29081992418,3cyclictest9-21ksoftirqd/008:34:560
29081992418,3cyclictest9-21ksoftirqd/007:57:230
29081992417,4cyclictest9-21ksoftirqd/009:17:280
29081992417,4cyclictest9-21ksoftirqd/009:17:280
29083992318,3cyclictest33-21ksoftirqd/211:01:302
29083992318,3cyclictest33-21ksoftirqd/207:39:142
29083992317,3cyclictest33-21ksoftirqd/212:01:482
29083992317,3cyclictest33-21ksoftirqd/208:40:362
29083992316,4cyclictest26685-21grep08:16:152
29082992318,3cyclictest25-21ksoftirqd/109:11:191
29082992317,3cyclictest25-21ksoftirqd/107:48:281
29081992318,3cyclictest9-21ksoftirqd/011:16:270
29081992318,3cyclictest9-21ksoftirqd/007:52:370
29081992317,3cyclictest9-21ksoftirqd/008:00:560
29083992216,4cyclictest33-21ksoftirqd/208:24:142
29083992215,4cyclictest33-21ksoftirqd/208:01:062
29082992216,4cyclictest25-21ksoftirqd/108:59:501
29081992217,3cyclictest9-21ksoftirqd/011:26:160
29081992217,3cyclictest9-21ksoftirqd/011:13:520
29081992217,3cyclictest9-21ksoftirqd/009:59:370
29081992217,3cyclictest9-21ksoftirqd/009:41:570
29081992217,3cyclictest9-21ksoftirqd/009:31:150
29081992217,2cyclictest9-21ksoftirqd/008:19:090
29081992216,4cyclictest9-21ksoftirqd/008:40:500
29081992216,3cyclictest9-21ksoftirqd/008:53:510
29081992215,4cyclictest9-21ksoftirqd/007:19:130
29083992116,3cyclictest33-21ksoftirqd/211:46:412
29083992116,3cyclictest33-21ksoftirqd/208:29:422
29083992114,4cyclictest23352-21cat10:21:142
29081992116,3cyclictest9-21ksoftirqd/010:53:070
29081992116,3cyclictest9-21ksoftirqd/010:53:070
29081992116,3cyclictest9-21ksoftirqd/009:08:040
29081992115,3cyclictest9-21ksoftirqd/011:58:590
29081992115,3cyclictest9-21ksoftirqd/008:50:220
29081992115,3cyclictest9-21ksoftirqd/008:05:580
29081992114,4cyclictest899-21runrttasks10:12:160
29083992015,3cyclictest33-21ksoftirqd/212:36:182
29083992015,3cyclictest33-21ksoftirqd/208:35:302
29083992013,4cyclictest29855-21sh10:26:522
29082992015,3cyclictest25-21ksoftirqd/108:01:141
2908199204,9cyclictest63-21kswapd010:56:150
2908199202,15cyclictest2103-21grep09:26:250
29081992015,3cyclictest9-21ksoftirqd/012:06:280
29081992015,3cyclictest12056-21tr07:46:180
29081992014,3cyclictest20985-21sh11:24:260
2908199201,3cyclictest19314-21ssh10:50:290
29081992013,4cyclictest899-21runrttasks09:23:120
29081992013,4cyclictest2895-21if_ens312:11:270
29081992013,4cyclictest15034-21gltestperf11:51:170
2908199200,18cyclictest0-21swapper/010:27:080
29083991912,4cyclictest781-21grep12:41:272
29081991914,3cyclictest9-21ksoftirqd/011:08:040
29081991913,3cyclictest22485-21diskmemload12:31:040
29081991913,3cyclictest22485-21diskmemload12:31:040
29081991913,3cyclictest18213-21cat10:16:270
29081991913,3cyclictest1703-21sh10:31:230
29081991912,4cyclictest31660-21sh12:41:000
29081991912,4cyclictest29130-21ls08:21:130
29081991912,4cyclictest12827-21sh11:48:430
2908199190,2cyclictest121rcu_preempt11:31:260
2908199190,17cyclictest0-21swapper/010:39:230
29081991813,3cyclictest9-21ksoftirqd/010:21:170
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional