You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-03-27 - 00:06

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot4.osadl.org (updated Sun Mar 26, 2023 12:46:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1299911770,6ptp4l401ktimersoftd/307:09:373
193242870,3sleep10-21swapper/107:30:271
12121997469,3cyclictest231rcuc/108:50:321
12121997469,3cyclictest231rcuc/108:50:321
116372734,56sleep20-21swapper/207:07:402
12121997268,2cyclictest231rcuc/109:22:451
12121997234,8cyclictest25-21ksoftirqd/108:20:191
129991680,1ptp4l401ktimersoftd/311:34:353
12121996833,4cyclictest25-21ksoftirqd/108:10:291
12121996760,4cyclictest25-21ksoftirqd/112:20:061
12121996734,8cyclictest25-21ksoftirqd/112:07:371
1212199666,9cyclictest25-21ksoftirqd/109:30:151
12121996659,4cyclictest25-21ksoftirqd/109:50:041
1212199654,7cyclictest26940-21gpgv09:45:001
12121996532,8cyclictest25-21ksoftirqd/109:16:401
12121996459,3cyclictest231rcuc/110:04:001
12121996457,4cyclictest25-21ksoftirqd/112:15:051
1212199637,9cyclictest25-21ksoftirqd/110:40:281
1212199636,10cyclictest25-21ksoftirqd/107:10:321
1212199635,7cyclictest25-21ksoftirqd/112:40:001
12121996331,8cyclictest25-21ksoftirqd/107:50:021
1212199627,9cyclictest25-21ksoftirqd/107:45:001
1212199627,7cyclictest25-21ksoftirqd/111:00:151
1212199627,7cyclictest25-21ksoftirqd/108:30:001
1212199626,8cyclictest25-21ksoftirqd/110:20:211
1212199626,8cyclictest25-21ksoftirqd/110:20:211
1212199626,8cyclictest25-21ksoftirqd/110:10:301
1212199626,8cyclictest25-21ksoftirqd/107:20:311
1212199626,8cyclictest25-21ksoftirqd/107:20:311
1212199624,8cyclictest25-21ksoftirqd/111:50:291
1212199621,8cyclictest241ktimersoftd/107:20:011
1212199617,8cyclictest5322-21cstates12:10:131
1212199616,8cyclictest25-21ksoftirqd/108:45:001
12121996154,4cyclictest25-21ksoftirqd/108:45:051
1212199615,10cyclictest25-21ksoftirqd/109:45:011
1212199614,7cyclictest25-21ksoftirqd/112:00:181
12121996129,9cyclictest25-21ksoftirqd/109:10:001
1212199606,8cyclictest25-21ksoftirqd/110:50:281
1212199606,8cyclictest25-21ksoftirqd/110:30:001
1212199606,7cyclictest25-21ksoftirqd/107:40:001
12121996031,10cyclictest25-21ksoftirqd/108:04:291
1212199597,7cyclictest25-21ksoftirqd/108:35:001
1212199596,8cyclictest25-21ksoftirqd/110:35:001
1212199595,9cyclictest25-21ksoftirqd/111:30:181
12121995955,2cyclictest231rcuc/109:00:141
12121995955,2cyclictest231rcuc/107:57:501
1212199593,7cyclictest25-21ksoftirqd/109:10:291
1212199587,7cyclictest25-21ksoftirqd/108:20:001
1212199586,8cyclictest25-21ksoftirqd/112:30:151
1212199586,7cyclictest25-21ksoftirqd/109:00:001
1212199585,8cyclictest25-21ksoftirqd/111:29:591
1212199585,8cyclictest25-21ksoftirqd/111:25:001
1212199585,7cyclictest25-21ksoftirqd/110:09:591
1212199585,4cyclictest25-21ksoftirqd/109:38:461
12121995853,3cyclictest231rcuc/111:43:271
1212199575,8cyclictest25-21ksoftirqd/108:10:001
1212199575,4cyclictest25-21ksoftirqd/110:00:001
129991560,1ptp4l401ktimersoftd/310:06:453
1212199565,8cyclictest25-21ksoftirqd/111:10:251
1212199564,8cyclictest25-21ksoftirqd/108:39:591
1212199563,8cyclictest25-21ksoftirqd/110:59:001
12121995523,4cyclictest25-21ksoftirqd/109:28:441
56498540,15rtkit-daemon563-21rtkit-daemon12:33:560
245422540,2sleep30-21swapper/307:50:173
12122995448,3cyclictest33-21ksoftirqd/211:45:012
12122995448,3cyclictest33-21ksoftirqd/208:55:012
12122995448,3cyclictest33-21ksoftirqd/208:55:002
12121995424,8cyclictest25-21ksoftirqd/111:35:041
12122995346,4cyclictest33-21ksoftirqd/212:00:132
1212199535,7cyclictest25-21ksoftirqd/112:30:011
1212199530,6cyclictest241ktimersoftd/110:50:001
12123995245,4cyclictest4157-21cron12:04:593
12122995246,3cyclictest33-21ksoftirqd/209:45:002
1212199525,7cyclictest4453-21sendmail-msp10:20:011
1212199524,7cyclictest1209-21runrttasks07:28:471
12122995144,4cyclictest33-21ksoftirqd/209:39:592
12122995143,5cyclictest33-21ksoftirqd/211:50:132
1212199515,7cyclictest25-21ksoftirqd/111:19:471
12121995145,4cyclictest231rcuc/107:48:421
12122995044,4cyclictest33-21ksoftirqd/212:40:002
12122995044,4cyclictest33-21ksoftirqd/211:05:012
12122995044,3cyclictest33-21ksoftirqd/208:00:002
1212199503,7cyclictest25-21ksoftirqd/110:37:571
12122994944,3cyclictest33-21ksoftirqd/209:25:002
12122994941,5cyclictest33-21ksoftirqd/210:40:212
1212199495,8cyclictest25-21ksoftirqd/111:46:461
1212199495,8cyclictest25-21ksoftirqd/111:46:461
1160124929,9sleep10-21swapper/107:07:111
12122994842,3cyclictest33-21ksoftirqd/212:25:002
12122994841,4cyclictest33-21ksoftirqd/210:00:002
12123994742,3cyclictest41-21ksoftirqd/312:00:003
12122994740,3cyclictest33-21ksoftirqd/212:20:012
1212199470,8cyclictest25-21ksoftirqd/111:55:441
1298914637,4phc2sys41-21ksoftirqd/309:40:163
12122994638,4cyclictest33-21ksoftirqd/211:50:002
12122994638,4cyclictest33-21ksoftirqd/211:50:002
129991450,1ptp4l401ktimersoftd/308:33:463
12122994539,4cyclictest33-21ksoftirqd/207:30:322
12122994537,4cyclictest33-21ksoftirqd/212:26:452
12122994537,4cyclictest33-21ksoftirqd/209:15:012
1212199450,8cyclictest25-21ksoftirqd/111:05:431
12120994539,3cyclictest9-21ksoftirqd/009:25:000
129991440,1ptp4l401ktimersoftd/309:35:453
129991440,1ptp4l401ktimersoftd/307:38:223
12122994439,3cyclictest33-21ksoftirqd/209:35:022
12122994438,4cyclictest33-21ksoftirqd/210:20:222
12122994438,4cyclictest33-21ksoftirqd/210:20:212
12122994438,4cyclictest33-21ksoftirqd/210:04:592
12122994437,4cyclictest33-21ksoftirqd/207:40:232
12122994431,10cyclictest33-21ksoftirqd/208:30:242
1166224415,17sleep00-21swapper/007:07:580
12122994338,3cyclictest33-21ksoftirqd/209:50:002
12122994337,4cyclictest33-21ksoftirqd/211:29:472
12122994337,4cyclictest33-21ksoftirqd/210:35:002
12122994336,4cyclictest33-21ksoftirqd/208:58:372
12120994337,3cyclictest9-21ksoftirqd/011:47:470
12120994337,3cyclictest9-21ksoftirqd/011:47:460
12120994337,3cyclictest9-21ksoftirqd/010:00:000
12123994237,3cyclictest41-21ksoftirqd/311:20:003
12122994237,3cyclictest33-21ksoftirqd/208:05:012
12122994235,4cyclictest33-21ksoftirqd/209:50:212
12122994235,4cyclictest33-21ksoftirqd/209:20:012
12122994235,4cyclictest33-21ksoftirqd/207:14:052
12122994234,4cyclictest33-21ksoftirqd/211:34:592
12122994233,5cyclictest33-21ksoftirqd/209:00:132
12123994134,4cyclictest41-21ksoftirqd/308:57:243
12122994134,4cyclictest33-21ksoftirqd/210:55:002
12122994134,4cyclictest33-21ksoftirqd/208:45:012
12122994134,4cyclictest33-21ksoftirqd/207:25:012
12122994134,4cyclictest33-21ksoftirqd/207:25:002
12122994132,6cyclictest33-21ksoftirqd/212:05:202
12120994135,4cyclictest9-21ksoftirqd/011:30:240
129991400,1ptp4l401ktimersoftd/307:30:363
12123994035,3cyclictest41-21ksoftirqd/308:00:013
12123994033,4cyclictest41-21ksoftirqd/310:51:533
12123994033,4cyclictest41-21ksoftirqd/309:07:443
12123994033,4cyclictest41-21ksoftirqd/307:13:033
12123994032,5cyclictest41-21ksoftirqd/311:05:223
12122994034,4cyclictest33-21ksoftirqd/210:20:002
12122994034,4cyclictest33-21ksoftirqd/210:10:282
12122994033,4cyclictest33-21ksoftirqd/212:10:382
12122994033,4cyclictest33-21ksoftirqd/211:09:592
12122994033,4cyclictest33-21ksoftirqd/208:20:242
12122994033,4cyclictest33-21ksoftirqd/207:39:592
12120994034,3cyclictest9-21ksoftirqd/010:55:000
12120994033,4cyclictest9-21ksoftirqd/011:42:480
12123993932,4cyclictest41-21ksoftirqd/311:54:483
12123993932,4cyclictest41-21ksoftirqd/310:18:423
12123993932,4cyclictest41-21ksoftirqd/308:37:483
12123993931,5cyclictest41-21ksoftirqd/311:35:503
12123993931,5cyclictest41-21ksoftirqd/309:02:143
12123993931,4cyclictest41-21ksoftirqd/308:52:003
12123993931,4cyclictest41-21ksoftirqd/308:51:593
12122993933,3cyclictest33-21ksoftirqd/208:49:192
12122993932,4cyclictest33-21ksoftirqd/210:49:302
12122993932,4cyclictest33-21ksoftirqd/207:50:222
12122993932,4cyclictest33-21ksoftirqd/207:28:152
12120993933,4cyclictest9-21ksoftirqd/007:40:000
12120993933,3cyclictest9-21ksoftirqd/012:00:120
12120993932,4cyclictest9-21ksoftirqd/010:04:130
12120993932,4cyclictest9-21ksoftirqd/009:50:080
12120993932,4cyclictest9-21ksoftirqd/009:50:000
12120993932,4cyclictest9-21ksoftirqd/007:45:320
129991380,14ptp4l401ktimersoftd/307:46:553
12123993832,3cyclictest41-21ksoftirqd/311:10:533
12123993832,3cyclictest41-21ksoftirqd/309:32:503
12123993832,3cyclictest41-21ksoftirqd/308:20:003
12123993832,3cyclictest41-21ksoftirqd/308:10:213
12123993831,4cyclictest41-21ksoftirqd/312:06:123
12123993831,4cyclictest41-21ksoftirqd/311:48:393
12123993831,4cyclictest41-21ksoftirqd/311:48:383
12123993831,4cyclictest41-21ksoftirqd/310:35:563
12123993831,4cyclictest41-21ksoftirqd/308:08:433
12122993833,3cyclictest33-21ksoftirqd/211:10:172
12122993833,3cyclictest33-21ksoftirqd/210:40:012
12122993832,4cyclictest33-21ksoftirqd/212:30:292
12122993832,3cyclictest33-21ksoftirqd/211:20:002
12122993831,4cyclictest33-21ksoftirqd/211:40:002
12122993831,4cyclictest33-21ksoftirqd/209:28:382
12122993831,4cyclictest33-21ksoftirqd/208:26:212
12122993831,4cyclictest33-21ksoftirqd/208:09:592
12122993830,5cyclictest33-21ksoftirqd/211:24:362
12120993833,3cyclictest9-21ksoftirqd/008:31:370
12120993831,4cyclictest9-21ksoftirqd/010:48:170
12120993831,4cyclictest9-21ksoftirqd/010:12:520
12120993831,4cyclictest9-21ksoftirqd/009:37:240
12120993831,4cyclictest9-21ksoftirqd/007:25:160
12120993831,4cyclictest25040-21sshd11:29:080
12120993830,5cyclictest9-21ksoftirqd/011:20:450
129991370,1ptp4l401ktimersoftd/311:20:153
129991370,1ptp4l401ktimersoftd/307:20:193
129991370,1ptp4l401ktimersoftd/307:20:183
12123993732,3cyclictest41-21ksoftirqd/311:40:213
12123993731,4cyclictest41-21ksoftirqd/309:50:003
12123993731,4cyclictest41-21ksoftirqd/308:42:033
12123993730,4cyclictest41-21ksoftirqd/310:32:063
12123993730,4cyclictest41-21ksoftirqd/310:27:563
12123993730,4cyclictest41-21ksoftirqd/310:22:593
12123993730,4cyclictest41-21ksoftirqd/310:22:583
12123993730,4cyclictest41-21ksoftirqd/309:55:543
12123993730,4cyclictest41-21ksoftirqd/308:49:493
12123993730,4cyclictest41-21ksoftirqd/308:03:573
12123993730,4cyclictest41-21ksoftirqd/307:30:003
12122993731,3cyclictest33-21ksoftirqd/211:00:002
12122993731,3cyclictest33-21ksoftirqd/207:50:012
12122993731,3cyclictest33-21ksoftirqd/207:15:342
12122993729,5cyclictest33-21ksoftirqd/210:29:202
12120993732,3cyclictest9-21ksoftirqd/010:19:460
12120993731,4cyclictest9-21ksoftirqd/012:24:080
12120993731,4cyclictest9-21ksoftirqd/010:05:460
12120993731,4cyclictest9-21ksoftirqd/009:01:230
12120993731,3cyclictest9-21ksoftirqd/011:57:500
12120993731,3cyclictest9-21ksoftirqd/008:43:340
12120993730,4cyclictest9-21ksoftirqd/011:39:080
12120993730,4cyclictest9-21ksoftirqd/011:16:550
12120993730,4cyclictest9-21ksoftirqd/011:10:210
12120993730,4cyclictest9-21ksoftirqd/011:00:010
12120993730,4cyclictest9-21ksoftirqd/008:53:170
12120993730,4cyclictest9-21ksoftirqd/008:53:160
12120993730,4cyclictest9-21ksoftirqd/008:29:430
12120993730,4cyclictest9-21ksoftirqd/008:22:290
12120993730,4cyclictest9-21ksoftirqd/007:11:040
129991360,1ptp4l401ktimersoftd/311:02:523
12123993630,4cyclictest41-21ksoftirqd/309:12:263
12123993630,4cyclictest41-21ksoftirqd/308:28:053
12123993630,3cyclictest41-21ksoftirqd/312:25:553
12123993630,3cyclictest41-21ksoftirqd/310:42:563
12123993629,4cyclictest41-21ksoftirqd/312:35:263
12123993629,4cyclictest41-21ksoftirqd/312:24:073
12123993629,4cyclictest41-21ksoftirqd/312:19:243
12123993629,4cyclictest41-21ksoftirqd/311:27:263
12123993629,4cyclictest41-21ksoftirqd/309:50:243
12123993629,4cyclictest41-21ksoftirqd/309:25:003
12122993629,4cyclictest33-21ksoftirqd/211:55:272
12120993631,3cyclictest9-21ksoftirqd/007:23:460
12120993631,3cyclictest9-21ksoftirqd/007:23:450
12120993630,4cyclictest9-21ksoftirqd/012:19:050
12120993630,4cyclictest9-21ksoftirqd/009:13:400
12120993630,3cyclictest9-21ksoftirqd/012:29:540
12120993630,3cyclictest9-21ksoftirqd/011:51:500
12120993629,4cyclictest9-21ksoftirqd/010:39:460
12120993629,4cyclictest9-21ksoftirqd/010:23:530
12120993629,4cyclictest9-21ksoftirqd/010:23:520
12120993629,4cyclictest9-21ksoftirqd/008:48:580
12120993629,4cyclictest9-21ksoftirqd/008:15:180
12120993629,4cyclictest9-21ksoftirqd/008:13:220
12120993629,4cyclictest9-21ksoftirqd/008:07:140
12120993629,4cyclictest9-21ksoftirqd/007:41:430
12120993629,4cyclictest9-21ksoftirqd/007:15:490
12123993529,4cyclictest41-21ksoftirqd/312:33:263
12123993529,4cyclictest41-21ksoftirqd/310:02:043
12123993529,4cyclictest41-21ksoftirqd/307:40:263
12123993529,3cyclictest41-21ksoftirqd/311:00:013
12123993529,3cyclictest41-21ksoftirqd/310:11:543
12123993528,4cyclictest41-21ksoftirqd/309:26:523
12122993529,3cyclictest33-21ksoftirqd/208:37:552
12122993529,3cyclictest33-21ksoftirqd/208:12:122
12122993528,4cyclictest33-21ksoftirqd/209:05:262
12122993528,4cyclictest33-21ksoftirqd/208:18:182
12120993529,4cyclictest9-21ksoftirqd/010:44:560
12120993529,4cyclictest9-21ksoftirqd/009:18:250
12120993529,3cyclictest9-21ksoftirqd/012:13:190
12120993529,3cyclictest9-21ksoftirqd/008:02:200
12120993529,3cyclictest9-21ksoftirqd/007:31:440
12120993528,4cyclictest9-21ksoftirqd/009:27:170
129991340,1ptp4l401ktimersoftd/309:17:343
1298913427,3phc2sys41-21ksoftirqd/312:10:133
12123993427,4cyclictest41-21ksoftirqd/308:24:173
12122993427,4cyclictest33-21ksoftirqd/210:08:042
12120993428,4cyclictest9-21ksoftirqd/009:30:250
12120993428,3cyclictest9-21ksoftirqd/010:25:510
12120993428,3cyclictest9-21ksoftirqd/007:55:380
12120993427,4cyclictest9-21ksoftirqd/012:38:310
12120993427,4cyclictest9-21ksoftirqd/011:06:230
12120993427,4cyclictest9-21ksoftirqd/009:08:340
12120993427,4cyclictest9-21ksoftirqd/008:56:490
12120993327,4cyclictest9-21ksoftirqd/011:00:270
12120993327,4cyclictest9-21ksoftirqd/009:40:300
12120993327,3cyclictest9-21ksoftirqd/012:10:010
12120993326,4cyclictest9-21ksoftirqd/007:53:300
12123993227,3cyclictest41-21ksoftirqd/310:48:043
129991310,1ptp4l401ktimersoftd/307:19:333
12120992417,4cyclictest9-21ksoftirqd/008:38:390
12120991913,4cyclictest9-21ksoftirqd/010:34:520
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional