You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-12-02 - 17:01

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #3
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot3.osadl.org (updated Fri Dec 02, 2022 12:46:15)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1805221680,8sleep21199699cyclictest11:55:272
1586921560,6sleep21199699cyclictest09:35:172
716021540,6sleep01199499cyclictest09:15:240
8255911210,45ptp4l401ktimersoftd/307:08:523
211172870,3sleep20-21swapper/207:30:002
115362877,18sleep20-21swapper/207:07:522
57698840,12rtkit-daemon0-21swapper/007:09:340
116992826,18sleep10-21swapper/107:09:531
41742810,5sleep34179-21fschecks_count09:10:163
825591780,3ptp4l21333-21apt-get12:05:173
825591770,1ptp4l401ktimersoftd/308:45:593
825591770,1ptp4l401ktimersoftd/307:23:113
11996997733,10cyclictest33-21ksoftirqd/212:10:002
11994997437,7cyclictest9-21ksoftirqd/008:50:210
11994997433,6cyclictest9-21ksoftirqd/012:15:310
825591730,1ptp4l401ktimersoftd/307:15:113
11994997337,6cyclictest9-21ksoftirqd/008:30:230
11994997336,5cyclictest9-21ksoftirqd/007:55:270
11994997335,8cyclictest9-21ksoftirqd/009:05:010
11994997335,8cyclictest9-21ksoftirqd/009:05:000
11994997330,7cyclictest9-21ksoftirqd/009:10:150
11994997237,6cyclictest9-21ksoftirqd/012:35:190
11994997132,5cyclictest9-21ksoftirqd/010:30:280
11994997033,7cyclictest9-21ksoftirqd/011:50:250
11996996929,9cyclictest33-21ksoftirqd/208:25:002
11994996934,4cyclictest9-21ksoftirqd/010:45:000
11994996932,7cyclictest9-21ksoftirqd/010:35:000
11994996932,10cyclictest9-21ksoftirqd/011:00:290
11994996932,10cyclictest9-21ksoftirqd/008:05:120
11994996929,8cyclictest9-21ksoftirqd/010:20:280
11996996833,11cyclictest33-21ksoftirqd/207:40:182
11994996831,7cyclictest9-21ksoftirqd/008:05:000
11994996830,10cyclictest9-21ksoftirqd/010:00:320
11996996733,10cyclictest33-21ksoftirqd/210:55:262
11996996732,10cyclictest33-21ksoftirqd/209:59:182
11996996732,10cyclictest33-21ksoftirqd/209:05:262
11994996732,6cyclictest9-21ksoftirqd/010:55:120
11994996730,7cyclictest9-21ksoftirqd/008:45:210
11994996727,8cyclictest9-21ksoftirqd/011:35:280
11996996633,10cyclictest33-21ksoftirqd/209:10:182
11996996633,10cyclictest33-21ksoftirqd/208:50:252
11996996624,9cyclictest33-21ksoftirqd/212:35:012
11994996630,6cyclictest9-21ksoftirqd/012:05:270
11994996629,6cyclictest9-21ksoftirqd/010:50:270
11994996627,8cyclictest9-21ksoftirqd/010:05:130
825591650,1ptp4l401ktimersoftd/307:49:163
11994996530,6cyclictest9-21ksoftirqd/007:50:140
11996996425,9cyclictest33-21ksoftirqd/207:59:262
189172630,3sleep0111rcuc/007:25:000
1199699635,8cyclictest6827-21apache208:49:592
11996996332,9cyclictest33-21ksoftirqd/212:35:282
11996996332,10cyclictest33-21ksoftirqd/209:20:272
11996996331,11cyclictest33-21ksoftirqd/207:45:242
11994996328,7cyclictest9-21ksoftirqd/008:40:210
1199699624,7cyclictest321ktimersoftd/210:25:272
11996996230,9cyclictest33-21ksoftirqd/209:45:272
11996996230,9cyclictest33-21ksoftirqd/209:25:252
11996996230,9cyclictest33-21ksoftirqd/207:35:292
11996996230,10cyclictest33-21ksoftirqd/211:10:172
11996996229,10cyclictest33-21ksoftirqd/208:15:142
11996996228,9cyclictest33-21ksoftirqd/212:10:162
11996996228,10cyclictest33-21ksoftirqd/207:20:152
1199699622,6cyclictest321ktimersoftd/208:40:002
1199499627,9cyclictest9-21ksoftirqd/010:10:110
11994996226,5cyclictest9-21ksoftirqd/007:45:160
1199699614,7cyclictest321ktimersoftd/211:20:192
1199699614,7cyclictest321ktimersoftd/209:05:012
1199699614,7cyclictest321ktimersoftd/209:05:002
1199699613,7cyclictest321ktimersoftd/208:10:012
1199699613,6cyclictest321ktimersoftd/210:35:002
11996996129,9cyclictest33-21ksoftirqd/208:55:282
11996996129,9cyclictest33-21ksoftirqd/207:50:142
1199499617,9cyclictest9-21ksoftirqd/011:45:320
1199699604,6cyclictest321ktimersoftd/207:20:002
1199699603,8cyclictest321ktimersoftd/212:15:212
1199699603,6cyclictest321ktimersoftd/211:55:002
11996996028,10cyclictest33-21ksoftirqd/208:25:122
1199699602,7cyclictest321ktimersoftd/210:45:282
1199499607,9cyclictest9-21ksoftirqd/012:10:180
1199499606,9cyclictest9-21ksoftirqd/011:10:230
1199499604,7cyclictest9-21ksoftirqd/010:15:130
1199499603,7cyclictest9-21ksoftirqd/007:25:220
1199499603,7cyclictest101ktimersoftd/008:40:000
11994996023,8cyclictest9-21ksoftirqd/012:30:290
1199699594,7cyclictest321ktimersoftd/212:25:312
1199699594,7cyclictest321ktimersoftd/208:10:232
1199699593,7cyclictest321ktimersoftd/212:00:252
1199699593,7cyclictest321ktimersoftd/212:00:242
1199699593,7cyclictest321ktimersoftd/211:40:262
1199699593,7cyclictest321ktimersoftd/211:05:152
1199699593,7cyclictest321ktimersoftd/210:15:002
1199699593,7cyclictest321ktimersoftd/207:15:002
11996995927,9cyclictest33-21ksoftirqd/211:25:212
20512580,2sleep30-21swapper/310:15:163
1199699584,6cyclictest321ktimersoftd/210:00:282
1199699583,8cyclictest321ktimersoftd/210:35:242
1199699582,8cyclictest321ktimersoftd/208:40:152
11996995828,9cyclictest33-21ksoftirqd/211:45:322
1199699582,7cyclictest321ktimersoftd/208:30:182
1199499584,7cyclictest9-21ksoftirqd/007:10:190
1199499584,6cyclictest9-21ksoftirqd/009:25:220
11997995750,4cyclictest41-21ksoftirqd/311:40:003
1199699574,7cyclictest321ktimersoftd/207:30:152
1199699574,7cyclictest321ktimersoftd/207:30:142
1199699573,7cyclictest321ktimersoftd/209:40:292
1199699572,8cyclictest321ktimersoftd/212:20:242
1199699572,8cyclictest321ktimersoftd/211:30:152
1199699572,8cyclictest321ktimersoftd/209:55:002
1199699572,7cyclictest321ktimersoftd/209:15:162
11996995725,9cyclictest33-21ksoftirqd/211:04:482
1199499577,8cyclictest9-21ksoftirqd/008:20:250
1199499576,9cyclictest9-21ksoftirqd/009:55:330
11994995750,4cyclictest9-21ksoftirqd/011:20:050
1199499574,7cyclictest9-21ksoftirqd/008:55:300
1199499573,7cyclictest9-21ksoftirqd/010:45:120
1199499573,10cyclictest0-21swapper/009:50:180
1199699564,7cyclictest321ktimersoftd/211:15:202
1199699564,6cyclictest321ktimersoftd/211:35:342
1199699564,6cyclictest321ktimersoftd/210:05:262
1199499566,10cyclictest9-21ksoftirqd/009:35:140
1199699555,7cyclictest33-21ksoftirqd/210:50:182
1199699554,6cyclictest321ktimersoftd/209:30:152
1199699553,6cyclictest33-21ksoftirqd/210:40:162
1199699550,8cyclictest321ktimersoftd/208:00:312
1199499554,7cyclictest9-21ksoftirqd/008:28:000
1199499552,5cyclictest0-21swapper/012:00:360
1199499552,5cyclictest0-21swapper/012:00:350
1199499551,7cyclictest9-21ksoftirqd/007:30:170
1199499551,7cyclictest9-21ksoftirqd/007:30:170
1199499545,10cyclictest0-21swapper/009:49:160
11994995448,3cyclictest111rcuc/011:55:130
1199499543,7cyclictest9-21ksoftirqd/011:17:130
1199499543,6cyclictest9-21ksoftirqd/009:30:310
11994995435,5cyclictest9-21ksoftirqd/009:20:180
1199499543,10cyclictest9-21ksoftirqd/012:20:240
825591530,1ptp4l401ktimersoftd/311:31:263
1199499536,6cyclictest375-21sshd12:29:410
1199499534,6cyclictest9-21ksoftirqd/011:05:290
11997995245,4cyclictest41-21ksoftirqd/310:50:003
1199699522,6cyclictest321ktimersoftd/210:15:112
1199499526,8cyclictest9-21ksoftirqd/008:15:220
1199499526,10cyclictest9-21ksoftirqd/007:19:060
1199499525,9cyclictest9-21ksoftirqd/011:25:150
11994995234,8cyclictest9-21ksoftirqd/009:40:210
1199499517,7cyclictest9-21ksoftirqd/007:35:260
1199499517,4cyclictest9-21ksoftirqd/011:30:170
1199499516,4cyclictest9-21ksoftirqd/007:40:270
1199499514,7cyclictest9-21ksoftirqd/010:25:220
11997995044,3cyclictest41-21ksoftirqd/312:40:013
11997995044,3cyclictest41-21ksoftirqd/309:35:013
11997995043,4cyclictest41-21ksoftirqd/310:35:013
11997995039,6cyclictest41-21ksoftirqd/311:45:173
11997995039,6cyclictest41-21ksoftirqd/308:35:123
1199699502,5cyclictest0-21swapper/210:20:142
1199499501,6cyclictest101ktimersoftd/011:40:260
11997994944,3cyclictest41-21ksoftirqd/308:54:593
11997994944,3cyclictest41-21ksoftirqd/308:45:003
11997994942,4cyclictest41-21ksoftirqd/309:49:593
1199499497,9cyclictest9-21ksoftirqd/009:05:160
1199499494,9cyclictest9-21ksoftirqd/008:10:180
11997994842,4cyclictest41-21ksoftirqd/311:00:313
11997994842,4cyclictest41-21ksoftirqd/307:40:013
11997994841,4cyclictest41-21ksoftirqd/311:20:013
11997994841,4cyclictest41-21ksoftirqd/307:55:003
1199799480,5cyclictest41-21ksoftirqd/307:29:593
825591470,1ptp4l401ktimersoftd/312:20:223
11997994742,3cyclictest41-21ksoftirqd/307:45:003
11997994741,4cyclictest41-21ksoftirqd/311:55:003
11997994741,3cyclictest41-21ksoftirqd/311:00:013
11997994741,3cyclictest41-21ksoftirqd/308:00:003
11997994740,4cyclictest41-21ksoftirqd/310:55:003
11997994736,5cyclictest41-21ksoftirqd/312:25:153
11997994641,3cyclictest41-21ksoftirqd/309:40:003
11997994641,3cyclictest41-21ksoftirqd/309:05:003
11997994641,3cyclictest41-21ksoftirqd/309:05:003
11997994640,3cyclictest41-21ksoftirqd/311:45:003
11997994639,4cyclictest41-21ksoftirqd/310:40:003
11997994639,4cyclictest41-21ksoftirqd/310:30:003
11997994639,4cyclictest41-21ksoftirqd/308:30:243
11997994623,6cyclictest41-21ksoftirqd/311:10:183
11997994540,3cyclictest41-21ksoftirqd/310:05:003
1199799453,9cyclictest41-21ksoftirqd/308:20:243
11997994539,4cyclictest41-21ksoftirqd/310:45:003
11997994539,3cyclictest41-21ksoftirqd/309:55:003
11997994539,3cyclictest41-21ksoftirqd/309:00:003
11997994538,4cyclictest41-21ksoftirqd/308:10:123
11997994532,7cyclictest41-21ksoftirqd/311:25:113
11997994439,4cyclictest41-21ksoftirqd/311:20:133
11997994438,3cyclictest41-21ksoftirqd/312:30:223
11997994438,3cyclictest41-21ksoftirqd/308:05:013
11997994437,4cyclictest41-21ksoftirqd/309:20:143
11997994433,5cyclictest41-21ksoftirqd/311:55:113
11997994432,6cyclictest41-21ksoftirqd/308:15:133
825591430,1ptp4l401ktimersoftd/309:25:193
11997994338,3cyclictest41-21ksoftirqd/310:10:003
11997994338,3cyclictest41-21ksoftirqd/309:10:013
11997994329,11cyclictest41-21ksoftirqd/307:30:303
11997994329,11cyclictest41-21ksoftirqd/307:30:293
11997994328,11cyclictest41-21ksoftirqd/312:15:183
57698420,4rtkit-daemon21620-21df12:05:201
11997994235,4cyclictest41-21ksoftirqd/308:25:303
1199799421,5cyclictest41-21ksoftirqd/309:40:343
11995994236,4cyclictest25-21ksoftirqd/110:49:091
57698410,2rtkit-daemon0-21swapper/108:24:171
11997994136,3cyclictest41-21ksoftirqd/307:10:203
11997994135,3cyclictest41-21ksoftirqd/310:20:233
11997994135,3cyclictest41-21ksoftirqd/310:00:003
11997994135,3cyclictest41-21ksoftirqd/309:20:003
11997994135,3cyclictest41-21ksoftirqd/308:10:013
11997994134,4cyclictest41-21ksoftirqd/312:00:223
11997994134,4cyclictest41-21ksoftirqd/312:00:213
1199599410,33cyclictest7161-21kworker/1:211:27:321
11997994035,3cyclictest41-21ksoftirqd/312:10:153
11997994034,4cyclictest41-21ksoftirqd/310:10:153
11995994033,4cyclictest25-21ksoftirqd/110:40:121
11995994033,4cyclictest25-21ksoftirqd/109:38:271
11997993932,4cyclictest41-21ksoftirqd/311:10:013
11995993933,3cyclictest25-21ksoftirqd/112:39:391
11995993933,3cyclictest25-21ksoftirqd/107:45:381
11995993932,4cyclictest25-21ksoftirqd/112:18:231
11995993932,4cyclictest25-21ksoftirqd/107:55:041
11995993832,4cyclictest25-21ksoftirqd/110:21:391
11995993831,5cyclictest25-21ksoftirqd/109:24:361
11995993831,4cyclictest25-21ksoftirqd/112:34:031
11995993831,4cyclictest25-21ksoftirqd/112:13:361
11995993831,4cyclictest25-21ksoftirqd/110:16:351
11995993831,4cyclictest25-21ksoftirqd/109:30:051
11995993831,4cyclictest25-21ksoftirqd/107:53:241
11995993830,5cyclictest25-21ksoftirqd/107:27:551
11995993732,3cyclictest25-21ksoftirqd/112:23:401
11995993731,4cyclictest25-21ksoftirqd/107:14:551
11995993731,3cyclictest25-21ksoftirqd/109:50:351
11995993730,5cyclictest25-21ksoftirqd/109:11:481
11995993730,4cyclictest25-21ksoftirqd/111:02:421
11995993730,4cyclictest25-21ksoftirqd/108:33:121
11995993730,4cyclictest25-21ksoftirqd/108:11:101
11995993730,4cyclictest25-21ksoftirqd/107:42:241
11995993729,5cyclictest25-21ksoftirqd/112:26:491
11995993630,4cyclictest25-21ksoftirqd/108:08:571
11995993630,3cyclictest25-21ksoftirqd/109:18:591
11995993630,3cyclictest25-21ksoftirqd/108:27:471
11995993629,4cyclictest25-21ksoftirqd/109:26:001
11995993629,4cyclictest25-21ksoftirqd/108:57:231
11995993629,4cyclictest25-21ksoftirqd/107:20:001
11995993628,5cyclictest25-21ksoftirqd/112:01:521
11995993628,5cyclictest25-21ksoftirqd/112:01:521
11995993628,5cyclictest25-21ksoftirqd/108:49:111
11995993530,3cyclictest25-21ksoftirqd/107:39:091
11995993529,4cyclictest25-21ksoftirqd/110:11:291
11995993529,4cyclictest25-21ksoftirqd/108:19:561
11995993529,3cyclictest25-21ksoftirqd/111:13:131
11995993529,3cyclictest25-21ksoftirqd/109:06:221
11995993529,3cyclictest25-21ksoftirqd/108:38:551
11995993528,4cyclictest25-21ksoftirqd/111:44:171
11995993528,4cyclictest25-21ksoftirqd/111:34:541
11995993528,4cyclictest25-21ksoftirqd/111:21:131
11995993528,4cyclictest25-21ksoftirqd/110:50:391
11995993528,4cyclictest25-21ksoftirqd/110:06:351
11995993528,4cyclictest25-21ksoftirqd/109:44:311
11995993528,4cyclictest25-21ksoftirqd/109:02:151
11995993528,4cyclictest25-21ksoftirqd/109:02:141
11995993528,4cyclictest25-21ksoftirqd/108:54:401
11995993527,5cyclictest25-21ksoftirqd/109:57:431
11995993429,3cyclictest25-21ksoftirqd/111:57:051
11995993427,5cyclictest25-21ksoftirqd/110:33:251
11995993427,4cyclictest25-21ksoftirqd/110:55:111
11995993427,4cyclictest25-21ksoftirqd/108:44:171
11995993426,5cyclictest25-21ksoftirqd/111:09:171
11995993327,4cyclictest25-21ksoftirqd/111:17:401
11995993327,4cyclictest25-21ksoftirqd/110:35:051
11995993326,4cyclictest25-21ksoftirqd/107:22:361
11995993226,4cyclictest25-21ksoftirqd/107:33:251
11995993226,4cyclictest25-21ksoftirqd/107:33:241
11995993225,4cyclictest25-21ksoftirqd/111:50:151
11995993125,3cyclictest25-21ksoftirqd/108:03:141
57698300,2rtkit-daemon0-21swapper/110:26:401
11995993023,4cyclictest25-21ksoftirqd/109:47:561
11995992821,4cyclictest25-21ksoftirqd/111:35:101
11995992619,5cyclictest25-21ksoftirqd/111:49:441
11995992417,4cyclictest25-21ksoftirqd/110:00:141
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional