You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-01-28 - 07:04

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Sat Jan 28, 2023 00:46:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1919222080,8sleep00-21swapper/019:05:260
3255321570,5sleep32051299cyclictest00:10:133
452921540,7sleep22051199cyclictest22:00:302
564981520,10rtkit-daemon563-21rtkit-daemon19:06:512
1299911210,47ptp4l41-21ksoftirqd/319:06:043
129991850,1ptp4l401ktimersoftd/321:56:233
2014527857,9sleep10-21swapper/119:08:591
129991690,2ptp4l401ktimersoftd/323:50:243
97592650,5sleep39762-21unixbench_multi22:10:343
97592650,5sleep39762-21unixbench_multi22:10:343
2051199579,5cyclictest33-21ksoftirqd/223:00:322
20510995346,4cyclictest28510-21cron21:45:001
20509995345,5cyclictest10819-21cron23:25:000
20512994942,4cyclictest41-21ksoftirqd/322:50:013
20512994942,4cyclictest41-21ksoftirqd/319:50:013
1298914942,3phc2sys41-21ksoftirqd/323:30:263
20510994735,10cyclictest25-21ksoftirqd/120:00:171
20512994640,3cyclictest41-21ksoftirqd/323:10:003
20512994639,4cyclictest41-21ksoftirqd/323:40:003
20512994639,4cyclictest41-21ksoftirqd/320:35:013
321332450,2sleep032136-21grep20:40:300
321332450,2sleep032136-21grep20:40:300
20512994539,4cyclictest41-21ksoftirqd/300:00:013
20511994538,4cyclictest33-21ksoftirqd/219:36:342
20511994527,6cyclictest33-21ksoftirqd/222:52:192
20509994539,4cyclictest9-21ksoftirqd/021:40:000
20512994438,4cyclictest41-21ksoftirqd/321:40:003
20512994438,3cyclictest41-21ksoftirqd/322:55:003
20511994437,4cyclictest33-21ksoftirqd/223:15:112
20510994431,10cyclictest25-21ksoftirqd/123:11:191
2051099440,11cyclictest4123-21taskset19:42:551
20509994438,4cyclictest9-21ksoftirqd/020:25:340
129991440,1ptp4l401ktimersoftd/320:49:103
129991440,1ptp4l401ktimersoftd/320:49:103
129991440,1ptp4l401ktimersoftd/320:10:263
20512994333,8cyclictest41-21ksoftirqd/321:11:563
20511994337,4cyclictest33-21ksoftirqd/221:50:332
2051199432,7cyclictest33-21ksoftirqd/220:39:462
20510994338,3cyclictest25-21ksoftirqd/121:26:581
20510994336,4cyclictest25-21ksoftirqd/123:02:521
129991430,20ptp4l401ktimersoftd/323:45:133
129991430,1ptp4l401ktimersoftd/300:35:253
20512994236,4cyclictest41-21ksoftirqd/323:25:293
20512994235,4cyclictest41-21ksoftirqd/322:30:113
20512994234,4cyclictest41-21ksoftirqd/319:37:583
20511994224,4cyclictest33-21ksoftirqd/221:11:462
2051199421,7cyclictest33-21ksoftirqd/219:48:152
20510994237,3cyclictest25-21ksoftirqd/120:05:161
20509994236,3cyclictest9-21ksoftirqd/021:34:200
20509994236,3cyclictest9-21ksoftirqd/021:02:290
20509994236,3cyclictest9-21ksoftirqd/020:23:140
20509994236,3cyclictest9-21ksoftirqd/019:13:290
20509994235,4cyclictest13948-21idleruntime-cro00:40:000
20512994135,4cyclictest41-21ksoftirqd/322:20:003
20512994135,4cyclictest41-21ksoftirqd/319:30:253
20512994134,4cyclictest41-21ksoftirqd/300:18:373
20511994136,3cyclictest33-21ksoftirqd/200:19:342
20511994135,4cyclictest33-21ksoftirqd/223:08:462
20511994134,4cyclictest33-21ksoftirqd/200:31:362
20511994133,5cyclictest33-21ksoftirqd/200:25:132
20511994112,7cyclictest33-21ksoftirqd/220:30:312
20509994135,3cyclictest9-21ksoftirqd/019:32:440
20509994134,4cyclictest9-21ksoftirqd/000:31:250
20512994034,4cyclictest41-21ksoftirqd/322:05:003
20512994033,4cyclictest41-21ksoftirqd/321:18:233
20512994033,4cyclictest41-21ksoftirqd/319:25:003
20512994033,4cyclictest41-21ksoftirqd/319:25:003
20512994032,5cyclictest41-21ksoftirqd/323:44:483
20512994032,5cyclictest41-21ksoftirqd/323:44:483
20511994034,4cyclictest33-21ksoftirqd/221:15:152
20511994034,3cyclictest33-21ksoftirqd/221:05:162
20511994033,4cyclictest33-21ksoftirqd/222:25:142
20510994035,3cyclictest25-21ksoftirqd/120:22:341
20510994033,4cyclictest25-21ksoftirqd/121:55:501
20509994034,4cyclictest9-21ksoftirqd/000:03:260
20509994034,3cyclictest9-21ksoftirqd/022:18:450
20509994034,3cyclictest9-21ksoftirqd/021:23:000
20509994034,3cyclictest9-21ksoftirqd/019:59:290
20509994034,3cyclictest9-21ksoftirqd/000:27:590
20509994033,4cyclictest9-21ksoftirqd/022:44:460
20509994033,4cyclictest9-21ksoftirqd/020:57:390
20509994033,4cyclictest9-21ksoftirqd/019:53:090
20509994032,5cyclictest9-21ksoftirqd/021:12:210
20512993933,4cyclictest41-21ksoftirqd/322:08:463
20512993933,3cyclictest41-21ksoftirqd/319:30:003
20512993932,4cyclictest41-21ksoftirqd/322:55:143
20512993932,4cyclictest41-21ksoftirqd/322:40:133
20512993932,4cyclictest41-21ksoftirqd/321:21:483
20512993932,4cyclictest41-21ksoftirqd/320:07:343
20512993932,4cyclictest41-21ksoftirqd/319:51:403
20512993932,4cyclictest41-21ksoftirqd/300:30:103
20511993933,4cyclictest33-21ksoftirqd/223:50:132
20511993933,4cyclictest33-21ksoftirqd/220:05:142
20511993932,4cyclictest33-21ksoftirqd/222:17:032
20511993932,4cyclictest33-21ksoftirqd/221:55:112
20511993932,4cyclictest33-21ksoftirqd/221:22:242
20511993932,4cyclictest33-21ksoftirqd/219:57:342
20511993932,4cyclictest33-21ksoftirqd/200:07:552
20510993933,4cyclictest25-21ksoftirqd/123:47:061
20510993932,4cyclictest25-21ksoftirqd/121:05:521
20510993932,4cyclictest25-21ksoftirqd/100:26:401
20509993933,4cyclictest9-21ksoftirqd/020:47:330
20509993933,4cyclictest9-21ksoftirqd/020:47:330
20509993933,3cyclictest9-21ksoftirqd/020:37:230
20509993932,4cyclictest9-21ksoftirqd/022:20:590
20509993932,4cyclictest9-21ksoftirqd/020:52:070
20509993932,4cyclictest9-21ksoftirqd/019:45:120
20509993932,4cyclictest9-21ksoftirqd/019:27:200
20509993932,4cyclictest9-21ksoftirqd/019:18:530
20512993832,4cyclictest41-21ksoftirqd/321:30:243
20512993832,4cyclictest41-21ksoftirqd/321:25:333
20512993832,4cyclictest41-21ksoftirqd/321:02:353
20512993832,3cyclictest41-21ksoftirqd/320:15:583
20512993832,3cyclictest41-21ksoftirqd/319:17:483
20512993831,4cyclictest41-21ksoftirqd/323:20:003
20512993831,4cyclictest41-21ksoftirqd/323:02:283
20512993831,4cyclictest41-21ksoftirqd/320:28:423
20512993831,4cyclictest41-21ksoftirqd/320:04:243
20512993831,4cyclictest41-21ksoftirqd/319:11:093
20512993830,5cyclictest41-21ksoftirqd/320:56:513
2051299380,3cyclictest121rcu_preempt00:00:163
20511993833,3cyclictest33-21ksoftirqd/220:46:202
20511993833,3cyclictest33-21ksoftirqd/220:46:202
20511993832,3cyclictest33-21ksoftirqd/221:33:012
20511993831,4cyclictest33-21ksoftirqd/223:44:592
20511993831,4cyclictest33-21ksoftirqd/223:44:582
20511993831,4cyclictest33-21ksoftirqd/223:21:152
20511993831,4cyclictest33-21ksoftirqd/221:49:582
20511993831,4cyclictest33-21ksoftirqd/220:28:282
20511993826,4cyclictest33-21ksoftirqd/223:12:092
20511993824,4cyclictest33-21ksoftirqd/220:58:372
20511993822,4cyclictest33-21ksoftirqd/221:29:492
20511993821,4cyclictest33-21ksoftirqd/221:02:472
20510993833,3cyclictest25-21ksoftirqd/122:44:591
20510993832,3cyclictest25-21ksoftirqd/123:28:061
20510993832,3cyclictest25-21ksoftirqd/119:29:531
20510993831,4cyclictest25-21ksoftirqd/122:10:191
20510993831,4cyclictest25-21ksoftirqd/122:10:191
20510993831,4cyclictest25-21ksoftirqd/121:36:271
20510993831,4cyclictest25-21ksoftirqd/120:46:061
20510993831,4cyclictest25-21ksoftirqd/120:46:051
20510993831,4cyclictest25-21ksoftirqd/120:39:581
20510993831,4cyclictest25-21ksoftirqd/120:10:421
20510993831,4cyclictest25-21ksoftirqd/119:12:481
20510993831,4cyclictest25-21ksoftirqd/100:32:421
20510993829,6cyclictest25-21ksoftirqd/100:05:051
20509993832,4cyclictest9-21ksoftirqd/022:01:590
20509993832,3cyclictest9-21ksoftirqd/023:27:530
20509993832,3cyclictest9-21ksoftirqd/022:39:300
20509993831,4cyclictest9-21ksoftirqd/023:58:300
20509993831,4cyclictest9-21ksoftirqd/023:48:410
20509993831,4cyclictest9-21ksoftirqd/023:30:590
20509993831,4cyclictest9-21ksoftirqd/023:11:320
20509993831,4cyclictest9-21ksoftirqd/022:08:580
20509993831,4cyclictest9-21ksoftirqd/021:46:380
20509993831,4cyclictest9-21ksoftirqd/021:07:390
20512993731,4cyclictest41-21ksoftirqd/321:10:003
20512993731,4cyclictest41-21ksoftirqd/320:40:293
20512993731,4cyclictest41-21ksoftirqd/320:40:293
20512993731,3cyclictest41-21ksoftirqd/320:50:173
20512993731,3cyclictest41-21ksoftirqd/320:21:483
20512993731,3cyclictest41-21ksoftirqd/300:25:083
20512993730,4cyclictest41-21ksoftirqd/323:13:093
20512993730,4cyclictest41-21ksoftirqd/322:35:553
20512993730,4cyclictest41-21ksoftirqd/322:28:353
20511993731,4cyclictest33-21ksoftirqd/222:45:112
20511993731,4cyclictest33-21ksoftirqd/220:10:122
20511993731,3cyclictest33-21ksoftirqd/220:15:112
20511993731,3cyclictest33-21ksoftirqd/200:10:192
20511993730,4cyclictest33-21ksoftirqd/222:35:582
20511993730,4cyclictest33-21ksoftirqd/219:11:042
20511993719,10cyclictest33-21ksoftirqd/223:37:142
20510993731,4cyclictest25-21ksoftirqd/122:55:131
20510993730,4cyclictest25-21ksoftirqd/123:37:511
20510993730,4cyclictest25-21ksoftirqd/123:20:571
20509993731,4cyclictest9-21ksoftirqd/023:52:360
20509993731,4cyclictest9-21ksoftirqd/022:57:150
20509993731,4cyclictest9-21ksoftirqd/000:24:550
20509993731,3cyclictest9-21ksoftirqd/019:22:090
20509993731,3cyclictest9-21ksoftirqd/019:22:090
20509993730,4cyclictest9-21ksoftirqd/022:52:380
20509993730,4cyclictest9-21ksoftirqd/020:08:190
20509993730,4cyclictest9-21ksoftirqd/000:17:560
20512993631,3cyclictest41-21ksoftirqd/323:20:223
20512993631,3cyclictest41-21ksoftirqd/319:40:243
20512993630,3cyclictest41-21ksoftirqd/321:51:153
20512993629,4cyclictest41-21ksoftirqd/322:23:153
20512993629,4cyclictest41-21ksoftirqd/321:42:403
20511993631,3cyclictest33-21ksoftirqd/200:02:242
20511993630,4cyclictest33-21ksoftirqd/219:53:342
20511993630,3cyclictest33-21ksoftirqd/220:44:362
20511993630,3cyclictest33-21ksoftirqd/220:44:362
20511993629,4cyclictest33-21ksoftirqd/223:59:322
20511993629,4cyclictest33-21ksoftirqd/222:42:202
20511993629,4cyclictest33-21ksoftirqd/222:20:162
20511993629,4cyclictest33-21ksoftirqd/219:40:582
20511993629,4cyclictest33-21ksoftirqd/219:28:472
20510993631,3cyclictest25-21ksoftirqd/121:30:131
20510993630,3cyclictest25-21ksoftirqd/122:22:081
20510993629,4cyclictest25-21ksoftirqd/123:05:441
20510993629,4cyclictest25-21ksoftirqd/122:32:111
20510993629,4cyclictest25-21ksoftirqd/122:15:461
20510993629,4cyclictest25-21ksoftirqd/121:10:231
20510993629,4cyclictest25-21ksoftirqd/121:00:221
20510993629,4cyclictest25-21ksoftirqd/120:33:121
20510993628,5cyclictest25-21ksoftirqd/122:02:321
20509993630,4cyclictest9-21ksoftirqd/019:40:400
20509993630,3cyclictest9-21ksoftirqd/021:52:460
20509993630,3cyclictest9-21ksoftirqd/021:15:550
20509993630,3cyclictest9-21ksoftirqd/019:36:220
20509993629,4cyclictest9-21ksoftirqd/023:19:480
20509993629,4cyclictest9-21ksoftirqd/020:33:440
20509993629,4cyclictest9-21ksoftirqd/020:10:360
20512993528,4cyclictest41-21ksoftirqd/320:00:003
20511993529,4cyclictest33-21ksoftirqd/219:16:342
20510993528,4cyclictest25-21ksoftirqd/123:31:331
20510993528,4cyclictest25-21ksoftirqd/123:15:351
20510993528,4cyclictest25-21ksoftirqd/121:52:541
20510993528,4cyclictest25-21ksoftirqd/121:45:381
20510993528,4cyclictest25-21ksoftirqd/121:22:501
20510993528,4cyclictest25-21ksoftirqd/121:17:401
20510993528,4cyclictest25-21ksoftirqd/120:55:171
20510993528,4cyclictest25-21ksoftirqd/119:45:431
20510993528,4cyclictest25-21ksoftirqd/119:18:061
20510993528,4cyclictest25-21ksoftirqd/100:38:091
20510993528,4cyclictest25-21ksoftirqd/100:13:521
20510993510,6cyclictest25-21ksoftirqd/100:00:401
20509993529,4cyclictest9-21ksoftirqd/023:44:120
20509993529,4cyclictest9-21ksoftirqd/023:44:120
20509993529,4cyclictest9-21ksoftirqd/022:48:410
20509993529,3cyclictest9-21ksoftirqd/021:43:430
20509993528,4cyclictest9-21ksoftirqd/023:06:270
20509993528,4cyclictest9-21ksoftirqd/022:30:540
20509993528,4cyclictest9-21ksoftirqd/022:13:400
20509993528,4cyclictest9-21ksoftirqd/022:13:400
20509993528,4cyclictest9-21ksoftirqd/020:15:420
129991350,1ptp4l401ktimersoftd/320:37:133
20512993427,4cyclictest41-21ksoftirqd/321:49:183
20511993428,4cyclictest33-21ksoftirqd/222:05:162
20511993428,4cyclictest33-21ksoftirqd/219:20:302
20511993428,4cyclictest33-21ksoftirqd/219:20:302
20511993427,4cyclictest33-21ksoftirqd/223:30:012
20511993427,4cyclictest33-21ksoftirqd/223:27:592
20511993427,4cyclictest33-21ksoftirqd/222:35:002
20510993429,3cyclictest25-21ksoftirqd/123:45:001
20510993429,3cyclictest25-21ksoftirqd/123:45:001
20510993428,3cyclictest25-21ksoftirqd/122:29:531
20510993426,3cyclictest25-21ksoftirqd/120:29:551
20509993428,3cyclictest9-21ksoftirqd/023:38:530
20509993427,4cyclictest9-21ksoftirqd/021:25:180
20509993427,4cyclictest9-21ksoftirqd/000:12:230
20512993328,3cyclictest41-21ksoftirqd/300:21:483
20511993328,3cyclictest33-21ksoftirqd/200:23:002
2051199330,7cyclictest33-21ksoftirqd/223:47:392
20510993327,4cyclictest25-21ksoftirqd/123:57:181
20510993327,3cyclictest25-21ksoftirqd/120:16:181
20510993326,4cyclictest25-21ksoftirqd/122:47:361
20510993326,4cyclictest25-21ksoftirqd/120:40:231
20510993326,4cyclictest25-21ksoftirqd/120:40:231
20510993326,4cyclictest25-21ksoftirqd/119:40:001
20509993327,3cyclictest9-21ksoftirqd/000:05:470
20511993226,4cyclictest33-21ksoftirqd/222:55:342
20511993225,4cyclictest33-21ksoftirqd/220:20:292
20510993227,3cyclictest25-21ksoftirqd/122:37:001
20510993225,4cyclictest25-21ksoftirqd/122:05:421
20510993225,4cyclictest25-21ksoftirqd/120:53:201
20510993225,4cyclictest25-21ksoftirqd/119:32:301
20509993225,4cyclictest9-21ksoftirqd/022:25:130
20509993225,4cyclictest9-21ksoftirqd/020:02:290
20511993126,3cyclictest33-21ksoftirqd/220:51:002
20511993125,3cyclictest33-21ksoftirqd/222:12:292
20511993125,3cyclictest33-21ksoftirqd/222:12:292
20512993024,4cyclictest41-21ksoftirqd/300:07:533
20511993025,3cyclictest33-21ksoftirqd/221:41:532
20510993023,4cyclictest25-21ksoftirqd/123:53:391
20510993023,4cyclictest25-21ksoftirqd/100:21:391
20509993025,3cyclictest9-21ksoftirqd/023:01:340
20511992924,3cyclictest33-21ksoftirqd/219:30:222
20511992924,3cyclictest33-21ksoftirqd/200:37:182
20510992923,3cyclictest25-21ksoftirqd/119:56:511
20509992923,3cyclictest9-21ksoftirqd/021:58:220
2051199282,5cyclictest0-21swapper/221:38:282
20511992823,3cyclictest33-21ksoftirqd/220:03:342
20510992822,3cyclictest25-21ksoftirqd/100:18:461
20510992821,4cyclictest25-21ksoftirqd/122:51:221
20510992821,4cyclictest25-21ksoftirqd/119:51:491
20510992721,4cyclictest25-21ksoftirqd/119:24:561
20510992721,4cyclictest25-21ksoftirqd/119:24:551
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional