You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-07-03 - 08:01

x86 Intel Atom E3845 @1910 MHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #3
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot3.osadl.org (updated Mon Mar 07, 2022 12:46:05)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
151521810,8sleep33230499cyclictest11:10:153
1875421590,8sleep03230199cyclictest08:50:190
12829110180,9phc2sys0-21swapper/307:08:493
12829110180,9phc2sys0-21swapper/307:08:493
170812770,7sleep13230299cyclictest10:10:111
3094426944,10sleep20-21swapper/207:05:292
3094426944,10sleep20-21swapper/207:05:292
306512680,3sleep10-21swapper/109:05:191
3230199570,3cyclictest0-21swapper/010:35:190
3230199561,3cyclictest0-21swapper/007:15:170
32302995447,4cyclictest25-21ksoftirqd/107:40:171
32302995346,4cyclictest25-21ksoftirqd/109:10:171
20732530,2sleep30-21swapper/309:10:183
32302995246,3cyclictest25-21ksoftirqd/109:30:171
32302995244,3cyclictest25-21ksoftirqd/108:55:161
32302995144,4cyclictest25-21ksoftirqd/107:30:181
32302995044,4cyclictest25-21ksoftirqd/108:15:181
32302995042,4cyclictest25-21ksoftirqd/108:30:161
32302995042,4cyclictest25-21ksoftirqd/108:30:161
3230499493,38cyclictest5805-21apt-get10:35:183
32303994943,4cyclictest33-21ksoftirqd/212:30:182
3230499482,39cyclictest0-21swapper/308:55:163
3230499472,38cyclictest30181-21apt-get08:25:173
32302994741,3cyclictest25-21ksoftirqd/108:20:211
62952462,4sleep233-21ksoftirqd/210:35:222
3230499462,40cyclictest16063-21grep08:45:383
3230499462,36cyclictest2020-21apt-get12:30:193
3230399462,13cyclictest1849-21chrt11:50:172
3230499451,36cyclictest14133-21apt-get12:05:183
3230499450,4cyclictest20334-21latency_hist11:35:013
3230399453,11cyclictest5381-21sed07:15:172
32302994539,3cyclictest25-21ksoftirqd/109:35:171
32302994531,3cyclictest25-21ksoftirqd/107:25:181
3230199450,3cyclictest121rcu_preempt07:40:180
3170024515,19sleep10-21swapper/107:05:571
3170024515,19sleep10-21swapper/107:05:571
3230499443,33cyclictest30177-21apt-get11:05:183
3230499443,33cyclictest30177-21apt-get11:05:183
3230499441,36cyclictest21835-21apt-get07:35:173
3230399444,9cyclictest0-21swapper/211:30:312
3230399442,13cyclictest1883-21sort10:30:182
32302994438,4cyclictest25-21ksoftirqd/108:50:201
32302994436,4cyclictest25-21ksoftirqd/107:35:161
56698430,3rtkit-daemon565-21rtkit-daemon11:56:061
56698430,3rtkit-daemon565-21rtkit-daemon11:13:581
3230499431,36cyclictest26166-21apt-get09:00:183
32303994324,16cyclictest33-21ksoftirqd/208:37:412
32302994337,3cyclictest25-21ksoftirqd/112:00:211
32302994337,3cyclictest25-21ksoftirqd/108:05:171
3178024313,19sleep00-21swapper/007:06:570
3178024313,19sleep00-21swapper/007:06:570
3230499423,33cyclictest25879-21apt-get07:40:183
3230499422,32cyclictest30355-21apt-get12:25:183
3230499422,32cyclictest29897-21apt-get07:45:173
32302994235,4cyclictest25-21ksoftirqd/110:00:191
3230499413,33cyclictest18187-21apt-get08:50:173
3230499412,32cyclictest9904-21apt-get09:20:173
3230499412,32cyclictest17634-21apt-get08:10:173
32304994115,23cyclictest10922-21iostat12:00:293
3230499411,34cyclictest9576-21acpi08:00:173
3230499411,34cyclictest5577-21apt-get07:55:173
3230499411,34cyclictest22485-21apt-get11:35:213
3230499411,33cyclictest1428-21apt-get07:50:163
32302994135,4cyclictest25-21ksoftirqd/110:25:171
32302994135,4cyclictest25-21ksoftirqd/107:50:181
32302994135,3cyclictest25-21ksoftirqd/111:35:121
32302994135,3cyclictest25-21ksoftirqd/111:05:161
32302994135,3cyclictest25-21ksoftirqd/111:05:161
32302994135,3cyclictest25-21ksoftirqd/109:20:211
3230499403,31cyclictest30326-21apt-get10:25:213
3230499403,31cyclictest17894-21apt-get10:10:173
3230499402,33cyclictest26139-21apt-get09:40:183
3230499402,33cyclictest21870-21apt-get08:15:163
3230499402,32cyclictest13692-21apt-get08:05:183
3230499402,31cyclictest22016-21apt-get12:15:173
3230499401,34cyclictest9446-21apt-get07:20:173
3230499401,34cyclictest0-21swapper/309:35:173
3230499401,34cyclictest0-21swapper/309:05:163
3230499401,33cyclictest18266-21apt-get10:50:193
3230499401,32cyclictest5854-21apt-get08:35:173
3230499400,4cyclictest23312-21awk10:15:323
3230399402,11cyclictest17694-21snmpd08:45:182
32302994034,4cyclictest25-21ksoftirqd/112:20:191
32302994034,4cyclictest25-21ksoftirqd/109:55:191
32302994034,4cyclictest25-21ksoftirqd/109:50:201
32302994034,4cyclictest25-21ksoftirqd/109:50:191
32302994034,3cyclictest25-21ksoftirqd/109:45:161
32302994033,4cyclictest25-21ksoftirqd/110:40:191
32302994033,4cyclictest25-21ksoftirqd/110:20:001
32302994033,4cyclictest25-21ksoftirqd/109:40:371
32301994033,4cyclictest9-21ksoftirqd/009:50:000
3230499393,31cyclictest13980-21apt-get09:25:163
3230499392,31cyclictest9890-21apt-get08:40:173
3230499392,31cyclictest2067-21apt-get09:50:193
3230499392,31cyclictest2067-21apt-get09:50:193
3230499392,31cyclictest18359-21apt-get12:10:203
3230499391,33cyclictest0-21swapper/310:40:183
3230499391,32cyclictest30182-21apt-get11:45:173
32304993912,24cyclictest10363-21cat10:00:223
3230499390,4cyclictest6027-21/usr/sbin/munin09:55:323
3230499390,4cyclictest30076-21/usr/sbin/munin09:45:163
3230499390,3cyclictest16001-21cut07:30:013
3230499390,2cyclictest0-21swapper/309:15:123
3230299398,9cyclictest25-21ksoftirqd/110:35:321
32302993931,4cyclictest25-21ksoftirqd/112:30:231
32302993928,9cyclictest25-21ksoftirqd/112:15:341
32302993926,4cyclictest25-21ksoftirqd/107:15:001
32302993926,4cyclictest25-21ksoftirqd/107:15:001
32301993932,4cyclictest9-21ksoftirqd/012:40:000
3230199392,4cyclictest121rcu_preempt08:55:180
3230499384,27cyclictest5862-21apt-get11:55:173
3230499383,30cyclictest26527-21apt-get11:40:243
3230499383,29cyclictest1846-21apt-get11:50:173
3230499382,30cyclictest13918-21apt-get10:45:193
3230499382,30cyclictest1338-21apt-get07:10:173
3230499382,30cyclictest1338-21apt-get07:10:173
32304993814,21cyclictest26219-21strings10:20:193
3230499381,32cyclictest0-21swapper/312:35:163
3230499381,30cyclictest26077-21apt-get11:00:173
3230499381,30cyclictest26077-21apt-get11:00:173
32304993810,25cyclictest328-21cat08:30:053
32304993810,25cyclictest328-21cat08:30:053
3230499380,4cyclictest12734-21irqstats10:05:093
3230499380,2cyclictest0-21swapper/311:20:123
32302993832,3cyclictest25-21ksoftirqd/108:40:191
32302993831,4cyclictest25-21ksoftirqd/112:10:101
32302993826,10cyclictest25-21ksoftirqd/108:10:361
32301993832,4cyclictest9-21ksoftirqd/010:54:590
32301993832,4cyclictest9-21ksoftirqd/009:55:290
32301993831,4cyclictest9-21ksoftirqd/008:15:200
56698370,2rtkit-daemon565-21rtkit-daemon09:51:350
56698370,2rtkit-daemon565-21rtkit-daemon09:51:350
32304993712,22cyclictest20374-21latency_hist09:35:003
32304993712,22cyclictest13538-21df_abs11:25:143
3230499370,4cyclictest22006-21swap10:55:173
3230499370,2cyclictest0-21swapper/310:30:203
3230499370,2cyclictest0-21swapper/307:20:003
32302993732,3cyclictest25-21ksoftirqd/109:25:411
32302993732,3cyclictest25-21ksoftirqd/107:20:011
32302993731,4cyclictest25-21ksoftirqd/111:30:101
32302993731,3cyclictest25-21ksoftirqd/112:25:191
32302993731,3cyclictest25-21ksoftirqd/110:30:181
32302993730,4cyclictest25-21ksoftirqd/109:15:171
32302993730,4cyclictest25-21ksoftirqd/109:00:201
32302993730,3cyclictest25-21ksoftirqd/111:45:161
32302993724,4cyclictest25-21ksoftirqd/108:00:101
32302993722,4cyclictest25-21ksoftirqd/108:35:261
32301993732,3cyclictest9-21ksoftirqd/011:10:190
32301993731,4cyclictest9-21ksoftirqd/010:30:110
32301993731,4cyclictest9-21ksoftirqd/009:35:160
32301993730,4cyclictest9-21ksoftirqd/009:05:180
300652370,9sleep13230299cyclictest08:25:161
48592360,6sleep13230299cyclictest12:35:081
3230499369,24cyclictest17959-21expr07:30:183
3230499367,25cyclictest6105-21cat11:15:213
3230399367,27cyclictest14414-21kworker/2:009:40:162
3230299368,8cyclictest25-21ksoftirqd/112:05:071
32302993630,4cyclictest25-21ksoftirqd/111:00:291
32302993630,4cyclictest25-21ksoftirqd/111:00:291
32302993630,4cyclictest25-21ksoftirqd/110:50:121
32302993630,4cyclictest25-21ksoftirqd/108:45:171
32302993630,4cyclictest25-21ksoftirqd/107:50:001
32302993630,3cyclictest25-21ksoftirqd/111:20:151
32302993629,4cyclictest25-21ksoftirqd/111:50:111
32302993629,4cyclictest25-21ksoftirqd/110:05:151
32302993629,4cyclictest25-21ksoftirqd/107:55:171
3230199364,3cyclictest9-21ksoftirqd/008:20:190
32301993631,3cyclictest9-21ksoftirqd/008:40:150
32301993630,4cyclictest9-21ksoftirqd/010:45:280
32301993630,4cyclictest9-21ksoftirqd/010:10:010
32301993629,4cyclictest9-21ksoftirqd/012:19:590
32301993629,4cyclictest9-21ksoftirqd/012:05:170
3230499359,23cyclictest26508-21cat08:20:223
3230499350,2cyclictest0-21swapper/312:25:003
32303993529,4cyclictest33-21ksoftirqd/211:09:382
32303993529,4cyclictest33-21ksoftirqd/211:09:372
32303993528,4cyclictest33-21ksoftirqd/207:55:182
3230399350,33cyclictest14414-21kworker/2:008:54:162
32302993530,3cyclictest25-21ksoftirqd/110:55:231
32302993529,3cyclictest25-21ksoftirqd/111:15:111
32302993529,3cyclictest25-21ksoftirqd/110:45:191
32302993528,4cyclictest25-21ksoftirqd/111:40:331
32302993523,4cyclictest25-21ksoftirqd/107:20:061
32301993530,3cyclictest9-21ksoftirqd/011:20:000
32301993530,3cyclictest9-21ksoftirqd/009:20:000
32301993529,4cyclictest9-21ksoftirqd/011:05:190
32301993529,4cyclictest9-21ksoftirqd/011:05:180
32301993529,4cyclictest9-21ksoftirqd/007:20:050
32301993529,3cyclictest9-21ksoftirqd/010:40:180
32301993529,3cyclictest9-21ksoftirqd/009:30:200
32301993529,3cyclictest9-21ksoftirqd/007:30:180
32301993528,4cyclictest9-21ksoftirqd/010:15:140
3230199350,7cyclictest121rcu_preempt10:56:370
32303993427,4cyclictest33-21ksoftirqd/209:06:462
32302993429,3cyclictest25-21ksoftirqd/111:25:201
32302993428,4cyclictest25-21ksoftirqd/110:20:101
32301993429,3cyclictest9-21ksoftirqd/008:10:190
32301993429,3cyclictest2205-21kworker/0:108:30:100
32301993429,3cyclictest2205-21kworker/0:108:30:100
32301993428,4cyclictest9-21ksoftirqd/012:10:190
32301993428,4cyclictest9-21ksoftirqd/011:25:110
32301993428,4cyclictest9-21ksoftirqd/008:00:190
32301993428,3cyclictest9-21ksoftirqd/012:25:010
32301993428,3cyclictest9-21ksoftirqd/009:20:160
32301993428,3cyclictest9-21ksoftirqd/008:05:260
32301993427,4cyclictest9-21ksoftirqd/012:00:160
32301993427,4cyclictest9-21ksoftirqd/011:20:110
32301993427,4cyclictest9-21ksoftirqd/009:00:190
32301993427,4cyclictest9-21ksoftirqd/007:55:140
3230199341,6cyclictest25380-21cpuspeed_turbos09:40:110
32303993327,4cyclictest33-21ksoftirqd/209:21:382
32303993326,4cyclictest33-21ksoftirqd/210:46:232
32303993326,4cyclictest33-21ksoftirqd/208:57:072
32303993326,4cyclictest33-21ksoftirqd/208:44:222
32303993326,4cyclictest33-21ksoftirqd/207:53:032
32303993311,20cyclictest18355-21kworker/2:012:20:462
32301993328,3cyclictest9-21ksoftirqd/008:35:170
32301993328,3cyclictest9-21ksoftirqd/007:25:130
32301993327,4cyclictest9-21ksoftirqd/007:50:260
32301993327,3cyclictest9-21ksoftirqd/012:30:150
32301993327,3cyclictest9-21ksoftirqd/011:35:010
32301993326,4cyclictest9-21ksoftirqd/010:00:190
32301993326,4cyclictest13254-21head08:45:110
3230199332,4cyclictest9-21ksoftirqd/010:20:080
309982330,6sleep231000-21fschecks_time11:45:322
32303993226,4cyclictest33-21ksoftirqd/207:14:382
32303993226,4cyclictest33-21ksoftirqd/207:14:372
32303993226,3cyclictest33-21ksoftirqd/210:19:102
32303993226,3cyclictest33-21ksoftirqd/207:44:392
32303993225,4cyclictest33-21ksoftirqd/212:39:002
32303993224,5cyclictest33-21ksoftirqd/209:51:492
32303993224,5cyclictest33-21ksoftirqd/209:51:492
32303993224,5cyclictest33-21ksoftirqd/209:37:002
3230199325,4cyclictest9-21ksoftirqd/007:35:120
32301993227,3cyclictest9-21ksoftirqd/011:45:130
32301993227,3cyclictest9-21ksoftirqd/009:25:040
32301993226,4cyclictest9-21ksoftirqd/012:25:270
32301993226,4cyclictest9-21ksoftirqd/009:10:110
32301993226,4cyclictest9-21ksoftirqd/007:45:180
32301993225,4cyclictest9-21ksoftirqd/011:53:010
32301993225,4cyclictest9-21ksoftirqd/011:35:050
32301993225,4cyclictest9-21ksoftirqd/010:10:150
32303993125,3cyclictest33-21ksoftirqd/211:21:402
32303993125,3cyclictest33-21ksoftirqd/207:26:072
32303993124,4cyclictest33-21ksoftirqd/211:16:562
32303993124,4cyclictest33-21ksoftirqd/210:26:092
32303993124,4cyclictest33-21ksoftirqd/210:07:532
32303993124,4cyclictest33-21ksoftirqd/209:58:372
32303993124,4cyclictest33-21ksoftirqd/208:30:062
32303993124,4cyclictest33-21ksoftirqd/208:30:062
32301993126,3cyclictest9-21ksoftirqd/011:45:000
32301993125,4cyclictest9-21ksoftirqd/007:10:270
32301993125,4cyclictest9-21ksoftirqd/007:10:270
32303993024,3cyclictest33-21ksoftirqd/209:17:592
32303993024,3cyclictest33-21ksoftirqd/208:05:012
32303993023,4cyclictest33-21ksoftirqd/211:58:442
32303993023,4cyclictest33-21ksoftirqd/211:03:512
32303993023,4cyclictest33-21ksoftirqd/211:03:512
32303993023,4cyclictest33-21ksoftirqd/210:01:452
32303993023,4cyclictest33-21ksoftirqd/209:28:322
32303993023,4cyclictest33-21ksoftirqd/209:14:272
32303993023,4cyclictest33-21ksoftirqd/208:24:182
32303993023,4cyclictest33-21ksoftirqd/208:18:102
32303993022,5cyclictest33-21ksoftirqd/211:26:282
32303993022,5cyclictest33-21ksoftirqd/211:14:412
32301993025,3cyclictest9-21ksoftirqd/011:00:100
32301993025,3cyclictest9-21ksoftirqd/011:00:100
32303992923,4cyclictest33-21ksoftirqd/212:09:022
32303992922,4cyclictest33-21ksoftirqd/210:57:492
32303992921,5cyclictest33-21ksoftirqd/212:01:262
32303992921,5cyclictest33-21ksoftirqd/207:37:402
32301992924,3cyclictest9-21ksoftirqd/011:55:360
32301992924,3cyclictest9-21ksoftirqd/010:25:100
32301992923,4cyclictest9-21ksoftirqd/008:25:320
32303992822,4cyclictest33-21ksoftirqd/212:14:242
32303992822,4cyclictest33-21ksoftirqd/208:11:312
32303992822,4cyclictest33-21ksoftirqd/207:49:072
32303992821,4cyclictest33-21ksoftirqd/212:26:272
32303992821,4cyclictest33-21ksoftirqd/210:52:032
32303992821,4cyclictest33-21ksoftirqd/210:22:512
32303992821,4cyclictest33-21ksoftirqd/208:29:022
32303992821,4cyclictest33-21ksoftirqd/208:01:282
32303992821,4cyclictest33-21ksoftirqd/207:23:222
32303992820,5cyclictest33-21ksoftirqd/212:16:502
3109422820,4sleep233-21ksoftirqd/209:45:282
32303992721,3cyclictest33-21ksoftirqd/209:03:042
32303992720,4cyclictest33-21ksoftirqd/211:36:162
32303992720,4cyclictest33-21ksoftirqd/209:30:092
32303992719,5cyclictest33-21ksoftirqd/210:11:482
32303992620,4cyclictest33-21ksoftirqd/210:43:332
32303992619,4cyclictest33-21ksoftirqd/207:34:052
32303992517,5cyclictest28129-21unixbench_singl11:40:492
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional