You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2022-01-23 - 19:56

Intel(R) Atom(TM) CPU E3845 @ 1.91GHz, Linux 4.19.37-rt19 (Profile)

Latency plot of system in rack #d, slot #3
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 --smi -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot3.osadl.org (updated Sun Jan 23, 2022 12:46:12)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2243922110,4sleep10-21swapper/107:05:141
351921710,7sleep02543399cyclictest08:00:230
24835211897,9sleep20-21swapper/207:07:092
1282918810,18phc2sys0-21swapper/307:09:593
250112854,19sleep00-21swapper/007:09:250
125292710,2sleep10-21swapper/108:50:391
284412700,8sleep32543699cyclictest07:50:273
284412700,8sleep32543699cyclictest07:50:263
13582660,2sleep00-21swapper/012:00:010
279122650,2sleep30-21swapper/307:10:243
227162650,3sleep30-21swapper/308:25:123
123591650,8getstats2543699cyclictest12:24:403
157432640,5sleep09-21ksoftirqd/012:15:220
311282600,2sleep00-21swapper/010:35:130
2543499592,7cyclictest18810-21apt-get07:40:131
25434995927,5cyclictest25-21ksoftirqd/110:55:191
123591590,8getstats2543699cyclictest12:34:393
2543499554,8cyclictest241ktimersoftd/107:20:111
2543499552,8cyclictest25-21ksoftirqd/112:35:071
44232540,2sleep10-21swapper/110:00:331
44042540,5sleep3401ktimersoftd/308:40:373
2543499548,9cyclictest25-21ksoftirqd/107:30:091
2543499541,8cyclictest25-21ksoftirqd/108:15:071
56698530,12rtkit-daemon0-21swapper/010:15:390
2543499535,8cyclictest25-21ksoftirqd/108:55:031
2543499530,9cyclictest241ktimersoftd/109:45:391
2543499530,10cyclictest241ktimersoftd/110:40:141
2543499530,10cyclictest241ktimersoftd/108:30:071
2543499527,8cyclictest25-21ksoftirqd/108:20:051
2543499527,8cyclictest25-21ksoftirqd/107:35:301
2543499526,9cyclictest25-21ksoftirqd/107:10:211
2543499526,8cyclictest25-21ksoftirqd/109:50:161
2543499525,7cyclictest4254-21strings09:20:341
2543499522,7cyclictest25-21ksoftirqd/108:40:121
2543499520,10cyclictest241ktimersoftd/110:45:101
2543499517,8cyclictest25-21ksoftirqd/110:20:081
2543499517,8cyclictest25-21ksoftirqd/110:20:081
2543499517,8cyclictest25-21ksoftirqd/109:35:371
2543499517,8cyclictest25-21ksoftirqd/109:05:381
2543499517,8cyclictest25-21ksoftirqd/109:05:371
2543499516,9cyclictest25-21ksoftirqd/111:15:321
2543499516,8cyclictest25-21ksoftirqd/108:25:121
2543499516,8cyclictest25-21ksoftirqd/107:15:241
2543499515,8cyclictest25-21ksoftirqd/111:55:381
2543499514,9cyclictest25-21ksoftirqd/109:15:251
2543499514,8cyclictest25-21ksoftirqd/110:15:351
2543499513,6cyclictest241ktimersoftd/110:25:091
2543499513,6cyclictest241ktimersoftd/110:25:091
2543499512,8cyclictest241ktimersoftd/112:10:001
2543499512,7cyclictest241ktimersoftd/108:05:221
2543499511,7cyclictest25-21ksoftirqd/111:20:021
2543499511,7cyclictest241ktimersoftd/111:35:351
2543499510,8cyclictest241ktimersoftd/109:55:121
2543499507,7cyclictest25-21ksoftirqd/112:00:221
2543499507,7cyclictest25-21ksoftirqd/111:10:161
2543499506,7cyclictest25-21ksoftirqd/112:35:001
2543499506,7cyclictest25-21ksoftirqd/111:00:111
2543499506,7cyclictest25-21ksoftirqd/108:40:001
2543499506,7cyclictest25-21ksoftirqd/107:30:001
2543499505,8cyclictest25-21ksoftirqd/111:50:021
2543499505,4cyclictest25-21ksoftirqd/107:45:171
2543499504,9cyclictest25-21ksoftirqd/112:20:021
2543499500,7cyclictest241ktimersoftd/111:40:071
2543499500,7cyclictest241ktimersoftd/111:40:071
2543499500,7cyclictest241ktimersoftd/108:00:071
2543499500,47cyclictest241ktimersoftd/111:25:211
2543499500,10cyclictest241ktimersoftd/110:05:081
2543499496,9cyclictest25-21ksoftirqd/107:50:111
2543499496,9cyclictest25-21ksoftirqd/107:50:101
2543499496,8cyclictest25-21ksoftirqd/111:30:131
2543499496,10cyclictest25-21ksoftirqd/110:30:201
2543499495,8cyclictest25-21ksoftirqd/110:50:071
2543499495,8cyclictest25-21ksoftirqd/108:10:071
2543499494,7cyclictest25-21ksoftirqd/109:40:041
2543499492,7cyclictest25-21ksoftirqd/111:45:021
2543499491,7cyclictest25-21ksoftirqd/108:45:081
2543499490,7cyclictest25-21ksoftirqd/109:25:121
2543499490,7cyclictest241ktimersoftd/109:05:001
25435994841,4cyclictest33-21ksoftirqd/208:20:202
2543499487,8cyclictest25-21ksoftirqd/109:10:121
2543499486,9cyclictest25-21ksoftirqd/111:05:071
2543499486,7cyclictest25-21ksoftirqd/107:55:301
2543499483,8cyclictest25-21ksoftirqd/109:30:221
25435994740,3cyclictest33-21ksoftirqd/209:35:212
2543499476,7cyclictest25-21ksoftirqd/112:15:041
2543499475,9cyclictest25-21ksoftirqd/110:10:061
25433994742,3cyclictest9-21ksoftirqd/007:50:150
25433994742,3cyclictest9-21ksoftirqd/007:50:140
2543499467,7cyclictest25-21ksoftirqd/112:10:331
2543499463,7cyclictest241ktimersoftd/110:35:341
2543499461,6cyclictest241ktimersoftd/112:25:081
25433994337,4cyclictest9-21ksoftirqd/011:40:280
25433994337,4cyclictest9-21ksoftirqd/011:40:280
25433994337,3cyclictest9-21ksoftirqd/011:00:000
25433994130,6cyclictest9-21ksoftirqd/011:05:130
2543399412,4cyclictest121rcu_preempt09:15:050
25435994031,5cyclictest33-21ksoftirqd/207:40:142
25435994020,6cyclictest33-21ksoftirqd/207:45:152
25433994034,4cyclictest9-21ksoftirqd/009:15:000
25433994033,4cyclictest9-21ksoftirqd/007:35:150
2543399402,4cyclictest9-21ksoftirqd/009:25:120
25435993932,4cyclictest33-21ksoftirqd/209:50:292
25433993933,4cyclictest9-21ksoftirqd/012:05:070
25433993933,4cyclictest9-21ksoftirqd/007:15:300
25433993933,3cyclictest9-21ksoftirqd/011:20:000
25433993933,3cyclictest9-21ksoftirqd/008:50:410
25433993924,12cyclictest9-21ksoftirqd/008:10:230
25435993832,4cyclictest33-21ksoftirqd/211:30:142
25435993831,4cyclictest33-21ksoftirqd/212:05:122
25435993831,4cyclictest33-21ksoftirqd/212:00:072
25435993830,4cyclictest33-21ksoftirqd/208:20:002
25435993829,6cyclictest33-21ksoftirqd/210:55:142
2543399385,4cyclictest9-21ksoftirqd/008:40:260
25433993832,3cyclictest9-21ksoftirqd/012:35:420
25433993831,4cyclictest9-21ksoftirqd/009:30:080
25433993831,4cyclictest9-21ksoftirqd/008:20:010
25433993831,4cyclictest9-21ksoftirqd/007:40:130
2543699370,6cyclictest121rcu_preempt10:20:003
25435993731,4cyclictest33-21ksoftirqd/210:55:012
25435993730,4cyclictest33-21ksoftirqd/211:55:002
25435993730,3cyclictest33-21ksoftirqd/209:10:002
25435993730,3cyclictest33-21ksoftirqd/209:10:002
25435993725,4cyclictest33-21ksoftirqd/208:10:062
25433993732,3cyclictest9-21ksoftirqd/008:10:000
25433993731,4cyclictest9-21ksoftirqd/012:00:120
25433993731,4cyclictest9-21ksoftirqd/011:35:380
25433993731,4cyclictest9-21ksoftirqd/009:20:400
25433993731,4cyclictest9-21ksoftirqd/007:55:080
25433993731,3cyclictest9-21ksoftirqd/010:10:240
25433993730,4cyclictest9-21ksoftirqd/011:50:070
25433993730,4cyclictest9-21ksoftirqd/010:25:130
25433993730,4cyclictest9-21ksoftirqd/010:25:130
25433993730,4cyclictest9-21ksoftirqd/009:05:000
25433993730,4cyclictest9-21ksoftirqd/008:55:370
25433993730,4cyclictest9-21ksoftirqd/007:25:360
2543599363,6cyclictest0-21swapper/211:00:072
25435993629,4cyclictest33-21ksoftirqd/211:25:132
25435993629,4cyclictest33-21ksoftirqd/210:35:012
25433993631,3cyclictest9-21ksoftirqd/009:50:290
25433993631,3cyclictest9-21ksoftirqd/009:40:010
25433993631,3cyclictest9-21ksoftirqd/008:35:090
25433993630,4cyclictest9-21ksoftirqd/010:04:590
25433993630,4cyclictest9-21ksoftirqd/009:55:130
25433993630,3cyclictest9-21ksoftirqd/011:20:160
25433993630,3cyclictest9-21ksoftirqd/010:30:080
25433993630,3cyclictest9-21ksoftirqd/010:05:090
25433993630,3cyclictest9-21ksoftirqd/008:34:590
25433993630,3cyclictest9-21ksoftirqd/007:45:080
25433993629,4cyclictest9-21ksoftirqd/010:25:000
25433993629,4cyclictest9-21ksoftirqd/010:25:000
25433993629,4cyclictest9-21ksoftirqd/008:25:120
25433993629,4cyclictest9-21ksoftirqd/007:30:120
2543399360,3cyclictest121rcu_preempt08:50:000
25436993529,4cyclictest41-21ksoftirqd/309:25:383
25436993527,5cyclictest41-21ksoftirqd/312:07:343
25435993529,4cyclictest33-21ksoftirqd/211:20:302
25435993529,4cyclictest33-21ksoftirqd/209:00:162
25435993528,4cyclictest33-21ksoftirqd/211:05:082
25435993528,4cyclictest33-21ksoftirqd/208:25:162
25433993530,3cyclictest9-21ksoftirqd/008:25:010
25433993529,4cyclictest9-21ksoftirqd/011:10:300
25433993529,3cyclictest9-21ksoftirqd/012:20:110
25433993529,3cyclictest9-21ksoftirqd/010:55:000
25433993529,3cyclictest9-21ksoftirqd/009:40:080
25433993529,3cyclictest9-21ksoftirqd/007:20:080
25433993528,4cyclictest9-21ksoftirqd/012:30:140
25433993528,4cyclictest9-21ksoftirqd/010:40:080
25433993528,4cyclictest9-21ksoftirqd/009:45:020
25433993528,4cyclictest9-21ksoftirqd/009:05:290
25433993528,4cyclictest9-21ksoftirqd/009:05:280
25433993528,4cyclictest9-21ksoftirqd/007:10:150
25433993527,4cyclictest9-21ksoftirqd/011:00:170
2543399350,4cyclictest121rcu_preempt12:15:000
25436993428,4cyclictest41-21ksoftirqd/308:05:313
25436993426,5cyclictest41-21ksoftirqd/310:02:443
25436993426,5cyclictest41-21ksoftirqd/309:07:443
25436993426,5cyclictest41-21ksoftirqd/309:07:433
25435993429,3cyclictest33-21ksoftirqd/212:15:002
25435993429,3cyclictest33-21ksoftirqd/209:25:222
25435993429,3cyclictest33-21ksoftirqd/208:35:072
25435993428,4cyclictest33-21ksoftirqd/209:55:202
25435993428,4cyclictest33-21ksoftirqd/208:05:002
25435993427,5cyclictest33-21ksoftirqd/211:14:102
25435993427,4cyclictest33-21ksoftirqd/210:15:222
25435993427,4cyclictest33-21ksoftirqd/208:05:162
25435993427,4cyclictest33-21ksoftirqd/207:54:042
25435993427,4cyclictest33-21ksoftirqd/207:54:032
25435993418,5cyclictest33-21ksoftirqd/209:15:052
2543399343,6cyclictest121rcu_preempt11:30:070
25433993429,3cyclictest9-21ksoftirqd/011:45:160
25433993428,3cyclictest9-21ksoftirqd/012:25:150
25433993427,4cyclictest9-21ksoftirqd/011:25:060
25433993427,4cyclictest9-21ksoftirqd/010:45:020
25436993327,3cyclictest41-21ksoftirqd/311:11:363
25436993327,3cyclictest41-21ksoftirqd/308:45:203
25436993326,4cyclictest41-21ksoftirqd/312:29:153
25436993326,4cyclictest41-21ksoftirqd/311:49:163
25436993326,4cyclictest41-21ksoftirqd/310:52:583
25436993326,4cyclictest41-21ksoftirqd/310:24:203
25436993326,4cyclictest41-21ksoftirqd/310:24:203
25436993326,4cyclictest41-21ksoftirqd/308:32:423
25436993326,4cyclictest41-21ksoftirqd/307:39:433
25435993328,3cyclictest33-21ksoftirqd/212:30:132
25435993328,3cyclictest33-21ksoftirqd/210:05:152
25435993328,3cyclictest33-21ksoftirqd/209:30:112
25435993327,4cyclictest33-21ksoftirqd/212:25:192
25435993327,4cyclictest33-21ksoftirqd/208:30:032
25435993327,4cyclictest33-21ksoftirqd/207:55:142
25435993327,4cyclictest33-21ksoftirqd/207:25:132
25435993327,3cyclictest33-21ksoftirqd/211:40:132
25435993327,3cyclictest33-21ksoftirqd/211:40:132
25435993327,3cyclictest33-21ksoftirqd/210:10:022
25435993326,4cyclictest33-21ksoftirqd/210:26:402
25435993326,4cyclictest33-21ksoftirqd/210:26:392
25435993326,4cyclictest33-21ksoftirqd/210:00:052
72432320,2sleep30-21swapper/310:45:203
25436993226,4cyclictest41-21ksoftirqd/310:30:513
25436993226,4cyclictest41-21ksoftirqd/309:04:073
25436993226,4cyclictest41-21ksoftirqd/308:36:583
25436993226,3cyclictest41-21ksoftirqd/309:12:103
25436993226,3cyclictest41-21ksoftirqd/308:57:443
25436993225,4cyclictest41-21ksoftirqd/310:06:433
25436993225,4cyclictest41-21ksoftirqd/309:52:483
25436993225,4cyclictest41-21ksoftirqd/308:23:563
25436993225,4cyclictest3059-21rt-features11:20:153
25436993224,5cyclictest41-21ksoftirqd/309:23:183
25435993226,4cyclictest33-21ksoftirqd/208:40:112
25435993225,4cyclictest33-21ksoftirqd/212:23:122
25435993225,4cyclictest33-21ksoftirqd/211:15:092
25435993225,4cyclictest33-21ksoftirqd/210:40:082
25435993225,4cyclictest33-21ksoftirqd/210:40:012
25435993225,4cyclictest33-21ksoftirqd/208:50:022
25435993225,4cyclictest33-21ksoftirqd/207:35:092
25436993125,4cyclictest41-21ksoftirqd/312:35:333
25436993125,4cyclictest41-21ksoftirqd/312:15:053
25436993125,4cyclictest41-21ksoftirqd/308:11:273
25436993125,3cyclictest41-21ksoftirqd/310:41:053
25436993124,4cyclictest41-21ksoftirqd/311:44:183
25436993124,4cyclictest41-21ksoftirqd/311:44:183
25436993124,4cyclictest41-21ksoftirqd/310:56:483
25436993124,4cyclictest41-21ksoftirqd/309:56:273
25436993124,4cyclictest41-21ksoftirqd/309:19:033
25436993124,4cyclictest41-21ksoftirqd/307:58:463
25435993126,3cyclictest33-21ksoftirqd/211:35:392
25435993125,4cyclictest33-21ksoftirqd/208:45:332
25435993125,3cyclictest33-21ksoftirqd/212:38:462
25435993124,4cyclictest33-21ksoftirqd/211:57:382
25435993124,4cyclictest33-21ksoftirqd/209:40:232
25436993023,4cyclictest41-21ksoftirqd/311:01:303
25436993023,4cyclictest41-21ksoftirqd/309:43:053
25436993023,4cyclictest41-21ksoftirqd/307:29:193
25435993025,3cyclictest33-21ksoftirqd/209:20:092
25435993025,3cyclictest33-21ksoftirqd/208:55:382
25435993024,4cyclictest33-21ksoftirqd/207:20:292
25435993023,4cyclictest33-21ksoftirqd/212:20:002
25435993023,4cyclictest33-21ksoftirqd/210:46:312
25435993023,4cyclictest33-21ksoftirqd/209:12:042
25435993023,4cyclictest33-21ksoftirqd/207:30:152
25435993010,9cyclictest33-21ksoftirqd/207:15:122
25436992923,4cyclictest41-21ksoftirqd/308:00:333
25436992922,4cyclictest41-21ksoftirqd/312:11:273
25436992922,4cyclictest41-21ksoftirqd/310:10:513
25436992922,4cyclictest41-21ksoftirqd/309:34:093
25436992922,4cyclictest41-21ksoftirqd/308:19:583
25436992922,4cyclictest41-21ksoftirqd/307:49:463
25435992922,4cyclictest33-21ksoftirqd/209:46:202
25435992922,4cyclictest33-21ksoftirqd/207:13:532
25436992823,3cyclictest41-21ksoftirqd/310:25:483
25436992823,3cyclictest41-21ksoftirqd/310:25:483
25436992822,4cyclictest41-21ksoftirqd/307:40:573
25436992821,4cyclictest41-21ksoftirqd/311:57:553
25436992821,4cyclictest41-21ksoftirqd/311:05:533
25436992821,4cyclictest41-21ksoftirqd/307:24:143
25436992820,5cyclictest41-21ksoftirqd/311:29:533
25435992822,3cyclictest33-21ksoftirqd/210:20:382
25435992822,3cyclictest33-21ksoftirqd/210:20:382
1282912821,3phc2sys41-21ksoftirqd/307:15:093
25436992721,4cyclictest41-21ksoftirqd/312:00:133
25436992720,4cyclictest41-21ksoftirqd/311:52:443
25436992720,4cyclictest41-21ksoftirqd/311:18:273
25436992718,7cyclictest41-21ksoftirqd/309:47:113
25435992722,3cyclictest33-21ksoftirqd/211:45:082
25436992621,3cyclictest41-21ksoftirqd/309:37:393
25436992620,4cyclictest41-21ksoftirqd/307:33:583
25436992619,4cyclictest41-21ksoftirqd/308:50:313
25436992519,4cyclictest41-21ksoftirqd/311:38:183
25436992517,6cyclictest41-21ksoftirqd/310:35:123
25436992418,4cyclictest41-21ksoftirqd/311:31:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional