You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-28 - 17:38
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot3.osadl.org (updated Sun Apr 28, 2024 12:46:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2101122060,8sleep121012-21unixbench_multi07:05:501
2469421760,8sleep32172599cyclictest09:40:203
2469421760,8sleep32172599cyclictest09:40:203
1100921270,5sleep02172299cyclictest08:00:000
214322125103,10sleep30-21swapper/307:09:573
576981070,17rtkit-daemon0-21swapper/007:06:020
21725998267,7cyclictest41-21ksoftirqd/308:35:143
21725997867,6cyclictest41-21ksoftirqd/312:20:113
21725997662,7cyclictest41-21ksoftirqd/309:45:113
21725997357,9cyclictest41-21ksoftirqd/309:15:113
213222735,55sleep20-21swapper/207:08:352
21725997258,8cyclictest41-21ksoftirqd/310:30:103
21725997159,6cyclictest41-21ksoftirqd/311:30:143
21725996957,6cyclictest41-21ksoftirqd/307:10:133
21725996956,6cyclictest41-21ksoftirqd/307:45:123
21725996857,6cyclictest41-21ksoftirqd/312:35:123
21725996857,6cyclictest41-21ksoftirqd/312:35:113
311932670,8sleep02172299cyclictest11:00:290
21725996753,7cyclictest41-21ksoftirqd/308:28:323
21725996653,6cyclictest41-21ksoftirqd/307:35:113
21725996451,6cyclictest41-21ksoftirqd/307:50:103
825591630,1ptp4l401ktimersoftd/311:43:143
200522630,2sleep10-21swapper/109:30:221
21725996149,6cyclictest41-21ksoftirqd/312:05:113
21725996047,7cyclictest41-21ksoftirqd/310:35:123
21725996046,8cyclictest41-21ksoftirqd/308:55:153
21725995947,6cyclictest41-21ksoftirqd/308:45:113
21723995750,4cyclictest25-21ksoftirqd/109:50:111
21723995750,4cyclictest25-21ksoftirqd/108:40:091
314972560,2sleep00-21swapper/009:55:150
21725995648,4cyclictest41-21ksoftirqd/311:35:053
21723995649,4cyclictest25-21ksoftirqd/111:35:121
21723995548,4cyclictest25-21ksoftirqd/110:45:121
21725995424,6cyclictest41-21ksoftirqd/308:15:323
21725995424,6cyclictest41-21ksoftirqd/308:15:313
21725995345,5cyclictest41-21ksoftirqd/312:15:053
21725995247,3cyclictest41-21ksoftirqd/311:00:003
21723995245,4cyclictest25-21ksoftirqd/107:30:091
57698510,14rtkit-daemon0-21swapper/109:14:051
57698510,13rtkit-daemon0-21swapper/008:44:220
21725995146,3cyclictest41-21ksoftirqd/309:39:593
21723995144,4cyclictest25-21ksoftirqd/109:40:121
21723995144,4cyclictest25-21ksoftirqd/109:40:111
21723995143,5cyclictest25-21ksoftirqd/110:00:101
21723995122,3cyclictest25-21ksoftirqd/112:37:251
21723995122,3cyclictest25-21ksoftirqd/112:37:251
21725995044,3cyclictest41-21ksoftirqd/309:05:003
21723995043,4cyclictest25-21ksoftirqd/112:15:111
21723995043,4cyclictest25-21ksoftirqd/107:15:101
825591490,1ptp4l401ktimersoftd/309:50:243
21723994942,4cyclictest25-21ksoftirqd/111:15:131
21723994942,4cyclictest25-21ksoftirqd/111:05:041
21723994942,4cyclictest25-21ksoftirqd/110:10:081
21725994836,6cyclictest41-21ksoftirqd/309:20:113
21723994841,4cyclictest25-21ksoftirqd/111:40:111
21722994836,9cyclictest9-21ksoftirqd/008:25:010
21725994741,4cyclictest41-21ksoftirqd/311:05:053
21725994710,5cyclictest41-21ksoftirqd/310:50:173
21723994740,4cyclictest25-21ksoftirqd/111:10:121
21723994740,4cyclictest25-21ksoftirqd/111:10:121
21723994740,4cyclictest25-21ksoftirqd/110:40:151
21723994740,4cyclictest25-21ksoftirqd/108:00:121
21725994640,3cyclictest41-21ksoftirqd/312:15:003
21725994640,3cyclictest41-21ksoftirqd/308:35:003
21725994639,4cyclictest41-21ksoftirqd/311:50:013
21723994641,3cyclictest25-21ksoftirqd/108:10:001
21723994639,4cyclictest25-21ksoftirqd/108:40:001
21725994538,4cyclictest41-21ksoftirqd/310:45:173
21725994538,4cyclictest41-21ksoftirqd/308:20:053
21725994537,4cyclictest41-21ksoftirqd/307:55:203
21725994513,4cyclictest41-21ksoftirqd/311:00:243
21725994512,5cyclictest41-21ksoftirqd/310:25:243
21723994540,3cyclictest25-21ksoftirqd/111:50:001
21723994539,3cyclictest25-21ksoftirqd/109:20:001
57698440,26rtkit-daemon20307-21apt-get08:20:011
21723994439,3cyclictest25-21ksoftirqd/111:35:001
21723994439,3cyclictest25-21ksoftirqd/109:30:001
21723994439,3cyclictest25-21ksoftirqd/108:20:011
21723994439,3cyclictest25-21ksoftirqd/108:20:011
21723994438,3cyclictest25-21ksoftirqd/112:15:001
21723994438,3cyclictest25-21ksoftirqd/107:55:001
2172399440,3cyclictest121rcu_preempt07:50:001
2172599434,8cyclictest41-21ksoftirqd/307:25:013
21725994338,3cyclictest41-21ksoftirqd/311:15:013
21725994338,3cyclictest41-21ksoftirqd/311:15:003
21725994337,3cyclictest41-21ksoftirqd/310:05:003
21725994337,3cyclictest41-21ksoftirqd/309:30:393
21725994312,4cyclictest41-21ksoftirqd/309:25:153
21725994311,7cyclictest41-21ksoftirqd/309:14:593
21723994338,3cyclictest25-21ksoftirqd/107:15:011
21723994336,4cyclictest25-21ksoftirqd/112:25:001
21723994336,4cyclictest25-21ksoftirqd/110:20:131
21723994336,4cyclictest25-21ksoftirqd/109:35:131
21722994338,3cyclictest9-21ksoftirqd/012:20:000
21722994337,4cyclictest9-21ksoftirqd/012:35:000
21725994237,3cyclictest41-21ksoftirqd/312:30:003
21725994236,4cyclictest41-21ksoftirqd/311:15:343
21725994236,4cyclictest41-21ksoftirqd/307:45:003
21725994236,3cyclictest41-21ksoftirqd/310:45:003
21725994236,3cyclictest41-21ksoftirqd/310:05:293
21725994236,3cyclictest41-21ksoftirqd/309:55:323
21725994236,3cyclictest41-21ksoftirqd/309:05:153
21725994235,4cyclictest41-21ksoftirqd/312:04:593
21725994211,7cyclictest41-21ksoftirqd/307:15:123
21725994210,4cyclictest41-21ksoftirqd/311:50:333
21723994236,3cyclictest25-21ksoftirqd/110:20:001
21723994236,3cyclictest25-21ksoftirqd/109:50:001
21723994235,4cyclictest25-21ksoftirqd/109:09:591
21723994235,4cyclictest25-21ksoftirqd/108:10:111
21723994234,4cyclictest25-21ksoftirqd/110:55:051
21723994234,4cyclictest25-21ksoftirqd/110:25:121
21723994234,3cyclictest25-21ksoftirqd/107:25:091
2172599414,5cyclictest41-21ksoftirqd/308:50:273
21725994136,3cyclictest41-21ksoftirqd/307:30:143
21725994135,3cyclictest41-21ksoftirqd/308:40:333
21725994132,4cyclictest41-21ksoftirqd/310:10:113
21725994123,7cyclictest41-21ksoftirqd/310:15:323
21723994136,3cyclictest25-21ksoftirqd/111:59:591
21723994136,3cyclictest25-21ksoftirqd/110:55:001
21723994136,3cyclictest25-21ksoftirqd/108:50:001
21723994134,4cyclictest25-21ksoftirqd/111:00:121
21723994134,4cyclictest25-21ksoftirqd/110:00:001
21723994134,3cyclictest25-21ksoftirqd/109:00:011
2172299411,3cyclictest121rcu_preempt11:40:380
2172599409,8cyclictest41-21ksoftirqd/311:55:163
2172599404,8cyclictest41-21ksoftirqd/307:25:223
21725994035,3cyclictest41-21ksoftirqd/308:10:013
21725994034,4cyclictest41-21ksoftirqd/311:30:003
21725994034,3cyclictest41-21ksoftirqd/308:10:263
21725994033,4cyclictest41-21ksoftirqd/312:30:293
21724994035,3cyclictest33-21ksoftirqd/212:32:022
21723994035,3cyclictest25-21ksoftirqd/107:40:341
21723994034,3cyclictest25-21ksoftirqd/111:25:211
21723994034,3cyclictest25-21ksoftirqd/110:40:011
21723994033,4cyclictest25-21ksoftirqd/110:34:591
21722994035,3cyclictest9-21ksoftirqd/010:05:110
21725993933,3cyclictest41-21ksoftirqd/310:25:003
21725993932,4cyclictest41-21ksoftirqd/311:20:133
21723993934,3cyclictest25-21ksoftirqd/110:05:221
21723993933,4cyclictest25-21ksoftirqd/109:00:331
21723993932,3cyclictest25-21ksoftirqd/109:20:121
21722993934,3cyclictest9-21ksoftirqd/010:40:000
21722993933,4cyclictest9-21ksoftirqd/011:40:000
21722993933,3cyclictest9-21ksoftirqd/012:04:590
21722993932,4cyclictest9-21ksoftirqd/012:09:590
21723993833,3cyclictest25-21ksoftirqd/107:55:241
21723993832,4cyclictest25-21ksoftirqd/108:50:111
21723993832,3cyclictest25-21ksoftirqd/108:30:291
21723993832,3cyclictest25-21ksoftirqd/107:40:011
21723993831,4cyclictest25-21ksoftirqd/112:30:131
21723993825,3cyclictest25-21ksoftirqd/112:00:221
21722993832,4cyclictest9-21ksoftirqd/011:50:110
21725993731,3cyclictest41-21ksoftirqd/308:00:183
21724993731,4cyclictest33-21ksoftirqd/209:13:022
21724993730,4cyclictest33-21ksoftirqd/211:49:222
21724993730,4cyclictest33-21ksoftirqd/208:06:282
21723993731,4cyclictest25-21ksoftirqd/111:20:211
21723993731,4cyclictest25-21ksoftirqd/108:27:011
21723993723,11cyclictest25-21ksoftirqd/111:50:341
21722993732,3cyclictest9-21ksoftirqd/011:20:120
21722993732,3cyclictest9-21ksoftirqd/008:30:000
21722993731,4cyclictest9-21ksoftirqd/010:54:590
21722993731,3cyclictest9-21ksoftirqd/010:25:000
21722993730,4cyclictest9-21ksoftirqd/009:50:140
21722993730,4cyclictest9-21ksoftirqd/007:55:000
21724993630,3cyclictest33-21ksoftirqd/209:37:362
21724993629,5cyclictest33-21ksoftirqd/211:36:252
21724993629,4cyclictest33-21ksoftirqd/210:28:042
21724993629,4cyclictest33-21ksoftirqd/209:20:592
21724993629,4cyclictest33-21ksoftirqd/207:56:242
21723993630,3cyclictest25-21ksoftirqd/107:25:011
21723993629,4cyclictest25-21ksoftirqd/112:30:001
21723993629,4cyclictest25-21ksoftirqd/112:05:311
21722993630,4cyclictest9-21ksoftirqd/012:10:300
21722993630,4cyclictest9-21ksoftirqd/008:17:330
21722993630,4cyclictest9-21ksoftirqd/008:17:320
21722993629,4cyclictest9-21ksoftirqd/012:21:230
21722993629,4cyclictest9-21ksoftirqd/010:29:530
21724993529,4cyclictest33-21ksoftirqd/209:42:022
21724993529,4cyclictest33-21ksoftirqd/209:42:012
21724993529,3cyclictest33-21ksoftirqd/208:43:122
21724993528,4cyclictest33-21ksoftirqd/212:38:432
21724993528,4cyclictest33-21ksoftirqd/212:38:422
21724993528,4cyclictest33-21ksoftirqd/211:14:262
21724993528,4cyclictest33-21ksoftirqd/211:14:252
21724993528,4cyclictest33-21ksoftirqd/211:06:492
21724993528,4cyclictest33-21ksoftirqd/210:06:162
21724993528,4cyclictest33-21ksoftirqd/209:07:272
21724993528,4cyclictest33-21ksoftirqd/208:57:582
2172499350,3cyclictest121rcu_preempt09:15:302
21722993529,3cyclictest9-21ksoftirqd/009:00:080
21722993529,3cyclictest9-21ksoftirqd/008:00:510
21722993528,4cyclictest9-21ksoftirqd/011:29:450
21722993528,4cyclictest9-21ksoftirqd/011:09:540
21722993528,4cyclictest9-21ksoftirqd/009:40:030
21722993528,4cyclictest9-21ksoftirqd/009:40:030
21722993528,4cyclictest9-21ksoftirqd/009:15:080
21722993528,4cyclictest9-21ksoftirqd/008:48:540
21724993429,3cyclictest33-21ksoftirqd/212:20:232
21724993428,4cyclictest33-21ksoftirqd/208:28:252
21724993428,4cyclictest33-21ksoftirqd/207:47:332
21724993428,4cyclictest33-21ksoftirqd/207:41:552
21724993428,3cyclictest33-21ksoftirqd/211:03:582
21724993428,3cyclictest33-21ksoftirqd/210:38:302
21724993427,4cyclictest33-21ksoftirqd/212:29:012
21724993427,4cyclictest33-21ksoftirqd/210:46:072
21724993427,4cyclictest33-21ksoftirqd/209:26:482
21724993427,4cyclictest33-21ksoftirqd/208:48:452
21724993426,5cyclictest33-21ksoftirqd/212:08:532
21722993429,3cyclictest9-21ksoftirqd/008:30:180
21722993428,4cyclictest9-21ksoftirqd/010:50:000
21722993428,3cyclictest9-21ksoftirqd/009:07:300
21722993427,4cyclictest9-21ksoftirqd/012:00:000
21722993427,4cyclictest9-21ksoftirqd/011:35:000
21722993427,4cyclictest9-21ksoftirqd/007:23:590
21724993328,3cyclictest33-21ksoftirqd/211:44:212
21724993327,4cyclictest33-21ksoftirqd/208:04:242
21724993327,3cyclictest33-21ksoftirqd/208:32:152
21724993326,4cyclictest33-21ksoftirqd/211:28:122
21724993326,4cyclictest33-21ksoftirqd/211:24:172
21724993326,4cyclictest33-21ksoftirqd/211:19:152
21724993326,4cyclictest33-21ksoftirqd/210:59:222
21724993326,4cyclictest33-21ksoftirqd/210:10:342
21724993326,4cyclictest33-21ksoftirqd/209:32:162
21724993326,4cyclictest33-21ksoftirqd/208:23:392
21722993328,3cyclictest9-21ksoftirqd/007:45:340
21722993327,4cyclictest9-21ksoftirqd/012:29:150
21722993327,4cyclictest9-21ksoftirqd/009:36:020
21722993327,4cyclictest9-21ksoftirqd/009:20:300
21722993326,4cyclictest9-21ksoftirqd/010:10:030
21722993326,4cyclictest9-21ksoftirqd/010:01:040
21722993326,4cyclictest9-21ksoftirqd/009:31:370
21722993326,4cyclictest9-21ksoftirqd/008:06:260
245972320,7sleep02172299cyclictest07:15:150
21724993227,3cyclictest33-21ksoftirqd/208:53:582
21724993226,4cyclictest33-21ksoftirqd/210:05:002
21724993226,4cyclictest33-21ksoftirqd/207:39:182
21724993226,4cyclictest33-21ksoftirqd/207:18:262
21724993226,3cyclictest33-21ksoftirqd/211:51:452
21724993225,4cyclictest33-21ksoftirqd/209:48:582
21724993225,4cyclictest33-21ksoftirqd/208:12:512
2172499320,3cyclictest121rcu_preempt07:51:482
21722993227,3cyclictest9-21ksoftirqd/008:35:250
21722993226,4cyclictest9-21ksoftirqd/009:49:550
21722993226,4cyclictest9-21ksoftirqd/008:55:350
21722993225,4cyclictest9-21ksoftirqd/010:33:070
21722993225,4cyclictest9-21ksoftirqd/007:32:330
21722993225,4cyclictest9-21ksoftirqd/007:27:400
21722993225,4cyclictest9-21ksoftirqd/007:14:150
57698310,14rtkit-daemon0-21swapper/007:44:120
21724993125,4cyclictest33-21ksoftirqd/209:04:352
21724993125,3cyclictest33-21ksoftirqd/210:20:072
21724993124,4cyclictest33-21ksoftirqd/212:16:202
21722993125,4cyclictest9-21ksoftirqd/012:35:410
21722993125,4cyclictest9-21ksoftirqd/012:35:400
21722993125,4cyclictest9-21ksoftirqd/011:49:160
21722993125,4cyclictest9-21ksoftirqd/011:19:460
21722993125,4cyclictest9-21ksoftirqd/009:28:320
21722993124,4cyclictest9-21ksoftirqd/009:10:490
21722993124,4cyclictest9-21ksoftirqd/008:10:520
21724993025,3cyclictest33-21ksoftirqd/210:40:042
21724993025,3cyclictest33-21ksoftirqd/208:18:232
21724993025,3cyclictest33-21ksoftirqd/208:18:222
21724993024,4cyclictest33-21ksoftirqd/211:58:352
21724993024,3cyclictest33-21ksoftirqd/210:31:302
21724993023,4cyclictest33-21ksoftirqd/207:32:162
21724993018,9cyclictest4406-21kworker/2:111:30:132
21722993025,3cyclictest9-21ksoftirqd/008:50:400
21722993023,4cyclictest9-21ksoftirqd/010:41:270
21724992923,4cyclictest33-21ksoftirqd/212:03:162
21724992923,4cyclictest33-21ksoftirqd/209:50:242
21724992922,4cyclictest33-21ksoftirqd/208:39:302
21722992923,4cyclictest9-21ksoftirqd/010:17:460
21722992922,4cyclictest9-21ksoftirqd/007:38:030
21724992822,4cyclictest33-21ksoftirqd/210:18:412
21724992822,4cyclictest33-21ksoftirqd/207:29:562
21724992822,4cyclictest33-21ksoftirqd/207:11:202
21722992823,3cyclictest9-21ksoftirqd/010:59:180
21724992720,4cyclictest33-21ksoftirqd/209:56:502
21724992621,3cyclictest33-21ksoftirqd/207:20:522
21722992621,3cyclictest9-21ksoftirqd/011:10:250
21722992621,3cyclictest9-21ksoftirqd/011:10:240
21724992519,4cyclictest33-21ksoftirqd/210:51:292
21724992013,4cyclictest32701-21apt-key12:15:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional