You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-20 - 10:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Sat Apr 20, 2024 00:46:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1235911750,6ptp4l401ktimersoftd/319:06:253
2288221510,3sleep0106299cyclictest23:20:290
52328911,19sleep00-21swapper/019:07:000
6262785,18sleep10-21swapper/119:08:011
1063997566,5cyclictest25-21ksoftirqd/121:00:111
1063997262,6cyclictest25-21ksoftirqd/100:25:111
123591670,1ptp4l401ktimersoftd/300:35:073
123591660,1ptp4l401ktimersoftd/322:56:553
123591650,1ptp4l401ktimersoftd/320:13:503
116691630,5getstats106599cyclictest22:50:203
96352590,2sleep10-21swapper/121:45:181
196672590,2sleep20-21swapper/200:25:132
1063995852,4cyclictest25-21ksoftirqd/121:00:001
1063995843,8cyclictest25-21ksoftirqd/120:35:101
116691570,4getstats106599cyclictest22:30:193
1063995648,5cyclictest6501-21cron21:40:001
1063995547,4cyclictest25-21ksoftirqd/123:50:001
1063995547,4cyclictest25-21ksoftirqd/123:49:591
123591530,1ptp4l401ktimersoftd/319:36:043
1063995347,3cyclictest25-21ksoftirqd/100:35:001
149652520,3sleep00-21swapper/000:15:160
1065995231,18cyclictest41-21ksoftirqd/321:49:553
1063995245,4cyclictest25-21ksoftirqd/100:35:231
1062995236,13cyclictest9-21ksoftirqd/019:10:370
1065995131,17cyclictest41-21ksoftirqd/300:33:183
1063995044,4cyclictest25-21ksoftirqd/120:20:121
1063995044,4cyclictest25-21ksoftirqd/119:30:001
1063995044,4cyclictest25-21ksoftirqd/119:29:591
1063995044,3cyclictest586-21gdbus19:19:591
1063995036,7cyclictest25-21ksoftirqd/120:05:101
1063995036,11cyclictest25-21ksoftirqd/121:30:131
57698480,16rtkit-daemon9239-21munin-node23:51:550
169352480,2sleep30-21swapper/300:20:093
1065994828,17cyclictest41-21ksoftirqd/320:35:513
1063994842,3cyclictest25-21ksoftirqd/120:35:011
1063994840,5cyclictest25-21ksoftirqd/121:20:011
73924716,19sleep20-21swapper/219:09:322
57698470,12rtkit-daemon20194-21apache222:11:190
1065994726,5cyclictest41-21ksoftirqd/300:07:053
1063994733,11cyclictest25-21ksoftirqd/123:00:291
1062994740,4cyclictest13308-21dump-pmu-power20:45:000
1063994640,4cyclictest25-21ksoftirqd/123:24:591
1063994640,4cyclictest25-21ksoftirqd/122:20:001
1063994640,4cyclictest25-21ksoftirqd/119:15:001
1063994640,3cyclictest25-21ksoftirqd/123:25:191
123591450,1ptp4l401ktimersoftd/322:37:533
1065994537,5cyclictest41-21ksoftirqd/320:45:003
1063994538,4cyclictest25-21ksoftirqd/100:20:001
1063994438,4cyclictest25-21ksoftirqd/122:30:211
1063994437,4cyclictest25-21ksoftirqd/122:25:161
1063994437,4cyclictest25-21ksoftirqd/122:10:191
1063994431,10cyclictest25-21ksoftirqd/122:45:001
123591430,1ptp4l401ktimersoftd/321:35:143
1063994337,4cyclictest25-21ksoftirqd/121:40:311
1063994337,3cyclictest25-21ksoftirqd/123:50:201
1063994337,3cyclictest25-21ksoftirqd/100:00:001
1063994336,4cyclictest25-21ksoftirqd/122:00:011
1065994235,4cyclictest41-21ksoftirqd/323:22:333
1065994235,4cyclictest41-21ksoftirqd/323:00:103
1065994235,4cyclictest41-21ksoftirqd/320:56:323
1064994235,4cyclictest33-21ksoftirqd/223:57:592
1064994235,4cyclictest33-21ksoftirqd/200:30:282
1064994234,5cyclictest27983-21cron23:35:002
1063994237,3cyclictest25-21ksoftirqd/123:20:001
1063994237,3cyclictest25-21ksoftirqd/120:14:591
1063994236,3cyclictest25-21ksoftirqd/122:20:001
1063994235,4cyclictest25-21ksoftirqd/123:45:001
1063994235,4cyclictest25-21ksoftirqd/123:15:001
1063994235,4cyclictest25-21ksoftirqd/121:25:131
1063994234,5cyclictest25-21ksoftirqd/100:21:561
1062994222,5cyclictest9-21ksoftirqd/000:22:310
90682410,3sleep3106599cyclictest19:25:223
90682410,3sleep3106599cyclictest19:25:223
123591410,15ptp4l401ktimersoftd/322:40:263
1065994134,4cyclictest41-21ksoftirqd/319:40:043
1065994133,5cyclictest41-21ksoftirqd/323:26:583
1064994135,4cyclictest33-21ksoftirqd/219:11:362
1063994135,4cyclictest25-21ksoftirqd/123:35:251
1063994135,4cyclictest25-21ksoftirqd/121:10:111
1063994135,4cyclictest25-21ksoftirqd/119:35:221
1063994135,3cyclictest25-21ksoftirqd/119:45:011
1063994134,4cyclictest25-21ksoftirqd/123:00:011
1063994134,4cyclictest25-21ksoftirqd/119:20:141
1063994134,4cyclictest25-21ksoftirqd/119:20:141
1062994135,4cyclictest9-21ksoftirqd/021:57:040
1062994134,4cyclictest9-21ksoftirqd/020:12:200
1065994033,4cyclictest41-21ksoftirqd/322:46:083
1065994033,4cyclictest41-21ksoftirqd/320:45:353
1065994033,4cyclictest41-21ksoftirqd/320:30:533
1065994033,4cyclictest41-21ksoftirqd/300:01:203
1064994034,3cyclictest33-21ksoftirqd/223:51:272
1064994033,4cyclictest33-21ksoftirqd/223:16:522
1064994033,4cyclictest33-21ksoftirqd/221:53:172
1064994033,4cyclictest33-21ksoftirqd/220:41:522
1064994033,4cyclictest33-21ksoftirqd/220:16:522
1063994035,3cyclictest25-21ksoftirqd/123:10:001
1063994034,4cyclictest25-21ksoftirqd/122:05:131
1063994034,4cyclictest25-21ksoftirqd/121:20:151
1063994034,4cyclictest25-21ksoftirqd/119:55:461
1063994034,3cyclictest25-21ksoftirqd/119:50:181
1062994034,4cyclictest9-21ksoftirqd/021:16:520
1062994033,4cyclictest9-21ksoftirqd/023:02:460
1065993933,4cyclictest41-21ksoftirqd/321:40:113
1065993933,4cyclictest41-21ksoftirqd/319:33:083
1065993933,3cyclictest41-21ksoftirqd/323:36:263
1065993933,3cyclictest41-21ksoftirqd/321:24:553
1065993933,3cyclictest41-21ksoftirqd/321:02:073
1065993932,4cyclictest41-21ksoftirqd/322:16:123
1065993932,4cyclictest41-21ksoftirqd/322:16:123
1065993932,4cyclictest41-21ksoftirqd/321:11:283
1065993932,4cyclictest41-21ksoftirqd/320:25:593
1064993934,3cyclictest33-21ksoftirqd/200:05:262
1064993933,4cyclictest33-21ksoftirqd/222:57:002
1064993933,3cyclictest33-21ksoftirqd/221:16:592
1064993932,4cyclictest33-21ksoftirqd/221:03:002
1064993931,5cyclictest33-21ksoftirqd/220:56:422
1063993934,3cyclictest25-21ksoftirqd/120:25:231
1063993933,4cyclictest25-21ksoftirqd/120:15:201
1063993933,4cyclictest25-21ksoftirqd/100:05:211
1063993932,4cyclictest25-21ksoftirqd/120:50:001
1063993932,4cyclictest25-21ksoftirqd/100:10:121
1062993933,3cyclictest9-21ksoftirqd/022:28:280
1062993933,3cyclictest9-21ksoftirqd/019:41:340
1062993933,3cyclictest9-21ksoftirqd/019:22:360
1062993933,3cyclictest9-21ksoftirqd/019:22:350
1062993932,4cyclictest9-21ksoftirqd/022:04:000
1062993932,4cyclictest9-21ksoftirqd/019:54:530
1062993932,4cyclictest9-21ksoftirqd/019:39:150
2779223829,4sleep09-21ksoftirqd/020:05:270
123591380,1ptp4l401ktimersoftd/323:15:293
1065993832,3cyclictest41-21ksoftirqd/323:57:303
1065993831,4cyclictest41-21ksoftirqd/320:20:103
1065993831,4cyclictest41-21ksoftirqd/319:58:503
1065993831,4cyclictest41-21ksoftirqd/319:54:483
1065993831,4cyclictest41-21ksoftirqd/300:28:123
1064993832,4cyclictest33-21ksoftirqd/223:35:302
1064993832,4cyclictest33-21ksoftirqd/222:34:562
1064993832,4cyclictest33-21ksoftirqd/219:32:142
1064993832,3cyclictest33-21ksoftirqd/223:14:272
1064993831,4cyclictest33-21ksoftirqd/223:24:352
1064993831,4cyclictest33-21ksoftirqd/222:51:222
1064993831,4cyclictest33-21ksoftirqd/221:57:182
1064993831,4cyclictest33-21ksoftirqd/221:33:282
1064993831,4cyclictest33-21ksoftirqd/200:18:552
1063993833,3cyclictest25-21ksoftirqd/122:20:191
1063993833,3cyclictest25-21ksoftirqd/122:20:191
1063993832,4cyclictest25-21ksoftirqd/122:45:341
1063993832,4cyclictest25-21ksoftirqd/120:51:511
1063993832,4cyclictest25-21ksoftirqd/120:51:511
1063993832,4cyclictest25-21ksoftirqd/120:40:141
1063993832,3cyclictest25-21ksoftirqd/121:54:481
1063993830,5cyclictest25-21ksoftirqd/122:51:551
1062993832,4cyclictest9-21ksoftirqd/021:07:200
1062993831,4cyclictest9-21ksoftirqd/023:06:150
1062993831,4cyclictest9-21ksoftirqd/020:02:280
1062993831,4cyclictest9-21ksoftirqd/019:46:110
1062993831,4cyclictest9-21ksoftirqd/000:31:500
1062993830,5cyclictest9-21ksoftirqd/021:40:360
1065993730,4cyclictest41-21ksoftirqd/323:46:373
1065993730,4cyclictest41-21ksoftirqd/323:46:373
1065993730,4cyclictest41-21ksoftirqd/323:08:593
1065993730,4cyclictest41-21ksoftirqd/322:29:173
1065993730,4cyclictest41-21ksoftirqd/322:21:303
1065993730,4cyclictest41-21ksoftirqd/322:21:293
1065993730,4cyclictest41-21ksoftirqd/322:09:383
1065993730,4cyclictest41-21ksoftirqd/321:18:433
1065993730,4cyclictest41-21ksoftirqd/320:51:053
1065993730,4cyclictest41-21ksoftirqd/320:51:053
1065993730,4cyclictest41-21ksoftirqd/320:19:373
1065993730,4cyclictest41-21ksoftirqd/319:46:203
1064993732,3cyclictest33-21ksoftirqd/200:03:382
1064993730,4cyclictest33-21ksoftirqd/222:47:302
1064993730,4cyclictest33-21ksoftirqd/222:22:542
1064993730,4cyclictest33-21ksoftirqd/222:22:532
1064993729,5cyclictest33-21ksoftirqd/200:23:092
1063993732,3cyclictest25-21ksoftirqd/121:10:001
1063993732,3cyclictest25-21ksoftirqd/119:45:291
1063993731,4cyclictest25-21ksoftirqd/123:30:351
1063993731,4cyclictest25-21ksoftirqd/122:00:171
1063993731,4cyclictest25-21ksoftirqd/100:01:131
1063993730,4cyclictest25-21ksoftirqd/122:35:261
1062993731,4cyclictest9-21ksoftirqd/022:36:050
1062993730,4cyclictest9-21ksoftirqd/022:56:490
1062993730,4cyclictest9-21ksoftirqd/022:24:310
1062993730,4cyclictest9-21ksoftirqd/022:24:310
1062993730,4cyclictest9-21ksoftirqd/022:05:410
1062993730,4cyclictest9-21ksoftirqd/020:17:250
1065993631,3cyclictest41-21ksoftirqd/321:30:223
1065993630,4cyclictest41-21ksoftirqd/323:52:163
1065993630,4cyclictest41-21ksoftirqd/323:42:263
1065993630,4cyclictest41-21ksoftirqd/321:58:533
1065993630,4cyclictest41-21ksoftirqd/321:50:523
1065993630,3cyclictest41-21ksoftirqd/323:13:263
1065993630,3cyclictest41-21ksoftirqd/319:23:063
1065993630,3cyclictest41-21ksoftirqd/319:23:053
1065993629,4cyclictest41-21ksoftirqd/300:17:443
1065993629,4cyclictest41-21ksoftirqd/300:10:093
1064993630,4cyclictest33-21ksoftirqd/221:41:462
1064993629,4cyclictest33-21ksoftirqd/223:46:562
1064993629,4cyclictest33-21ksoftirqd/223:46:562
1064993629,4cyclictest33-21ksoftirqd/219:41:142
1064993629,4cyclictest33-21ksoftirqd/219:20:002
1062993630,4cyclictest9-21ksoftirqd/021:33:050
1062993630,3cyclictest9-21ksoftirqd/023:58:140
1062993630,3cyclictest9-21ksoftirqd/023:46:100
1062993630,3cyclictest9-21ksoftirqd/023:46:090
1062993629,4cyclictest9-21ksoftirqd/019:55:460
1062993628,5cyclictest9-21ksoftirqd/020:50:180
1062993628,5cyclictest9-21ksoftirqd/020:50:180
1065993529,4cyclictest41-21ksoftirqd/322:14:513
1065993529,3cyclictest41-21ksoftirqd/322:04:013
1065993529,3cyclictest41-21ksoftirqd/319:16:263
1065993528,4cyclictest41-21ksoftirqd/321:29:393
1064993530,3cyclictest33-21ksoftirqd/220:00:002
1064993529,3cyclictest33-21ksoftirqd/222:36:232
1064993528,4cyclictest33-21ksoftirqd/223:00:522
1064993528,4cyclictest33-21ksoftirqd/222:16:312
1064993528,4cyclictest33-21ksoftirqd/222:16:312
1064993528,4cyclictest33-21ksoftirqd/221:09:132
1064993528,4cyclictest33-21ksoftirqd/220:36:102
1064993528,4cyclictest33-21ksoftirqd/220:08:532
1064993528,4cyclictest33-21ksoftirqd/220:01:542
1064993528,4cyclictest33-21ksoftirqd/219:38:062
1064993528,4cyclictest33-21ksoftirqd/200:36:252
1064993527,5cyclictest33-21ksoftirqd/221:10:122
1064993527,5cyclictest33-21ksoftirqd/220:13:432
1064993527,5cyclictest33-21ksoftirqd/219:26:252
1064993527,5cyclictest33-21ksoftirqd/219:26:252
1063993528,4cyclictest25-21ksoftirqd/120:01:131
1062993529,4cyclictest9-21ksoftirqd/020:39:310
1062993529,3cyclictest9-21ksoftirqd/022:19:460
1062993529,3cyclictest9-21ksoftirqd/022:19:460
1062993529,3cyclictest9-21ksoftirqd/020:45:060
1062993528,5cyclictest9-21ksoftirqd/021:53:440
1062993528,4cyclictest9-21ksoftirqd/022:51:460
1062993528,4cyclictest9-21ksoftirqd/022:31:020
1065993428,4cyclictest41-21ksoftirqd/319:11:263
1065993428,3cyclictest41-21ksoftirqd/323:30:153
1065993428,3cyclictest41-21ksoftirqd/320:08:133
1064993427,4cyclictest33-21ksoftirqd/221:22:522
1064993427,4cyclictest33-21ksoftirqd/220:31:292
1064993427,4cyclictest33-21ksoftirqd/200:14:312
1064993426,5cyclictest33-21ksoftirqd/223:29:592
1064993426,5cyclictest33-21ksoftirqd/219:22:482
1064993426,5cyclictest33-21ksoftirqd/219:22:482
1063993428,4cyclictest25-21ksoftirqd/119:32:021
1062993429,3cyclictest9-21ksoftirqd/000:07:300
1062993428,4cyclictest9-21ksoftirqd/021:20:540
1062993427,4cyclictest9-21ksoftirqd/020:32:430
1062993427,4cyclictest9-21ksoftirqd/019:28:480
1062993427,4cyclictest9-21ksoftirqd/019:28:480
1065993327,3cyclictest41-21ksoftirqd/320:02:503
1064993327,3cyclictest33-21ksoftirqd/221:46:572
1064993326,4cyclictest33-21ksoftirqd/223:05:082
1064993326,4cyclictest33-21ksoftirqd/222:25:522
1064993326,4cyclictest33-21ksoftirqd/222:08:362
1064993326,4cyclictest33-21ksoftirqd/219:51:422
1062993327,4cyclictest9-21ksoftirqd/000:29:130
1062993327,3cyclictest9-21ksoftirqd/021:14:000
1062993326,4cyclictest9-21ksoftirqd/021:37:340
1062993325,5cyclictest9-21ksoftirqd/023:10:410
1065993227,3cyclictest41-21ksoftirqd/321:06:063
1064993225,4cyclictest33-21ksoftirqd/222:40:482
1064993225,4cyclictest33-21ksoftirqd/219:46:202
1062993226,3cyclictest9-21ksoftirqd/023:39:010
1062993226,3cyclictest9-21ksoftirqd/020:28:070
1062993226,3cyclictest9-21ksoftirqd/000:35:130
1062993225,4cyclictest9-21ksoftirqd/000:11:190
1064993124,4cyclictest33-21ksoftirqd/220:49:362
1064993123,5cyclictest33-21ksoftirqd/223:43:032
1062993125,3cyclictest9-21ksoftirqd/019:18:530
1062993124,4cyclictest9-21ksoftirqd/022:45:120
1062993124,4cyclictest9-21ksoftirqd/022:43:150
1062993123,5cyclictest9-21ksoftirqd/019:30:050
1064993024,3cyclictest33-21ksoftirqd/222:12:322
1064993022,5cyclictest33-21ksoftirqd/222:00:382
1062993025,3cyclictest9-21ksoftirqd/023:15:130
1062993025,3cyclictest9-21ksoftirqd/021:28:240
1062993024,4cyclictest9-21ksoftirqd/021:03:340
1062993024,4cyclictest9-21ksoftirqd/000:01:150
1062993023,4cyclictest9-21ksoftirqd/023:33:490
1062993023,4cyclictest9-21ksoftirqd/020:59:330
1062993023,4cyclictest9-21ksoftirqd/020:20:110
1064992924,3cyclictest33-21ksoftirqd/221:36:532
1062992922,4cyclictest9-21ksoftirqd/023:29:230
1064992822,4cyclictest33-21ksoftirqd/221:26:392
1062992823,3cyclictest9-21ksoftirqd/021:46:020
1064992720,4cyclictest33-21ksoftirqd/220:25:112
1064992620,3cyclictest33-21ksoftirqd/220:20:372
1064992618,5cyclictest33-21ksoftirqd/220:52:332
1064992618,5cyclictest33-21ksoftirqd/220:52:332
1062992619,4cyclictest9-21ksoftirqd/023:41:040
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional