You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-09-11 - 14:45
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Wed Sep 11, 2024 00:46:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
321252167146,9sleep30-21swapper/319:07:413
2290221510,5sleep23259899cyclictest20:15:212
287121440,8sleep13259799cyclictest21:50:221
132012980,9sleep03259699cyclictest00:30:200
3214926039,9sleep20-21swapper/219:08:002
123591600,1ptp4l401ktimersoftd/320:52:353
123591590,1ptp4l401ktimersoftd/321:26:053
123591590,1ptp4l401ktimersoftd/321:26:053
123591580,1ptp4l401ktimersoftd/321:20:223
123591580,1ptp4l401ktimersoftd/320:20:453
123591570,1ptp4l401ktimersoftd/323:14:483
32599995534,18cyclictest41-21ksoftirqd/321:47:123
32597995549,4cyclictest25-21ksoftirqd/121:10:011
32597995542,10cyclictest25-21ksoftirqd/121:25:001
158372550,2sleep015838-21latency_hist22:20:000
123591550,1ptp4l391rcuc/300:33:163
32597995448,4cyclictest25-21ksoftirqd/100:10:001
123591540,1ptp4l401ktimersoftd/300:21:523
123591540,1ptp4l401ktimersoftd/300:21:523
57698530,2rtkit-daemon575-21rtkit-daemon21:57:282
32596995246,4cyclictest9-21ksoftirqd/000:40:000
32596995246,3cyclictest9-21ksoftirqd/021:10:000
32599995132,4cyclictest41-21ksoftirqd/323:17:563
32599995131,4cyclictest41-21ksoftirqd/319:32:463
32596995144,4cyclictest6737-21cron23:10:000
32596995144,4cyclictest32577-21cron00:05:000
32599995031,4cyclictest41-21ksoftirqd/322:08:073
32597995044,3cyclictest25-21ksoftirqd/100:15:001
32597995042,4cyclictest25-21ksoftirqd/120:35:011
3259699501,4cyclictest121rcu_preempt23:05:010
32597994943,4cyclictest25-21ksoftirqd/121:45:001
32597994942,4cyclictest25-21ksoftirqd/120:25:001
32599994840,5cyclictest6736-21cron23:10:003
32597994842,4cyclictest25-21ksoftirqd/100:25:001
32597994842,4cyclictest25-21ksoftirqd/100:24:591
32597994841,4cyclictest25-21ksoftirqd/122:35:001
32597994841,4cyclictest25-21ksoftirqd/120:15:131
32596994842,3cyclictest9-21ksoftirqd/022:59:590
123591480,1ptp4l401ktimersoftd/319:42:143
32598994742,3cyclictest33-21ksoftirqd/222:35:002
32597994741,4cyclictest25-21ksoftirqd/123:40:011
32597994741,4cyclictest25-21ksoftirqd/122:20:001
32597994740,4cyclictest25-21ksoftirqd/123:05:001
32597994731,4cyclictest25-21ksoftirqd/119:18:471
32596994741,3cyclictest9-21ksoftirqd/020:35:010
32596994740,4cyclictest9-21ksoftirqd/023:40:000
32596994740,4cyclictest9-21ksoftirqd/022:35:010
32596994740,4cyclictest9-21ksoftirqd/022:05:000
32596994734,8cyclictest9-21ksoftirqd/000:25:120
3259699472,4cyclictest121rcu_preempt21:15:000
90152460,10sleep23259899cyclictest00:20:262
90152460,10sleep23259899cyclictest00:20:262
32597994639,4cyclictest25-21ksoftirqd/123:45:001
32597994639,4cyclictest25-21ksoftirqd/119:25:001
32597994639,4cyclictest25-21ksoftirqd/100:00:001
32596994640,4cyclictest9-21ksoftirqd/020:05:200
32596994640,3cyclictest9-21ksoftirqd/021:50:130
32596994639,4cyclictest9-21ksoftirqd/019:40:010
32596994639,4cyclictest9-21ksoftirqd/019:30:000
32596994639,4cyclictest9-21ksoftirqd/019:24:590
32596994638,4cyclictest9-21ksoftirqd/021:35:000
32596994626,4cyclictest9-21ksoftirqd/000:15:100
32596994625,5cyclictest9-21ksoftirqd/021:40:290
123591460,1ptp4l401ktimersoftd/320:15:223
57698450,13rtkit-daemon0-21swapper/222:47:262
32597994539,4cyclictest25-21ksoftirqd/121:05:001
32597994539,4cyclictest25-21ksoftirqd/120:10:141
3259799452,4cyclictest25-21ksoftirqd/122:45:161
32596994540,3cyclictest9-21ksoftirqd/020:20:000
32596994538,4cyclictest9-21ksoftirqd/020:50:000
32596994525,4cyclictest9-21ksoftirqd/023:55:160
3259699451,4cyclictest121rcu_preempt21:00:000
123591450,1ptp4l401ktimersoftd/321:30:173
32598994438,4cyclictest33-21ksoftirqd/200:08:172
32597994438,4cyclictest25-21ksoftirqd/121:35:011
32597994437,4cyclictest25-21ksoftirqd/100:35:161
32597994431,10cyclictest25-21ksoftirqd/122:23:231
32597994431,10cyclictest25-21ksoftirqd/120:29:151
32596994438,3cyclictest9-21ksoftirqd/023:35:010
32596994438,3cyclictest9-21ksoftirqd/022:40:000
32596994437,4cyclictest9-21ksoftirqd/022:00:000
32596994436,4cyclictest9-21ksoftirqd/023:45:120
32596994436,4cyclictest9-21ksoftirqd/000:10:110
32596994425,4cyclictest9-21ksoftirqd/022:30:000
3259699440,4cyclictest121rcu_preempt21:00:240
3259699440,4cyclictest121rcu_preempt20:35:290
3224824414,19sleep10-21swapper/119:09:121
3214724415,18sleep00-21swapper/019:07:580
123591440,1ptp4l401ktimersoftd/320:13:563
123591440,1ptp4l401ktimersoftd/319:58:043
32599994336,4cyclictest41-21ksoftirqd/319:51:593
32599994336,4cyclictest41-21ksoftirqd/319:51:593
32599994328,4cyclictest41-21ksoftirqd/319:25:313
32597994336,4cyclictest25-21ksoftirqd/120:55:141
32597994336,4cyclictest25-21ksoftirqd/100:00:161
32596994338,3cyclictest9-21ksoftirqd/019:59:590
32596994337,3cyclictest9-21ksoftirqd/022:50:180
32596994337,3cyclictest9-21ksoftirqd/022:50:180
32596994336,4cyclictest9-21ksoftirqd/022:25:000
32596994330,7cyclictest9-21ksoftirqd/020:25:130
32596994326,4cyclictest9-21ksoftirqd/022:05:290
32596994324,4cyclictest9-21ksoftirqd/020:40:180
123591430,1ptp4l401ktimersoftd/321:55:163
32599994236,4cyclictest41-21ksoftirqd/323:55:213
32599994235,4cyclictest41-21ksoftirqd/323:36:353
32598994235,4cyclictest33-21ksoftirqd/223:02:302
32598994232,4cyclictest33-21ksoftirqd/223:05:012
32597994236,4cyclictest25-21ksoftirqd/121:55:111
32597994236,3cyclictest25-21ksoftirqd/120:40:011
32597994236,3cyclictest25-21ksoftirqd/100:19:591
32596994237,3cyclictest9-21ksoftirqd/020:54:590
32596994236,4cyclictest9-21ksoftirqd/023:10:210
32596994236,3cyclictest9-21ksoftirqd/020:25:000
32596994235,4cyclictest9-21ksoftirqd/022:14:590
32596994235,4cyclictest9-21ksoftirqd/000:05:200
32596994223,4cyclictest9-21ksoftirqd/019:15:280
3259699420,4cyclictest121rcu_preempt21:35:240
32599994135,4cyclictest41-21ksoftirqd/323:26:543
32599994135,4cyclictest41-21ksoftirqd/322:30:283
32599994135,4cyclictest41-21ksoftirqd/300:04:413
32599994133,5cyclictest41-21ksoftirqd/322:17:173
32599994133,5cyclictest41-21ksoftirqd/320:08:143
32599994133,5cyclictest41-21ksoftirqd/300:38:213
32598994134,4cyclictest33-21ksoftirqd/220:35:002
32598994133,5cyclictest33-21ksoftirqd/220:01:242
32598994132,6cyclictest33-21ksoftirqd/200:15:272
3259799415,4cyclictest121rcu_preempt19:45:001
32597994136,3cyclictest25-21ksoftirqd/122:05:191
32597994136,3cyclictest25-21ksoftirqd/100:30:171
32597994135,4cyclictest25-21ksoftirqd/123:10:231
32597994134,4cyclictest25-21ksoftirqd/122:15:001
32597994134,4cyclictest25-21ksoftirqd/121:15:171
32596994135,4cyclictest9-21ksoftirqd/023:20:000
32596994135,4cyclictest9-21ksoftirqd/019:35:000
32596994135,3cyclictest9-21ksoftirqd/019:50:000
32596994123,4cyclictest9-21ksoftirqd/023:40:230
32599994034,3cyclictest41-21ksoftirqd/320:47:523
32599994033,4cyclictest41-21ksoftirqd/321:06:243
32599994033,4cyclictest41-21ksoftirqd/319:14:243
32599994032,5cyclictest4208-21cron23:05:013
32599994032,5cyclictest41-21ksoftirqd/320:40:073
32598994035,3cyclictest33-21ksoftirqd/222:35:312
32598994034,3cyclictest33-21ksoftirqd/220:42:202
32598994034,3cyclictest33-21ksoftirqd/219:47:052
32598994033,4cyclictest33-21ksoftirqd/223:36:022
32598994033,4cyclictest33-21ksoftirqd/200:00:042
32598994032,6cyclictest33-21ksoftirqd/220:50:332
32598994032,5cyclictest33-21ksoftirqd/220:20:422
32597994035,3cyclictest25-21ksoftirqd/121:35:201
32597994034,4cyclictest25-21ksoftirqd/123:25:001
32597994034,3cyclictest25-21ksoftirqd/121:47:191
32597994034,3cyclictest25-21ksoftirqd/119:15:001
32597994033,4cyclictest25-21ksoftirqd/123:55:001
32597994032,5cyclictest25-21ksoftirqd/121:25:231
32597994032,5cyclictest25-21ksoftirqd/121:25:231
32597994025,4cyclictest25-21ksoftirqd/122:25:281
3259699406,4cyclictest121rcu_preempt23:50:240
32596994033,4cyclictest9-21ksoftirqd/021:25:230
32596994033,4cyclictest9-21ksoftirqd/021:25:230
32596994033,4cyclictest9-21ksoftirqd/020:00:210
32596994032,4cyclictest9-21ksoftirqd/000:20:200
32596994032,4cyclictest9-21ksoftirqd/000:20:190
32596994021,4cyclictest9-21ksoftirqd/022:45:290
32599993933,3cyclictest41-21ksoftirqd/321:37:463
32599993933,3cyclictest41-21ksoftirqd/320:31:213
32599993932,4cyclictest41-21ksoftirqd/323:34:113
32599993932,4cyclictest41-21ksoftirqd/323:22:423
32599993932,4cyclictest41-21ksoftirqd/322:02:173
32599993932,4cyclictest41-21ksoftirqd/321:04:033
32599993932,4cyclictest41-21ksoftirqd/320:56:543
32599993932,4cyclictest41-21ksoftirqd/320:27:023
32598993934,3cyclictest33-21ksoftirqd/219:31:182
32598993932,4cyclictest33-21ksoftirqd/223:11:062
32598993932,4cyclictest33-21ksoftirqd/220:10:122
32598993931,5cyclictest33-21ksoftirqd/222:09:382
32597993934,3cyclictest25-21ksoftirqd/123:05:011
32597993933,4cyclictest25-21ksoftirqd/120:40:221
32597993933,4cyclictest25-21ksoftirqd/119:45:451
32597993933,4cyclictest25-21ksoftirqd/100:25:181
32597993932,4cyclictest25-21ksoftirqd/119:40:001
32596993933,4cyclictest9-21ksoftirqd/023:20:200
32596993933,4cyclictest9-21ksoftirqd/022:41:000
32596993933,3cyclictest9-21ksoftirqd/021:18:530
32596993933,3cyclictest9-21ksoftirqd/019:10:160
32596993932,5cyclictest9-21ksoftirqd/019:50:220
32596993932,5cyclictest9-21ksoftirqd/019:50:220
32599993832,3cyclictest41-21ksoftirqd/323:45:483
32599993832,3cyclictest41-21ksoftirqd/321:18:073
32599993831,4cyclictest41-21ksoftirqd/323:42:333
32599993831,4cyclictest41-21ksoftirqd/322:35:053
32599993831,4cyclictest41-21ksoftirqd/322:25:543
32599993831,4cyclictest41-21ksoftirqd/300:13:283
32598993833,3cyclictest33-21ksoftirqd/219:50:232
32598993833,3cyclictest33-21ksoftirqd/219:50:232
32598993833,3cyclictest33-21ksoftirqd/200:25:282
32598993833,3cyclictest30796-21kworker/2:000:35:132
32598993831,4cyclictest33-21ksoftirqd/223:45:092
32598993830,5cyclictest33-21ksoftirqd/223:51:232
32598993830,5cyclictest33-21ksoftirqd/222:21:032
32598993830,5cyclictest33-21ksoftirqd/200:33:502
32597993833,3cyclictest25-21ksoftirqd/123:45:291
32597993833,3cyclictest25-21ksoftirqd/122:55:261
32597993832,3cyclictest25-21ksoftirqd/122:00:171
32597993831,4cyclictest25-21ksoftirqd/119:55:311
32597993830,5cyclictest25-21ksoftirqd/119:35:001
32597993823,4cyclictest25-21ksoftirqd/119:50:291
32597993823,4cyclictest25-21ksoftirqd/119:50:291
32597993819,4cyclictest25-21ksoftirqd/122:50:161
32597993819,4cyclictest25-21ksoftirqd/122:50:151
32596993831,4cyclictest9-21ksoftirqd/021:48:170
32596993831,4cyclictest9-21ksoftirqd/021:20:100
32596993820,4cyclictest9-21ksoftirqd/023:25:250
32599993730,5cyclictest41-21ksoftirqd/300:05:423
32599993730,4cyclictest41-21ksoftirqd/322:40:423
32599993730,4cyclictest41-21ksoftirqd/321:12:273
32599993730,4cyclictest41-21ksoftirqd/320:01:173
32599993729,5cyclictest41-21ksoftirqd/322:13:083
32598993731,4cyclictest33-21ksoftirqd/223:57:172
32598993731,3cyclictest33-21ksoftirqd/223:16:132
32598993731,3cyclictest33-21ksoftirqd/222:04:442
32598993730,4cyclictest33-21ksoftirqd/223:32:572
32598993730,4cyclictest33-21ksoftirqd/222:15:162
32598993730,4cyclictest33-21ksoftirqd/219:17:002
32597993732,3cyclictest25-21ksoftirqd/122:40:211
32597993731,4cyclictest25-21ksoftirqd/120:10:001
32597993731,3cyclictest25-21ksoftirqd/119:27:471
32597993730,4cyclictest25-21ksoftirqd/122:36:471
32597993725,4cyclictest25-21ksoftirqd/123:15:171
3259799370,4cyclictest121rcu_preempt21:10:261
32596993730,4cyclictest9-21ksoftirqd/019:41:380
32596993720,4cyclictest9-21ksoftirqd/020:10:180
32599993630,3cyclictest41-21ksoftirqd/300:28:223
32599993629,5cyclictest41-21ksoftirqd/321:43:333
32599993629,4cyclictest41-21ksoftirqd/322:54:283
32599993629,4cyclictest41-21ksoftirqd/322:54:283
32599993629,4cyclictest41-21ksoftirqd/320:37:063
32599993628,5cyclictest41-21ksoftirqd/323:52:213
32598993630,4cyclictest33-21ksoftirqd/219:57:022
32598993629,4cyclictest33-21ksoftirqd/223:41:092
32598993629,4cyclictest33-21ksoftirqd/223:20:582
32598993629,4cyclictest33-21ksoftirqd/222:41:582
32598993629,4cyclictest33-21ksoftirqd/219:27:282
32598993628,5cyclictest33-21ksoftirqd/221:38:382
32598993628,5cyclictest33-21ksoftirqd/221:12:452
32597993631,3cyclictest25-21ksoftirqd/120:45:121
32597993629,4cyclictest25-21ksoftirqd/123:33:191
32597993629,4cyclictest25-21ksoftirqd/120:50:201
32599993528,4cyclictest41-21ksoftirqd/300:19:033
32598993530,3cyclictest33-21ksoftirqd/221:23:552
32598993529,4cyclictest33-21ksoftirqd/222:14:172
32598993529,4cyclictest33-21ksoftirqd/221:43:512
32598993529,3cyclictest33-21ksoftirqd/222:25:432
32598993528,4cyclictest33-21ksoftirqd/223:00:012
32598993528,4cyclictest33-21ksoftirqd/222:52:262
32598993528,4cyclictest33-21ksoftirqd/222:52:252
32598993528,4cyclictest33-21ksoftirqd/221:47:102
32598993528,4cyclictest33-21ksoftirqd/219:35:382
3259899350,2cyclictest0-21swapper/220:55:192
32597993529,4cyclictest25-21ksoftirqd/123:25:131
32597993529,4cyclictest25-21ksoftirqd/120:00:221
123591350,1ptp4l401ktimersoftd/319:22:053
32599993428,4cyclictest41-21ksoftirqd/319:16:033
32598993429,3cyclictest33-21ksoftirqd/220:10:012
32598993428,3cyclictest33-21ksoftirqd/219:40:282
32598993427,4cyclictest33-21ksoftirqd/221:30:312
32598993427,4cyclictest33-21ksoftirqd/221:28:282
32598993427,4cyclictest33-21ksoftirqd/221:28:272
32598993427,4cyclictest33-21ksoftirqd/200:11:312
32599993326,4cyclictest41-21ksoftirqd/319:47:443
32598993328,3cyclictest33-21ksoftirqd/220:46:022
32598993326,4cyclictest33-21ksoftirqd/221:53:532
32598993326,4cyclictest33-21ksoftirqd/221:06:472
32598993326,4cyclictest33-21ksoftirqd/220:38:092
32598993325,5cyclictest33-21ksoftirqd/221:04:352
3259899331,3cyclictest0-21swapper/220:27:192
123591330,1ptp4l401ktimersoftd/322:55:013
32599993225,4cyclictest41-21ksoftirqd/319:36:123
32598993225,5cyclictest33-21ksoftirqd/221:19:142
32599993124,4cyclictest41-21ksoftirqd/322:47:093
32598993124,4cyclictest33-21ksoftirqd/219:12:462
1236913023,3phc2sys41-21ksoftirqd/322:23:343
32599992823,3cyclictest41-21ksoftirqd/321:53:343
32598992821,3cyclictest33-21ksoftirqd/219:20:322
32598992317,4cyclictest33-21ksoftirqd/223:26:252
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional