You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-09-24 - 02:57
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot4.osadl.org (updated Sat Sep 23, 2023 12:46:27)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1299911290,50ptp4l41-21ksoftirqd/307:06:153
1299911120,2ptp4l401ktimersoftd/309:10:313
1121429212,15sleep20-21swapper/207:06:482
11810998735,8cyclictest25-21ksoftirqd/108:24:191
113562814,17sleep00-21swapper/007:08:400
11810997837,8cyclictest25-21ksoftirqd/110:05:001
11810997534,7cyclictest25-21ksoftirqd/107:25:391
11810997329,4cyclictest25-21ksoftirqd/110:52:431
11810997235,4cyclictest25-21ksoftirqd/112:15:131
112582722,18sleep10-21swapper/107:07:241
129991710,5ptp4l401ktimersoftd/307:10:013
11810997136,4cyclictest25-21ksoftirqd/108:00:211
11810997036,5cyclictest25-21ksoftirqd/110:35:351
11810997035,4cyclictest25-21ksoftirqd/110:40:351
11810996934,9cyclictest25-21ksoftirqd/107:40:191
1181099692,8cyclictest26028-21sed07:39:591
11810996835,8cyclictest25-21ksoftirqd/107:10:161
11810996733,4cyclictest25-21ksoftirqd/108:06:281
11810996732,4cyclictest25-21ksoftirqd/111:02:301
11810996633,8cyclictest25-21ksoftirqd/112:10:191
11810996632,8cyclictest25-21ksoftirqd/110:25:001
55112650,7sleep11181099cyclictest11:30:231
11810996536,7cyclictest25-21ksoftirqd/108:35:351
11810996532,9cyclictest25-21ksoftirqd/111:45:181
11810996531,5cyclictest25-21ksoftirqd/108:15:271
11810996431,9cyclictest25-21ksoftirqd/109:20:241
129991630,1ptp4l401ktimersoftd/310:45:003
1181099635,9cyclictest25-21ksoftirqd/109:30:301
1181099634,9cyclictest25-21ksoftirqd/111:50:171
11810996330,8cyclictest25-21ksoftirqd/109:40:341
11810996326,8cyclictest25-21ksoftirqd/111:40:361
1181099627,8cyclictest25-21ksoftirqd/111:25:011
1181099626,8cyclictest25-21ksoftirqd/111:05:401
1181099626,8cyclictest25-21ksoftirqd/111:05:391
1181099626,11cyclictest25-21ksoftirqd/109:45:341
1181099625,9cyclictest25-21ksoftirqd/111:55:171
129991610,1ptp4l401ktimersoftd/309:48:273
129991610,1ptp4l401ktimersoftd/307:30:243
1181099617,8cyclictest25-21ksoftirqd/111:25:231
1181099617,5cyclictest9912-21/usr/sbin/munin10:30:231
1181099616,10cyclictest25-21ksoftirqd/111:10:371
1181099614,5cyclictest25-21ksoftirqd/112:30:261
1181099614,5cyclictest25-21ksoftirqd/108:15:011
1181099614,5cyclictest25-21ksoftirqd/108:15:001
1181099613,9cyclictest25-21ksoftirqd/110:20:251
11810996127,8cyclictest25-21ksoftirqd/112:05:281
1181099606,8cyclictest25-21ksoftirqd/108:40:331
1181099606,8cyclictest25-21ksoftirqd/107:50:431
1181099606,10cyclictest25-21ksoftirqd/107:45:231
1181099605,11cyclictest25-21ksoftirqd/109:10:371
1181099604,9cyclictest25-21ksoftirqd/108:45:321
1181099603,9cyclictest25-21ksoftirqd/111:35:211
1181099596,8cyclictest25-21ksoftirqd/112:35:371
1181099596,8cyclictest25-21ksoftirqd/112:35:361
1181099595,8cyclictest25-21ksoftirqd/108:25:371
1181099586,10cyclictest25-21ksoftirqd/110:55:221
1181099585,11cyclictest25-21ksoftirqd/109:35:381
1181099585,11cyclictest25-21ksoftirqd/109:35:371
1181099585,11cyclictest25-21ksoftirqd/107:30:361
1181099584,11cyclictest25-21ksoftirqd/110:05:231
1181099583,9cyclictest25-21ksoftirqd/112:24:591
1181099583,9cyclictest25-21ksoftirqd/108:35:001
1181099583,8cyclictest25-21ksoftirqd/108:00:011
1181099583,7cyclictest25-21ksoftirqd/109:05:381
1181099582,8cyclictest25-21ksoftirqd/107:15:251
1181099581,4cyclictest25-21ksoftirqd/109:25:381
1181099577,4cyclictest25-21ksoftirqd/109:55:001
1181099573,8cyclictest25-21ksoftirqd/109:00:191
1181099564,7cyclictest25-21ksoftirqd/109:00:011
1181099563,8cyclictest25-21ksoftirqd/110:45:341
1181099563,8cyclictest25-21ksoftirqd/107:20:401
1181099554,9cyclictest25-21ksoftirqd/109:55:361
11810995525,9cyclictest25-21ksoftirqd/110:15:321
1181099551,8cyclictest25-21ksoftirqd/111:20:001
129991540,1ptp4l401ktimersoftd/312:20:503
129891540,8phc2sys41-21ksoftirqd/310:15:343
1181099546,9cyclictest25-21ksoftirqd/109:20:001
1181099532,4cyclictest25-21ksoftirqd/110:10:331
129991520,7ptp4l41-21ksoftirqd/311:50:193
129991520,1ptp4l401ktimersoftd/309:22:123
11810995242,3cyclictest25-21ksoftirqd/112:25:281
1181099523,8cyclictest25-21ksoftirqd/108:55:001
11809995235,14cyclictest9-21ksoftirqd/009:26:090
129991510,1ptp4l401ktimersoftd/312:39:083
129991510,1ptp4l401ktimersoftd/312:39:083
1181099511,4cyclictest25-21ksoftirqd/112:00:161
11809995034,13cyclictest9-21ksoftirqd/008:42:540
11809994933,13cyclictest9-21ksoftirqd/011:06:500
11809994933,13cyclictest9-21ksoftirqd/011:06:490
11809994932,14cyclictest9-21ksoftirqd/009:11:240
11809994834,11cyclictest9-21ksoftirqd/012:03:050
11809994729,14cyclictest9-21ksoftirqd/012:17:230
11809994639,4cyclictest9-21ksoftirqd/010:00:000
11809994630,13cyclictest9-21ksoftirqd/008:03:200
11809994629,14cyclictest9-21ksoftirqd/010:32:530
11809994530,12cyclictest9-21ksoftirqd/010:35:180
11809994529,13cyclictest9-21ksoftirqd/009:16:090
129991440,1ptp4l401ktimersoftd/311:37:453
129991430,1ptp4l401ktimersoftd/311:43:473
129991430,1ptp4l401ktimersoftd/311:10:323
11812994336,4cyclictest41-21ksoftirqd/311:48:353
11809994337,3cyclictest9-21ksoftirqd/007:57:310
11809994336,4cyclictest9-21ksoftirqd/008:52:500
1180999430,5cyclictest19304-21fschecks_time10:50:250
219172420,4sleep021918-21idleruntime-cro08:40:010
129991420,1ptp4l401ktimersoftd/308:50:313
1298914235,3phc2sys41-21ksoftirqd/309:52:093
11812994235,4cyclictest41-21ksoftirqd/309:01:373
11809994225,14cyclictest9-21ksoftirqd/009:35:090
11809994225,14cyclictest9-21ksoftirqd/009:35:080
11812994134,4cyclictest41-21ksoftirqd/311:28:373
11812994134,4cyclictest41-21ksoftirqd/308:46:033
11812994134,4cyclictest41-21ksoftirqd/308:11:313
11812994134,4cyclictest41-21ksoftirqd/308:11:303
11812994133,5cyclictest41-21ksoftirqd/312:12:283
11811994135,3cyclictest33-21ksoftirqd/208:12:512
11811994135,3cyclictest33-21ksoftirqd/208:12:512
11811994134,4cyclictest33-21ksoftirqd/210:44:212
11811994134,4cyclictest33-21ksoftirqd/208:54:142
11811994134,4cyclictest33-21ksoftirqd/208:06:272
11809994135,3cyclictest9-21ksoftirqd/012:25:120
11809994135,3cyclictest9-21ksoftirqd/011:20:520
11809994124,14cyclictest9-21ksoftirqd/012:08:550
129991400,1ptp4l401ktimersoftd/311:55:223
129991400,1ptp4l401ktimersoftd/311:24:523
11812994034,3cyclictest41-21ksoftirqd/310:06:193
11812994032,5cyclictest41-21ksoftirqd/308:36:543
11811994035,3cyclictest33-21ksoftirqd/209:20:002
11811994034,3cyclictest33-21ksoftirqd/210:47:592
11811994034,3cyclictest33-21ksoftirqd/208:03:302
11811994033,4cyclictest33-21ksoftirqd/209:41:372
11809994034,4cyclictest9-21ksoftirqd/012:39:560
11809994034,4cyclictest9-21ksoftirqd/012:39:550
11809994034,3cyclictest9-21ksoftirqd/010:07:530
1180999400,4cyclictest15802-21latency11:50:260
129991390,16ptp4l401ktimersoftd/307:40:353
11812993933,3cyclictest41-21ksoftirqd/309:18:383
11812993933,3cyclictest41-21ksoftirqd/308:32:393
11812993933,3cyclictest41-21ksoftirqd/307:48:223
11812993932,4cyclictest41-21ksoftirqd/312:25:173
11812993932,4cyclictest41-21ksoftirqd/310:53:493
11812993932,4cyclictest41-21ksoftirqd/308:28:343
11811993934,3cyclictest33-21ksoftirqd/212:20:322
11811993933,3cyclictest33-21ksoftirqd/207:22:582
11811993932,4cyclictest33-21ksoftirqd/211:10:242
11811993932,4cyclictest33-21ksoftirqd/210:28:052
11811993932,4cyclictest33-21ksoftirqd/209:55:202
11811993931,5cyclictest33-21ksoftirqd/211:45:122
11809993934,3cyclictest9-21ksoftirqd/012:11:060
11809993933,4cyclictest9-21ksoftirqd/011:13:390
11809993932,4cyclictest9-21ksoftirqd/011:45:010
11809993932,4cyclictest9-21ksoftirqd/009:41:410
11809993932,4cyclictest9-21ksoftirqd/009:03:170
11809993932,4cyclictest9-21ksoftirqd/007:53:040
129991380,1ptp4l401ktimersoftd/310:30:403
11812993832,4cyclictest41-21ksoftirqd/309:40:133
11812993832,4cyclictest41-21ksoftirqd/307:18:093
11812993832,3cyclictest41-21ksoftirqd/310:13:113
11812993832,3cyclictest41-21ksoftirqd/308:59:093
11812993831,4cyclictest41-21ksoftirqd/310:03:133
11812993831,4cyclictest41-21ksoftirqd/309:36:083
11812993831,4cyclictest41-21ksoftirqd/309:36:073
11812993831,4cyclictest41-21ksoftirqd/308:41:563
11812993831,4cyclictest41-21ksoftirqd/308:22:023
11812993830,5cyclictest41-21ksoftirqd/312:18:023
11812993830,5cyclictest41-21ksoftirqd/309:56:073
11812993830,5cyclictest41-21ksoftirqd/309:27:373
11812993830,5cyclictest41-21ksoftirqd/309:05:163
11811993833,3cyclictest33-21ksoftirqd/208:40:292
11811993832,4cyclictest33-21ksoftirqd/211:40:242
11811993832,3cyclictest33-21ksoftirqd/211:59:322
11811993832,3cyclictest33-21ksoftirqd/211:35:162
11811993831,4cyclictest33-21ksoftirqd/209:37:332
11811993831,4cyclictest33-21ksoftirqd/209:37:332
11811993831,4cyclictest33-21ksoftirqd/209:08:302
11811993831,4cyclictest33-21ksoftirqd/209:00:412
11811993831,4cyclictest33-21ksoftirqd/208:18:392
11811993831,4cyclictest33-21ksoftirqd/207:42:582
11809993833,3cyclictest9-21ksoftirqd/007:31:300
11809993832,4cyclictest9-21ksoftirqd/007:19:290
11809993832,3cyclictest9-21ksoftirqd/011:05:000
11809993832,3cyclictest9-21ksoftirqd/009:45:060
11809993832,3cyclictest9-21ksoftirqd/008:26:590
11809993831,4cyclictest9-21ksoftirqd/012:22:290
11809993831,4cyclictest9-21ksoftirqd/011:48:400
11809993831,4cyclictest9-21ksoftirqd/010:58:130
11809993831,4cyclictest9-21ksoftirqd/010:44:590
11809993831,4cyclictest9-21ksoftirqd/008:09:130
11809993831,4cyclictest9-21ksoftirqd/007:41:210
11809993831,4cyclictest9-21ksoftirqd/007:36:220
11809993812,23cyclictest17911-21iostat11:55:230
11809993812,23cyclictest1472-21sed12:30:230
11809993810,24cyclictest31580-21latency_hist09:00:000
11812993731,4cyclictest41-21ksoftirqd/308:06:313
11812993731,3cyclictest41-21ksoftirqd/308:19:573
11812993731,3cyclictest41-21ksoftirqd/307:51:533
11812993730,4cyclictest41-21ksoftirqd/311:05:083
11812993730,4cyclictest41-21ksoftirqd/311:05:073
11812993730,4cyclictest41-21ksoftirqd/310:45:153
11812993730,4cyclictest41-21ksoftirqd/308:03:153
11812993729,5cyclictest41-21ksoftirqd/312:08:103
11812993729,5cyclictest41-21ksoftirqd/311:01:063
11812993729,5cyclictest41-21ksoftirqd/310:28:233
11812993729,5cyclictest41-21ksoftirqd/309:32:143
11811993732,3cyclictest33-21ksoftirqd/212:39:222
11811993732,3cyclictest33-21ksoftirqd/212:39:222
11811993732,3cyclictest33-21ksoftirqd/210:18:172
11811993731,4cyclictest33-21ksoftirqd/210:14:342
11811993730,4cyclictest33-21ksoftirqd/212:10:522
11811993730,4cyclictest33-21ksoftirqd/207:29:222
11811993729,5cyclictest33-21ksoftirqd/209:21:292
11809993731,3cyclictest9-21ksoftirqd/010:48:070
11809993731,3cyclictest9-21ksoftirqd/007:45:090
1180999373,11cyclictest8728-21apt-get09:20:180
11809993730,4cyclictest9-21ksoftirqd/010:03:140
11809993730,4cyclictest9-21ksoftirqd/009:50:100
11809993730,4cyclictest9-21ksoftirqd/008:23:460
11809993730,4cyclictest9-21ksoftirqd/007:11:530
11809993711,22cyclictest18812-21latency_hist07:25:010
1298913629,3phc2sys41-21ksoftirqd/307:20:383
11812993630,3cyclictest41-21ksoftirqd/311:31:213
11812993629,4cyclictest41-21ksoftirqd/311:17:173
11812993629,4cyclictest41-21ksoftirqd/310:39:503
11812993629,4cyclictest41-21ksoftirqd/307:58:053
11811993631,3cyclictest33-21ksoftirqd/209:30:362
11811993630,4cyclictest33-21ksoftirqd/212:26:082
11811993630,4cyclictest33-21ksoftirqd/207:37:032
11811993630,3cyclictest33-21ksoftirqd/210:50:112
11811993630,3cyclictest33-21ksoftirqd/207:10:122
11811993629,4cyclictest33-21ksoftirqd/211:31:262
11811993629,4cyclictest33-21ksoftirqd/211:06:592
11811993629,4cyclictest33-21ksoftirqd/211:06:582
11811993629,4cyclictest33-21ksoftirqd/208:55:202
11811993629,4cyclictest33-21ksoftirqd/208:22:042
11811993628,5cyclictest1242-21snmpd08:47:582
11809993629,4cyclictest9-21ksoftirqd/010:22:330
11809993629,4cyclictest9-21ksoftirqd/008:47:110
11809993613,20cyclictest7859-21/usr/sbin/munin08:10:290
11809993613,20cyclictest7859-21/usr/sbin/munin08:10:280
11809993612,20cyclictest1596-21sshd09:05:130
11809993610,22cyclictest30704-21expr11:15:230
129991350,1ptp4l401ktimersoftd/310:20:223
11812993530,3cyclictest41-21ksoftirqd/307:26:273
11812993528,4cyclictest41-21ksoftirqd/310:58:123
11811993528,4cyclictest33-21ksoftirqd/212:16:592
11811993528,4cyclictest33-21ksoftirqd/210:55:562
11811993528,4cyclictest33-21ksoftirqd/208:39:462
11811993528,4cyclictest33-21ksoftirqd/207:54:212
11811993527,5cyclictest33-21ksoftirqd/209:27:362
1180999353,7cyclictest8204-21sed11:35:240
1180999353,26cyclictest0-21swapper/008:15:190
11809993529,4cyclictest9-21ksoftirqd/011:30:560
11809993529,4cyclictest9-21ksoftirqd/007:25:190
11809993528,4cyclictest9-21ksoftirqd/010:16:230
11809993510,21cyclictest19580-21cron08:35:000
1180999350,3cyclictest1549-21seq10:10:410
129991340,1ptp4l401ktimersoftd/312:04:003
11812993428,3cyclictest41-21ksoftirqd/307:36:183
11811993429,3cyclictest33-21ksoftirqd/212:30:252
11811993428,4cyclictest33-21ksoftirqd/210:32:152
11811993427,4cyclictest33-21ksoftirqd/212:08:292
11811993427,4cyclictest33-21ksoftirqd/210:08:142
11811993427,4cyclictest33-21ksoftirqd/208:30:592
11811993427,4cyclictest33-21ksoftirqd/207:57:502
1180999348,5cyclictest14837-21cat09:30:330
11809993427,4cyclictest9-21ksoftirqd/010:28:320
11811993327,4cyclictest33-21ksoftirqd/211:16:352
11811993327,3cyclictest33-21ksoftirqd/211:54:062
11811993327,3cyclictest33-21ksoftirqd/210:00:592
11811993326,4cyclictest33-21ksoftirqd/208:29:552
11809993312,18cyclictest9-21ksoftirqd/011:25:440
129991320,1ptp4l401ktimersoftd/312:31:533
11811993225,4cyclictest33-21ksoftirqd/210:21:102
11811993225,4cyclictest33-21ksoftirqd/209:45:302
11811993224,5cyclictest33-21ksoftirqd/211:25:422
11811993125,4cyclictest33-21ksoftirqd/212:03:512
11811993125,4cyclictest33-21ksoftirqd/209:13:462
11811993124,4cyclictest33-21ksoftirqd/210:35:042
11811993024,3cyclictest33-21ksoftirqd/211:00:002
11811993023,4cyclictest33-21ksoftirqd/207:30:362
11811992922,4cyclictest33-21ksoftirqd/207:45:152
11811992922,4cyclictest33-21ksoftirqd/207:15:082
11811992822,4cyclictest33-21ksoftirqd/209:52:582
11811992821,4cyclictest33-21ksoftirqd/211:20:212
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional