You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-12-03 - 03:07
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Sat Dec 02, 2023 12:46:20)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2147123690,4sleep10-21swapper/107:05:361
123691198175,10phc2sys0-21swapper/307:09:143
576981170,31rtkit-daemon0-21swapper/207:08:412
1235911070,4ptp4l401ktimersoftd/307:10:003
2214027454,10sleep00-21swapper/007:05:520
2275499719,17cyclictest1139-21snmpd11:48:372
2275499709,19cyclictest1139-21snmpd11:03:282
2275499709,17cyclictest1139-21snmpd11:23:322
251432690,8sleep12275399cyclictest10:45:381
2275499698,19cyclictest1139-21snmpd07:42:472
2275499698,19cyclictest1139-21snmpd07:42:462
22754996811,12cyclictest24764-21cstates12:00:162
22755996648,9cyclictest41-21ksoftirqd/309:45:203
2275499668,11cyclictest1139-21snmpd07:22:432
2275399594,8cyclictest19199-21acpi11:45:201
127222590,2sleep30-21swapper/310:15:373
123591580,1ptp4l401ktimersoftd/310:29:123
123591570,1ptp4l401ktimersoftd/311:51:253
22755995649,4cyclictest41-21ksoftirqd/312:40:003
2275499567,14cyclictest0-21swapper/208:40:362
16582550,2sleep30-21swapper/311:05:393
22755995347,4cyclictest41-21ksoftirqd/312:00:013
22755995246,4cyclictest41-21ksoftirqd/309:20:003
22755995145,3cyclictest41-21ksoftirqd/312:20:003
22755995144,4cyclictest41-21ksoftirqd/307:40:003
22755995044,4cyclictest41-21ksoftirqd/311:35:003
22752995042,4cyclictest9-21ksoftirqd/007:40:200
22752995042,4cyclictest9-21ksoftirqd/007:40:200
22752994933,13cyclictest9-21ksoftirqd/011:12:590
22752994932,14cyclictest9-21ksoftirqd/008:29:160
22752994931,14cyclictest9-21ksoftirqd/010:01:300
22755994843,3cyclictest41-21ksoftirqd/309:25:003
22755994842,3cyclictest23255-21sh09:30:003
22752994833,12cyclictest9-21ksoftirqd/012:20:390
22755994742,3cyclictest41-21ksoftirqd/309:59:593
22755994741,4cyclictest41-21ksoftirqd/310:45:223
22755994740,4cyclictest41-21ksoftirqd/307:50:213
22755994733,7cyclictest41-21ksoftirqd/312:20:153
22753994740,4cyclictest25-21ksoftirqd/110:55:001
123591470,1ptp4l401ktimersoftd/308:25:073
22755994641,3cyclictest41-21ksoftirqd/311:05:013
22755994641,3cyclictest41-21ksoftirqd/308:00:003
22755994640,4cyclictest41-21ksoftirqd/312:05:003
22755994640,4cyclictest41-21ksoftirqd/308:40:003
22755994639,4cyclictest41-21ksoftirqd/308:50:213
22755994539,4cyclictest41-21ksoftirqd/309:00:003
22755994539,3cyclictest41-21ksoftirqd/311:00:003
22755994539,3cyclictest41-21ksoftirqd/308:10:003
22755994538,4cyclictest41-21ksoftirqd/308:45:203
22755994535,7cyclictest41-21ksoftirqd/308:24:343
22754994512,13cyclictest26871-21grep10:50:312
22754994512,13cyclictest2594-21chrt11:09:232
22753994539,4cyclictest25-21ksoftirqd/110:35:001
22752994527,14cyclictest9-21ksoftirqd/010:12:480
22755994438,4cyclictest41-21ksoftirqd/307:20:003
22755994438,3cyclictest41-21ksoftirqd/310:20:253
22755994437,4cyclictest41-21ksoftirqd/308:15:013
22754994412,10cyclictest23748-21apt-get10:45:202
116691440,2getstats0-21swapper/310:09:513
22755994336,4cyclictest41-21ksoftirqd/312:10:253
22754994336,4cyclictest33-21ksoftirqd/208:29:332
22754994311,10cyclictest4078-21taskset12:27:542
22754994310,9cyclictest4319-21apt-get10:00:152
22752994335,5cyclictest4650-21cron08:50:000
22752994325,15cyclictest9-21ksoftirqd/010:47:090
22755994237,3cyclictest41-21ksoftirqd/310:45:003
22755994236,4cyclictest41-21ksoftirqd/311:40:003
22755994236,3cyclictest41-21ksoftirqd/307:42:473
22755994236,3cyclictest41-21ksoftirqd/307:42:463
22754994235,4cyclictest33-21ksoftirqd/211:10:162
22752994237,3cyclictest9-21ksoftirqd/007:19:310
22752994225,14cyclictest9-21ksoftirqd/008:56:020
22752994224,15cyclictest9-21ksoftirqd/009:00:590
123591420,1ptp4l401ktimersoftd/310:00:303
123591420,1ptp4l401ktimersoftd/309:50:403
22755994136,3cyclictest41-21ksoftirqd/311:20:003
22755994136,3cyclictest41-21ksoftirqd/307:25:383
22755994135,4cyclictest41-21ksoftirqd/307:48:053
22755994135,4cyclictest41-21ksoftirqd/307:48:053
22755994135,3cyclictest41-21ksoftirqd/309:15:013
22755994135,3cyclictest41-21ksoftirqd/309:15:003
22755994135,3cyclictest41-21ksoftirqd/308:03:473
22755994134,4cyclictest28833-21latency_hist12:10:013
22755994134,4cyclictest28833-21latency_hist12:10:003
2275499419,11cyclictest1139-21snmpd07:17:422
2275499418,20cyclictest31636-21runrttasks12:15:592
22754994135,4cyclictest33-21ksoftirqd/207:50:322
22753994135,4cyclictest25-21ksoftirqd/108:36:091
22753994134,4cyclictest25-21ksoftirqd/107:26:501
22752994135,3cyclictest9-21ksoftirqd/011:19:100
22752994135,3cyclictest9-21ksoftirqd/011:06:230
22752994122,16cyclictest9-21ksoftirqd/012:27:050
22755994035,3cyclictest41-21ksoftirqd/311:25:263
22755994035,3cyclictest41-21ksoftirqd/307:30:343
22755994034,4cyclictest41-21ksoftirqd/310:14:493
22755994034,4cyclictest41-21ksoftirqd/308:34:353
22755994034,4cyclictest41-21ksoftirqd/307:25:003
22755994034,3cyclictest41-21ksoftirqd/311:10:133
22755994033,4cyclictest41-21ksoftirqd/312:32:023
22755994033,4cyclictest41-21ksoftirqd/309:40:013
22755994033,4cyclictest41-21ksoftirqd/308:18:103
22755994032,5cyclictest41-21ksoftirqd/310:37:083
22754994034,4cyclictest33-21ksoftirqd/210:40:312
22754994033,4cyclictest33-21ksoftirqd/210:36:032
22754994033,4cyclictest33-21ksoftirqd/209:26:102
22754994032,5cyclictest33-21ksoftirqd/210:29:592
22753994034,4cyclictest25-21ksoftirqd/111:51:091
22753994034,4cyclictest25-21ksoftirqd/108:55:001
22753994034,4cyclictest25-21ksoftirqd/108:04:291
22753994033,4cyclictest25-21ksoftirqd/111:02:111
22753994033,4cyclictest25-21ksoftirqd/107:44:311
22753994033,4cyclictest25-21ksoftirqd/107:44:301
22753994032,5cyclictest25-21ksoftirqd/108:09:261
2275299403,9cyclictest0-21swapper/010:25:240
22752994035,3cyclictest9-21ksoftirqd/009:29:420
22752994035,3cyclictest9-21ksoftirqd/008:04:300
22752994034,3cyclictest9-21ksoftirqd/011:51:060
22752994034,3cyclictest9-21ksoftirqd/009:18:400
22752994034,3cyclictest9-21ksoftirqd/007:10:130
22752994033,4cyclictest9-21ksoftirqd/012:34:560
22752994033,4cyclictest9-21ksoftirqd/011:27:240
22752994033,4cyclictest9-21ksoftirqd/011:03:430
22752994033,4cyclictest9-21ksoftirqd/009:24:110
22752994033,4cyclictest9-21ksoftirqd/007:29:090
22752994032,5cyclictest9-21ksoftirqd/010:55:080
22755993934,3cyclictest41-21ksoftirqd/311:49:003
22755993933,3cyclictest41-21ksoftirqd/309:30:583
22755993932,4cyclictest41-21ksoftirqd/312:27:333
22755993932,4cyclictest41-21ksoftirqd/309:09:283
22754993933,3cyclictest33-21ksoftirqd/209:08:252
22754993933,3cyclictest33-21ksoftirqd/208:47:242
22754993932,4cyclictest33-21ksoftirqd/208:22:432
22754993932,4cyclictest33-21ksoftirqd/208:19:312
22754993931,5cyclictest33-21ksoftirqd/207:55:502
22754993931,5cyclictest33-21ksoftirqd/207:30:082
22753993933,4cyclictest25-21ksoftirqd/112:07:311
22753993933,4cyclictest25-21ksoftirqd/112:07:311
22753993933,4cyclictest25-21ksoftirqd/108:50:001
22753993933,4cyclictest25-21ksoftirqd/108:24:341
22753993932,4cyclictest25-21ksoftirqd/111:30:301
22753993932,4cyclictest25-21ksoftirqd/111:24:591
22753993932,4cyclictest25-21ksoftirqd/109:52:021
22753993931,5cyclictest25-21ksoftirqd/107:52:161
2275299393,8cyclictest0-21swapper/007:45:250
2275299393,8cyclictest0-21swapper/007:45:250
22752993933,3cyclictest9-21ksoftirqd/009:44:140
22752993932,4cyclictest9-21ksoftirqd/012:37:080
22752993932,4cyclictest9-21ksoftirqd/012:13:520
22752993932,4cyclictest9-21ksoftirqd/012:04:090
22752993932,4cyclictest9-21ksoftirqd/011:57:590
22752993932,4cyclictest9-21ksoftirqd/011:38:480
22752993932,4cyclictest9-21ksoftirqd/011:20:500
22752993932,4cyclictest9-21ksoftirqd/010:09:320
22752993932,4cyclictest9-21ksoftirqd/009:32:350
22752993932,4cyclictest9-21ksoftirqd/009:06:060
22752993932,4cyclictest9-21ksoftirqd/008:37:320
22752993932,4cyclictest9-21ksoftirqd/008:15:030
22752993931,5cyclictest9-21ksoftirqd/010:23:450
22752993931,5cyclictest9-21ksoftirqd/009:38:010
22752993931,5cyclictest9-21ksoftirqd/008:24:090
22752993931,5cyclictest9-21ksoftirqd/007:39:210
22755993833,3cyclictest41-21ksoftirqd/311:24:593
22755993832,4cyclictest41-21ksoftirqd/309:43:133
22754993831,4cyclictest33-21ksoftirqd/212:22:502
22754993831,4cyclictest33-21ksoftirqd/212:08:412
22754993831,4cyclictest33-21ksoftirqd/212:08:402
22754993831,4cyclictest33-21ksoftirqd/211:41:072
22754993831,4cyclictest33-21ksoftirqd/209:33:212
22754993831,4cyclictest33-21ksoftirqd/209:00:482
22754993831,4cyclictest33-21ksoftirqd/208:53:012
22754993831,4cyclictest33-21ksoftirqd/208:10:102
22754993831,4cyclictest33-21ksoftirqd/207:38:082
22754993831,4cyclictest33-21ksoftirqd/207:29:212
22753993831,4cyclictest25-21ksoftirqd/112:10:481
22753993831,4cyclictest25-21ksoftirqd/109:55:321
22753993831,4cyclictest25-21ksoftirqd/109:39:461
22752993832,3cyclictest9-21ksoftirqd/009:13:190
22752993832,3cyclictest9-21ksoftirqd/009:13:180
22752993831,4cyclictest9-21ksoftirqd/012:09:290
22752993831,4cyclictest9-21ksoftirqd/012:09:290
22752993831,4cyclictest9-21ksoftirqd/011:43:370
22752993831,4cyclictest9-21ksoftirqd/011:32:580
22752993831,4cyclictest9-21ksoftirqd/010:43:370
22752993831,4cyclictest9-21ksoftirqd/010:32:410
22752993831,4cyclictest9-21ksoftirqd/007:33:360
22752993813,4cyclictest31974-21cat12:20:000
22755993730,4cyclictest41-21ksoftirqd/310:52:383
22755993730,4cyclictest41-21ksoftirqd/309:02:433
22754993731,4cyclictest33-21ksoftirqd/210:16:082
22754993731,4cyclictest33-21ksoftirqd/209:35:112
22754993731,4cyclictest33-21ksoftirqd/209:17:312
22754993730,4cyclictest33-21ksoftirqd/211:58:492
22754993730,4cyclictest33-21ksoftirqd/211:54:202
22754993730,4cyclictest33-21ksoftirqd/209:22:052
22754993730,4cyclictest33-21ksoftirqd/207:46:552
22754993730,4cyclictest33-21ksoftirqd/207:46:542
22754993729,5cyclictest33-21ksoftirqd/210:58:302
22754993729,5cyclictest33-21ksoftirqd/208:38:132
22754993719,11cyclictest16474-21apt-get08:05:202
22753993731,4cyclictest25-21ksoftirqd/112:37:311
22753993731,3cyclictest25-21ksoftirqd/112:25:301
22753993730,4cyclictest25-21ksoftirqd/110:55:491
22753993729,5cyclictest25-21ksoftirqd/112:22:251
22753993729,5cyclictest25-21ksoftirqd/109:12:081
22753993729,5cyclictest25-21ksoftirqd/109:12:081
22753993729,5cyclictest25-21ksoftirqd/108:30:421
22752993731,4cyclictest9-21ksoftirqd/008:52:160
22752993730,4cyclictest9-21ksoftirqd/008:06:450
22752993730,4cyclictest9-21ksoftirqd/007:54:110
22755993630,3cyclictest41-21ksoftirqd/308:43:253
22753993631,3cyclictest25-21ksoftirqd/110:21:441
22753993629,4cyclictest25-21ksoftirqd/112:17:311
22753993629,4cyclictest25-21ksoftirqd/111:05:371
22753993629,4cyclictest25-21ksoftirqd/109:24:371
22753993629,4cyclictest25-21ksoftirqd/108:41:211
22753993629,4cyclictest25-21ksoftirqd/108:18:441
22753993628,5cyclictest25-21ksoftirqd/109:26:491
22752993630,4cyclictest9-21ksoftirqd/009:50:170
22752993629,4cyclictest9-21ksoftirqd/010:39:380
22752993628,5cyclictest9-21ksoftirqd/007:55:560
22755993528,4cyclictest41-21ksoftirqd/311:44:213
22755993528,4cyclictest41-21ksoftirqd/310:30:313
22754993528,5cyclictest33-21ksoftirqd/210:14:402
22754993528,4cyclictest33-21ksoftirqd/212:12:462
22754993528,4cyclictest33-21ksoftirqd/211:18:222
22754993528,4cyclictest33-21ksoftirqd/210:23:472
22754993528,4cyclictest33-21ksoftirqd/209:13:212
22754993528,4cyclictest33-21ksoftirqd/209:13:212
22753993530,3cyclictest25-21ksoftirqd/110:10:171
22753993529,4cyclictest25-21ksoftirqd/107:18:181
22753993528,4cyclictest25-21ksoftirqd/110:35:591
22753993528,4cyclictest25-21ksoftirqd/109:35:001
22752993528,4cyclictest9-21ksoftirqd/009:46:230
22752993528,3cyclictest9-21ksoftirqd/011:46:550
22754993428,4cyclictest33-21ksoftirqd/208:30:202
22754993427,4cyclictest33-21ksoftirqd/211:26:092
22753993427,4cyclictest25-21ksoftirqd/111:44:271
22753993427,4cyclictest25-21ksoftirqd/110:44:001
22753993427,4cyclictest25-21ksoftirqd/109:18:181
22753993427,4cyclictest25-21ksoftirqd/109:09:431
22753993427,4cyclictest25-21ksoftirqd/107:46:061
22753993427,4cyclictest25-21ksoftirqd/107:46:051
22752993428,4cyclictest9-21ksoftirqd/010:50:190
22752993427,4cyclictest9-21ksoftirqd/008:30:480
22752993427,4cyclictest9-21ksoftirqd/008:14:190
22752993426,5cyclictest9-21ksoftirqd/008:44:290
22754993327,4cyclictest33-21ksoftirqd/208:04:372
22754993327,4cyclictest33-21ksoftirqd/207:10:012
22754993326,4cyclictest33-21ksoftirqd/212:34:142
22754993326,4cyclictest33-21ksoftirqd/211:36:092
22754993326,4cyclictest33-21ksoftirqd/209:42:162
22754993325,5cyclictest33-21ksoftirqd/209:52:512
22754993314,15cyclictest3777-21latency_hist10:00:002
22753993326,4cyclictest25-21ksoftirqd/112:02:261
22753993326,4cyclictest25-21ksoftirqd/107:30:311
22753993326,4cyclictest25-21ksoftirqd/107:11:251
22753993325,5cyclictest25-21ksoftirqd/109:48:101
22752993327,3cyclictest9-21ksoftirqd/009:56:150
22752993326,4cyclictest9-21ksoftirqd/007:20:470
22754993225,4cyclictest33-21ksoftirqd/210:05:122
22753993226,3cyclictest25-21ksoftirqd/111:27:581
22752993226,3cyclictest9-21ksoftirqd/010:18:360
2275499314,13cyclictest0-21swapper/209:45:272
22754993124,4cyclictest33-21ksoftirqd/212:35:462
22754993124,4cyclictest33-21ksoftirqd/211:33:332
22753993124,4cyclictest25-21ksoftirqd/107:56:371
22753993123,5cyclictest25-21ksoftirqd/108:12:531
22754993023,4cyclictest33-21ksoftirqd/210:31:462
22754993020,5cyclictest7280-21apt-get08:55:212
22753993025,3cyclictest25-21ksoftirqd/108:58:421
22753993024,3cyclictest25-21ksoftirqd/111:39:001
22753993023,4cyclictest25-21ksoftirqd/108:27:521
22753992923,4cyclictest25-21ksoftirqd/112:30:151
22753992922,4cyclictest25-21ksoftirqd/110:01:101
22753992922,4cyclictest25-21ksoftirqd/107:36:131
22753992921,5cyclictest25-21ksoftirqd/109:41:581
22753992821,4cyclictest25-21ksoftirqd/109:03:421
22753992821,4cyclictest25-21ksoftirqd/107:20:151
22753992820,5cyclictest25-21ksoftirqd/111:11:141
22753992619,4cyclictest25-21ksoftirqd/110:25:231
2275399242,2cyclictest57698rtkit-daemon10:19:151
22753992318,3cyclictest25-21ksoftirqd/111:59:171
2275399229,9cyclictest556-21in:imuxsock10:05:001
2275399218,9cyclictest5755-21fschecks_time11:15:261
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional