You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-06-15 - 23:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Sat Jun 15, 2024 12:46:24)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1235911190,91ptp4l401ktimersoftd/307:05:463
24976999682,8cyclictest9-21ksoftirqd/011:45:130
24976999138,9cyclictest9-21ksoftirqd/011:10:310
24976999036,5cyclictest9-21ksoftirqd/008:55:130
24978998833,5cyclictest33-21ksoftirqd/210:10:262
24978998833,5cyclictest33-21ksoftirqd/210:10:262
24978998737,4cyclictest33-21ksoftirqd/208:32:162
24976998774,7cyclictest9-21ksoftirqd/009:10:130
24978998528,9cyclictest33-21ksoftirqd/211:45:372
24978998436,10cyclictest33-21ksoftirqd/207:45:012
24976998475,5cyclictest9-21ksoftirqd/012:05:140
24976998454,4cyclictest9-21ksoftirqd/009:20:290
24978998329,5cyclictest33-21ksoftirqd/210:00:292
24976998371,7cyclictest9-21ksoftirqd/008:35:120
127212830,2sleep10-21swapper/110:10:171
127212830,2sleep10-21swapper/110:10:171
24976998272,5cyclictest9-21ksoftirqd/011:55:110
24978998129,9cyclictest33-21ksoftirqd/209:40:172
24976998170,6cyclictest9-21ksoftirqd/011:20:140
24976998167,8cyclictest9-21ksoftirqd/012:00:120
57698800,14rtkit-daemon0-21swapper/207:06:012
24976997965,8cyclictest9-21ksoftirqd/009:50:110
24976997864,8cyclictest9-21ksoftirqd/011:30:150
24976997833,7cyclictest9-21ksoftirqd/009:05:010
24976997765,7cyclictest9-21ksoftirqd/007:20:150
24976997749,3cyclictest9-21ksoftirqd/012:20:160
24976997664,7cyclictest9-21ksoftirqd/010:40:130
24976997643,7cyclictest9-21ksoftirqd/011:50:120
24978997541,5cyclictest33-21ksoftirqd/211:19:592
24976997541,5cyclictest9-21ksoftirqd/010:25:150
24976997540,4cyclictest9-21ksoftirqd/010:55:340
24978997431,9cyclictest33-21ksoftirqd/207:35:012
24976997461,7cyclictest9-21ksoftirqd/011:15:150
24976997440,4cyclictest9-21ksoftirqd/009:55:240
24978997139,3cyclictest33-21ksoftirqd/208:04:242
24978997124,4cyclictest121rcu_preempt09:50:142
24976997158,8cyclictest9-21ksoftirqd/012:30:130
24976997136,5cyclictest9-21ksoftirqd/008:30:000
24976997130,7cyclictest9-21ksoftirqd/012:35:280
24978997063,4cyclictest33-21ksoftirqd/211:05:122
24978997063,4cyclictest33-21ksoftirqd/208:25:142
24976997063,4cyclictest9-21ksoftirqd/010:35:050
24976997034,4cyclictest9-21ksoftirqd/010:25:000
24978996923,10cyclictest33-21ksoftirqd/212:05:362
24976996953,4cyclictest9-21ksoftirqd/011:25:390
24976996937,9cyclictest9-21ksoftirqd/007:55:320
24976996937,7cyclictest9-21ksoftirqd/007:45:000
24976996933,5cyclictest9-21ksoftirqd/007:30:240
24976996834,4cyclictest9-21ksoftirqd/009:42:410
24976996832,5cyclictest9-21ksoftirqd/011:09:590
24976996827,7cyclictest9-21ksoftirqd/008:10:130
24976996827,6cyclictest9-21ksoftirqd/009:20:000
24976996754,8cyclictest9-21ksoftirqd/008:05:150
24976996734,4cyclictest9-21ksoftirqd/010:00:390
24976996733,4cyclictest9-21ksoftirqd/007:30:010
24976996732,8cyclictest9-21ksoftirqd/007:15:260
24976996732,8cyclictest9-21ksoftirqd/007:15:260
24976996732,5cyclictest9-21ksoftirqd/008:40:210
24976996732,5cyclictest9-21ksoftirqd/008:40:210
24978996660,4cyclictest33-21ksoftirqd/212:35:112
24978996650,3cyclictest33-21ksoftirqd/210:05:242
24976996644,5cyclictest9-21ksoftirqd/010:10:230
24976996644,5cyclictest9-21ksoftirqd/010:10:220
24976996630,5cyclictest9-21ksoftirqd/010:30:160
24976996624,8cyclictest9-21ksoftirqd/008:30:200
245152661,11sleep10-21swapper/107:07:461
24978996559,4cyclictest33-21ksoftirqd/212:25:142
24978996559,4cyclictest33-21ksoftirqd/209:25:122
24978996559,4cyclictest33-21ksoftirqd/208:55:132
24978996558,5cyclictest33-21ksoftirqd/212:15:112
24978996558,4cyclictest33-21ksoftirqd/211:40:002
24978996558,4cyclictest33-21ksoftirqd/211:40:002
24978996558,4cyclictest33-21ksoftirqd/209:45:112
24976996532,4cyclictest9-21ksoftirqd/010:45:140
24976996532,4cyclictest9-21ksoftirqd/007:45:180
24976996530,8cyclictest9-21ksoftirqd/009:25:030
24976996527,5cyclictest9-21ksoftirqd/009:36:410
17692650,2sleep10-21swapper/112:05:231
24976996455,5cyclictest9-21ksoftirqd/009:05:130
24976996429,4cyclictest9-21ksoftirqd/007:35:380
24976996426,5cyclictest9-21ksoftirqd/010:50:230
24976996425,5cyclictest9-21ksoftirqd/011:40:170
24976996425,5cyclictest9-21ksoftirqd/008:20:260
111922640,2sleep10-21swapper/110:05:321
24978996357,4cyclictest33-21ksoftirqd/207:35:122
2497699637,7cyclictest9-21ksoftirqd/007:15:000
24976996353,6cyclictest9-21ksoftirqd/010:15:120
24976996332,7cyclictest9-21ksoftirqd/008:00:290
24976996329,4cyclictest9-21ksoftirqd/008:15:020
24976996326,5cyclictest9-21ksoftirqd/008:45:340
24978996243,5cyclictest33-21ksoftirqd/211:30:002
24978996229,5cyclictest33-21ksoftirqd/212:20:352
2497699626,4cyclictest9-21ksoftirqd/012:15:250
24976996233,5cyclictest9-21ksoftirqd/007:55:000
24976996224,5cyclictest9-21ksoftirqd/012:10:220
123591620,1ptp4l401ktimersoftd/307:59:043
24978996154,3cyclictest33-21ksoftirqd/207:25:142
24978996147,3cyclictest33-21ksoftirqd/211:55:122
24978996139,10cyclictest33-21ksoftirqd/208:35:302
24979996053,4cyclictest41-21ksoftirqd/309:10:063
24978996054,4cyclictest33-21ksoftirqd/212:10:112
24978996046,4cyclictest33-21ksoftirqd/210:20:012
24978996043,4cyclictest33-21ksoftirqd/208:40:152
24978996043,4cyclictest33-21ksoftirqd/208:40:152
24978996032,8cyclictest33-21ksoftirqd/209:07:572
24978996028,11cyclictest33-21ksoftirqd/211:05:002
24978996025,5cyclictest33-21ksoftirqd/211:45:002
24978996022,10cyclictest33-21ksoftirqd/209:15:402
24976996027,4cyclictest9-21ksoftirqd/009:30:160
2316626034,13sleep09-21ksoftirqd/007:05:230
24979995953,3cyclictest41-21ksoftirqd/310:35:013
24978995951,5cyclictest33-21ksoftirqd/210:35:052
24978995945,11cyclictest33-21ksoftirqd/209:20:292
24978995918,7cyclictest33-21ksoftirqd/208:20:002
24978995916,10cyclictest33-21ksoftirqd/207:10:332
24978995915,9cyclictest33-21ksoftirqd/211:50:152
24976995948,4cyclictest9-21ksoftirqd/012:25:160
2497899583,9cyclictest33-21ksoftirqd/211:00:002
24976995842,3cyclictest9-21ksoftirqd/011:35:110
24976995842,3cyclictest9-21ksoftirqd/011:35:110
24979995751,3cyclictest41-21ksoftirqd/311:20:003
24979995746,6cyclictest41-21ksoftirqd/309:40:123
24978995750,4cyclictest33-21ksoftirqd/209:40:002
24978995746,3cyclictest33-21ksoftirqd/211:20:172
24978995745,4cyclictest33-21ksoftirqd/207:45:312
2497899574,4cyclictest121rcu_preempt09:30:192
24978995720,6cyclictest33-21ksoftirqd/208:45:232
24976995723,4cyclictest9-21ksoftirqd/011:00:150
2497699571,10cyclictest121rcu_preempt10:05:340
24978995650,3cyclictest33-21ksoftirqd/210:00:002
24978995649,3cyclictest33-21ksoftirqd/210:25:242
24978995649,3cyclictest33-21ksoftirqd/209:05:012
24978995636,5cyclictest33-21ksoftirqd/208:05:212
24978995629,17cyclictest33-21ksoftirqd/209:10:222
24978995624,4cyclictest33-21ksoftirqd/208:50:142
24976995649,4cyclictest9-21ksoftirqd/008:54:590
24979995549,4cyclictest41-21ksoftirqd/312:00:013
24979995548,4cyclictest41-21ksoftirqd/308:50:003
24978995549,4cyclictest33-21ksoftirqd/208:10:122
24978995548,4cyclictest33-21ksoftirqd/212:35:002
24978995548,4cyclictest33-21ksoftirqd/210:45:152
24978995548,4cyclictest33-21ksoftirqd/210:30:252
2497899551,3cyclictest33-21ksoftirqd/207:55:322
2497899550,3cyclictest33-21ksoftirqd/211:30:182
24979995448,3cyclictest41-21ksoftirqd/312:15:003
2497899543,7cyclictest33-21ksoftirqd/208:20:412
2497899542,7cyclictest33-21ksoftirqd/207:50:312
24977995432,19cyclictest25-21ksoftirqd/108:38:191
24979995342,6cyclictest41-21ksoftirqd/308:50:123
2497899533,4cyclictest33-21ksoftirqd/212:00:122
24978995333,5cyclictest33-21ksoftirqd/211:15:002
24978995332,7cyclictest33-21ksoftirqd/207:15:162
24978995332,7cyclictest33-21ksoftirqd/207:15:162
2497899530,4cyclictest121rcu_preempt10:50:252
24977995331,19cyclictest25-21ksoftirqd/107:20:551
123591530,1ptp4l401ktimersoftd/310:06:313
24979995245,4cyclictest41-21ksoftirqd/312:40:003
24979995244,4cyclictest41-21ksoftirqd/308:04:203
24978995246,3cyclictest33-21ksoftirqd/210:20:322
24978995231,9cyclictest33-21ksoftirqd/210:45:002
24976995241,4cyclictest9-21ksoftirqd/009:45:130
24979995145,4cyclictest41-21ksoftirqd/308:15:003
24979995144,4cyclictest41-21ksoftirqd/308:20:003
24979995142,6cyclictest41-21ksoftirqd/311:50:003
24979995139,7cyclictest41-21ksoftirqd/309:35:103
2497999511,4cyclictest41-21ksoftirqd/308:32:153
24979995044,3cyclictest41-21ksoftirqd/312:30:003
2497999501,3cyclictest121rcu_preempt10:15:193
24978995043,4cyclictest33-21ksoftirqd/207:20:282
24977995043,3cyclictest25-21ksoftirqd/110:45:011
24977995027,19cyclictest25-21ksoftirqd/107:38:181
24979994943,3cyclictest41-21ksoftirqd/309:10:003
24979994843,3cyclictest41-21ksoftirqd/312:25:003
24979994843,3cyclictest41-21ksoftirqd/308:09:593
24979994841,3cyclictest41-21ksoftirqd/310:55:203
24979994827,9cyclictest41-21ksoftirqd/309:25:213
123591480,1ptp4l401ktimersoftd/311:36:023
123591480,1ptp4l401ktimersoftd/311:36:023
24979994741,3cyclictest41-21ksoftirqd/312:20:003
24979994741,3cyclictest41-21ksoftirqd/307:30:003
24979994741,3cyclictest41-21ksoftirqd/307:20:003
24979994741,3cyclictest41-21ksoftirqd/307:20:003
24979994640,3cyclictest41-21ksoftirqd/311:30:243
24979994611,4cyclictest41-21ksoftirqd/307:52:033
24977994623,4cyclictest25-21ksoftirqd/108:31:331
24977994623,4cyclictest25-21ksoftirqd/107:41:551
24979994540,3cyclictest41-21ksoftirqd/309:25:013
24979994540,3cyclictest41-21ksoftirqd/308:40:003
24979994539,4cyclictest41-21ksoftirqd/310:00:003
24979994539,3cyclictest41-21ksoftirqd/311:15:003
24979994539,3cyclictest41-21ksoftirqd/307:10:243
24979994438,4cyclictest41-21ksoftirqd/307:30:363
24979994438,3cyclictest41-21ksoftirqd/311:25:263
24979994437,4cyclictest41-21ksoftirqd/310:50:233
24979994434,7cyclictest41-21ksoftirqd/309:45:383
2497999441,8cyclictest0-21swapper/309:00:013
24977994425,16cyclictest25-21ksoftirqd/110:17:581
24977994415,6cyclictest241ktimersoftd/107:10:131
123591440,1ptp4l401ktimersoftd/310:40:193
123591440,1ptp4l401ktimersoftd/310:25:163
123591440,1ptp4l401ktimersoftd/308:25:163
24979994337,4cyclictest41-21ksoftirqd/311:05:263
24979994337,3cyclictest41-21ksoftirqd/312:30:143
24979994337,3cyclictest41-21ksoftirqd/311:00:143
24979994337,3cyclictest41-21ksoftirqd/310:45:213
24979994337,3cyclictest41-21ksoftirqd/308:25:003
24977994337,4cyclictest25-21ksoftirqd/111:05:171
24977994319,4cyclictest25-21ksoftirqd/110:27:481
123591430,1ptp4l401ktimersoftd/312:05:193
24979994237,3cyclictest41-21ksoftirqd/310:00:243
24979994237,3cyclictest41-21ksoftirqd/309:30:263
24979994237,3cyclictest41-21ksoftirqd/309:00:143
24979994235,5cyclictest41-21ksoftirqd/307:45:003
24979994235,4cyclictest41-21ksoftirqd/307:35:213
2497999423,4cyclictest41-21ksoftirqd/311:53:463
24979994210,8cyclictest41-21ksoftirqd/311:40:153
24977994235,4cyclictest1-21systemd08:19:491
24979994136,3cyclictest41-21ksoftirqd/310:10:193
24979994136,3cyclictest41-21ksoftirqd/310:10:183
24979994135,4cyclictest41-21ksoftirqd/309:15:123
24979994134,4cyclictest41-21ksoftirqd/310:35:273
24979994126,4cyclictest41-21ksoftirqd/308:40:273
24979994126,4cyclictest41-21ksoftirqd/308:40:263
24977994135,4cyclictest25-21ksoftirqd/110:20:381
24977994134,4cyclictest25-21ksoftirqd/110:50:001
24979994033,4cyclictest41-21ksoftirqd/310:20:233
24979994028,4cyclictest41-21ksoftirqd/309:50:133
24977994034,3cyclictest25-21ksoftirqd/109:51:161
2497999394,4cyclictest13594-21irqrtprio11:20:253
24979993933,3cyclictest41-21ksoftirqd/307:45:353
24979993933,3cyclictest41-21ksoftirqd/307:25:013
24977993933,3cyclictest25-21ksoftirqd/112:29:391
24977993932,4cyclictest25-21ksoftirqd/111:57:041
24977993932,4cyclictest25-21ksoftirqd/108:46:181
24977993932,4cyclictest25-21ksoftirqd/108:44:061
24977993932,4cyclictest25-21ksoftirqd/108:44:061
24977993932,4cyclictest25-21ksoftirqd/108:13:391
24977993931,5cyclictest25-21ksoftirqd/110:37:261
24979993822,4cyclictest41-21ksoftirqd/312:00:273
24977993832,4cyclictest25-21ksoftirqd/109:34:191
24977993832,4cyclictest25-21ksoftirqd/107:56:591
24977993831,4cyclictest25-21ksoftirqd/112:04:301
24977993831,4cyclictest25-21ksoftirqd/111:27:191
24977993831,4cyclictest25-21ksoftirqd/111:18:501
24977993831,4cyclictest25-21ksoftirqd/109:48:341
24977993831,4cyclictest25-21ksoftirqd/109:20:521
24977993831,4cyclictest25-21ksoftirqd/108:55:581
24977993831,4cyclictest25-21ksoftirqd/108:01:591
24977993731,4cyclictest25-21ksoftirqd/109:10:261
24977993731,3cyclictest25-21ksoftirqd/108:08:231
24977993730,4cyclictest25-21ksoftirqd/111:42:511
24977993730,4cyclictest25-21ksoftirqd/111:38:571
24977993730,4cyclictest25-21ksoftirqd/111:38:571
24977993729,5cyclictest25-21ksoftirqd/109:01:271
24977993712,23cyclictest0-21swapper/108:50:381
24977993630,4cyclictest25-21ksoftirqd/112:31:181
24977993630,4cyclictest25-21ksoftirqd/107:30:501
24977993629,4cyclictest25-21ksoftirqd/111:24:271
24977993629,4cyclictest25-21ksoftirqd/107:50:421
24977993629,4cyclictest25-21ksoftirqd/107:49:461
24977993529,4cyclictest25-21ksoftirqd/112:15:571
24977993528,4cyclictest25-21ksoftirqd/112:35:581
24977993528,4cyclictest25-21ksoftirqd/111:04:091
24977993528,4cyclictest25-21ksoftirqd/108:28:081
24977993528,4cyclictest25-21ksoftirqd/108:21:221
24977993527,5cyclictest25-21ksoftirqd/110:55:451
24977993428,4cyclictest25-21ksoftirqd/111:49:401
24977993428,3cyclictest25-21ksoftirqd/112:22:361
24977993427,4cyclictest25-21ksoftirqd/112:14:381
24977993327,4cyclictest25-21ksoftirqd/111:12:501
24977993327,4cyclictest25-21ksoftirqd/109:58:011
24977993327,4cyclictest25-21ksoftirqd/109:19:221
24977993326,4cyclictest25-21ksoftirqd/110:50:071
24977993325,5cyclictest25-21ksoftirqd/109:06:061
24977993227,3cyclictest25-21ksoftirqd/110:01:411
24977993226,4cyclictest25-21ksoftirqd/107:27:441
24977993226,3cyclictest25-21ksoftirqd/107:16:201
24977993226,3cyclictest25-21ksoftirqd/107:16:201
24977993225,4cyclictest25-21ksoftirqd/111:31:301
24977993125,4cyclictest25-21ksoftirqd/111:51:101
24977993124,5cyclictest25-21ksoftirqd/109:39:171
24977993024,4cyclictest25-21ksoftirqd/110:34:251
24977993023,5cyclictest25-21ksoftirqd/109:28:101
24977992810,16cyclictest0-21swapper/109:40:281
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional