You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-10 - 16:25
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Thu Jul 10, 2025 12:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191232168,52phc2sys0-21swapper/307:07:513
61052204169,23sleep20-21swapper/207:07:162
62602202169,22sleep10-21swapper/107:09:171
59852200167,22sleep00-21swapper/007:05:420
2622621360,6sleep2661699cyclictest11:10:272
136991670,1ptp4l401ktimersoftd/311:21:083
136991650,1ptp4l401ktimersoftd/307:30:393
6616996427,4cyclictest33-21ksoftirqd/208:55:002
6616996324,6cyclictest33-21ksoftirqd/208:30:222
6616996224,7cyclictest33-21ksoftirqd/208:05:242
6616996127,5cyclictest33-21ksoftirqd/210:05:142
6616996029,9cyclictest33-21ksoftirqd/209:09:212
6616996028,3cyclictest33-21ksoftirqd/211:35:002
6616995929,9cyclictest33-21ksoftirqd/209:25:172
6616995929,10cyclictest33-21ksoftirqd/209:20:172
6616995928,9cyclictest33-21ksoftirqd/209:45:222
6616995928,5cyclictest33-21ksoftirqd/207:49:592
6616995926,4cyclictest33-21ksoftirqd/207:20:272
6616995923,5cyclictest33-21ksoftirqd/208:45:222
6616995830,9cyclictest33-21ksoftirqd/212:00:152
6616995829,8cyclictest33-21ksoftirqd/208:25:192
6616995828,7cyclictest33-21ksoftirqd/212:25:142
6616995827,8cyclictest33-21ksoftirqd/209:40:262
6616995827,8cyclictest33-21ksoftirqd/207:10:202
6616995827,10cyclictest33-21ksoftirqd/207:30:152
6616995826,4cyclictest33-21ksoftirqd/210:55:182
6616995824,6cyclictest33-21ksoftirqd/210:45:262
6616995822,6cyclictest33-21ksoftirqd/207:40:132
6616995728,10cyclictest33-21ksoftirqd/210:10:222
6616995727,9cyclictest33-21ksoftirqd/211:55:192
6616995727,7cyclictest33-21ksoftirqd/212:20:152
6616995727,6cyclictest33-21ksoftirqd/209:30:272
6616995726,4cyclictest33-21ksoftirqd/211:25:142
6616995725,4cyclictest33-21ksoftirqd/211:35:282
6616995724,8cyclictest33-21ksoftirqd/207:55:292
6616995724,6cyclictest33-21ksoftirqd/209:15:182
6616995723,5cyclictest33-21ksoftirqd/208:55:162
6616995722,5cyclictest33-21ksoftirqd/209:35:172
6616995722,10cyclictest33-21ksoftirqd/209:10:152
6616995721,5cyclictest33-21ksoftirqd/209:50:212
661699564,5cyclictest32212-21wc10:20:002
661699564,5cyclictest32212-21wc10:20:002
6616995528,9cyclictest33-21ksoftirqd/207:15:292
6616995525,5cyclictest33-21ksoftirqd/211:15:202
6616995525,5cyclictest33-21ksoftirqd/210:40:272
6616995525,10cyclictest33-21ksoftirqd/210:00:002
6616995521,5cyclictest33-21ksoftirqd/211:20:192
6616995426,4cyclictest33-21ksoftirqd/210:30:182
6616995426,3cyclictest33-21ksoftirqd/210:25:172
6616995425,5cyclictest33-21ksoftirqd/207:50:232
6616995423,5cyclictest33-21ksoftirqd/209:00:152
6616995423,3cyclictest33-21ksoftirqd/211:05:222
6616995422,3cyclictest33-21ksoftirqd/212:05:162
6616995422,3cyclictest33-21ksoftirqd/212:05:162
6616995420,5cyclictest33-21ksoftirqd/208:20:242
136991540,1ptp4l401ktimersoftd/311:30:013
6616995330,6cyclictest33-21ksoftirqd/210:40:012
6616995328,9cyclictest33-21ksoftirqd/208:35:232
6616995320,5cyclictest33-21ksoftirqd/212:15:262
136991530,1ptp4l401ktimersoftd/309:01:073
136991530,1ptp4l401ktimersoftd/308:04:213
661699527,6cyclictest33-21ksoftirqd/211:40:172
6616995216,8cyclictest33-21ksoftirqd/210:00:152
59298520,2rtkit-daemon0-21swapper/309:05:253
6616995126,7cyclictest33-21ksoftirqd/211:50:172
6616995125,6cyclictest33-21ksoftirqd/212:30:262
161012500,2sleep30-21swapper/309:45:153
661699496,4cyclictest33-21ksoftirqd/207:35:282
661699495,6cyclictest33-21ksoftirqd/211:00:282
6616994920,5cyclictest33-21ksoftirqd/207:25:262
661699485,6cyclictest33-21ksoftirqd/208:15:012
661699485,5cyclictest33-21ksoftirqd/210:20:162
661699485,5cyclictest33-21ksoftirqd/208:40:242
661699483,5cyclictest33-21ksoftirqd/210:55:002
661699477,4cyclictest33-21ksoftirqd/208:00:122
661699465,6cyclictest33-21ksoftirqd/212:40:002
661699465,6cyclictest33-21ksoftirqd/212:40:002
661699463,6cyclictest33-21ksoftirqd/208:15:152
661699455,2cyclictest33-21ksoftirqd/211:45:162
661699453,5cyclictest33-21ksoftirqd/212:10:172
59298430,7rtkit-daemon0-21swapper/310:15:453
59298430,7rtkit-daemon0-21swapper/310:15:453
136991430,0ptp4l401ktimersoftd/312:20:283
59298420,8rtkit-daemon0-21swapper/309:40:453
59298420,7rtkit-daemon0-21swapper/311:00:153
136991420,0ptp4l401ktimersoftd/310:24:323
136991410,1ptp4l401ktimersoftd/308:49:193
6615994034,4cyclictest25-21ksoftirqd/111:45:001
285202400,2sleep3121rcu_preempt12:25:193
6617993832,3cyclictest41-21ksoftirqd/309:40:003
59298380,7rtkit-daemon0-21swapper/309:23:563
6617993731,4cyclictest41-21ksoftirqd/308:38:333
6615993731,4cyclictest25-21ksoftirqd/109:51:151
6617993630,4cyclictest41-21ksoftirqd/311:38:043
6617993630,4cyclictest41-21ksoftirqd/307:45:333
6615993630,4cyclictest25-21ksoftirqd/111:48:091
6617993529,4cyclictest41-21ksoftirqd/311:06:123
6617993529,4cyclictest41-21ksoftirqd/308:29:383
6617993528,5cyclictest41-21ksoftirqd/307:57:043
6615993529,4cyclictest25-21ksoftirqd/111:57:441
6615993529,4cyclictest25-21ksoftirqd/111:30:041
6615993529,4cyclictest25-21ksoftirqd/111:01:281
6615993529,4cyclictest25-21ksoftirqd/110:51:411
6614993529,4cyclictest9-21ksoftirqd/012:06:060
6614993529,4cyclictest9-21ksoftirqd/012:06:060
6614993528,5cyclictest9-21ksoftirqd/009:22:500
136991350,0ptp4l401ktimersoftd/310:50:163
136991350,0ptp4l401ktimersoftd/307:50:233
136991350,0ptp4l401ktimersoftd/307:35:193
6617993428,4cyclictest41-21ksoftirqd/310:02:533
6617993428,4cyclictest41-21ksoftirqd/308:53:483
6617993428,4cyclictest41-21ksoftirqd/308:23:203
6617993428,4cyclictest41-21ksoftirqd/308:08:073
6615993428,4cyclictest25-21ksoftirqd/112:23:241
6615993428,4cyclictest25-21ksoftirqd/111:22:551
6615993428,4cyclictest25-21ksoftirqd/108:15:391
6615993428,4cyclictest25-21ksoftirqd/108:10:491
6615993427,5cyclictest25-21ksoftirqd/109:11:001
6614993428,4cyclictest9-21ksoftirqd/008:48:070
6614993428,3cyclictest9-21ksoftirqd/010:30:120
6614993427,4cyclictest9-21ksoftirqd/007:30:260
6614993426,5cyclictest9-21ksoftirqd/011:33:360
6617993328,3cyclictest41-21ksoftirqd/311:55:113
6617993328,3cyclictest41-21ksoftirqd/309:33:053
6617993327,4cyclictest41-21ksoftirqd/309:27:113
6615993327,4cyclictest25-21ksoftirqd/112:17:341
6615993327,4cyclictest25-21ksoftirqd/111:29:411
6615993327,4cyclictest25-21ksoftirqd/111:16:521
6615993327,4cyclictest25-21ksoftirqd/110:06:081
6615993327,4cyclictest25-21ksoftirqd/109:22:151
6615993327,4cyclictest25-21ksoftirqd/108:02:431
6615993327,4cyclictest25-21ksoftirqd/107:10:411
6615993326,5cyclictest25-21ksoftirqd/111:39:151
6615993326,5cyclictest25-21ksoftirqd/109:01:081
6615993326,5cyclictest25-21ksoftirqd/107:25:001
6614993327,4cyclictest9-21ksoftirqd/008:30:580
6614993327,4cyclictest9-21ksoftirqd/008:21:330
6617993227,3cyclictest41-21ksoftirqd/310:43:173
6617993226,4cyclictest41-21ksoftirqd/312:11:143
6617993226,4cyclictest41-21ksoftirqd/309:12:473
6615993227,3cyclictest25-21ksoftirqd/110:25:571
6615993227,3cyclictest25-21ksoftirqd/108:53:011
6615993227,3cyclictest25-21ksoftirqd/108:35:451
6615993226,4cyclictest25-21ksoftirqd/112:29:501
6615993226,4cyclictest25-21ksoftirqd/110:39:371
6615993226,4cyclictest25-21ksoftirqd/110:24:451
6615993226,4cyclictest25-21ksoftirqd/109:38:311
6615993226,4cyclictest25-21ksoftirqd/109:32:131
6615993226,4cyclictest25-21ksoftirqd/108:07:571
6615993226,4cyclictest25-21ksoftirqd/107:53:251
6614993227,3cyclictest9-21ksoftirqd/012:34:140
6614993227,3cyclictest9-21ksoftirqd/008:58:270
6614993226,4cyclictest9-21ksoftirqd/012:27:240
6614993226,4cyclictest9-21ksoftirqd/011:05:440
6614993226,4cyclictest9-21ksoftirqd/007:44:100
6614993225,4cyclictest9-21ksoftirqd/011:39:540
6617993126,3cyclictest41-21ksoftirqd/311:50:113
6617993126,3cyclictest41-21ksoftirqd/310:34:553
6617993125,4cyclictest41-21ksoftirqd/311:42:503
6615993126,3cyclictest25-21ksoftirqd/109:08:291
6615993125,4cyclictest25-21ksoftirqd/112:36:321
6615993125,4cyclictest25-21ksoftirqd/112:36:321
6615993125,4cyclictest25-21ksoftirqd/111:14:191
6615993125,4cyclictest25-21ksoftirqd/110:12:421
6615993125,4cyclictest25-21ksoftirqd/109:48:381
6615993125,4cyclictest25-21ksoftirqd/108:42:561
6615993125,4cyclictest25-21ksoftirqd/108:32:411
6615993125,4cyclictest25-21ksoftirqd/107:33:431
6614993126,3cyclictest9-21ksoftirqd/010:55:000
6614993126,3cyclictest9-21ksoftirqd/007:58:010
6614993125,4cyclictest9-21ksoftirqd/012:24:550
6614993125,4cyclictest9-21ksoftirqd/010:06:550
6614993125,4cyclictest9-21ksoftirqd/010:04:260
6614993125,4cyclictest9-21ksoftirqd/009:09:510
6614993125,4cyclictest9-21ksoftirqd/007:53:310
6614993125,4cyclictest9-21ksoftirqd/007:22:470
6614993125,3cyclictest9-21ksoftirqd/008:45:000
6614993124,4cyclictest9-21ksoftirqd/007:11:150
136991310,0ptp4l401ktimersoftd/310:57:583
6617993025,3cyclictest41-21ksoftirqd/312:40:003
6617993025,3cyclictest41-21ksoftirqd/312:40:003
6617993024,4cyclictest41-21ksoftirqd/307:10:143
6617993024,3cyclictest41-21ksoftirqd/311:49:413
6615993025,3cyclictest25-21ksoftirqd/109:28:521
6615993025,3cyclictest25-21ksoftirqd/107:45:581
6614993025,3cyclictest9-21ksoftirqd/010:44:300
6614993024,4cyclictest9-21ksoftirqd/011:18:200
6614993024,3cyclictest9-21ksoftirqd/011:43:470
6614993024,3cyclictest9-21ksoftirqd/009:29:130
6614993023,4cyclictest9-21ksoftirqd/010:20:320
6614993023,4cyclictest9-21ksoftirqd/009:37:020
136991300,0ptp4l401ktimersoftd/312:00:183
136991300,0ptp4l401ktimersoftd/311:29:403
136991300,0ptp4l401ktimersoftd/310:38:053
136991300,0ptp4l401ktimersoftd/308:34:223
136991300,0ptp4l401ktimersoftd/308:17:403
6617992923,4cyclictest41-21ksoftirqd/309:53:303
6617992923,4cyclictest41-21ksoftirqd/308:59:343
6617992923,4cyclictest41-21ksoftirqd/307:25:583
6615992924,3cyclictest25-21ksoftirqd/108:23:001
6615992924,3cyclictest25-21ksoftirqd/107:40:421
6615992923,4cyclictest25-21ksoftirqd/110:44:481
6615992923,4cyclictest25-21ksoftirqd/110:30:301
6615992923,4cyclictest25-21ksoftirqd/107:18:541
6614992924,3cyclictest9-21ksoftirqd/008:14:230
6614992923,4cyclictest9-21ksoftirqd/011:23:370
6614992923,4cyclictest9-21ksoftirqd/010:58:020
6614992923,4cyclictest9-21ksoftirqd/010:19:140
6614992923,4cyclictest9-21ksoftirqd/010:19:140
6614992923,4cyclictest9-21ksoftirqd/008:07:280
6614992923,3cyclictest9-21ksoftirqd/012:15:330
6614992923,3cyclictest9-21ksoftirqd/011:00:190
6614992923,3cyclictest9-21ksoftirqd/009:47:540
136991290,0ptp4l401ktimersoftd/309:55:203
6617992822,4cyclictest41-21ksoftirqd/310:48:593
6615992823,3cyclictest25-21ksoftirqd/112:34:301
6615992823,3cyclictest25-21ksoftirqd/112:01:491
6615992823,3cyclictest25-21ksoftirqd/108:27:141
6615992822,4cyclictest25-21ksoftirqd/110:19:471
6615992822,4cyclictest25-21ksoftirqd/110:19:471
6615992822,4cyclictest25-21ksoftirqd/110:02:471
6615992822,4cyclictest25-21ksoftirqd/107:35:441
6615992821,5cyclictest25-21ksoftirqd/110:49:051
6614992823,3cyclictest9-21ksoftirqd/009:13:550
6614992822,4cyclictest9-21ksoftirqd/011:10:450
6614992822,4cyclictest9-21ksoftirqd/010:45:500
6614992822,4cyclictest9-21ksoftirqd/007:49:180
6614992822,4cyclictest9-21ksoftirqd/007:15:530
136991280,0ptp4l401ktimersoftd/312:30:493
136991280,0ptp4l401ktimersoftd/311:16:083
136991280,0ptp4l401ktimersoftd/308:42:153
136991280,0ptp4l401ktimersoftd/307:21:583
6617992722,3cyclictest41-21ksoftirqd/312:19:193
6617992722,3cyclictest41-21ksoftirqd/312:07:213
6617992722,3cyclictest41-21ksoftirqd/312:07:213
6617992721,4cyclictest41-21ksoftirqd/311:11:493
6617992721,4cyclictest41-21ksoftirqd/309:18:483
6617992721,4cyclictest41-21ksoftirqd/308:11:563
6615992721,4cyclictest25-21ksoftirqd/109:40:361
6615992721,4cyclictest25-21ksoftirqd/108:56:181
6614992721,4cyclictest9-21ksoftirqd/011:58:230
6614992721,4cyclictest9-21ksoftirqd/011:46:160
6614992721,4cyclictest9-21ksoftirqd/010:40:000
6614992721,3cyclictest9-21ksoftirqd/010:15:000
6614992721,3cyclictest9-21ksoftirqd/007:37:400
6614992721,3cyclictest12301-21dump-pmu-power08:29:590
6615992620,4cyclictest25-21ksoftirqd/107:56:141
6615992620,4cyclictest25-21ksoftirqd/107:29:571
6614992620,4cyclictest9-21ksoftirqd/009:40:360
6614992620,3cyclictest9-21ksoftirqd/011:55:010
6614992619,5cyclictest9-21ksoftirqd/008:50:450
59298260,2rtkit-daemon0-21swapper/307:40:063
6617992519,4cyclictest41-21ksoftirqd/310:12:073
6615992520,3cyclictest25-21ksoftirqd/111:53:491
6615992520,3cyclictest25-21ksoftirqd/109:16:181
6615992519,4cyclictest25-21ksoftirqd/111:08:301
6615992519,4cyclictest25-21ksoftirqd/108:47:481
6614992520,3cyclictest9-21ksoftirqd/012:14:480
6614992520,3cyclictest9-21ksoftirqd/012:01:440
6614992520,3cyclictest9-21ksoftirqd/009:20:000
6614992520,3cyclictest9-21ksoftirqd/009:02:230
6614992518,5cyclictest9-21ksoftirqd/007:27:570
6617992418,4cyclictest41-21ksoftirqd/307:19:523
661599245,16cyclictest18676-21sed12:05:151
661599245,16cyclictest18676-21sed12:05:151
6614992419,3cyclictest9-21ksoftirqd/010:29:300
6614992419,3cyclictest9-21ksoftirqd/008:16:030
6614992418,4cyclictest9-21ksoftirqd/008:04:560
136991240,0ptp4l401ktimersoftd/310:25:233
136991240,0ptp4l401ktimersoftd/310:05:133
6615992318,3cyclictest25-21ksoftirqd/110:58:431
6614992318,3cyclictest9-21ksoftirqd/008:36:420
6614992317,4cyclictest9-21ksoftirqd/011:29:190
6614992316,4cyclictest22725-21latency_hist10:00:000
6614992217,3cyclictest9-21ksoftirqd/009:54:080
6614992216,4cyclictest9-21ksoftirqd/009:30:400
6614992116,3cyclictest2476-21uname12:40:000
6614992116,3cyclictest2476-21uname12:40:000
6615992014,4cyclictest21650-21missed_timers09:55:221
6615991813,3cyclictest21994-21processes12:10:241
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional