You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-03-25 - 02:51
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot3.osadl.org (updated Mon Mar 24, 2025 12:45:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
289392231164,22sleep20-21swapper/207:09:272
137191225162,51phc2sys0-21swapper/307:09:443
287102203170,22sleep10-21swapper/107:06:271
287352202169,22sleep00-21swapper/007:06:480
104821460,7sleep22928499cyclictest11:07:352
1168621350,7sleep12928399cyclictest10:10:171
875421300,3sleep00-21swapper/010:00:250
2899128262,11sleep00-21swapper/007:10:010
24252740,4sleep22427-21apt09:50:002
136991740,1ptp4l401ktimersoftd/311:40:223
319482720,2sleep30-21swapper/311:00:213
136991580,1ptp4l401ktimersoftd/310:50:203
136991580,1ptp4l401ktimersoftd/310:50:203
136991540,1ptp4l391rcuc/310:00:313
136991520,1ptp4l401ktimersoftd/310:21:543
136991520,1ptp4l401ktimersoftd/310:21:543
29282995145,3cyclictest3443-21latency_hist12:40:000
196752510,1sleep30-21swapper/308:00:133
136991500,1ptp4l401ktimersoftd/308:33:413
2928299430,4cyclictest11932-21apt-get08:55:000
136991430,0ptp4l401ktimersoftd/309:24:163
136991430,0ptp4l401ktimersoftd/309:10:233
136991420,0ptp4l401ktimersoftd/311:24:503
136991420,0ptp4l401ktimersoftd/311:24:503
29285993933,3cyclictest41-21ksoftirqd/311:20:003
29282993933,3cyclictest32145-21cron08:30:000
132891390,8getstats2928599cyclictest07:47:503
29285993833,3cyclictest41-21ksoftirqd/312:20:003
29285993833,3cyclictest41-21ksoftirqd/309:29:593
29285993728,4cyclictest41-21ksoftirqd/310:55:123
29283993731,4cyclictest25-21ksoftirqd/107:27:581
29282993731,3cyclictest9-21ksoftirqd/009:50:000
2928299371,2cyclictest121rcu_preempt08:21:210
29285993631,3cyclictest41-21ksoftirqd/307:15:003
29285993630,3cyclictest41-21ksoftirqd/308:25:003
29284993630,4cyclictest33-21ksoftirqd/212:11:052
29284993630,4cyclictest33-21ksoftirqd/207:37:302
29283993631,3cyclictest25-21ksoftirqd/107:45:001
29283993630,4cyclictest25-21ksoftirqd/110:35:001
29283993630,4cyclictest25-21ksoftirqd/107:18:231
29283993629,5cyclictest25-21ksoftirqd/108:40:471
29283993629,4cyclictest25-21ksoftirqd/109:10:151
29282993630,3cyclictest9-21ksoftirqd/007:35:000
59298350,1rtkit-daemon0-21swapper/010:08:450
29285993531,2cyclictest41-21ksoftirqd/310:50:003
29285993530,3cyclictest41-21ksoftirqd/308:55:003
29285993530,3cyclictest41-21ksoftirqd/308:30:003
29285993530,3cyclictest41-21ksoftirqd/308:20:013
29285993529,4cyclictest41-21ksoftirqd/312:24:543
29285993529,4cyclictest41-21ksoftirqd/309:17:363
29284993530,3cyclictest33-21ksoftirqd/209:19:242
29284993529,4cyclictest33-21ksoftirqd/211:34:182
29284993529,4cyclictest33-21ksoftirqd/210:28:112
29284993529,4cyclictest33-21ksoftirqd/209:09:522
29284993529,4cyclictest33-21ksoftirqd/209:03:592
29283993529,4cyclictest25-21ksoftirqd/111:21:181
29283993529,4cyclictest25-21ksoftirqd/111:21:181
29283993529,4cyclictest25-21ksoftirqd/109:36:231
29283993528,5cyclictest25-21ksoftirqd/108:32:401
29282993531,3cyclictest9-21ksoftirqd/012:25:000
29282993530,3cyclictest9-21ksoftirqd/009:20:000
29282993529,4cyclictest9-21ksoftirqd/007:17:300
29282993528,5cyclictest9-21ksoftirqd/008:17:430
29285993430,3cyclictest41-21ksoftirqd/307:55:003
29285993430,2cyclictest41-21ksoftirqd/308:45:003
29285993429,3cyclictest41-21ksoftirqd/309:47:363
29285993428,4cyclictest41-21ksoftirqd/311:11:133
29285993428,4cyclictest41-21ksoftirqd/310:13:163
29285993428,4cyclictest41-21ksoftirqd/308:36:393
29285993428,4cyclictest41-21ksoftirqd/307:21:383
29284993429,3cyclictest33-21ksoftirqd/212:35:112
29284993428,4cyclictest33-21ksoftirqd/211:12:362
29284993428,4cyclictest33-21ksoftirqd/209:53:332
29284993428,4cyclictest33-21ksoftirqd/208:29:282
29284993427,4cyclictest33-21ksoftirqd/210:13:122
2928499341,29cyclictest10650-21kworker/2:110:35:132
29283993429,3cyclictest25-21ksoftirqd/108:36:401
29283993428,4cyclictest25-21ksoftirqd/111:51:421
29283993428,4cyclictest25-21ksoftirqd/111:27:511
29283993428,4cyclictest25-21ksoftirqd/110:39:211
29283993428,4cyclictest25-21ksoftirqd/109:52:561
29283993428,4cyclictest25-21ksoftirqd/109:00:361
29283993428,4cyclictest25-21ksoftirqd/108:48:181
29283993428,4cyclictest25-21ksoftirqd/107:48:351
29283993428,4cyclictest25-21ksoftirqd/107:33:321
29283993428,4cyclictest25-21ksoftirqd/107:24:531
29283993427,5cyclictest25-21ksoftirqd/107:54:141
29283993427,4cyclictest25-21ksoftirqd/110:27:181
29285993329,2cyclictest41-21ksoftirqd/307:45:003
29285993328,3cyclictest41-21ksoftirqd/311:35:193
29285993327,4cyclictest41-21ksoftirqd/312:35:533
29285993327,4cyclictest41-21ksoftirqd/312:29:113
29285993327,4cyclictest41-21ksoftirqd/310:17:133
29285993327,4cyclictest41-21ksoftirqd/308:55:123
29285993327,3cyclictest41-21ksoftirqd/307:40:003
29285993325,5cyclictest41-21ksoftirqd/309:55:113
29285993320,10cyclictest41-21ksoftirqd/309:35:293
29284993328,3cyclictest33-21ksoftirqd/212:29:282
29284993328,3cyclictest33-21ksoftirqd/207:56:112
29284993327,4cyclictest33-21ksoftirqd/210:20:492
29284993327,4cyclictest33-21ksoftirqd/210:20:492
29284993327,4cyclictest33-21ksoftirqd/208:36:472
2928499331,19cyclictest10650-21kworker/2:110:40:132
29283993328,3cyclictest25-21ksoftirqd/108:51:221
29283993327,4cyclictest25-21ksoftirqd/112:09:241
29283993327,4cyclictest25-21ksoftirqd/111:42:521
29283993327,4cyclictest25-21ksoftirqd/111:11:111
29283993327,4cyclictest25-21ksoftirqd/111:07:541
29283993327,4cyclictest25-21ksoftirqd/109:08:471
29283993327,4cyclictest25-21ksoftirqd/108:58:161
29282993329,3cyclictest9-21ksoftirqd/011:40:000
29282993328,3cyclictest9-21ksoftirqd/011:05:010
29282993327,4cyclictest9-21ksoftirqd/012:01:000
29282993327,4cyclictest9-21ksoftirqd/010:17:500
29282993326,5cyclictest9-21ksoftirqd/008:39:300
2928299330,4cyclictest223-21systemd-journal08:08:090
2928299330,4cyclictest223-21systemd-journal08:08:090
287602330,6sleep12928399cyclictest09:30:211
29285993228,3cyclictest41-21ksoftirqd/309:00:143
29285993227,3cyclictest41-21ksoftirqd/312:00:003
29285993227,3cyclictest41-21ksoftirqd/311:50:003
29285993227,3cyclictest41-21ksoftirqd/311:27:263
29285993227,3cyclictest41-21ksoftirqd/310:10:003
29285993227,3cyclictest41-21ksoftirqd/309:50:073
29285993227,3cyclictest41-21ksoftirqd/307:56:143
29285993226,4cyclictest41-21ksoftirqd/312:34:053
29285993226,4cyclictest41-21ksoftirqd/311:51:523
29285993226,4cyclictest41-21ksoftirqd/309:44:593
29285993225,4cyclictest41-21ksoftirqd/310:26:323
29284993228,3cyclictest33-21ksoftirqd/211:24:352
29284993228,3cyclictest33-21ksoftirqd/211:24:352
29284993227,3cyclictest33-21ksoftirqd/208:58:002
29284993226,4cyclictest33-21ksoftirqd/212:07:282
29284993226,4cyclictest33-21ksoftirqd/210:31:562
29284993226,4cyclictest33-21ksoftirqd/209:29:582
29284993226,4cyclictest33-21ksoftirqd/208:01:242
29284993226,4cyclictest33-21ksoftirqd/207:45:152
29284993226,3cyclictest33-21ksoftirqd/212:00:082
29284993226,3cyclictest33-21ksoftirqd/209:35:352
29284993225,5cyclictest33-21ksoftirqd/208:13:122
29284993225,4cyclictest33-21ksoftirqd/210:19:042
29284993225,4cyclictest33-21ksoftirqd/209:14:212
2928499322,28cyclictest4536-21kworker/2:210:00:132
2928499320,18cyclictest26505-21kworker/2:107:25:132
29283993227,3cyclictest25-21ksoftirqd/112:24:261
29283993226,4cyclictest25-21ksoftirqd/112:14:171
29283993226,4cyclictest25-21ksoftirqd/110:22:131
29283993226,4cyclictest25-21ksoftirqd/110:22:121
29283993226,4cyclictest25-21ksoftirqd/109:56:221
29283993226,4cyclictest25-21ksoftirqd/109:18:341
29283993226,4cyclictest25-21ksoftirqd/108:21:461
29283993225,4cyclictest25-21ksoftirqd/107:37:281
29283993223,7cyclictest25-21ksoftirqd/110:40:231
29282993227,3cyclictest9-21ksoftirqd/012:20:000
29282993227,3cyclictest9-21ksoftirqd/011:07:160
29282993227,3cyclictest9-21ksoftirqd/011:00:000
29282993227,3cyclictest9-21ksoftirqd/008:01:100
29282993226,4cyclictest9-21ksoftirqd/010:47:470
29282993226,4cyclictest9-21ksoftirqd/010:36:230
29282993226,4cyclictest9-21ksoftirqd/007:39:000
29282993226,3cyclictest9-21ksoftirqd/012:30:090
29282993226,3cyclictest9-21ksoftirqd/010:50:140
29282993226,3cyclictest9-21ksoftirqd/010:50:140
29282993225,4cyclictest9-21ksoftirqd/010:11:370
29285993127,3cyclictest41-21ksoftirqd/308:45:193
29285993126,3cyclictest41-21ksoftirqd/310:38:353
29285993126,3cyclictest41-21ksoftirqd/308:10:003
29285993126,3cyclictest41-21ksoftirqd/308:10:003
29285993125,4cyclictest41-21ksoftirqd/310:42:203
29285993124,4cyclictest41-21ksoftirqd/307:30:013
29285993124,4cyclictest41-21ksoftirqd/307:19:093
29284993126,3cyclictest33-21ksoftirqd/209:24:132
29284993126,3cyclictest33-21ksoftirqd/207:24:522
29284993125,3cyclictest33-21ksoftirqd/211:25:232
29284993124,5cyclictest33-21ksoftirqd/209:59:352
29284993124,5cyclictest33-21ksoftirqd/209:33:432
29284993119,10cyclictest33-21ksoftirqd/211:35:202
29283993126,3cyclictest25-21ksoftirqd/112:38:041
29283993126,3cyclictest25-21ksoftirqd/108:11:131
29283993125,4cyclictest25-21ksoftirqd/111:39:031
29283993125,4cyclictest25-21ksoftirqd/110:52:531
29283993125,4cyclictest25-21ksoftirqd/110:52:531
29282993126,3cyclictest9-21ksoftirqd/011:55:000
29282993126,3cyclictest9-21ksoftirqd/011:40:130
29282993126,3cyclictest9-21ksoftirqd/009:52:040
29282993126,3cyclictest9-21ksoftirqd/008:57:020
29282993126,3cyclictest9-21ksoftirqd/008:31:200
29282993126,3cyclictest9-21ksoftirqd/007:46:230
29282993125,4cyclictest9-21ksoftirqd/011:14:590
29282993125,4cyclictest9-21ksoftirqd/010:25:120
29282993125,4cyclictest9-21ksoftirqd/009:11:510
29282993125,4cyclictest9-21ksoftirqd/008:10:410
29282993125,3cyclictest9-21ksoftirqd/011:55:180
29282993125,3cyclictest9-21ksoftirqd/009:05:050
29282993125,3cyclictest9-21ksoftirqd/007:55:190
136991310,9ptp4l401ktimersoftd/311:30:083
29285993025,3cyclictest41-21ksoftirqd/312:13:493
29284993024,4cyclictest33-21ksoftirqd/212:15:462
29284993024,4cyclictest33-21ksoftirqd/210:05:532
29284993024,4cyclictest33-21ksoftirqd/208:50:002
29284993024,4cyclictest33-21ksoftirqd/207:53:222
29284993024,4cyclictest33-21ksoftirqd/207:32:002
29284993024,3cyclictest33-21ksoftirqd/210:52:122
29284993024,3cyclictest33-21ksoftirqd/210:52:122
29284993023,4cyclictest33-21ksoftirqd/212:00:002
2928499300,28cyclictest0-21swapper/208:30:382
29283993026,3cyclictest25-21ksoftirqd/110:09:001
29283993025,3cyclictest25-21ksoftirqd/111:34:551
29283993024,4cyclictest25-21ksoftirqd/110:48:121
29283993024,4cyclictest25-21ksoftirqd/110:01:541
29283993024,4cyclictest25-21ksoftirqd/108:28:391
29282993025,3cyclictest9-21ksoftirqd/012:11:590
29282993025,3cyclictest9-21ksoftirqd/010:30:090
29282993025,3cyclictest9-21ksoftirqd/010:20:220
29282993025,3cyclictest9-21ksoftirqd/010:20:220
29282993024,4cyclictest9-21ksoftirqd/012:07:250
29282993024,4cyclictest9-21ksoftirqd/007:51:070
29282993024,3cyclictest9-21ksoftirqd/007:20:180
136991300,0ptp4l401ktimersoftd/311:05:443
29285992924,3cyclictest41-21ksoftirqd/309:05:193
29285992923,4cyclictest41-21ksoftirqd/309:30:593
2928499290,17cyclictest10650-21kworker/2:111:15:132
29283992924,3cyclictest25-21ksoftirqd/111:15:121
29283992924,3cyclictest25-21ksoftirqd/109:46:091
29283992923,4cyclictest25-21ksoftirqd/112:15:491
29283992923,4cyclictest25-21ksoftirqd/111:00:561
29283992923,4cyclictest25-21ksoftirqd/110:59:111
29283992923,4cyclictest25-21ksoftirqd/110:18:391
29283992923,4cyclictest25-21ksoftirqd/109:28:251
29282992924,3cyclictest9-21ksoftirqd/011:20:210
29282992924,3cyclictest9-21ksoftirqd/011:20:210
29282992924,3cyclictest9-21ksoftirqd/009:22:420
29282992924,3cyclictest9-21ksoftirqd/008:50:000
29282992923,4cyclictest9-21ksoftirqd/010:43:270
29282992923,3cyclictest9-21ksoftirqd/010:00:000
29282992922,5cyclictest9-21ksoftirqd/011:33:560
49812280,7sleep22928499cyclictest08:40:112
29285992824,3cyclictest41-21ksoftirqd/307:30:223
29284992823,3cyclictest33-21ksoftirqd/207:44:422
29284992822,4cyclictest33-21ksoftirqd/211:53:242
29284992822,4cyclictest33-21ksoftirqd/210:45:562
2928499280,16cyclictest10650-21kworker/2:111:40:372
29283992823,3cyclictest25-21ksoftirqd/111:57:001
29283992822,4cyclictest25-21ksoftirqd/112:34:351
29283992822,4cyclictest25-21ksoftirqd/109:40:401
29283992822,4cyclictest25-21ksoftirqd/108:03:521
29283992822,4cyclictest25-21ksoftirqd/107:13:571
29282992823,3cyclictest9-21ksoftirqd/012:30:000
29282992823,3cyclictest9-21ksoftirqd/009:42:470
29282992823,3cyclictest9-21ksoftirqd/009:26:470
29282992822,3cyclictest9-21ksoftirqd/011:20:000
136991280,0ptp4l401ktimersoftd/312:00:193
29285992721,4cyclictest41-21ksoftirqd/312:05:203
29284992722,3cyclictest33-21ksoftirqd/211:45:392
29284992722,3cyclictest33-21ksoftirqd/208:51:122
29284992722,3cyclictest33-21ksoftirqd/208:05:222
29284992722,3cyclictest33-21ksoftirqd/208:05:222
29284992721,4cyclictest33-21ksoftirqd/212:32:392
29284992721,4cyclictest33-21ksoftirqd/209:43:302
29282992721,4cyclictest9-21ksoftirqd/011:46:560
29285992622,3cyclictest41-21ksoftirqd/310:30:093
2928499263,11cyclictest26505-21kworker/2:107:11:442
29284992621,3cyclictest33-21ksoftirqd/207:18:012
29283992621,3cyclictest25-21ksoftirqd/107:55:261
29283992620,4cyclictest25-21ksoftirqd/111:49:061
29283992620,4cyclictest25-21ksoftirqd/108:19:331
29282992621,3cyclictest9-21ksoftirqd/009:40:010
29282992621,3cyclictest9-21ksoftirqd/007:42:580
29282992620,4cyclictest9-21ksoftirqd/009:01:050
29282992620,4cyclictest9-21ksoftirqd/007:27:120
29282992620,3cyclictest9-21ksoftirqd/009:30:130
29285992519,3cyclictest41-21ksoftirqd/308:10:123
29284992520,3cyclictest33-21ksoftirqd/211:02:192
29284992520,3cyclictest33-21ksoftirqd/208:19:412
29284992519,4cyclictest33-21ksoftirqd/208:21:262
29284992519,3cyclictest33-21ksoftirqd/210:56:272
29283992520,3cyclictest25-21ksoftirqd/112:26:111
29283992520,3cyclictest25-21ksoftirqd/109:24:031
29283992520,3cyclictest25-21ksoftirqd/108:07:241
29283992520,3cyclictest25-21ksoftirqd/108:07:241
29283992519,4cyclictest25-21ksoftirqd/112:03:221
29282992520,3cyclictest9-21ksoftirqd/011:26:340
29282992418,3cyclictest9-21ksoftirqd/008:45:000
2928499210,4cyclictest31990-21cat12:25:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional