You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-18 - 21:30
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Thu Sep 18, 2025 12:45:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
29812234169,22sleep00-21swapper/007:07:360
137391206173,22phc2sys0-21swapper/307:06:233
30142205170,23sleep10-21swapper/107:08:011
9532204170,23sleep20-21swapper/207:05:052
3136921510,2sleep30-21swapper/309:15:193
31722150123,15sleep00-21swapper/007:10:010
31722150123,15sleep00-21swapper/007:10:010
1786221360,1sleep00-21swapper/011:00:230
137291610,8ptp4l401ktimersoftd/312:30:173
22162600,1sleep30-21swapper/310:30:143
222642550,2sleep20-21swapper/211:10:202
137291540,1ptp4l401ktimersoftd/311:23:533
1373914733,8phc2sys0-21swapper/307:10:013
1373914733,8phc2sys0-21swapper/307:10:003
137291450,1ptp4l401ktimersoftd/307:37:403
132591450,1getstats19016-1kworker/3:1H09:45:043
137291430,0ptp4l401ktimersoftd/312:24:043
137291420,0ptp4l401ktimersoftd/311:25:303
137291420,0ptp4l401ktimersoftd/310:05:263
137291420,0ptp4l401ktimersoftd/309:40:023
3464994137,2cyclictest20844-21sshd08:50:431
3464994137,2cyclictest20844-21sshd08:50:431
3463994135,4cyclictest9-21ksoftirqd/009:35:460
137291410,0ptp4l401ktimersoftd/308:54:073
137291410,0ptp4l401ktimersoftd/308:54:073
346599402,35cyclictest24732-21latency_hist07:55:002
137291400,1ptp4l401ktimersoftd/308:10:083
137291400,1ptp4l401ktimersoftd/308:10:083
346599381,34cyclictest2926-21latency_hist11:40:012
3466993730,4cyclictest41-21ksoftirqd/309:37:103
3463993731,4cyclictest9-21ksoftirqd/012:19:580
3463993731,4cyclictest9-21ksoftirqd/009:03:450
137291370,0ptp4l401ktimersoftd/311:35:223
3466993631,3cyclictest41-21ksoftirqd/308:58:133
3466993630,4cyclictest41-21ksoftirqd/312:27:003
3466993630,4cyclictest41-21ksoftirqd/312:26:593
3466993630,4cyclictest41-21ksoftirqd/311:52:223
3466993630,4cyclictest41-21ksoftirqd/311:14:593
3466993630,4cyclictest41-21ksoftirqd/309:08:053
3466993630,4cyclictest41-21ksoftirqd/308:41:503
3464993630,3cyclictest25-21ksoftirqd/111:00:001
3464993629,5cyclictest25-21ksoftirqd/108:01:361
346499360,35cyclictest0-21swapper/107:16:101
3463993630,4cyclictest9-21ksoftirqd/011:54:430
3463993630,4cyclictest9-21ksoftirqd/011:47:120
3463993629,4cyclictest9-21ksoftirqd/010:20:480
137291360,0ptp4l401ktimersoftd/311:15:273
3466993529,4cyclictest41-21ksoftirqd/310:38:163
3466993529,4cyclictest41-21ksoftirqd/309:56:323
3466993529,4cyclictest41-21ksoftirqd/309:28:073
3466993529,4cyclictest41-21ksoftirqd/308:34:433
3465993530,3cyclictest31900-21cron10:25:002
3465993529,4cyclictest33-21ksoftirqd/210:25:392
3465993529,4cyclictest33-21ksoftirqd/208:11:092
3465993529,4cyclictest33-21ksoftirqd/208:11:082
3465993529,4cyclictest33-21ksoftirqd/207:56:552
3465993514,18cyclictest33-21ksoftirqd/211:49:322
3464993529,4cyclictest25-21ksoftirqd/110:31:521
3464993529,4cyclictest25-21ksoftirqd/110:11:461
3464993529,4cyclictest25-21ksoftirqd/107:37:291
3463993529,4cyclictest9-21ksoftirqd/008:06:480
3463993529,4cyclictest9-21ksoftirqd/008:06:480
3463993529,4cyclictest9-21ksoftirqd/008:00:060
3463993529,4cyclictest9-21ksoftirqd/007:33:100
3463993528,5cyclictest9-21ksoftirqd/010:16:390
137291350,0ptp4l401ktimersoftd/310:45:163
137291350,0ptp4l401ktimersoftd/309:30:313
3466993429,3cyclictest41-21ksoftirqd/310:29:593
3466993429,3cyclictest41-21ksoftirqd/307:24:513
3466993429,3cyclictest30684-21cron09:15:003
3466993428,4cyclictest41-21ksoftirqd/311:07:453
3466993428,4cyclictest41-21ksoftirqd/308:04:313
3466993428,4cyclictest41-21ksoftirqd/307:54:293
3466993428,4cyclictest41-21ksoftirqd/307:33:293
3466993427,4cyclictest41-21ksoftirqd/310:22:553
3465993429,3cyclictest33-21ksoftirqd/210:15:162
3465993428,4cyclictest33-21ksoftirqd/211:34:222
3465993428,4cyclictest33-21ksoftirqd/208:27:122
3465993428,4cyclictest33-21ksoftirqd/207:42:352
3465993427,4cyclictest33-21ksoftirqd/207:49:212
3465993413,19cyclictest5515-21awk09:30:002
3465993412,19cyclictest10649-21date07:25:002
346599341,11cyclictest19841-21latency_hist12:14:592
3465993411,19cyclictest15937-21sshd10:56:092
3464993428,4cyclictest25-21ksoftirqd/110:18:041
3464993428,4cyclictest25-21ksoftirqd/109:18:021
346499341,31cyclictest0-21swapper/110:25:191
3463993428,4cyclictest9-21ksoftirqd/011:36:140
3463993428,4cyclictest9-21ksoftirqd/010:14:260
3463993428,4cyclictest9-21ksoftirqd/008:19:400
3463993428,4cyclictest9-21ksoftirqd/007:36:160
3463993428,3cyclictest9-21ksoftirqd/011:55:360
3463993427,4cyclictest9-21ksoftirqd/008:44:350
3466993329,2cyclictest137291ptp4l12:00:173
3466993328,3cyclictest41-21ksoftirqd/311:34:173
3466993327,4cyclictest41-21ksoftirqd/311:46:403
346599339,4cyclictest77212chrt07:16:072
3465993328,3cyclictest33-21ksoftirqd/210:12:552
3465993328,3cyclictest33-21ksoftirqd/209:50:492
3465993327,4cyclictest33-21ksoftirqd/212:23:212
3465993327,4cyclictest33-21ksoftirqd/210:39:222
3465993327,4cyclictest33-21ksoftirqd/209:58:592
3465993327,4cyclictest33-21ksoftirqd/208:21:512
3465993327,4cyclictest33-21ksoftirqd/208:16:492
3465993327,4cyclictest33-21ksoftirqd/208:05:502
3465993327,4cyclictest33-21ksoftirqd/208:05:502
3465993327,4cyclictest33-21ksoftirqd/207:12:262
3465993327,4cyclictest33-21ksoftirqd/207:12:262
3465993326,4cyclictest33-21ksoftirqd/212:07:212
3465993326,4cyclictest33-21ksoftirqd/210:42:402
3464993328,3cyclictest25-21ksoftirqd/109:50:001
3464993328,3cyclictest25-21ksoftirqd/109:38:031
3464993328,3cyclictest25-21ksoftirqd/108:39:511
3464993327,4cyclictest25-21ksoftirqd/112:13:541
3464993327,4cyclictest25-21ksoftirqd/109:54:131
3464993327,4cyclictest25-21ksoftirqd/109:41:091
3464993327,4cyclictest25-21ksoftirqd/109:06:271
3464993327,4cyclictest25-21ksoftirqd/108:33:451
3464993327,3cyclictest25-21ksoftirqd/109:02:081
3463993328,3cyclictest9-21ksoftirqd/012:05:010
3463993327,4cyclictest9-21ksoftirqd/012:23:390
3463993327,4cyclictest9-21ksoftirqd/011:44:280
3463993327,4cyclictest9-21ksoftirqd/010:27:380
3463993327,4cyclictest9-21ksoftirqd/008:58:110
3463993327,4cyclictest9-21ksoftirqd/007:52:160
3463993327,4cyclictest9-21ksoftirqd/007:22:070
3463993327,3cyclictest9-21ksoftirqd/007:29:330
3466993227,3cyclictest41-21ksoftirqd/310:55:233
3466993227,3cyclictest41-21ksoftirqd/310:41:163
3466993226,4cyclictest41-21ksoftirqd/312:38:273
3466993226,4cyclictest41-21ksoftirqd/312:06:343
3466993226,4cyclictest41-21ksoftirqd/308:47:273
3466993225,4cyclictest41-21ksoftirqd/312:16:573
346599329,3cyclictest17300-21sed11:00:182
346599329,3cyclictest13509-21fschecks_count07:30:132
346599328,4cyclictest15191-21date12:05:012
3465993226,4cyclictest33-21ksoftirqd/212:39:192
3465993226,4cyclictest33-21ksoftirqd/212:16:472
3465993226,4cyclictest33-21ksoftirqd/211:16:302
3465993226,4cyclictest33-21ksoftirqd/209:09:092
3465993226,3cyclictest33-21ksoftirqd/211:43:272
346599321,29cyclictest0-21swapper/211:10:012
3465993211,3cyclictest15041-21cron09:50:002
3464993227,3cyclictest25-21ksoftirqd/112:37:041
3464993227,3cyclictest25-21ksoftirqd/112:24:201
3464993227,3cyclictest25-21ksoftirqd/111:25:001
3464993227,3cyclictest25-21ksoftirqd/108:45:091
3464993227,3cyclictest25-21ksoftirqd/108:09:151
3464993227,3cyclictest25-21ksoftirqd/108:09:151
3464993226,4cyclictest25-21ksoftirqd/112:00:101
3464993226,4cyclictest25-21ksoftirqd/111:26:441
3464993226,4cyclictest25-21ksoftirqd/107:13:131
3464993226,4cyclictest25-21ksoftirqd/107:13:131
3463993227,3cyclictest9-21ksoftirqd/012:11:280
3463993227,3cyclictest9-21ksoftirqd/009:08:470
3463993226,4cyclictest9-21ksoftirqd/012:08:230
3463993226,4cyclictest9-21ksoftirqd/011:22:020
3463993226,4cyclictest9-21ksoftirqd/009:23:310
3463993226,4cyclictest9-21ksoftirqd/009:14:360
3463993226,4cyclictest9-21ksoftirqd/008:20:200
3466993125,4cyclictest41-21ksoftirqd/311:04:443
3466993125,4cyclictest41-21ksoftirqd/307:18:423
346599319,3cyclictest26210-21cpuspeed_turbos11:20:142
346599319,3cyclictest11915-21/usr/sbin/munin08:35:282
346599319,2cyclictest27695-21fschecks_time12:30:152
346599318,4cyclictest235252chrt08:59:422
346599318,3cyclictest26870-21seq12:28:452
346599318,3cyclictest26870-21seq12:28:452
3465993127,3cyclictest33-21ksoftirqd/209:00:512
3465993126,3cyclictest33-21ksoftirqd/211:52:102
3465993126,3cyclictest33-21ksoftirqd/208:42:252
3465993125,4cyclictest33-21ksoftirqd/209:40:502
3465993125,4cyclictest33-21ksoftirqd/209:16:072
3465993125,4cyclictest33-21ksoftirqd/209:14:142
3465993124,4cyclictest33-21ksoftirqd/210:33:422
3465993110,3cyclictest11505-21latency_hist10:50:002
3464993125,4cyclictest25-21ksoftirqd/112:27:581
3464993125,4cyclictest25-21ksoftirqd/112:27:571
3464993125,4cyclictest25-21ksoftirqd/108:23:181
3464993125,4cyclictest25-21ksoftirqd/107:57:191
3464993125,4cyclictest25-21ksoftirqd/107:41:301
3464993124,5cyclictest25-21ksoftirqd/107:54:501
3464993124,4cyclictest25-21ksoftirqd/112:16:311
3463993126,3cyclictest9-21ksoftirqd/012:33:150
3463993125,4cyclictest9-21ksoftirqd/010:00:100
3463993125,4cyclictest9-21ksoftirqd/009:54:200
3463993125,4cyclictest9-21ksoftirqd/008:46:240
3463993125,4cyclictest9-21ksoftirqd/008:31:560
3463993125,4cyclictest9-21ksoftirqd/008:29:070
3463993125,4cyclictest9-21ksoftirqd/007:56:410
137291310,0ptp4l401ktimersoftd/312:11:213
137291310,0ptp4l401ktimersoftd/310:12:203
137291310,0ptp4l401ktimersoftd/310:04:353
137291310,0ptp4l401ktimersoftd/307:42:023
3466993025,3cyclictest41-21ksoftirqd/309:24:433
3466993025,3cyclictest41-21ksoftirqd/308:17:343
346599308,3cyclictest11204-21unixbench_multi08:30:262
346599308,2cyclictest18825-21latency_hist08:50:002
346599304,5cyclictest0-21swapper/210:50:112
3465993024,4cyclictest33-21ksoftirqd/208:53:102
3465993024,4cyclictest33-21ksoftirqd/208:53:102
3464993025,3cyclictest25-21ksoftirqd/110:25:001
3464993025,3cyclictest25-21ksoftirqd/108:58:351
3464993025,3cyclictest25-21ksoftirqd/108:19:031
3464993024,4cyclictest25-21ksoftirqd/112:09:251
3464993024,4cyclictest25-21ksoftirqd/108:10:581
3464993024,4cyclictest25-21ksoftirqd/108:10:581
3463993026,3cyclictest9-21ksoftirqd/007:15:520
3463993024,4cyclictest9-21ksoftirqd/010:52:000
3463993024,4cyclictest9-21ksoftirqd/010:09:530
3463993024,4cyclictest9-21ksoftirqd/009:42:530
346599297,3cyclictest29020-21unixbench_multi08:00:272
3465992924,3cyclictest33-21ksoftirqd/209:31:512
3465992924,3cyclictest33-21ksoftirqd/207:27:492
3465992912,14cyclictest0-21swapper/211:25:172
3465992911,16cyclictest1285-21runrttasks09:35:272
346599290,3cyclictest18155-1kworker/2:2H10:10:002
3464992924,3cyclictest25-21ksoftirqd/112:34:501
3464992924,3cyclictest25-21ksoftirqd/108:45:001
3464992924,3cyclictest25-21ksoftirqd/107:45:191
3464992924,3cyclictest25-21ksoftirqd/107:33:521
3464992924,3cyclictest25-21ksoftirqd/107:25:101
3464992923,4cyclictest25-21ksoftirqd/111:47:421
3464992923,4cyclictest25-21ksoftirqd/111:43:051
3464992923,4cyclictest25-21ksoftirqd/111:11:591
3464992922,5cyclictest25-21ksoftirqd/108:27:161
3463992924,3cyclictest9-21ksoftirqd/009:45:080
3463992924,3cyclictest9-21ksoftirqd/009:30:530
3463992923,4cyclictest9-21ksoftirqd/011:26:460
3463992923,4cyclictest9-21ksoftirqd/011:10:100
3463992923,4cyclictest9-21ksoftirqd/011:06:410
3463992923,4cyclictest9-21ksoftirqd/010:36:400
3463992923,4cyclictest9-21ksoftirqd/010:33:310
3463992922,5cyclictest9-21ksoftirqd/009:56:040
137291290,0ptp4l401ktimersoftd/311:43:443
137291290,0ptp4l401ktimersoftd/307:45:303
3466992823,3cyclictest41-21ksoftirqd/310:16:063
3466992823,3cyclictest41-21ksoftirqd/308:37:213
3466992822,4cyclictest41-21ksoftirqd/307:29:083
346599281,7cyclictest20273-21apt-get10:00:122
3464992823,3cyclictest25-21ksoftirqd/111:50:411
3464992823,3cyclictest25-21ksoftirqd/109:30:361
3464992823,3cyclictest25-21ksoftirqd/109:27:191
3464992823,3cyclictest25-21ksoftirqd/109:10:441
3464992822,4cyclictest25-21ksoftirqd/110:46:441
3463992823,3cyclictest9-21ksoftirqd/009:28:330
3463992822,4cyclictest9-21ksoftirqd/012:28:290
3463992822,4cyclictest9-21ksoftirqd/012:28:290
3463992822,4cyclictest9-21ksoftirqd/011:17:490
3463992822,4cyclictest9-21ksoftirqd/010:57:500
3463992822,4cyclictest9-21ksoftirqd/010:41:500
3463992822,4cyclictest9-21ksoftirqd/008:54:020
3463992822,4cyclictest9-21ksoftirqd/008:54:020
3466992721,4cyclictest41-21ksoftirqd/309:52:413
3466992721,4cyclictest41-21ksoftirqd/308:24:533
3465992721,4cyclictest33-21ksoftirqd/209:24:492
3464992722,3cyclictest25-21ksoftirqd/111:56:151
3464992722,3cyclictest25-21ksoftirqd/110:51:221
3464992721,4cyclictest25-21ksoftirqd/111:16:411
3464992721,4cyclictest25-21ksoftirqd/110:40:391
3464992721,4cyclictest25-21ksoftirqd/110:02:351
3464992721,4cyclictest25-21ksoftirqd/109:23:321
3463992722,3cyclictest9-21ksoftirqd/009:17:350
3463992721,3cyclictest9-21ksoftirqd/008:10:110
3463992721,3cyclictest9-21ksoftirqd/008:10:110
137291270,0ptp4l401ktimersoftd/310:51:453
3466992621,3cyclictest41-21ksoftirqd/311:58:323
3466992621,3cyclictest41-21ksoftirqd/309:03:173
3465992621,3cyclictest33-21ksoftirqd/211:55:502
3465992621,3cyclictest33-21ksoftirqd/207:36:342
3464992620,4cyclictest25-21ksoftirqd/111:37:191
3463992621,3cyclictest9-21ksoftirqd/011:31:440
3463992620,4cyclictest9-21ksoftirqd/007:49:070
137291260,1ptp4l401ktimersoftd/307:55:163
137291260,0ptp4l401ktimersoftd/308:25:223
3464992520,3cyclictest25-21ksoftirqd/110:35:531
3464992519,3cyclictest25-21ksoftirqd/111:31:531
3463992521,3cyclictest9-21ksoftirqd/008:39:550
3463992520,3cyclictest9-21ksoftirqd/010:45:410
137291250,0ptp4l401ktimersoftd/308:05:193
137291250,0ptp4l401ktimersoftd/308:05:193
3464992418,4cyclictest25-21ksoftirqd/111:02:091
3464992317,4cyclictest25-21ksoftirqd/111:06:021
3464992215,4cyclictest25-21ksoftirqd/109:58:141
346499210,20cyclictest0-21swapper/107:23:211
3464991913,4cyclictest25-21ksoftirqd/110:05:561
3463991913,4cyclictest9-21ksoftirqd/007:40:050
3463991610,4cyclictest30843-21processes12:35:300
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional