You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-12 - 18:44
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Sat Jul 12, 2025 12:45:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
276112236170,22sleep20-21swapper/207:06:182
277312234168,22sleep30-21swapper/307:07:533
257722207174,22sleep00-21swapper/007:05:110
275852204171,21sleep10-21swapper/107:05:581
137291630,1ptp4l401ktimersoftd/311:35:023
282642600,1sleep00-21swapper/010:30:190
82562570,2sleep20-21swapper/207:35:142
137291570,1ptp4l401ktimersoftd/308:53:493
137291550,1ptp4l401ktimersoftd/309:52:443
137291540,1ptp4l401ktimersoftd/311:07:113
137291540,1ptp4l401ktimersoftd/310:58:013
210092480,2sleep00-21swapper/009:10:000
28188994742,3cyclictest12459-21sh10:00:001
28187994337,4cyclictest20957-21cron11:25:000
28187994337,4cyclictest20957-21cron11:25:000
28187994236,3cyclictest9-21ksoftirqd/007:44:590
137291410,0ptp4l401ktimersoftd/312:12:343
2789524031,4sleep20-21swapper/207:10:012
137291400,0ptp4l401ktimersoftd/310:05:193
2818899393,22cyclictest6844-21cpu08:40:161
28190993833,3cyclictest41-21ksoftirqd/311:50:003
28190993832,3cyclictest41-21ksoftirqd/310:40:003
236772380,4sleep30-21swapper/308:05:293
28190993732,2cyclictest41-21ksoftirqd/308:00:003
28190993730,4cyclictest41-21ksoftirqd/312:35:113
28190993730,4cyclictest41-21ksoftirqd/312:35:113
28187993731,4cyclictest9-21ksoftirqd/009:22:490
137291370,0ptp4l401ktimersoftd/307:20:223
28190993632,3cyclictest41-21ksoftirqd/310:25:013
28190993629,4cyclictest41-21ksoftirqd/308:04:323
28189993631,3cyclictest33-21ksoftirqd/209:35:332
2818899360,35cyclictest0-21swapper/108:28:401
137291360,0ptp4l401ktimersoftd/311:55:143
28190993531,3cyclictest41-21ksoftirqd/311:30:013
28190993531,3cyclictest41-21ksoftirqd/311:30:013
28190993529,4cyclictest41-21ksoftirqd/310:52:093
28190993529,4cyclictest41-21ksoftirqd/308:48:533
28190993529,4cyclictest41-21ksoftirqd/308:34:453
28190993529,3cyclictest41-21ksoftirqd/310:00:003
28190993529,3cyclictest41-21ksoftirqd/309:30:203
28190993528,4cyclictest41-21ksoftirqd/308:35:123
28189993529,4cyclictest33-21ksoftirqd/211:03:072
28189993529,4cyclictest33-21ksoftirqd/208:57:182
28189993528,4cyclictest33-21ksoftirqd/212:15:112
28188993530,3cyclictest25-21ksoftirqd/107:13:331
28188993529,4cyclictest25-21ksoftirqd/111:54:171
28188993529,4cyclictest25-21ksoftirqd/109:29:071
28187993530,3cyclictest9-21ksoftirqd/011:54:000
28187993529,4cyclictest9-21ksoftirqd/011:09:510
28187993529,4cyclictest9-21ksoftirqd/009:26:580
28187993529,4cyclictest9-21ksoftirqd/007:54:070
28187993528,4cyclictest9-21ksoftirqd/011:14:000
28187993528,4cyclictest9-21ksoftirqd/008:42:170
28190993429,3cyclictest41-21ksoftirqd/311:55:003
28190993429,3cyclictest41-21ksoftirqd/311:00:233
28190993428,4cyclictest41-21ksoftirqd/311:31:173
28190993428,4cyclictest41-21ksoftirqd/309:10:113
28190993428,4cyclictest41-21ksoftirqd/309:10:113
28190993428,3cyclictest41-21ksoftirqd/312:15:183
28189993429,3cyclictest33-21ksoftirqd/211:50:132
28189993429,3cyclictest33-21ksoftirqd/210:55:012
28189993428,4cyclictest33-21ksoftirqd/212:36:102
28189993428,4cyclictest33-21ksoftirqd/212:36:102
28189993428,4cyclictest33-21ksoftirqd/212:13:202
28189993428,4cyclictest33-21ksoftirqd/211:25:502
28189993428,4cyclictest33-21ksoftirqd/211:25:502
28189993428,4cyclictest33-21ksoftirqd/211:09:292
28189993428,4cyclictest33-21ksoftirqd/210:46:112
28189993428,4cyclictest33-21ksoftirqd/207:45:342
28189993428,4cyclictest33-21ksoftirqd/207:17:502
28188993428,4cyclictest25-21ksoftirqd/112:32:561
28188993428,4cyclictest25-21ksoftirqd/110:43:241
28188993428,4cyclictest25-21ksoftirqd/107:59:041
28188993427,5cyclictest25-21ksoftirqd/110:33:101
28187993429,3cyclictest9-21ksoftirqd/010:14:520
28187993428,4cyclictest9-21ksoftirqd/011:44:210
28187993428,4cyclictest9-21ksoftirqd/009:58:420
28187993428,3cyclictest9-21ksoftirqd/008:24:540
28190993329,3cyclictest41-21ksoftirqd/309:00:003
28190993329,2cyclictest41-21ksoftirqd/310:05:003
28190993327,4cyclictest41-21ksoftirqd/310:41:183
28190993327,4cyclictest41-21ksoftirqd/310:18:513
28189993328,3cyclictest33-21ksoftirqd/210:38:362
28189993327,4cyclictest33-21ksoftirqd/212:27:162
28188993327,4cyclictest25-21ksoftirqd/111:09:531
28188993327,4cyclictest25-21ksoftirqd/109:42:481
28188993327,4cyclictest25-21ksoftirqd/109:08:041
28188993314,16cyclictest5787-21grep09:45:171
28188993314,16cyclictest20197-21mailstats11:20:281
28188993314,16cyclictest20197-21mailstats11:20:281
28188993310,19cyclictest16461-21needreboot07:50:241
28187993328,3cyclictest9-21ksoftirqd/010:19:210
28187993328,3cyclictest9-21ksoftirqd/008:34:470
28187993328,3cyclictest9-21ksoftirqd/007:11:140
28187993327,4cyclictest9-21ksoftirqd/012:07:080
28187993327,4cyclictest9-21ksoftirqd/011:35:390
28187993327,4cyclictest9-21ksoftirqd/010:53:310
28187993326,4cyclictest9-21ksoftirqd/010:27:430
276922330,6sleep2321ktimersoftd/211:35:292
28190993227,3cyclictest41-21ksoftirqd/312:00:453
28190993227,3cyclictest41-21ksoftirqd/310:30:013
28190993227,3cyclictest41-21ksoftirqd/309:19:423
28190993227,3cyclictest41-21ksoftirqd/309:06:083
28190993226,4cyclictest41-21ksoftirqd/311:18:253
28190993226,4cyclictest41-21ksoftirqd/310:12:013
28190993226,3cyclictest41-21ksoftirqd/312:30:003
28190993225,4cyclictest41-21ksoftirqd/307:45:003
28190993221,10cyclictest41-21ksoftirqd/308:15:173
28189993227,3cyclictest33-21ksoftirqd/209:45:112
28189993227,3cyclictest33-21ksoftirqd/207:32:492
28189993227,3cyclictest33-21ksoftirqd/207:32:482
28189993226,4cyclictest33-21ksoftirqd/212:01:442
28189993226,4cyclictest33-21ksoftirqd/211:48:482
28189993226,4cyclictest33-21ksoftirqd/211:32:202
28189993226,4cyclictest33-21ksoftirqd/211:23:372
28189993226,4cyclictest33-21ksoftirqd/211:23:372
28189993226,4cyclictest33-21ksoftirqd/210:57:212
28189993226,4cyclictest33-21ksoftirqd/209:21:062
28189993226,4cyclictest33-21ksoftirqd/209:13:242
28189993226,4cyclictest33-21ksoftirqd/209:13:242
28189993226,4cyclictest33-21ksoftirqd/208:17:272
28188993227,3cyclictest25-21ksoftirqd/110:20:121
28188993226,4cyclictest25-21ksoftirqd/111:31:511
28188993226,4cyclictest25-21ksoftirqd/111:26:381
28188993226,4cyclictest25-21ksoftirqd/111:26:381
28188993226,4cyclictest25-21ksoftirqd/110:15:401
28187993227,3cyclictest9-21ksoftirqd/010:42:240
28187993227,3cyclictest9-21ksoftirqd/010:23:500
28187993227,3cyclictest9-21ksoftirqd/010:00:140
28187993227,3cyclictest9-21ksoftirqd/008:35:350
28187993226,4cyclictest9-21ksoftirqd/011:47:460
28187993226,4cyclictest9-21ksoftirqd/011:00:440
28187993226,4cyclictest9-21ksoftirqd/009:52:160
28187993226,4cyclictest9-21ksoftirqd/009:41:490
28187993226,4cyclictest9-21ksoftirqd/009:04:340
28187993226,4cyclictest9-21ksoftirqd/008:48:510
28187993226,4cyclictest9-21ksoftirqd/007:38:170
28187993225,4cyclictest9-21ksoftirqd/012:10:090
137291320,0ptp4l401ktimersoftd/307:15:243
28190993127,3cyclictest41-21ksoftirqd/307:50:213
28190993126,3cyclictest41-21ksoftirqd/309:45:203
28190993125,4cyclictest41-21ksoftirqd/312:23:403
28190993125,4cyclictest41-21ksoftirqd/311:44:483
28190993125,4cyclictest41-21ksoftirqd/309:26:003
28189993126,3cyclictest33-21ksoftirqd/212:06:172
28189993126,3cyclictest33-21ksoftirqd/210:23:072
28189993126,3cyclictest33-21ksoftirqd/209:40:072
28189993125,4cyclictest33-21ksoftirqd/212:32:582
28189993125,4cyclictest33-21ksoftirqd/212:24:432
28189993125,4cyclictest33-21ksoftirqd/211:58:192
28189993125,4cyclictest33-21ksoftirqd/211:44:432
28189993125,4cyclictest33-21ksoftirqd/210:40:462
28189993125,4cyclictest33-21ksoftirqd/209:51:382
28189993125,4cyclictest33-21ksoftirqd/209:17:372
28188993126,3cyclictest25-21ksoftirqd/111:40:251
28188993126,3cyclictest25-21ksoftirqd/108:07:541
28188993125,4cyclictest25-21ksoftirqd/112:03:281
28188993125,4cyclictest25-21ksoftirqd/111:47:511
28188993125,4cyclictest25-21ksoftirqd/109:00:031
2818899310,3cyclictest121rcu_preempt12:25:211
28187993126,3cyclictest9-21ksoftirqd/011:00:010
28187993125,4cyclictest9-21ksoftirqd/012:28:100
28187993125,4cyclictest9-21ksoftirqd/012:04:230
28187993125,4cyclictest9-21ksoftirqd/011:58:450
28187993125,4cyclictest9-21ksoftirqd/011:29:210
28187993125,4cyclictest9-21ksoftirqd/011:29:210
28187993125,4cyclictest9-21ksoftirqd/010:09:020
28187993125,4cyclictest9-21ksoftirqd/009:47:270
28187993125,4cyclictest9-21ksoftirqd/009:35:000
28187993125,4cyclictest9-21ksoftirqd/008:53:020
28187993125,4cyclictest9-21ksoftirqd/008:16:160
28187993125,4cyclictest9-21ksoftirqd/007:16:080
137291310,1ptp4l401ktimersoftd/308:20:283
137291310,0ptp4l401ktimersoftd/310:33:123
28190993025,3cyclictest41-21ksoftirqd/311:10:233
28190993024,4cyclictest41-21ksoftirqd/312:32:023
28190993024,4cyclictest41-21ksoftirqd/307:45:143
28189993024,4cyclictest33-21ksoftirqd/211:13:462
28189993024,4cyclictest33-21ksoftirqd/208:40:582
28189993024,4cyclictest33-21ksoftirqd/208:11:282
28189993024,3cyclictest33-21ksoftirqd/209:30:172
28188993025,3cyclictest25-21ksoftirqd/111:12:451
28188993025,3cyclictest25-21ksoftirqd/110:10:521
28188993024,4cyclictest25-21ksoftirqd/112:15:041
28188993024,4cyclictest25-21ksoftirqd/111:38:131
28188993024,4cyclictest25-21ksoftirqd/110:47:581
28188993024,4cyclictest25-21ksoftirqd/110:29:451
28188993024,4cyclictest25-21ksoftirqd/108:23:441
28188993024,4cyclictest25-21ksoftirqd/108:13:451
28188993012,15cyclictest13291-21df_abs07:45:151
2818899300,27cyclictest10140-21latency_hist09:55:011
28187993026,3cyclictest9-21ksoftirqd/009:15:270
28187993025,3cyclictest9-21ksoftirqd/011:18:420
137291300,0ptp4l401ktimersoftd/312:05:163
137291300,0ptp4l401ktimersoftd/311:22:533
137291300,0ptp4l401ktimersoftd/311:22:533
137291300,0ptp4l401ktimersoftd/307:27:023
28190992924,4cyclictest41-21ksoftirqd/307:39:333
28190992924,3cyclictest41-21ksoftirqd/309:36:253
28189992924,3cyclictest33-21ksoftirqd/207:41:182
28189992923,4cyclictest33-21ksoftirqd/210:05:472
28189992923,4cyclictest33-21ksoftirqd/210:02:342
28189992923,4cyclictest33-21ksoftirqd/208:52:132
28189992923,4cyclictest33-21ksoftirqd/208:32:202
28189992923,4cyclictest33-21ksoftirqd/208:26:262
28188992924,3cyclictest25-21ksoftirqd/112:23:061
28188992924,3cyclictest25-21ksoftirqd/108:02:321
28188992924,3cyclictest25-21ksoftirqd/107:44:361
28188992924,3cyclictest25-21ksoftirqd/107:38:501
28188992923,4cyclictest25-21ksoftirqd/108:30:101
28188992923,4cyclictest25-21ksoftirqd/107:30:491
28188992923,4cyclictest25-21ksoftirqd/107:30:491
2818899291,25cyclictest30232-21grep10:35:171
28188992912,15cyclictest1413-21if_err_enp4s007:20:181
2818899290,2cyclictest4314-21ls07:25:221
28187992924,3cyclictest9-21ksoftirqd/007:48:120
28187992924,3cyclictest9-21ksoftirqd/007:25:020
137291290,0ptp4l401ktimersoftd/308:14:333
28190992823,3cyclictest41-21ksoftirqd/309:40:213
28190992823,3cyclictest41-21ksoftirqd/308:41:243
28190992823,3cyclictest41-21ksoftirqd/307:10:413
28189992823,3cyclictest33-21ksoftirqd/209:56:272
28189992822,4cyclictest33-21ksoftirqd/207:57:462
28189992822,4cyclictest33-21ksoftirqd/207:53:322
28188992822,4cyclictest25-21ksoftirqd/110:55:111
28188992821,5cyclictest25-21ksoftirqd/109:13:391
28188992821,5cyclictest25-21ksoftirqd/109:13:381
2818899280,1cyclictest0-21swapper/108:15:391
28187992823,3cyclictest9-21ksoftirqd/008:26:410
28187992823,3cyclictest9-21ksoftirqd/007:30:240
28187992823,3cyclictest9-21ksoftirqd/007:30:240
28187992822,4cyclictest9-21ksoftirqd/012:24:130
28187992822,4cyclictest9-21ksoftirqd/010:39:060
28187992822,4cyclictest9-21ksoftirqd/009:10:150
28187992822,4cyclictest9-21ksoftirqd/009:10:140
28190992722,3cyclictest41-21ksoftirqd/309:05:013
28189992723,3cyclictest33-21ksoftirqd/211:18:332
28189992722,3cyclictest33-21ksoftirqd/209:27:232
28189992722,3cyclictest33-21ksoftirqd/208:38:222
28189992721,4cyclictest33-21ksoftirqd/209:02:292
28189992721,4cyclictest33-21ksoftirqd/207:25:522
2818899279,15cyclictest18748-21sed11:20:011
2818899274,20cyclictest16161-21cut10:05:211
28188992723,3cyclictest25-21ksoftirqd/112:40:001
28188992723,3cyclictest25-21ksoftirqd/112:40:001
28188992722,3cyclictest25-21ksoftirqd/108:58:031
28188992722,3cyclictest25-21ksoftirqd/108:47:591
28188992722,3cyclictest14845-21cron10:05:001
28188992721,4cyclictest25-21ksoftirqd/111:03:301
28188992721,4cyclictest25-21ksoftirqd/109:35:541
28188992711,14cyclictest5606-21phc2sys-jitter08:35:241
2818899270,1cyclictest0-21swapper/110:50:181
28187992722,3cyclictest9-21ksoftirqd/012:16:510
28187992722,3cyclictest9-21ksoftirqd/011:33:070
28187992722,3cyclictest9-21ksoftirqd/008:56:100
28187992722,3cyclictest9-21ksoftirqd/007:20:410
28187992721,4cyclictest9-21ksoftirqd/008:06:420
2818799270,2cyclictest121rcu_preempt08:12:530
28190992622,3cyclictest41-21ksoftirqd/309:20:263
28190992622,3cyclictest41-21ksoftirqd/308:30:003
28189992621,3cyclictest33-21ksoftirqd/209:05:432
28189992620,4cyclictest33-21ksoftirqd/210:31:502
28189992620,4cyclictest33-21ksoftirqd/210:11:172
28189992620,4cyclictest33-21ksoftirqd/208:08:092
28188992620,4cyclictest25-21ksoftirqd/112:11:511
2818899261,22cyclictest2494-21gnome-shell07:18:591
2818899260,23cyclictest25604-21grep09:20:001
2818899260,23cyclictest13817-21cat08:55:011
2818899260,1cyclictest0-21swapper/109:20:261
28187992621,3cyclictest9-21ksoftirqd/012:30:120
28187992621,3cyclictest9-21ksoftirqd/010:46:330
28187992621,3cyclictest9-21ksoftirqd/009:36:190
28189992520,3cyclictest33-21ksoftirqd/210:28:152
28189992520,3cyclictest33-21ksoftirqd/208:22:392
28189992520,3cyclictest33-21ksoftirqd/207:24:072
28189992519,3cyclictest33-21ksoftirqd/210:17:012
2818899251,21cyclictest569-21gdbus12:05:301
2818899251,21cyclictest5220-21grep11:55:291
28187992520,3cyclictest9-21ksoftirqd/007:55:110
28190992419,3cyclictest41-21ksoftirqd/310:45:153
2818899241,20cyclictest30720-21cpuspeed_turbos09:30:201
28189992318,3cyclictest33-21ksoftirqd/208:03:472
137291230,0ptp4l401ktimersoftd/307:30:163
137291230,0ptp4l401ktimersoftd/307:30:163
28189992217,3cyclictest33-21ksoftirqd/208:45:542
28187992217,3cyclictest9-21ksoftirqd/012:35:220
28187992217,3cyclictest9-21ksoftirqd/012:35:210
28187992215,4cyclictest9-21ksoftirqd/008:00:190
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional