You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-12 - 02:09
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Sun May 11, 2025 12:45:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
245672205171,23sleep10-21swapper/107:09:581
134791205177,19phc2sys0-21swapper/307:06:363
242412203169,22sleep00-21swapper/007:06:270
243012201166,23sleep20-21swapper/207:07:132
2543921370,7sleep12486499cyclictest12:35:271
134991630,7ptp4l401ktimersoftd/310:32:463
2486499609,17cyclictest6232-21cat11:55:291
2486399600,22cyclictest11038-21timedrift12:05:270
2486499598,16cyclictest19202-21taskset09:08:331
23082590,3sleep32486699cyclictest09:40:153
253702580,4sleep225375-21irqrtprio09:20:242
2486399580,26cyclictest21360-21seq10:19:540
134991550,1ptp4l401ktimersoftd/310:23:093
2486499517,15cyclictest21391-21runrttasks12:29:171
2486499509,7cyclictest24916-21df09:20:191
134991500,1ptp4l401ktimersoftd/308:04:473
134991500,1ptp4l401ktimersoftd/308:04:473
2486499497,7cyclictest8761-21sshd09:50:361
24864994910,11cyclictest11321-21seq12:05:541
2486599486,7cyclictest7006-21expr10:55:162
2486599470,17cyclictest32709-21irqrtprio11:45:212
2486499478,8cyclictest6543-21sshd09:48:371
2486499478,8cyclictest13663-21users10:00:341
2486499478,8cyclictest13663-21users10:00:331
2486499467,7cyclictest8920-21sshd12:01:371
2486499467,7cyclictest32661-21hddtemp_smartct08:30:221
2486499467,7cyclictest32661-21hddtemp_smartct08:30:211
2486499459,11cyclictest312492chrt10:37:201
134991450,1ptp4l401ktimersoftd/311:27:083
2486499437,7cyclictest5269-21df_inode07:35:171
2486499437,7cyclictest27456-21df_inode09:25:191
24863994236,4cyclictest14382-21sh07:55:000
2486399421,25cyclictest21595-21awk08:05:290
134991420,0ptp4l401ktimersoftd/308:17:523
2486599411,8cyclictest15359-21kernelversion12:15:212
134991410,0ptp4l401ktimersoftd/312:27:323
134991410,0ptp4l401ktimersoftd/310:26:443
2486499407,18cyclictest0-21swapper/110:05:231
2486399400,25cyclictest1729-21seq11:48:480
134991400,0ptp4l401ktimersoftd/309:38:383
1347914031,3phc2sys0-21swapper/307:10:013
2486499395,17cyclictest0-21swapper/110:55:161
2486399390,21cyclictest28911-21seq11:38:250
24866993829,6cyclictest41-21ksoftirqd/309:05:003
24865993831,4cyclictest14369-21cron07:55:002
2486499386,18cyclictest0-21swapper/108:40:261
2486499385,17cyclictest0-21swapper/111:50:241
2486499385,16cyclictest0-21swapper/111:15:231
2486399381,27cyclictest19059-21seq09:06:420
134991380,1ptp4l401ktimersoftd/310:50:383
134991380,0ptp4l401ktimersoftd/312:20:273
24866993732,3cyclictest41-21ksoftirqd/311:08:413
24866993731,4cyclictest41-21ksoftirqd/309:56:343
24866993731,4cyclictest41-21ksoftirqd/307:44:173
2486599374,6cyclictest33-21ksoftirqd/207:32:332
2486499376,20cyclictest0-21swapper/108:05:131
2486499375,17cyclictest0-21swapper/108:00:131
2486499375,17cyclictest0-21swapper/108:00:131
2486499375,16cyclictest0-21swapper/110:40:251
2486499375,16cyclictest0-21swapper/108:25:161
2486499375,16cyclictest0-21swapper/107:55:221
24863993732,3cyclictest14188-21cron08:59:590
24863993731,4cyclictest9-21ksoftirqd/011:27:580
2486399370,18cyclictest1280-21runrttasks10:52:050
24866993630,4cyclictest41-21ksoftirqd/311:03:433
24866993630,4cyclictest41-21ksoftirqd/311:03:433
24866993630,4cyclictest41-21ksoftirqd/308:12:053
2486599364,7cyclictest33-21ksoftirqd/210:30:162
24865993630,4cyclictest33-21ksoftirqd/208:26:592
2486499367,10cyclictest0-21swapper/108:45:261
2486499366,19cyclictest0-21swapper/111:40:151
24864993630,4cyclictest25-21ksoftirqd/109:40:121
24864993630,4cyclictest25-21ksoftirqd/107:24:411
24864993629,4cyclictest25-21ksoftirqd/108:20:331
24864993610,12cyclictest9627-21df_abs11:00:161
24864993610,12cyclictest9627-21df_abs11:00:161
24863993631,3cyclictest9-21ksoftirqd/012:15:130
24863993630,4cyclictest9-21ksoftirqd/010:29:020
2486399360,21cyclictest31481-21seq09:33:010
2486399360,21cyclictest31481-21seq09:33:010
2486399360,17cyclictest1280-21runrttasks12:20:380
24866993530,3cyclictest41-21ksoftirqd/307:38:553
24866993529,4cyclictest41-21ksoftirqd/312:33:003
24866993529,4cyclictest41-21ksoftirqd/312:06:293
24866993529,4cyclictest41-21ksoftirqd/310:48:593
24866993529,4cyclictest41-21ksoftirqd/310:42:403
24866993529,4cyclictest41-21ksoftirqd/310:36:103
24866993529,4cyclictest41-21ksoftirqd/309:14:103
24866993529,4cyclictest41-21ksoftirqd/307:17:003
24866993528,4cyclictest41-21ksoftirqd/308:52:293
24865993529,4cyclictest33-21ksoftirqd/210:16:582
24865993528,5cyclictest33-21ksoftirqd/208:05:462
24865993528,4cyclictest33-21ksoftirqd/208:17:012
24865993528,4cyclictest33-21ksoftirqd/207:35:092
2486499358,8cyclictest4284-21apt-get10:50:161
24864993530,3cyclictest25-21ksoftirqd/112:22:591
24864993529,4cyclictest25-21ksoftirqd/112:31:021
24863993529,4cyclictest9-21ksoftirqd/012:36:310
24863993529,4cyclictest9-21ksoftirqd/008:40:380
2486399350,18cyclictest1280-21runrttasks11:54:230
2486399350,17cyclictest0-21swapper/010:10:240
134991350,1ptp4l401ktimersoftd/309:30:283
134991350,1ptp4l401ktimersoftd/309:30:283
24866993429,3cyclictest41-21ksoftirqd/312:10:123
24866993429,3cyclictest41-21ksoftirqd/308:22:203
24866993428,4cyclictest41-21ksoftirqd/309:47:443
2486599344,5cyclictest33-21ksoftirqd/211:50:252
24865993429,3cyclictest33-21ksoftirqd/211:26:242
24865993429,3cyclictest33-21ksoftirqd/211:15:372
24865993428,4cyclictest33-21ksoftirqd/212:13:292
24865993428,4cyclictest33-21ksoftirqd/212:03:392
24865993428,4cyclictest33-21ksoftirqd/210:23:462
24865993428,4cyclictest33-21ksoftirqd/209:56:102
24865993428,4cyclictest33-21ksoftirqd/209:47:122
24865993428,4cyclictest33-21ksoftirqd/209:40:462
24865993428,4cyclictest33-21ksoftirqd/209:06:402
24865993428,4cyclictest33-21ksoftirqd/208:48:182
2486499348,12cyclictest3894-21sed07:30:251
2486499347,13cyclictest1516-21ls07:25:271
24864993410,10cyclictest26785-21seq10:30:011
24863993428,4cyclictest9-21ksoftirqd/008:52:490
24866993328,3cyclictest41-21ksoftirqd/311:58:553
24866993328,3cyclictest41-21ksoftirqd/309:20:003
24866993328,3cyclictest41-21ksoftirqd/308:28:353
24866993328,3cyclictest41-21ksoftirqd/307:50:133
24866993327,4cyclictest41-21ksoftirqd/311:48:313
24866993327,4cyclictest41-21ksoftirqd/311:18:513
24866993327,4cyclictest41-21ksoftirqd/310:58:553
24866993327,4cyclictest41-21ksoftirqd/310:14:493
24866993327,4cyclictest41-21ksoftirqd/309:51:253
24866993327,4cyclictest41-21ksoftirqd/309:27:153
24866993327,4cyclictest41-21ksoftirqd/309:07:493
24866993326,4cyclictest41-21ksoftirqd/312:36:333
24865993328,3cyclictest33-21ksoftirqd/212:26:422
24865993328,3cyclictest33-21ksoftirqd/208:30:152
24865993328,3cyclictest33-21ksoftirqd/208:30:152
24865993327,4cyclictest33-21ksoftirqd/211:44:412
24865993327,4cyclictest33-21ksoftirqd/211:36:312
24865993327,4cyclictest33-21ksoftirqd/211:14:122
24865993327,4cyclictest33-21ksoftirqd/210:36:502
24865993327,4cyclictest33-21ksoftirqd/210:08:332
24865993327,4cyclictest33-21ksoftirqd/209:52:572
24865993327,4cyclictest33-21ksoftirqd/209:28:302
24865993327,4cyclictest33-21ksoftirqd/208:02:532
24865993327,4cyclictest33-21ksoftirqd/208:02:532
2486499336,9cyclictest0-21swapper/111:45:231
2486499336,16cyclictest0-21swapper/108:55:251
24864993328,3cyclictest25-21ksoftirqd/110:25:171
24864993327,4cyclictest25-21ksoftirqd/111:31:211
24864993327,4cyclictest25-21ksoftirqd/111:31:211
24864993327,4cyclictest25-21ksoftirqd/109:31:181
24864993327,4cyclictest25-21ksoftirqd/109:31:181
24864993327,4cyclictest25-21ksoftirqd/108:10:421
24863993328,3cyclictest9-21ksoftirqd/012:12:410
24863993328,3cyclictest9-21ksoftirqd/009:55:160
24863993327,4cyclictest9-21ksoftirqd/012:32:460
24863993327,4cyclictest9-21ksoftirqd/012:00:000
24863993327,4cyclictest9-21ksoftirqd/010:46:470
24863993327,4cyclictest9-21ksoftirqd/009:27:480
24863993327,4cyclictest9-21ksoftirqd/007:28:090
24863993327,3cyclictest9-21ksoftirqd/008:16:590
2486399331,16cyclictest0-21swapper/007:15:140
2486399330,19cyclictest0-21swapper/008:14:460
24866993227,3cyclictest41-21ksoftirqd/307:57:503
24866993226,4cyclictest41-21ksoftirqd/308:38:213
2486599324,6cyclictest33-21ksoftirqd/207:55:332
24865993226,4cyclictest33-21ksoftirqd/212:33:202
24865993226,4cyclictest33-21ksoftirqd/211:08:102
24865993226,4cyclictest33-21ksoftirqd/210:49:462
24865993226,4cyclictest33-21ksoftirqd/210:42:592
24865993226,4cyclictest33-21ksoftirqd/210:10:092
24865993226,4cyclictest33-21ksoftirqd/209:32:102
24865993226,4cyclictest33-21ksoftirqd/209:32:102
24865993226,4cyclictest33-21ksoftirqd/209:10:412
24865993226,4cyclictest33-21ksoftirqd/208:51:462
24865993226,4cyclictest33-21ksoftirqd/208:36:212
24865993225,4cyclictest33-21ksoftirqd/208:55:412
24864993227,3cyclictest25-21ksoftirqd/107:14:001
24864993226,4cyclictest25-21ksoftirqd/111:09:551
24864993225,4cyclictest25-21ksoftirqd/107:43:061
24864993210,8cyclictest9819-21diskstats09:55:191
24863993227,3cyclictest9-21ksoftirqd/012:05:000
24863993226,4cyclictest9-21ksoftirqd/010:56:290
24863993226,4cyclictest9-21ksoftirqd/009:43:000
24863993226,4cyclictest9-21ksoftirqd/009:39:340
24863993226,4cyclictest9-21ksoftirqd/008:28:070
24863993226,4cyclictest9-21ksoftirqd/007:43:250
24863993212,17cyclictest13611-21seq11:07:000
2486399321,18cyclictest6721-21runrttasks07:36:230
2486399320,29cyclictest29809-21grep11:40:170
24866993126,3cyclictest41-21ksoftirqd/311:11:303
24866993126,3cyclictest41-21ksoftirqd/307:20:423
24866993125,4cyclictest41-21ksoftirqd/309:21:093
2486599314,6cyclictest33-21ksoftirqd/212:05:202
24865993125,4cyclictest33-21ksoftirqd/209:19:162
24865993125,4cyclictest33-21ksoftirqd/207:12:552
24864993126,3cyclictest25-21ksoftirqd/111:23:421
24864993126,3cyclictest25-21ksoftirqd/110:21:161
24864993126,3cyclictest25-21ksoftirqd/107:52:531
24864993125,4cyclictest25-21ksoftirqd/112:19:471
24864993125,4cyclictest25-21ksoftirqd/109:14:241
24864993125,4cyclictest25-21ksoftirqd/108:52:111
24864993124,5cyclictest25-21ksoftirqd/108:37:261
24863993125,4cyclictest9-21ksoftirqd/011:01:340
24863993125,4cyclictest9-21ksoftirqd/011:01:340
24863993125,4cyclictest9-21ksoftirqd/010:34:030
24863993125,4cyclictest9-21ksoftirqd/009:10:070
24863993125,4cyclictest9-21ksoftirqd/008:01:270
24863993125,4cyclictest9-21ksoftirqd/008:01:270
24863993125,4cyclictest9-21ksoftirqd/007:33:050
24866993025,3cyclictest41-21ksoftirqd/311:51:483
24866993024,4cyclictest41-21ksoftirqd/312:04:453
24865993025,3cyclictest33-21ksoftirqd/207:26:502
24865993024,4cyclictest33-21ksoftirqd/212:36:372
24865993024,4cyclictest33-21ksoftirqd/212:24:262
24865993024,4cyclictest33-21ksoftirqd/210:02:362
24865993024,4cyclictest33-21ksoftirqd/210:02:362
24865993024,4cyclictest33-21ksoftirqd/209:39:362
24864993024,4cyclictest25-21ksoftirqd/111:25:031
24864993024,4cyclictest25-21ksoftirqd/110:10:051
24863993024,4cyclictest9-21ksoftirqd/011:14:030
24863993024,4cyclictest9-21ksoftirqd/009:22:180
24863993024,4cyclictest9-21ksoftirqd/009:04:130
24863993013,14cyclictest30688-21sendmail_mailqu10:35:270
134991300,1ptp4l401ktimersoftd/308:33:453
134991300,1ptp4l401ktimersoftd/308:33:453
134991300,0ptp4l401ktimersoftd/311:41:033
134991300,0ptp4l401ktimersoftd/310:19:583
24866992924,3cyclictest41-21ksoftirqd/312:18:093
24866992924,3cyclictest41-21ksoftirqd/308:47:003
2486599292,4cyclictest33-21ksoftirqd/211:31:072
2486599292,4cyclictest33-21ksoftirqd/211:31:072
24865992924,3cyclictest33-21ksoftirqd/207:23:342
2486499297,7cyclictest15268-21ls11:10:241
2486499296,8cyclictest19177-21apt-get10:15:161
24864992924,3cyclictest25-21ksoftirqd/109:37:361
24864992924,3cyclictest25-21ksoftirqd/108:18:161
2486399299,17cyclictest22614-21sed10:20:230
24863992923,4cyclictest9-21ksoftirqd/009:19:420
24863992923,4cyclictest9-21ksoftirqd/008:49:570
24863992923,4cyclictest9-21ksoftirqd/007:58:220
24863992913,14cyclictest26602-21latency_hist11:35:000
24863992913,14cyclictest26602-21latency_hist11:35:000
134991290,8ptp4l401ktimersoftd/307:45:533
24866992823,3cyclictest41-21ksoftirqd/311:39:093
24866992823,3cyclictest41-21ksoftirqd/309:00:003
24866992822,4cyclictest41-21ksoftirqd/310:08:393
2486699281,2cyclictest121rcu_preempt10:00:203
2486699281,2cyclictest121rcu_preempt10:00:193
2486599283,5cyclictest33-21ksoftirqd/208:23:332
24865992823,3cyclictest33-21ksoftirqd/211:58:322
24865992823,3cyclictest33-21ksoftirqd/207:16:132
24865992822,4cyclictest33-21ksoftirqd/211:20:462
2486399289,16cyclictest3917-21unixbench_multi08:35:320
2486399289,16cyclictest19521-21cat11:20:180
24863992823,3cyclictest9-21ksoftirqd/008:22:250
134991280,0ptp4l401ktimersoftd/311:21:343
134991280,0ptp4l401ktimersoftd/308:05:043
24866992722,3cyclictest41-21ksoftirqd/307:31:373
24866992722,3cyclictest41-21ksoftirqd/307:27:293
24865992722,3cyclictest33-21ksoftirqd/208:44:532
24865992721,4cyclictest33-21ksoftirqd/211:02:212
24865992721,4cyclictest33-21ksoftirqd/211:02:212
2486499279,15cyclictest22158-21tr09:15:131
2486499275,11cyclictest0-21swapper/107:15:121
2486499272,22cyclictest15785-21missed_timers09:00:261
24864992712,10cyclictest0-21swapper/110:45:141
24863992722,3cyclictest9-21ksoftirqd/012:28:190
24863992722,3cyclictest9-21ksoftirqd/011:17:310
24863992721,4cyclictest9-21ksoftirqd/009:51:190
24863992721,4cyclictest9-21ksoftirqd/007:14:570
24863992711,13cyclictest32025-21ls07:25:000
134991270,0ptp4l401ktimersoftd/311:32:393
134991270,0ptp4l401ktimersoftd/311:32:393
134991270,0ptp4l401ktimersoftd/308:43:573
2486599264,6cyclictest33-21ksoftirqd/208:14:092
2486599264,5cyclictest33-21ksoftirqd/210:29:382
24865992621,3cyclictest33-21ksoftirqd/209:05:002
24865992620,4cyclictest33-21ksoftirqd/210:54:462
24864992615,8cyclictest29048-21idleruntime-cro11:40:011
24864992615,8cyclictest10096-21df07:45:161
24863992621,3cyclictest9-21ksoftirqd/009:49:490
24863992620,4cyclictest9-21ksoftirqd/007:46:020
2486399261,22cyclictest32631-21sed10:40:240
2486399261,21cyclictest14448-21grep10:05:170
24864992520,3cyclictest25-21ksoftirqd/112:12:291
2486399256,17cyclictest12156-21cat10:00:170
2486399256,17cyclictest12156-21cat10:00:170
2486399250,23cyclictest1336-21cat08:30:330
2486399250,23cyclictest1336-21cat08:30:330
24865992419,3cyclictest33-21ksoftirqd/207:40:322
2486599225,5cyclictest33-21ksoftirqd/207:45:152
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional