You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-03 - 20:44
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot3.osadl.org (updated Wed Sep 03, 2025 12:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
68732229202,18sleep30-21swapper/307:05:593
70282226198,19sleep20-21swapper/207:07:592
69642204170,23sleep10-21swapper/107:07:091
71552200167,22sleep00-21swapper/007:09:290
1400521450,7sleep2748899cyclictest07:20:262
1400521450,7sleep2748899cyclictest07:20:262
136991840,1ptp4l391rcuc/311:50:153
112192600,4sleep00-21swapper/008:25:150
55292580,5sleep1231rcuc/109:20:161
287242580,3sleep028727-21kernelversion09:00:210
136991570,48ptp4l0-21swapper/307:10:003
186292560,2sleep30-21swapper/310:55:133
303312550,2sleep10-21swapper/110:10:191
27982540,5sleep02800-21switchtime08:05:250
7487995324,7cyclictest25-21ksoftirqd/110:20:001
7488995217,32cyclictest747-21kworker/2:011:40:272
250422520,3sleep10-21swapper/108:55:001
7487995018,7cyclictest25-21ksoftirqd/111:30:181
7487995010,10cyclictest25-21ksoftirqd/111:24:591
7487994822,5cyclictest25-21ksoftirqd/111:40:001
748799476,8cyclictest25-21ksoftirqd/107:10:211
7487994717,4cyclictest25-21ksoftirqd/110:05:001
7487994714,4cyclictest25-21ksoftirqd/107:55:181
7488994626,18cyclictest33-21ksoftirqd/211:21:172
748799466,9cyclictest25-21ksoftirqd/108:35:171
7487994614,4cyclictest25-21ksoftirqd/108:05:271
7487994515,4cyclictest25-21ksoftirqd/108:25:221
748799445,9cyclictest25-21ksoftirqd/108:15:231
748799444,8cyclictest25-21ksoftirqd/111:45:201
748799441,3cyclictest121rcu_preempt12:20:001
7487994413,3cyclictest25-21ksoftirqd/108:49:591
7488994312,29cyclictest24567-21kworker/2:207:50:272
7488994312,29cyclictest24567-21kworker/2:207:50:272
748799439,10cyclictest25-21ksoftirqd/111:05:151
748799438,9cyclictest25-21ksoftirqd/109:35:201
748799438,8cyclictest25-21ksoftirqd/110:30:161
748799434,10cyclictest25-21ksoftirqd/107:20:141
748799434,10cyclictest25-21ksoftirqd/107:20:141
7487994316,4cyclictest25-21ksoftirqd/108:45:001
7487994314,4cyclictest25-21ksoftirqd/109:25:201
7487994313,3cyclictest25-21ksoftirqd/112:05:231
7487994313,3cyclictest25-21ksoftirqd/112:05:221
748799424,11cyclictest25-21ksoftirqd/107:25:151
7487994217,7cyclictest25-21ksoftirqd/110:20:151
7487994216,6cyclictest25-21ksoftirqd/108:35:011
7487994216,3cyclictest25-21ksoftirqd/109:55:231
7487994215,4cyclictest25-21ksoftirqd/112:10:161
7487994214,7cyclictest25-21ksoftirqd/109:35:011
7487994214,4cyclictest25-21ksoftirqd/112:25:441
7487994214,4cyclictest25-21ksoftirqd/107:35:241
748799416,6cyclictest25-21ksoftirqd/108:20:151
748799416,6cyclictest25-21ksoftirqd/108:20:151
748799412,8cyclictest25-21ksoftirqd/111:40:151
7487994119,6cyclictest25-21ksoftirqd/110:50:151
7487994119,6cyclictest25-21ksoftirqd/110:50:151
7487994116,7cyclictest25-21ksoftirqd/108:55:141
7487994114,7cyclictest25-21ksoftirqd/111:25:191
7487994112,7cyclictest25-21ksoftirqd/110:55:191
7487994110,7cyclictest25-21ksoftirqd/112:31:021
748799410,3cyclictest121rcu_preempt09:15:151
136991410,0ptp4l401ktimersoftd/311:21:223
748799408,9cyclictest25-21ksoftirqd/112:20:221
748799408,7cyclictest25-21ksoftirqd/109:05:211
748799404,7cyclictest25-21ksoftirqd/108:00:181
748799404,11cyclictest25-21ksoftirqd/110:05:211
748799402,7cyclictest25-21ksoftirqd/108:10:251
748799402,7cyclictest25-21ksoftirqd/107:30:211
7487994013,7cyclictest25-21ksoftirqd/107:15:231
748799400,3cyclictest121rcu_preempt07:55:001
748799400,3cyclictest121rcu_preempt07:55:001
748799400,2cyclictest121rcu_preempt07:40:201
136991400,0ptp4l401ktimersoftd/310:03:153
748899390,36cyclictest13556-21sh10:45:002
748799399,7cyclictest25-21ksoftirqd/110:40:211
748799396,8cyclictest25-21ksoftirqd/112:00:181
748799396,8cyclictest25-21ksoftirqd/110:25:191
748799393,7cyclictest25-21ksoftirqd/107:45:241
748799392,8cyclictest25-21ksoftirqd/110:35:141
748799392,2cyclictest121rcu_preempt10:49:591
7487993913,7cyclictest25-21ksoftirqd/109:10:161
7487993913,6cyclictest25-21ksoftirqd/109:40:261
748799386,8cyclictest25-21ksoftirqd/109:50:161
748799386,7cyclictest25-21ksoftirqd/109:00:281
7487993832,3cyclictest25-21ksoftirqd/111:10:251
7487993810,8cyclictest25-21ksoftirqd/111:00:201
748899373,32cyclictest10495-21kworker/2:210:07:482
748799375,8cyclictest25-21ksoftirqd/112:35:231
748799375,8cyclictest25-21ksoftirqd/111:55:151
748999364,29cyclictest30312-21tr09:05:163
7489993619,15cyclictest2524-21taskset10:20:183
748899366,17cyclictest10495-21kworker/2:209:34:112
748899364,31cyclictest18120-21kworker/2:212:08:482
748899364,31cyclictest18120-21kworker/2:212:08:472
7488993631,3cyclictest33-21ksoftirqd/210:59:172
7488993630,4cyclictest33-21ksoftirqd/209:12:062
748899362,33cyclictest10495-21kworker/2:209:38:352
7487993610,7cyclictest25-21ksoftirqd/111:20:001
7486993631,3cyclictest9-21ksoftirqd/012:05:000
7486993631,3cyclictest9-21ksoftirqd/008:00:010
7489993530,3cyclictest41-21ksoftirqd/308:49:593
7489993529,4cyclictest41-21ksoftirqd/312:01:183
7489993529,4cyclictest41-21ksoftirqd/309:57:563
7489993529,4cyclictest41-21ksoftirqd/309:39:443
7489993529,4cyclictest41-21ksoftirqd/309:23:353
7489993529,4cyclictest41-21ksoftirqd/308:02:113
7489993528,5cyclictest41-21ksoftirqd/308:31:483
748899356,5cyclictest0-21swapper/207:25:142
7488993529,4cyclictest33-21ksoftirqd/210:47:272
7488993529,4cyclictest33-21ksoftirqd/210:02:422
7488993529,4cyclictest33-21ksoftirqd/209:27:102
7488993529,4cyclictest33-21ksoftirqd/208:39:492
7488993529,4cyclictest33-21ksoftirqd/208:08:562
748899352,32cyclictest6109-21kworker/2:007:16:352
7488993514,19cyclictest26867-21/usr/sbin/munin12:20:282
7488993511,4cyclictest4170-21sed08:10:142
748799356,6cyclictest25-21ksoftirqd/109:45:261
7487993530,3cyclictest25-21ksoftirqd/111:55:011
7486993529,4cyclictest9-21ksoftirqd/011:06:180
7486993529,3cyclictest9-21ksoftirqd/011:40:010
7489993429,3cyclictest41-21ksoftirqd/310:12:003
7489993429,3cyclictest41-21ksoftirqd/309:49:593
7489993428,4cyclictest41-21ksoftirqd/312:13:083
7489993428,4cyclictest41-21ksoftirqd/312:09:233
7489993428,4cyclictest41-21ksoftirqd/312:09:233
7489993428,4cyclictest41-21ksoftirqd/309:27:083
7489993428,4cyclictest41-21ksoftirqd/309:12:363
7488993429,3cyclictest33-21ksoftirqd/211:54:272
7488993429,3cyclictest33-21ksoftirqd/209:50:122
7488993428,4cyclictest33-21ksoftirqd/211:29:432
7488993428,4cyclictest33-21ksoftirqd/207:58:412
7488993428,4cyclictest33-21ksoftirqd/207:42:362
7488993428,4cyclictest33-21ksoftirqd/207:39:152
7488993427,4cyclictest33-21ksoftirqd/211:04:162
7488993412,3cyclictest8306-21grep10:30:272
7488993412,3cyclictest22756-21awk12:10:192
7486993430,3cyclictest9-21ksoftirqd/011:59:590
7486993428,4cyclictest9-21ksoftirqd/008:49:540
7489993327,4cyclictest41-21ksoftirqd/312:27:323
7489993327,4cyclictest41-21ksoftirqd/309:40:553
7489993327,4cyclictest41-21ksoftirqd/309:02:213
7489993327,4cyclictest41-21ksoftirqd/307:58:183
7489993327,4cyclictest41-21ksoftirqd/307:45:503
7489993327,4cyclictest41-21ksoftirqd/307:16:503
7489993315,16cyclictest27347-21sh09:00:013
748999330,3cyclictest12179-21ps08:25:243
748899334,19cyclictest10495-21kworker/2:209:48:402
7488993328,3cyclictest33-21ksoftirqd/210:36:292
7488993327,4cyclictest33-21ksoftirqd/211:08:532
7488993327,4cyclictest33-21ksoftirqd/210:19:592
7488993327,4cyclictest33-21ksoftirqd/209:18:322
748899331,5cyclictest12105-21sshd11:49:312
7488993313,3cyclictest10928-21/usr/sbin/munin08:25:122
7488993311,3cyclictest15351-21sed11:55:152
748899330,31cyclictest0-21swapper/208:25:002
748899330,31cyclictest0-21swapper/208:24:592
748899330,2cyclictest0-21swapper/209:10:002
7486993328,3cyclictest9-21ksoftirqd/010:35:480
7486993328,3cyclictest9-21ksoftirqd/008:40:000
7486993327,4cyclictest9-21ksoftirqd/012:30:000
7486993327,4cyclictest9-21ksoftirqd/011:53:110
7486993327,4cyclictest9-21ksoftirqd/010:53:320
7486993327,4cyclictest9-21ksoftirqd/010:53:320
7486993327,4cyclictest9-21ksoftirqd/009:06:430
7486993327,4cyclictest9-21ksoftirqd/008:58:530
7486993327,4cyclictest9-21ksoftirqd/008:42:160
7486993327,4cyclictest9-21ksoftirqd/007:16:020
748999329,20cyclictest4458-21tr10:25:173
7489993227,3cyclictest41-21ksoftirqd/311:06:183
7489993227,3cyclictest41-21ksoftirqd/309:52:453
7489993227,3cyclictest41-21ksoftirqd/308:16:283
7489993226,4cyclictest41-21ksoftirqd/311:34:573
7489993226,4cyclictest41-21ksoftirqd/310:33:123
7489993226,4cyclictest41-21ksoftirqd/308:53:333
7489993220,10cyclictest41-21ksoftirqd/311:17:143
7489993214,16cyclictest10093-21sed08:20:263
7489993214,16cyclictest10093-21sed08:20:263
7489993214,15cyclictest7636-21/usr/sbin/munin11:40:153
748999320,4cyclictest27309-21sed07:50:163
748999320,4cyclictest27309-21sed07:50:153
748999320,3cyclictest1716-21fschecks_count08:05:163
748899329,4cyclictest481-21rs:main2
748899328,4cyclictest16806-21irqrtprio10:50:162
748899328,4cyclictest16806-21irqrtprio10:50:162
748899327,5cyclictest28454-21fschecks_count11:15:162
7488993226,4cyclictest33-21ksoftirqd/209:20:482
7488993226,4cyclictest33-21ksoftirqd/208:50:042
7488993226,4cyclictest33-21ksoftirqd/208:17:052
7488993213,2cyclictest0-21swapper/209:00:182
7488993211,3cyclictest25083-21awk12:15:212
7486993227,3cyclictest9-21ksoftirqd/010:17:500
7486993226,4cyclictest9-21ksoftirqd/012:08:080
7486993226,4cyclictest9-21ksoftirqd/012:08:080
7486993226,4cyclictest9-21ksoftirqd/010:27:460
7486993226,4cyclictest9-21ksoftirqd/009:43:140
7486993226,4cyclictest9-21ksoftirqd/008:50:380
7486993226,4cyclictest9-21ksoftirqd/008:31:250
7486993226,4cyclictest9-21ksoftirqd/008:04:210
7486993226,4cyclictest9-21ksoftirqd/007:38:130
7486993226,4cyclictest9-21ksoftirqd/007:23:530
7486993226,4cyclictest9-21ksoftirqd/007:23:530
7489993126,3cyclictest41-21ksoftirqd/310:16:263
7489993125,4cyclictest41-21ksoftirqd/312:39:453
7489993125,4cyclictest41-21ksoftirqd/312:22:273
7489993125,4cyclictest41-21ksoftirqd/311:57:083
7489993125,4cyclictest41-21ksoftirqd/311:29:113
7489993114,15cyclictest9753-21/usr/sbin/munin09:30:263
748999310,3cyclictest31622-21apt-get12:30:113
748899318,4cyclictest27324-21latency_hist09:00:012
748899313,27cyclictest6109-21kworker/2:007:10:152
7488993126,3cyclictest33-21ksoftirqd/211:12:062
7488993125,4cyclictest33-21ksoftirqd/212:37:182
7488993125,4cyclictest33-21ksoftirqd/209:58:442
7488993125,4cyclictest33-21ksoftirqd/208:47:432
7488993111,3cyclictest33-21ksoftirqd/212:05:002
748899310,4cyclictest5241-21/usr/sbin/munin11:35:162
748899310,3cyclictest30994-1kworker/2:1H09:45:002
7486993127,3cyclictest9-21ksoftirqd/009:35:010
7486993126,3cyclictest9-21ksoftirqd/011:23:270
7486993126,3cyclictest9-21ksoftirqd/007:52:490
7486993126,3cyclictest9-21ksoftirqd/007:52:490
7486993126,3cyclictest9-21ksoftirqd/007:48:040
7486993125,4cyclictest9-21ksoftirqd/012:13:300
7486993125,4cyclictest9-21ksoftirqd/011:44:250
7486993125,4cyclictest9-21ksoftirqd/009:21:470
7489993025,3cyclictest41-21ksoftirqd/310:08:563
7489993025,3cyclictest41-21ksoftirqd/307:26:293
7489993025,3cyclictest41-21ksoftirqd/307:21:323
7489993025,3cyclictest41-21ksoftirqd/307:21:323
7489993024,4cyclictest41-21ksoftirqd/307:43:503
7489993011,16cyclictest19295-21cut07:35:013
748999300,2cyclictest0-21swapper/311:00:233
7488993025,3cyclictest33-21ksoftirqd/208:01:312
7488993024,4cyclictest33-21ksoftirqd/211:33:162
7488993024,4cyclictest33-21ksoftirqd/210:23:232
7488993024,4cyclictest33-21ksoftirqd/208:42:222
7488993010,18cyclictest0-21swapper/212:25:062
7486993025,3cyclictest9-21ksoftirqd/012:20:190
7486993025,3cyclictest9-21ksoftirqd/011:35:010
7486993024,4cyclictest9-21ksoftirqd/011:46:410
748999293,3cyclictest4446-21sed08:10:183
748999291,26cyclictest14924-21kworker/3:008:40:273
7489992910,17cyclictest5552-21df_abs11:35:183
748999290,3cyclictest21307-21taskset07:37:283
748999290,3cyclictest17443-21runrttasks08:35:323
7488992924,3cyclictest33-21ksoftirqd/210:26:002
7488992923,4cyclictest33-21ksoftirqd/207:31:452
748899291,8cyclictest31625-21taskset12:30:122
7486992925,3cyclictest9-21ksoftirqd/010:57:360
7486992924,3cyclictest9-21ksoftirqd/012:39:330
7486992924,3cyclictest9-21ksoftirqd/011:04:300
7486992924,3cyclictest9-21ksoftirqd/010:22:010
7486992924,3cyclictest9-21ksoftirqd/009:55:200
7486992924,3cyclictest9-21ksoftirqd/008:22:240
7486992924,3cyclictest9-21ksoftirqd/008:22:230
7486992922,5cyclictest9-21ksoftirqd/011:29:050
136991290,11ptp4l748999cyclictest10:52:113
136991290,11ptp4l748999cyclictest10:52:113
748999287,18cyclictest10600-21cat10:35:243
748999286,21cyclictest530-21kworker/3:111:46:083
7489992822,4cyclictest41-21ksoftirqd/310:43:543
7489992822,4cyclictest41-21ksoftirqd/309:15:373
748999280,3cyclictest14805-21meminfo10:45:193
7488992822,4cyclictest33-21ksoftirqd/208:31:272
7488992822,4cyclictest33-21ksoftirqd/207:46:452
7486992823,3cyclictest9-21ksoftirqd/010:14:150
7486992823,3cyclictest9-21ksoftirqd/009:18:140
748699282,2cyclictest121rcu_preempt10:00:140
7486992822,4cyclictest9-21ksoftirqd/011:11:350
7486992822,4cyclictest9-21ksoftirqd/007:30:430
7486992822,3cyclictest9-21ksoftirqd/009:35:020
748999276,19cyclictest25642-21/usr/sbin/munin11:10:233
7486992722,3cyclictest9-21ksoftirqd/010:47:490
7486992722,3cyclictest9-21ksoftirqd/009:45:350
7486992722,3cyclictest9-21ksoftirqd/008:17:320
7486992721,4cyclictest9-21ksoftirqd/010:31:070
7486992721,4cyclictest9-21ksoftirqd/008:12:350
748999262,18cyclictest24491-21apt-get12:15:163
7486992621,3cyclictest9-21ksoftirqd/011:15:360
7486992621,3cyclictest9-21ksoftirqd/010:42:250
7486992620,4cyclictest9-21ksoftirqd/012:19:200
7486992620,4cyclictest9-21ksoftirqd/007:28:100
748699253,2cyclictest121rcu_preempt07:10:230
7486992520,3cyclictest9-21ksoftirqd/007:41:510
7486992419,3cyclictest9-21ksoftirqd/009:25:420
7486992418,3cyclictest9-21ksoftirqd/010:05:130
7486992318,3cyclictest9-21ksoftirqd/009:50:190
7486992014,3cyclictest9-21ksoftirqd/012:30:010
7486991915,2cyclictest497-21fschecks_count09:10:170
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional