You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-10 - 07:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot4.osadl.org (updated Thu Jul 10, 2025 00:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
134791203170,22phc2sys0-21swapper/319:06:223
58322201167,23sleep10-21swapper/119:07:151
58312201166,23sleep00-21swapper/019:07:140
57112200166,22sleep20-21swapper/219:05:472
149821620,2sleep10-21swapper/122:15:181
149821620,2sleep10-21swapper/122:15:181
134791159121,13phc2sys0-21swapper/319:10:003
333021510,4sleep0633599cyclictest23:25:010
60442149127,12sleep10-21swapper/119:10:001
2559521420,6sleep2633799cyclictest00:10:002
6335995927,11cyclictest9-21ksoftirqd/022:50:150
6335995217,6cyclictest9-21ksoftirqd/000:12:170
130691520,1getstats0-21swapper/320:20:063
58372500,1sleep00-21swapper/021:20:000
58372500,1sleep00-21swapper/021:20:000
73372490,1sleep20-21swapper/223:30:252
633599494,7cyclictest26789-21fschecks_count19:50:160
6335994924,10cyclictest9-21ksoftirqd/000:30:160
633599480,46cyclictest101ktimersoftd/019:30:220
633599473,6cyclictest101ktimersoftd/000:35:200
242342460,2sleep224236-21latency23:00:192
6335994542,2cyclictest111rcuc/021:46:010
6335994542,2cyclictest111rcuc/021:46:010
6335994518,7cyclictest9-21ksoftirqd/021:38:370
6335994517,6cyclictest9-21ksoftirqd/023:37:560
633599450,6cyclictest8972-21cstates21:25:140
199282450,2sleep20-21swapper/223:55:282
6335994417,7cyclictest9-21ksoftirqd/019:11:300
6335994416,6cyclictest9-21ksoftirqd/022:44:320
633599432,5cyclictest9-21ksoftirqd/023:04:500
134991430,0ptp4l401ktimersoftd/322:45:373
6337994238,2cyclictest33-21ksoftirqd/219:20:002
6337994222,14cyclictest33-21ksoftirqd/223:05:212
633599423,5cyclictest9-21ksoftirqd/022:30:220
633599422,6cyclictest9-21ksoftirqd/000:25:120
6335994217,7cyclictest9-21ksoftirqd/000:07:490
6338994130,3cyclictest23281-21grep00:05:133
6335994125,9cyclictest9-21ksoftirqd/020:20:000
6335994125,9cyclictest9-21ksoftirqd/020:20:000
6335994125,9cyclictest9-21ksoftirqd/019:20:160
134991410,0ptp4l401ktimersoftd/322:21:553
134991410,0ptp4l401ktimersoftd/300:20:213
130691410,1getstats0-21swapper/320:25:053
6338994036,2cyclictest41-21ksoftirqd/321:35:003
6337994030,8cyclictest33-21ksoftirqd/220:35:172
633599403,7cyclictest9-21ksoftirqd/023:55:120
1580624032,3sleep125-21ksoftirqd/121:40:001
134991400,0ptp4l401ktimersoftd/322:15:143
134991400,0ptp4l401ktimersoftd/322:15:143
134991400,0ptp4l401ktimersoftd/319:53:073
6337993933,4cyclictest33-21ksoftirqd/220:35:002
633599395,6cyclictest9-21ksoftirqd/021:23:080
633599394,5cyclictest9-21ksoftirqd/022:21:390
633599394,5cyclictest9-21ksoftirqd/021:02:430
6337993823,3cyclictest33-21ksoftirqd/200:20:002
6336993832,3cyclictest25-21ksoftirqd/100:00:001
6336993831,4cyclictest25-21ksoftirqd/123:20:101
633599384,5cyclictest9-21ksoftirqd/023:33:210
633599384,5cyclictest9-21ksoftirqd/023:15:150
633599384,5cyclictest9-21ksoftirqd/023:15:140
6335993823,4cyclictest9-21ksoftirqd/020:55:160
633599381,6cyclictest1264-21snmpd23:46:320
134991380,0ptp4l401ktimersoftd/320:05:293
6338993733,2cyclictest41-21ksoftirqd/322:44:593
6338993732,3cyclictest41-21ksoftirqd/323:55:003
6338993731,4cyclictest41-21ksoftirqd/319:44:303
6338993731,3cyclictest41-21ksoftirqd/320:50:133
6338993731,3cyclictest41-21ksoftirqd/300:40:003
6337993733,2cyclictest33-21ksoftirqd/221:25:012
6337993732,3cyclictest33-21ksoftirqd/222:25:002
6337993732,3cyclictest33-21ksoftirqd/222:00:012
6337993732,3cyclictest33-21ksoftirqd/221:05:002
6337993732,3cyclictest33-21ksoftirqd/200:30:002
6337993726,9cyclictest33-21ksoftirqd/221:30:282
6336993732,3cyclictest28488-21turbostat19:55:001
6336993731,4cyclictest25-21ksoftirqd/100:29:371
6336993729,6cyclictest25-21ksoftirqd/122:44:591
633599374,5cyclictest9-21ksoftirqd/021:30:330
633599374,5cyclictest9-21ksoftirqd/021:12:470
6335993733,3cyclictest9-21ksoftirqd/023:00:010
6335993733,2cyclictest111rcuc/020:44:430
633599372,5cyclictest9-21ksoftirqd/022:35:490
6335993721,4cyclictest9-21ksoftirqd/020:35:230
134991370,0ptp4l401ktimersoftd/300:00:263
6338993632,3cyclictest41-21ksoftirqd/320:45:193
6338993632,3cyclictest41-21ksoftirqd/319:35:003
6338993631,3cyclictest41-21ksoftirqd/322:25:263
6338993631,3cyclictest41-21ksoftirqd/300:20:013
6338993630,4cyclictest41-21ksoftirqd/323:37:273
6338993630,4cyclictest41-21ksoftirqd/323:16:013
6338993630,4cyclictest41-21ksoftirqd/323:16:003
6338993630,4cyclictest41-21ksoftirqd/323:15:003
6338993630,4cyclictest41-21ksoftirqd/321:18:393
6338993630,4cyclictest41-21ksoftirqd/321:18:383
6338993630,3cyclictest41-21ksoftirqd/321:40:193
6338993630,3cyclictest41-21ksoftirqd/319:55:283
6338993630,3cyclictest41-21ksoftirqd/319:35:143
6337993632,3cyclictest33-21ksoftirqd/221:15:142
6337993632,3cyclictest33-21ksoftirqd/221:15:142
6337993632,2cyclictest33-21ksoftirqd/222:05:002
6337993632,2cyclictest20464-21apt22:55:012
6337993631,3cyclictest33-21ksoftirqd/222:38:462
6337993631,3cyclictest33-21ksoftirqd/219:50:192
6337993631,2cyclictest33-21ksoftirqd/219:20:192
6337993630,4cyclictest33-21ksoftirqd/219:43:262
6337993630,3cyclictest33-21ksoftirqd/221:25:132
6337993629,5cyclictest33-21ksoftirqd/221:37:262
6337993629,4cyclictest33-21ksoftirqd/221:10:122
6336993630,4cyclictest25-21ksoftirqd/119:31:461
6336993629,5cyclictest25-21ksoftirqd/121:17:331
6336993629,5cyclictest25-21ksoftirqd/121:17:321
633599364,4cyclictest9-21ksoftirqd/019:57:330
633599363,5cyclictest9-21ksoftirqd/022:25:150
6335993630,4cyclictest9-21ksoftirqd/023:14:590
633599362,5cyclictest9-21ksoftirqd/000:21:590
1347913629,3phc2sys41-21ksoftirqd/322:30:173
6338993531,3cyclictest41-21ksoftirqd/300:00:003
6338993531,2cyclictest41-21ksoftirqd/300:30:013
6338993530,3cyclictest41-21ksoftirqd/323:30:003
6338993530,3cyclictest41-21ksoftirqd/323:25:003
6338993530,3cyclictest41-21ksoftirqd/323:05:003
6338993530,3cyclictest41-21ksoftirqd/321:01:223
6338993530,3cyclictest41-21ksoftirqd/320:10:123
6338993530,3cyclictest41-21ksoftirqd/320:05:003
6338993529,4cyclictest41-21ksoftirqd/322:50:333
6338993529,4cyclictest41-21ksoftirqd/321:59:193
6338993529,4cyclictest41-21ksoftirqd/321:24:533
6338993528,4cyclictest41-21ksoftirqd/323:40:403
6337993531,3cyclictest33-21ksoftirqd/223:45:012
6337993530,3cyclictest33-21ksoftirqd/221:44:592
6337993530,3cyclictest33-21ksoftirqd/221:00:002
6337993530,3cyclictest33-21ksoftirqd/220:40:192
6337993530,3cyclictest33-21ksoftirqd/200:30:192
6337993529,4cyclictest33-21ksoftirqd/221:50:562
6337993529,4cyclictest33-21ksoftirqd/220:23:142
6337993529,4cyclictest33-21ksoftirqd/220:08:462
6337993528,4cyclictest33-21ksoftirqd/222:07:362
633799351,3cyclictest121rcu_preempt20:10:262
6336993529,4cyclictest25-21ksoftirqd/122:32:511
6336993529,4cyclictest25-21ksoftirqd/122:22:161
6336993529,4cyclictest25-21ksoftirqd/119:47:061
6336993529,4cyclictest25-21ksoftirqd/119:27:041
6336993529,4cyclictest25-21ksoftirqd/119:20:341
6336993529,4cyclictest25-21ksoftirqd/100:34:311
6336993528,5cyclictest25-21ksoftirqd/120:37:531
6336993528,4cyclictest25-21ksoftirqd/123:39:581
633599354,4cyclictest9-21ksoftirqd/022:00:030
6335993532,2cyclictest111rcuc/019:28:210
6335993531,2cyclictest111rcuc/021:50:340
6335993531,2cyclictest111rcuc/020:30:350
6335993529,4cyclictest9-21ksoftirqd/023:30:010
6335993519,8cyclictest9-21ksoftirqd/020:26:350
6338993430,3cyclictest41-21ksoftirqd/321:05:143
6338993430,3cyclictest41-21ksoftirqd/319:20:003
6338993430,2cyclictest41-21ksoftirqd/323:30:133
6338993429,3cyclictest41-21ksoftirqd/323:05:153
6338993429,3cyclictest41-21ksoftirqd/320:55:133
6338993429,3cyclictest41-21ksoftirqd/320:40:133
6338993429,2cyclictest41-21ksoftirqd/321:25:133
6338993428,4cyclictest41-21ksoftirqd/322:03:273
6337993430,3cyclictest33-21ksoftirqd/222:10:152
6337993430,2cyclictest33-21ksoftirqd/223:40:002
6337993428,4cyclictest33-21ksoftirqd/223:19:502
6337993428,4cyclictest33-21ksoftirqd/223:19:492
6337993428,4cyclictest33-21ksoftirqd/219:39:372
6337993428,4cyclictest33-21ksoftirqd/219:30:422
6337993428,4cyclictest33-21ksoftirqd/200:00:542
6337993428,3cyclictest33-21ksoftirqd/221:45:182
6337993428,3cyclictest33-21ksoftirqd/221:45:182
6337993428,3cyclictest33-21ksoftirqd/219:10:132
6336993428,4cyclictest25-21ksoftirqd/123:48:481
6336993428,4cyclictest25-21ksoftirqd/123:12:551
6336993428,4cyclictest25-21ksoftirqd/123:09:501
6336993428,4cyclictest25-21ksoftirqd/122:12:441
6336993428,4cyclictest25-21ksoftirqd/121:34:221
6336993428,4cyclictest25-21ksoftirqd/120:51:091
6336993428,4cyclictest25-21ksoftirqd/120:12:301
6336993428,4cyclictest25-21ksoftirqd/120:02:151
6335993432,1cyclictest111rcuc/021:59:210
6335993431,2cyclictest111rcuc/022:45:510
6335993429,3cyclictest9-21ksoftirqd/020:20:280
6335993429,3cyclictest9-21ksoftirqd/020:02:270
6335993429,3cyclictest9-21ksoftirqd/019:35:300
6335993428,4cyclictest9-21ksoftirqd/021:42:140
6335993428,4cyclictest9-21ksoftirqd/000:02:080
6335993418,4cyclictest9-21ksoftirqd/019:45:150
6338993329,2cyclictest41-21ksoftirqd/320:35:173
6338993328,3cyclictest41-21ksoftirqd/323:47:353
6338993328,3cyclictest41-21ksoftirqd/320:18:203
6338993328,3cyclictest41-21ksoftirqd/320:18:203
6338993328,3cyclictest41-21ksoftirqd/300:30:153
6338993327,4cyclictest41-21ksoftirqd/321:49:323
6338993327,4cyclictest41-21ksoftirqd/321:49:323
6338993327,4cyclictest41-21ksoftirqd/319:26:463
6338993327,4cyclictest41-21ksoftirqd/319:21:253
6338993327,3cyclictest41-21ksoftirqd/322:35:183
6338993327,3cyclictest41-21ksoftirqd/300:10:203
6338993326,4cyclictest41-21ksoftirqd/320:34:303
6337993330,2cyclictest33-21ksoftirqd/220:26:032
6337993329,3cyclictest33-21ksoftirqd/223:00:012
6337993329,3cyclictest33-21ksoftirqd/219:55:202
6337993328,3cyclictest33-21ksoftirqd/220:01:582
6337993328,3cyclictest33-21ksoftirqd/200:35:142
6337993327,4cyclictest33-21ksoftirqd/222:25:572
6337993327,4cyclictest33-21ksoftirqd/220:46:332
6337993327,3cyclictest33-21ksoftirqd/200:12:332
6337993326,4cyclictest33-21ksoftirqd/223:26:152
633799331,3cyclictest121rcu_preempt20:50:152
6336993327,4cyclictest25-21ksoftirqd/122:45:051
6336993327,4cyclictest25-21ksoftirqd/121:52:591
6336993327,4cyclictest25-21ksoftirqd/121:42:361
6336993327,4cyclictest25-21ksoftirqd/121:28:481
6336993327,4cyclictest25-21ksoftirqd/100:21:471
6336993327,4cyclictest25-21ksoftirqd/100:15:481
6335993330,2cyclictest111rcuc/023:52:460
6335993330,2cyclictest111rcuc/019:41:290
6335993329,3cyclictest9-21ksoftirqd/000:15:140
6335993327,4cyclictest9-21ksoftirqd/023:09:480
633599330,4cyclictest9-21ksoftirqd/019:17:400
6338993227,3cyclictest41-21ksoftirqd/321:53:023
6338993227,3cyclictest41-21ksoftirqd/321:38:253
6338993227,3cyclictest41-21ksoftirqd/319:45:203
6338993226,4cyclictest41-21ksoftirqd/322:14:193
6338993226,4cyclictest41-21ksoftirqd/321:14:463
6337993228,3cyclictest33-21ksoftirqd/223:50:012
6337993227,3cyclictest33-21ksoftirqd/223:53:572
6337993227,3cyclictest33-21ksoftirqd/223:25:012
6337993227,3cyclictest33-21ksoftirqd/223:10:112
6337993227,3cyclictest33-21ksoftirqd/219:25:212
6337993226,4cyclictest33-21ksoftirqd/200:24:482
6336993227,3cyclictest25-21ksoftirqd/123:18:551
6336993227,3cyclictest25-21ksoftirqd/123:18:551
6336993226,4cyclictest25-21ksoftirqd/123:41:311
6336993226,4cyclictest25-21ksoftirqd/121:48:141
6336993226,4cyclictest25-21ksoftirqd/121:48:141
6336993226,4cyclictest25-21ksoftirqd/120:55:381
6336993226,4cyclictest25-21ksoftirqd/120:46:281
6336993226,4cyclictest25-21ksoftirqd/100:12:471
6336993225,5cyclictest25-21ksoftirqd/121:04:531
633599329,6cyclictest9-21ksoftirqd/020:10:270
6335993228,3cyclictest9-21ksoftirqd/022:15:250
6335993228,3cyclictest9-21ksoftirqd/022:15:250
6335993228,3cyclictest9-21ksoftirqd/022:10:000
6335993225,4cyclictest9-21ksoftirqd/021:07:090
6338993127,2cyclictest41-21ksoftirqd/322:09:593
6337993127,3cyclictest33-21ksoftirqd/222:15:202
6337993127,3cyclictest33-21ksoftirqd/222:15:202
6337993126,3cyclictest33-21ksoftirqd/222:45:272
6337993126,3cyclictest33-21ksoftirqd/222:34:522
6336993126,3cyclictest25-21ksoftirqd/122:37:471
6336993126,3cyclictest25-21ksoftirqd/122:03:281
6336993126,3cyclictest25-21ksoftirqd/119:39:401
6336993125,4cyclictest25-21ksoftirqd/123:30:431
6336993125,4cyclictest25-21ksoftirqd/100:37:071
633699312,27cyclictest22597-21kworker/1:122:56:171
633599312,8cyclictest9-21ksoftirqd/020:47:260
6335993128,2cyclictest9-21ksoftirqd/023:40:150
633599312,5cyclictest9-21ksoftirqd/022:10:170
6335993125,3cyclictest9-21ksoftirqd/020:07:300
6338993024,4cyclictest41-21ksoftirqd/322:56:273
6337993018,9cyclictest33-21ksoftirqd/222:40:282
6336993024,4cyclictest25-21ksoftirqd/123:50:451
6336993024,4cyclictest25-21ksoftirqd/121:09:381
6336993024,4cyclictest25-21ksoftirqd/100:02:041
6337992919,9cyclictest33-21ksoftirqd/220:15:272
6337992919,9cyclictest33-21ksoftirqd/220:15:272
6336992924,3cyclictest25-21ksoftirqd/121:22:041
6336992924,3cyclictest25-21ksoftirqd/120:23:591
6336992924,3cyclictest25-21ksoftirqd/120:18:011
6336992924,3cyclictest25-21ksoftirqd/120:18:011
6336992923,4cyclictest25-21ksoftirqd/100:05:451
6336992922,5cyclictest25-21ksoftirqd/123:25:491
6337992823,3cyclictest33-21ksoftirqd/221:06:422
6337992822,4cyclictest33-21ksoftirqd/219:48:162
6336992823,3cyclictest25-21ksoftirqd/119:15:221
6335992823,3cyclictest9-21ksoftirqd/020:50:120
6336992722,3cyclictest25-21ksoftirqd/122:29:221
6336992722,3cyclictest25-21ksoftirqd/121:59:151
6336992722,3cyclictest25-21ksoftirqd/120:30:501
6336992621,3cyclictest25-21ksoftirqd/122:50:581
6336992620,4cyclictest25-21ksoftirqd/123:00:031
6336992620,4cyclictest25-21ksoftirqd/120:28:281
6336992619,4cyclictest25-21ksoftirqd/119:44:011
6336992520,3cyclictest25-21ksoftirqd/120:05:241
6336992519,4cyclictest25-21ksoftirqd/120:42:391
6336992419,3cyclictest25-21ksoftirqd/122:07:461
6336992014,4cyclictest29865-21missed_timers19:55:221
633699201,17cyclictest1567-21hddtemp_smartct21:10:201
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional