You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-28 - 08:58
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Fri Nov 28, 2025 00:45:47)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
147702208174,22sleep10-21swapper/119:08:591
427791207173,22phc2sys0-21swapper/319:07:353
146812202168,22sleep00-21swapper/019:07:500
146482202167,23sleep20-21swapper/219:07:232
427791158119,13phc2sys0-21swapper/319:10:013
1514199678,16cyclictest1837-21irqrtprio23:00:190
1514199647,11cyclictest19727-21mailstats22:30:260
1514199637,11cyclictest16063-21expr22:25:140
1514199607,12cyclictest6114-21cat00:15:000
1514199607,11cyclictest20605-21cpu21:30:130
1514199587,9cyclictest28084-21apt-get21:45:130
1514199577,15cyclictest32144-21ls21:50:270
1514199576,10cyclictest26818-21cat20:35:210
1514199557,10cyclictest863-21expr20:50:150
1514199556,10cyclictest31097-21expr22:55:130
1514199554,16cyclictest0-21swapper/019:45:120
1514199547,16cyclictest3192-21/usr/sbin/munin20:55:170
1514199537,11cyclictest18201-21grep20:20:140
1514199517,16cyclictest11241-21hddtemp_smartct21:10:170
15144995043,4cyclictest25302-21cron21:39:593
1514199505,7cyclictest12609-21ls23:20:270
1514199486,9cyclictest9949-21ls00:20:220
1514199477,10cyclictest13968-21cut20:10:190
238262460,3sleep10-21swapper/121:35:211
1514199467,7cyclictest8963-21meminfo20:00:200
1514199457,7cyclictest26781-21iostat23:50:210
1514199457,7cyclictest21086-21iostat_ios19:20:210
1514199456,8cyclictest16734-21memory21:20:220
427291440,0ptp4l401ktimersoftd/320:15:533
15144994433,9cyclictest41-21ksoftirqd/323:00:233
427291430,0ptp4l401ktimersoftd/322:52:593
427291430,0ptp4l401ktimersoftd/321:42:503
15144994332,9cyclictest41-21ksoftirqd/321:45:253
15144994330,10cyclictest41-21ksoftirqd/320:35:223
1514199436,7cyclictest28876-21iostat20:40:180
1514199435,10cyclictest0-21swapper/000:09:510
427291420,0ptp4l401ktimersoftd/322:37:143
427291420,0ptp4l401ktimersoftd/321:25:453
427291420,0ptp4l401ktimersoftd/321:17:433
15144994237,3cyclictest41-21ksoftirqd/322:25:013
15144994237,3cyclictest41-21ksoftirqd/320:35:003
15144994237,3cyclictest41-21ksoftirqd/300:20:003
15142994236,3cyclictest25-21ksoftirqd/122:34:591
15142994236,3cyclictest25-21ksoftirqd/119:40:001
15144994136,3cyclictest41-21ksoftirqd/323:59:593
15144994136,3cyclictest41-21ksoftirqd/323:48:143
15144994136,3cyclictest41-21ksoftirqd/321:20:193
15144994136,3cyclictest41-21ksoftirqd/321:10:013
15144994136,3cyclictest41-21ksoftirqd/320:45:003
15144994136,3cyclictest41-21ksoftirqd/320:30:013
15144994136,3cyclictest41-21ksoftirqd/320:05:003
15144994135,3cyclictest41-21ksoftirqd/319:40:003
15144994131,6cyclictest41-21ksoftirqd/321:30:143
15142994137,3cyclictest25-21ksoftirqd/123:40:001
15142994136,3cyclictest25-21ksoftirqd/123:50:001
15142994135,3cyclictest25-21ksoftirqd/121:00:241
15144994035,3cyclictest41-21ksoftirqd/322:09:593
15144994035,3cyclictest41-21ksoftirqd/319:20:013
15144994034,3cyclictest41-21ksoftirqd/321:04:033
15142994036,3cyclictest25-21ksoftirqd/119:25:191
15142994034,4cyclictest25-21ksoftirqd/122:51:401
1514199406,8cyclictest16601-21meminfo20:15:210
15144993935,3cyclictest41-21ksoftirqd/322:25:003
15144993934,3cyclictest41-21ksoftirqd/323:25:143
15144993934,3cyclictest41-21ksoftirqd/322:45:013
15144993934,3cyclictest41-21ksoftirqd/322:20:003
15144993934,3cyclictest41-21ksoftirqd/322:10:283
15144993934,3cyclictest41-21ksoftirqd/300:10:253
15144993933,4cyclictest41-21ksoftirqd/322:32:353
15144993933,4cyclictest41-21ksoftirqd/320:21:533
15144993933,4cyclictest41-21ksoftirqd/319:34:593
15144993933,3cyclictest41-21ksoftirqd/319:30:003
15143993933,4cyclictest33-21ksoftirqd/222:11:132
15142993934,3cyclictest25-21ksoftirqd/119:45:001
15142993933,4cyclictest25-21ksoftirqd/123:15:301
15142993933,4cyclictest25-21ksoftirqd/120:05:201
15142993933,3cyclictest25-21ksoftirqd/121:10:181
15142993933,3cyclictest25-21ksoftirqd/119:30:181
15142993932,5cyclictest25-21ksoftirqd/120:55:001
15142993932,4cyclictest25-21ksoftirqd/123:50:131
15142993932,4cyclictest25-21ksoftirqd/119:55:041
15141993933,4cyclictest9-21ksoftirqd/021:38:010
15144993833,3cyclictest41-21ksoftirqd/323:10:133
15144993833,3cyclictest41-21ksoftirqd/300:07:073
15144993832,4cyclictest41-21ksoftirqd/319:20:403
15144993826,10cyclictest41-21ksoftirqd/300:20:223
15143993833,3cyclictest17836-21cron21:25:002
15142993833,3cyclictest25-21ksoftirqd/123:40:201
15142993833,3cyclictest25-21ksoftirqd/122:09:591
15142993833,3cyclictest25-21ksoftirqd/121:45:191
15142993833,3cyclictest25-21ksoftirqd/119:20:021
15142993833,2cyclictest25-21ksoftirqd/123:24:591
15142993832,4cyclictest25-21ksoftirqd/121:26:191
15142993832,3cyclictest25-21ksoftirqd/121:20:191
15142993831,4cyclictest25-21ksoftirqd/120:18:031
15141993831,4cyclictest9-21ksoftirqd/023:30:100
15141993831,4cyclictest9-21ksoftirqd/021:41:020
15141993830,5cyclictest9-21ksoftirqd/019:15:000
1514499375,6cyclictest41-21ksoftirqd/320:00:003
15144993733,3cyclictest41-21ksoftirqd/319:55:013
15144993733,3cyclictest41-21ksoftirqd/300:30:243
15144993733,2cyclictest41-21ksoftirqd/323:30:263
15144993733,2cyclictest41-21ksoftirqd/323:10:003
15144993732,3cyclictest41-21ksoftirqd/300:40:003
15144993731,4cyclictest41-21ksoftirqd/322:58:403
15144993731,4cyclictest41-21ksoftirqd/320:12:273
15144993731,4cyclictest41-21ksoftirqd/300:00:533
15144993731,3cyclictest41-21ksoftirqd/320:55:013
15144993730,5cyclictest41-21ksoftirqd/320:45:213
15144993726,2cyclictest41-21ksoftirqd/321:10:283
15143993732,3cyclictest33-21ksoftirqd/223:24:382
15143993731,4cyclictest33-21ksoftirqd/223:03:472
15143993731,4cyclictest33-21ksoftirqd/222:21:512
15143993731,4cyclictest33-21ksoftirqd/219:32:422
15143993730,5cyclictest33-21ksoftirqd/220:36:452
15142993732,3cyclictest25-21ksoftirqd/121:44:591
15142993732,3cyclictest25-21ksoftirqd/100:15:011
15142993732,3cyclictest25-21ksoftirqd/100:05:001
15142993731,4cyclictest25-21ksoftirqd/122:10:591
15142993731,3cyclictest25-21ksoftirqd/123:55:181
15142993731,3cyclictest25-21ksoftirqd/123:30:181
15142993731,3cyclictest25-21ksoftirqd/122:40:191
15142993731,3cyclictest25-21ksoftirqd/121:35:001
15142993731,3cyclictest25-21ksoftirqd/120:35:191
15142993731,3cyclictest25-21ksoftirqd/120:25:201
15142993731,3cyclictest25-21ksoftirqd/100:36:371
15142993730,4cyclictest25-21ksoftirqd/122:27:001
15142993730,4cyclictest25-21ksoftirqd/122:20:101
15142993730,4cyclictest25-21ksoftirqd/120:13:571
15141993731,4cyclictest9-21ksoftirqd/019:17:440
15144993632,3cyclictest41-21ksoftirqd/322:45:213
15144993631,3cyclictest41-21ksoftirqd/321:50:213
15144993630,4cyclictest41-21ksoftirqd/323:40:203
15144993630,4cyclictest41-21ksoftirqd/322:03:553
15144993630,4cyclictest41-21ksoftirqd/320:08:423
15144993625,9cyclictest41-21ksoftirqd/319:40:263
15143993631,3cyclictest33-21ksoftirqd/223:49:342
15143993631,3cyclictest33-21ksoftirqd/221:31:092
15143993631,3cyclictest33-21ksoftirqd/219:15:012
15143993630,4cyclictest33-21ksoftirqd/223:57:322
15143993630,4cyclictest33-21ksoftirqd/223:18:162
15143993630,4cyclictest33-21ksoftirqd/219:49:542
15143993630,4cyclictest33-21ksoftirqd/219:22:512
15143993630,4cyclictest33-21ksoftirqd/200:25:012
1514399360,34cyclictest32516-21cron19:45:002
15142993630,4cyclictest25-21ksoftirqd/123:27:531
15142993630,4cyclictest25-21ksoftirqd/123:05:111
15142993630,4cyclictest25-21ksoftirqd/119:15:441
15142993630,4cyclictest25-21ksoftirqd/100:32:041
15142993630,4cyclictest25-21ksoftirqd/100:29:431
15142993630,3cyclictest25-21ksoftirqd/122:20:001
15142993630,3cyclictest25-21ksoftirqd/120:30:141
15142993630,3cyclictest25-21ksoftirqd/120:00:171
15142993630,3cyclictest25-21ksoftirqd/119:45:121
15142993629,5cyclictest25-21ksoftirqd/119:53:591
15141993631,3cyclictest9-21ksoftirqd/022:43:010
15141993630,4cyclictest9-21ksoftirqd/023:47:230
15141993630,4cyclictest9-21ksoftirqd/019:52:420
15141993630,4cyclictest12808-21cron22:19:590
15141993629,5cyclictest9-21ksoftirqd/019:29:550
1514499354,2cyclictest121rcu_preempt19:45:123
15144993530,3cyclictest41-21ksoftirqd/323:52:403
15144993530,3cyclictest41-21ksoftirqd/323:40:003
15144993530,3cyclictest41-21ksoftirqd/323:20:193
15144993530,3cyclictest41-21ksoftirqd/300:25:013
15144993529,4cyclictest41-21ksoftirqd/323:15:203
15144993529,4cyclictest41-21ksoftirqd/320:55:523
15143993530,3cyclictest33-21ksoftirqd/223:53:532
15143993530,3cyclictest33-21ksoftirqd/222:25:132
15143993529,4cyclictest33-21ksoftirqd/220:26:342
15143993529,4cyclictest33-21ksoftirqd/200:35:342
15142993531,3cyclictest25-21ksoftirqd/121:55:241
15142993530,3cyclictest25-21ksoftirqd/123:11:441
15142993529,4cyclictest25-21ksoftirqd/122:56:451
15142993529,4cyclictest25-21ksoftirqd/121:05:211
15142993529,4cyclictest25-21ksoftirqd/120:47:381
15142993529,3cyclictest25-21ksoftirqd/100:20:201
15142993528,4cyclictest25-21ksoftirqd/121:54:231
15141993529,4cyclictest9-21ksoftirqd/022:01:120
15144993429,3cyclictest41-21ksoftirqd/321:55:213
15143993428,4cyclictest33-21ksoftirqd/223:28:312
15143993428,4cyclictest33-21ksoftirqd/222:40:322
15143993428,4cyclictest33-21ksoftirqd/220:24:092
15143993428,4cyclictest33-21ksoftirqd/219:25:562
15143993428,4cyclictest33-21ksoftirqd/200:32:122
15143993428,4cyclictest33-21ksoftirqd/200:26:572
15142993429,3cyclictest25-21ksoftirqd/122:39:241
15142993429,3cyclictest25-21ksoftirqd/119:11:151
15142993429,3cyclictest25-21ksoftirqd/100:05:181
15142993428,4cyclictest25-21ksoftirqd/120:55:141
15142993428,3cyclictest25-21ksoftirqd/123:00:201
15142993427,3cyclictest25-21ksoftirqd/120:25:001
1514199345,9cyclictest0-21swapper/019:35:270
15141993428,4cyclictest9-21ksoftirqd/023:37:120
15141993428,4cyclictest9-21ksoftirqd/000:39:290
15143993328,3cyclictest33-21ksoftirqd/222:39:052
15143993328,3cyclictest33-21ksoftirqd/222:18:222
15143993328,3cyclictest33-21ksoftirqd/220:45:202
15143993328,3cyclictest33-21ksoftirqd/220:42:192
15143993328,3cyclictest33-21ksoftirqd/200:14:402
15143993327,4cyclictest33-21ksoftirqd/223:41:192
15143993327,4cyclictest33-21ksoftirqd/223:06:242
15143993327,4cyclictest33-21ksoftirqd/221:59:402
15143993327,4cyclictest33-21ksoftirqd/221:47:302
15143993327,4cyclictest33-21ksoftirqd/221:14:522
15143993327,4cyclictest33-21ksoftirqd/220:05:082
15143993327,4cyclictest33-21ksoftirqd/219:37:522
15143993322,9cyclictest33-21ksoftirqd/222:55:222
15142993328,3cyclictest25-21ksoftirqd/122:50:001
15142993328,3cyclictest25-21ksoftirqd/122:00:131
15142993326,5cyclictest25-21ksoftirqd/120:41:461
1514199338,7cyclictest30614-21apt-get20:45:130
15141993328,3cyclictest9-21ksoftirqd/023:15:010
15141993328,3cyclictest8516-21turbostat.cron00:20:000
15141993327,4cyclictest9-21ksoftirqd/020:32:580
15141993326,4cyclictest9-21ksoftirqd/021:27:090
15143993227,3cyclictest33-21ksoftirqd/223:32:452
15143993227,3cyclictest33-21ksoftirqd/222:50:402
15143993227,3cyclictest33-21ksoftirqd/222:46:522
15143993227,3cyclictest33-21ksoftirqd/222:00:192
15143993227,3cyclictest33-21ksoftirqd/221:06:182
15143993226,4cyclictest33-21ksoftirqd/223:38:102
15143993226,4cyclictest33-21ksoftirqd/221:36:312
15143993226,4cyclictest33-21ksoftirqd/221:04:522
15143993226,4cyclictest33-21ksoftirqd/220:32:032
15143993226,4cyclictest33-21ksoftirqd/220:00:462
15142993227,3cyclictest25-21ksoftirqd/100:15:211
15142993227,3cyclictest1627-21llvmpipe-321:16:581
1514199326,10cyclictest23178-21cat22:40:010
15141993227,3cyclictest9-21ksoftirqd/021:17:510
15141993227,3cyclictest9-21ksoftirqd/019:56:390
15141993226,4cyclictest9-21ksoftirqd/022:46:320
15141993226,4cyclictest9-21ksoftirqd/022:11:070
15141993226,4cyclictest9-21ksoftirqd/021:09:450
15141993226,4cyclictest9-21ksoftirqd/020:05:460
15143993126,3cyclictest33-21ksoftirqd/222:09:422
15143993126,3cyclictest33-21ksoftirqd/220:50:052
15143993126,3cyclictest33-21ksoftirqd/220:14:092
15143993126,3cyclictest33-21ksoftirqd/219:59:202
15143993126,3cyclictest33-21ksoftirqd/219:10:522
15143993125,4cyclictest33-21ksoftirqd/222:31:352
15143993125,4cyclictest33-21ksoftirqd/221:40:042
15143993125,4cyclictest33-21ksoftirqd/220:16:492
15141993126,3cyclictest9-21ksoftirqd/000:34:080
15143993026,2cyclictest33-21ksoftirqd/221:30:002
15143993024,4cyclictest33-21ksoftirqd/219:51:202
15141993025,3cyclictest9-21ksoftirqd/021:04:540
15141993024,4cyclictest9-21ksoftirqd/019:33:240
15141993024,4cyclictest9-21ksoftirqd/000:26:510
15143992925,2cyclictest33-21ksoftirqd/221:55:002
15143992923,4cyclictest33-21ksoftirqd/220:59:072
1514199297,7cyclictest32015-21irqstats00:00:220
15141992923,4cyclictest9-21ksoftirqd/020:26:240
15141992923,4cyclictest9-21ksoftirqd/019:42:270
15143992823,3cyclictest33-21ksoftirqd/200:16:082
15143992823,3cyclictest33-21ksoftirqd/200:05:012
1514199283,10cyclictest0-21swapper/022:20:160
15141992823,3cyclictest9-21ksoftirqd/023:59:190
15141992823,3cyclictest9-21ksoftirqd/021:57:140
15141992822,4cyclictest9-21ksoftirqd/023:44:460
1514199281,2cyclictest121rcu_preempt22:55:000
15143992724,2cyclictest33-21ksoftirqd/223:10:202
15143992723,3cyclictest33-21ksoftirqd/200:05:102
15143992722,3cyclictest33-21ksoftirqd/221:15:192
1514199275,9cyclictest0-21swapper/022:05:280
1514199273,8cyclictest0-21swapper/023:05:250
15141992722,3cyclictest9-21ksoftirqd/023:16:060
15141992620,4cyclictest9-21ksoftirqd/023:25:130
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional