You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-22 - 19:24
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Sat Nov 22, 2025 12:46:02)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
254562204169,23sleep10-21swapper/107:08:371
137191204170,22phc2sys0-21swapper/307:05:523
254942203170,22sleep20-21swapper/207:09:062
254922202169,22sleep00-21swapper/007:09:040
2586999576,11cyclictest6166-21sh12:05:003
2586999576,11cyclictest6166-21sh12:05:003
80032550,2sleep00-21swapper/007:40:000
283012550,2sleep20-21swapper/211:40:282
2586999555,10cyclictest7486-21sed12:05:223
2586999544,11cyclictest18086-21cat10:15:003
312282530,5sleep32586999cyclictest10:40:203
2586999534,18cyclictest0-21swapper/312:15:243
2586999533,11cyclictest14776-21wc09:00:163
2586999523,16cyclictest0-21swapper/311:20:243
2586999513,16cyclictest23276-21apt-get10:25:113
2586999513,15cyclictest31562-21/usr/sbin/munin09:35:243
2586999511,10cyclictest0-21swapper/307:29:593
2586799511,5cyclictest25-21ksoftirqd/110:00:001
270552490,2sleep00-21swapper/009:25:150
2586999492,16cyclictest0-21swapper/311:55:203
2586999483,9cyclictest31109-21mailstats08:25:263
2586999483,9cyclictest31109-21mailstats08:25:253
2586999464,14cyclictest1285-21snmpd09:33:023
25869994640,4cyclictest27776-21cron10:35:013
25869994640,4cyclictest27776-21cron10:35:003
2586999451,11cyclictest0-21swapper/310:05:143
2586999442,8cyclictest23265-21mailstats11:30:243
2586999442,8cyclictest23265-21mailstats11:30:243
25868994229,11cyclictest33-21ksoftirqd/208:30:002
25868994229,11cyclictest33-21ksoftirqd/208:30:002
2586999413,7cyclictest28919-21iostat07:15:193
25868994135,3cyclictest33-21ksoftirqd/209:59:592
25866994136,3cyclictest9-21ksoftirqd/008:40:000
136991410,34ptp4l0-21swapper/307:10:013
136991410,0ptp4l401ktimersoftd/310:35:313
25868994029,10cyclictest33-21ksoftirqd/211:50:252
2586799400,9cyclictest25-21ksoftirqd/112:20:011
25866994035,3cyclictest9-21ksoftirqd/008:19:590
2586999393,7cyclictest14098-21apt-get08:59:013
2586799397,9cyclictest25-21ksoftirqd/108:59:591
2586799393,4cyclictest25-21ksoftirqd/108:05:211
132691390,1getstats0-21swapper/310:54:593
25868993833,3cyclictest33-21ksoftirqd/212:20:002
25868993833,3cyclictest33-21ksoftirqd/211:30:012
25868993833,3cyclictest33-21ksoftirqd/208:40:002
25868993833,3cyclictest33-21ksoftirqd/207:30:002
2586799384,7cyclictest121rcu_preempt09:15:271
25867993833,3cyclictest25-21ksoftirqd/108:20:001
25866993833,3cyclictest9-21ksoftirqd/012:10:010
25866993833,3cyclictest9-21ksoftirqd/008:10:010
25868993733,3cyclictest33-21ksoftirqd/210:20:002
25867993733,2cyclictest25-21ksoftirqd/108:40:011
25867993732,3cyclictest29448-21cron08:25:001
25867993732,3cyclictest25-21ksoftirqd/112:00:161
25867993732,3cyclictest25-21ksoftirqd/112:00:161
25867993732,3cyclictest25-21ksoftirqd/110:25:001
25866993732,3cyclictest9-21ksoftirqd/012:35:000
59298360,2rtkit-daemon591-21rtkit-daemon10:29:162
25868993631,3cyclictest33-21ksoftirqd/210:49:592
25868993630,4cyclictest33-21ksoftirqd/208:56:492
25868993630,4cyclictest33-21ksoftirqd/207:45:512
25868993629,4cyclictest33-21ksoftirqd/209:54:472
25868993625,9cyclictest33-21ksoftirqd/210:20:412
25868993616,9cyclictest33-21ksoftirqd/212:20:252
2586799363,2cyclictest121rcu_preempt08:50:271
25867993631,3cyclictest25-21ksoftirqd/112:10:001
25867993631,3cyclictest25-21ksoftirqd/111:35:001
25867993631,3cyclictest25-21ksoftirqd/111:35:001
25867993630,4cyclictest25-21ksoftirqd/111:13:191
25866993631,3cyclictest9-21ksoftirqd/010:55:150
25866993631,3cyclictest9-21ksoftirqd/008:00:000
25866993631,3cyclictest9-21ksoftirqd/008:00:000
25866993619,10cyclictest9-21ksoftirqd/007:24:040
132691360,1getstats0-21swapper/307:54:593
59298350,1rtkit-daemon0-21swapper/112:34:191
25869993530,3cyclictest41-21ksoftirqd/308:15:213
25869993529,4cyclictest41-21ksoftirqd/311:51:293
25869993529,4cyclictest41-21ksoftirqd/310:00:403
25869993529,4cyclictest41-21ksoftirqd/310:00:403
25869993529,4cyclictest41-21ksoftirqd/308:01:223
25868993530,3cyclictest33-21ksoftirqd/211:15:012
25868993530,3cyclictest33-21ksoftirqd/211:00:012
25868993530,3cyclictest33-21ksoftirqd/210:02:402
25868993530,3cyclictest33-21ksoftirqd/210:02:402
25868993530,3cyclictest33-21ksoftirqd/208:15:142
25868993530,3cyclictest33-21ksoftirqd/207:55:002
25868993529,4cyclictest33-21ksoftirqd/211:00:092
25868993529,4cyclictest33-21ksoftirqd/210:55:002
25868993529,4cyclictest33-21ksoftirqd/209:39:092
25868993529,4cyclictest33-21ksoftirqd/207:20:152
25868993528,4cyclictest33-21ksoftirqd/208:02:482
25868993524,9cyclictest33-21ksoftirqd/211:15:182
2586799354,2cyclictest121rcu_preempt12:20:271
25867993530,3cyclictest25-21ksoftirqd/111:45:001
25867993530,3cyclictest25-21ksoftirqd/111:00:001
25867993530,3cyclictest25-21ksoftirqd/109:49:591
25867993530,3cyclictest25-21ksoftirqd/109:30:141
25867993530,3cyclictest25-21ksoftirqd/109:24:591
25867993529,4cyclictest25-21ksoftirqd/107:55:011
25867993529,3cyclictest25-21ksoftirqd/110:25:181
25867993529,3cyclictest25-21ksoftirqd/110:10:001
25867993529,3cyclictest25-21ksoftirqd/109:35:171
25866993532,2cyclictest9-21ksoftirqd/010:00:000
25866993531,2cyclictest9-21ksoftirqd/009:05:010
25866993530,3cyclictest9-21ksoftirqd/012:05:010
25866993530,3cyclictest9-21ksoftirqd/012:05:010
25866993530,3cyclictest9-21ksoftirqd/011:45:240
25866993530,3cyclictest9-21ksoftirqd/007:54:590
25866993521,4cyclictest9-21ksoftirqd/008:50:280
25866993519,3cyclictest9-21ksoftirqd/009:40:000
132691350,1getstats0-21swapper/312:35:003
25869993429,3cyclictest41-21ksoftirqd/309:08:173
25868993429,3cyclictest33-21ksoftirqd/208:14:472
25868993428,4cyclictest33-21ksoftirqd/211:39:362
25868993428,4cyclictest33-21ksoftirqd/211:05:062
25868993428,4cyclictest33-21ksoftirqd/210:38:172
25868993428,4cyclictest33-21ksoftirqd/210:31:362
25868993428,4cyclictest33-21ksoftirqd/210:31:352
2586799344,3cyclictest25-21ksoftirqd/108:45:241
25867993429,3cyclictest25-21ksoftirqd/112:35:171
25867993429,3cyclictest25-21ksoftirqd/111:07:411
25867993429,3cyclictest25-21ksoftirqd/110:19:591
25867993429,3cyclictest25-21ksoftirqd/109:45:011
25867993428,4cyclictest25-21ksoftirqd/110:41:221
25867993428,4cyclictest25-21ksoftirqd/110:04:441
25867993428,4cyclictest25-21ksoftirqd/110:04:441
25867993428,4cyclictest25-21ksoftirqd/108:41:271
25867993428,4cyclictest25-21ksoftirqd/108:11:101
25867993428,4cyclictest25-21ksoftirqd/107:10:371
25867993428,3cyclictest25-21ksoftirqd/110:50:151
25866993430,3cyclictest9-21ksoftirqd/009:40:210
25866993430,3cyclictest9-21ksoftirqd/008:35:010
25866993429,3cyclictest9-21ksoftirqd/012:00:000
25866993429,3cyclictest9-21ksoftirqd/011:40:010
25866993429,3cyclictest9-21ksoftirqd/009:45:240
25866993428,3cyclictest9-21ksoftirqd/012:30:000
25866993428,3cyclictest9-21ksoftirqd/007:15:200
25866993422,3cyclictest9-21ksoftirqd/012:20:260
25866993421,6cyclictest9-21ksoftirqd/008:00:160
25866993421,4cyclictest9-21ksoftirqd/009:30:190
25866993420,3cyclictest9-21ksoftirqd/011:10:150
25869993327,4cyclictest41-21ksoftirqd/310:20:383
25869993327,4cyclictest41-21ksoftirqd/309:45:353
25869993327,4cyclictest41-21ksoftirqd/308:47:063
25868993329,2cyclictest33-21ksoftirqd/212:00:012
25868993328,3cyclictest33-21ksoftirqd/209:23:012
25868993328,3cyclictest33-21ksoftirqd/207:30:192
25868993328,3cyclictest33-21ksoftirqd/207:18:452
25868993328,3cyclictest33-21ksoftirqd/207:15:012
25868993327,4cyclictest33-21ksoftirqd/212:06:392
25868993327,4cyclictest33-21ksoftirqd/208:47:302
25868993327,4cyclictest33-21ksoftirqd/208:08:312
25868993327,4cyclictest33-21ksoftirqd/207:37:382
2586799336,3cyclictest25-21ksoftirqd/108:25:191
2586799336,3cyclictest25-21ksoftirqd/108:25:191
25867993329,3cyclictest25-21ksoftirqd/107:20:171
25867993329,2cyclictest25-21ksoftirqd/107:30:181
25867993328,3cyclictest25-21ksoftirqd/112:00:001
25867993328,3cyclictest25-21ksoftirqd/111:25:221
25867993328,3cyclictest25-21ksoftirqd/111:00:191
25867993328,3cyclictest25-21ksoftirqd/110:50:001
25867993328,3cyclictest25-21ksoftirqd/109:05:011
25867993328,3cyclictest25-21ksoftirqd/108:30:151
25867993327,3cyclictest25-21ksoftirqd/110:10:141
25867993326,4cyclictest25-21ksoftirqd/111:20:141
2586799332,3cyclictest121rcu_preempt08:00:151
2586799330,9cyclictest25-21ksoftirqd/109:54:591
25866993328,3cyclictest9-21ksoftirqd/010:50:200
25866993328,3cyclictest9-21ksoftirqd/010:00:190
25866993328,3cyclictest9-21ksoftirqd/010:00:190
25866993328,3cyclictest9-21ksoftirqd/007:25:220
25866993328,3cyclictest9-21ksoftirqd/007:15:010
25866993327,4cyclictest9-21ksoftirqd/012:14:110
25866993327,4cyclictest9-21ksoftirqd/010:32:190
25866993327,4cyclictest9-21ksoftirqd/010:32:180
25866993327,4cyclictest9-21ksoftirqd/009:23:350
25866993327,4cyclictest9-21ksoftirqd/008:44:540
25866993327,4cyclictest9-21ksoftirqd/008:10:370
25866993319,4cyclictest9-21ksoftirqd/008:55:240
25866993319,4cyclictest9-21ksoftirqd/008:45:180
2586999323,13cyclictest3132-21memory08:35:233
25869993226,4cyclictest41-21ksoftirqd/312:36:573
25869993226,4cyclictest41-21ksoftirqd/311:48:123
25869993226,4cyclictest41-21ksoftirqd/311:27:573
25869993226,4cyclictest41-21ksoftirqd/309:17:153
25869993226,4cyclictest41-21ksoftirqd/307:24:033
25868993226,4cyclictest33-21ksoftirqd/209:03:502
25868993226,4cyclictest33-21ksoftirqd/208:32:182
25868993226,3cyclictest33-21ksoftirqd/209:10:002
25867993228,3cyclictest25-21ksoftirqd/112:25:221
25867993227,3cyclictest25-21ksoftirqd/110:38:421
25867993227,3cyclictest25-21ksoftirqd/108:00:001
25867993227,3cyclictest25-21ksoftirqd/108:00:001
25867993227,3cyclictest25-21ksoftirqd/107:45:181
25867993227,3cyclictest25-21ksoftirqd/107:40:001
25867993227,3cyclictest25-21ksoftirqd/107:20:001
25867993226,4cyclictest25-21ksoftirqd/111:47:341
25867993226,4cyclictest25-21ksoftirqd/109:29:051
25866993227,3cyclictest9-21ksoftirqd/011:30:200
25866993227,3cyclictest9-21ksoftirqd/011:30:200
25866993227,3cyclictest9-21ksoftirqd/011:10:010
25866993227,3cyclictest9-21ksoftirqd/011:00:190
25866993227,3cyclictest9-21ksoftirqd/010:35:160
25866993227,3cyclictest9-21ksoftirqd/007:45:230
25866993227,3cyclictest9-21ksoftirqd/007:30:190
25866993226,4cyclictest9-21ksoftirqd/009:18:370
25866993226,3cyclictest9-21ksoftirqd/007:45:000
25866993218,4cyclictest9-21ksoftirqd/012:15:260
25866993217,5cyclictest9-21ksoftirqd/010:10:010
25866993217,4cyclictest9-21ksoftirqd/011:15:260
2586699320,3cyclictest121rcu_preempt08:20:260
25869993126,3cyclictest41-21ksoftirqd/311:15:003
2586899318,16cyclictest33-21ksoftirqd/208:50:192
25868993126,3cyclictest33-21ksoftirqd/210:41:002
25868993126,3cyclictest33-21ksoftirqd/209:19:482
25868993125,4cyclictest33-21ksoftirqd/208:00:002
25868993125,4cyclictest33-21ksoftirqd/208:00:002
2586799312,9cyclictest25-21ksoftirqd/107:25:151
25867993127,2cyclictest25-21ksoftirqd/112:10:201
25867993126,3cyclictest25-21ksoftirqd/109:05:141
25867993125,4cyclictest25-21ksoftirqd/107:42:141
2586799312,3cyclictest25-21ksoftirqd/110:30:161
2586799312,3cyclictest25-21ksoftirqd/110:30:151
25866993126,3cyclictest9-21ksoftirqd/011:20:590
25866993126,3cyclictest9-21ksoftirqd/010:43:410
25866993126,3cyclictest9-21ksoftirqd/010:24:590
25866993126,3cyclictest9-21ksoftirqd/010:12:390
25866993126,3cyclictest9-21ksoftirqd/009:10:170
25866993126,3cyclictest9-21ksoftirqd/009:05:180
25866993125,4cyclictest9-21ksoftirqd/011:25:060
25866993125,4cyclictest9-21ksoftirqd/010:47:580
25866993117,3cyclictest9-21ksoftirqd/008:30:000
25866993117,3cyclictest9-21ksoftirqd/008:30:000
136991310,0ptp4l401ktimersoftd/310:47:463
25869993025,3cyclictest41-21ksoftirqd/309:20:413
25869993025,3cyclictest41-21ksoftirqd/308:40:083
25869993024,4cyclictest41-21ksoftirqd/312:25:003
25869993024,4cyclictest41-21ksoftirqd/311:43:343
25869993024,4cyclictest41-21ksoftirqd/311:16:583
25869993024,4cyclictest41-21ksoftirqd/309:58:443
25869993024,4cyclictest41-21ksoftirqd/308:24:243
25868993025,3cyclictest33-21ksoftirqd/212:10:202
25868993025,3cyclictest33-21ksoftirqd/212:02:172
25868993025,3cyclictest33-21ksoftirqd/212:02:172
25868993025,3cyclictest33-21ksoftirqd/209:45:012
25868993025,3cyclictest33-21ksoftirqd/209:30:182
25868993025,3cyclictest33-21ksoftirqd/209:25:522
25868993024,4cyclictest33-21ksoftirqd/212:32:112
25868993024,4cyclictest33-21ksoftirqd/211:32:382
25868993024,4cyclictest33-21ksoftirqd/211:32:382
25868993024,4cyclictest33-21ksoftirqd/209:10:112
25867993025,3cyclictest25-21ksoftirqd/111:50:291
25867993025,3cyclictest25-21ksoftirqd/111:15:151
25866993025,3cyclictest9-21ksoftirqd/009:51:030
25866993024,4cyclictest9-21ksoftirqd/012:38:440
25866993024,4cyclictest9-21ksoftirqd/011:52:450
25869992924,3cyclictest41-21ksoftirqd/309:10:573
25869992924,3cyclictest41-21ksoftirqd/307:37:453
25869992923,4cyclictest41-21ksoftirqd/311:39:163
25869992923,4cyclictest41-21ksoftirqd/307:49:303
25868992924,3cyclictest33-21ksoftirqd/209:48:162
25868992923,4cyclictest33-21ksoftirqd/208:20:062
25868992914,12cyclictest33-21ksoftirqd/207:45:002
2586799294,3cyclictest121rcu_preempt11:35:231
25866992925,3cyclictest9-21ksoftirqd/010:29:590
25866992916,4cyclictest9-21ksoftirqd/011:40:220
25869992823,3cyclictest41-21ksoftirqd/312:25:123
25869992823,3cyclictest41-21ksoftirqd/308:14:163
25868992823,3cyclictest33-21ksoftirqd/211:20:122
25867992823,3cyclictest25-21ksoftirqd/109:10:141
25869992722,3cyclictest41-21ksoftirqd/309:30:003
25869992722,3cyclictest41-21ksoftirqd/308:51:433
25869992722,3cyclictest41-21ksoftirqd/308:05:523
25868992722,3cyclictest33-21ksoftirqd/208:40:202
25868992721,3cyclictest33-21ksoftirqd/212:35:212
2586899270,3cyclictest223-21systemd-journal10:10:312
25866992713,4cyclictest9-21ksoftirqd/010:15:280
25869992621,3cyclictest41-21ksoftirqd/311:04:173
25869992621,3cyclictest41-21ksoftirqd/309:52:253
25869992621,3cyclictest41-21ksoftirqd/307:55:333
25869992621,3cyclictest41-21ksoftirqd/307:55:323
2586999262,10cyclictest0-21swapper/310:15:253
25869992620,4cyclictest41-21ksoftirqd/309:41:063
25868992622,3cyclictest33-21ksoftirqd/212:25:192
25869992520,3cyclictest41-21ksoftirqd/308:32:033
25869992520,3cyclictest41-21ksoftirqd/307:32:303
25868992521,2cyclictest33-21ksoftirqd/211:49:592
2586999242,9cyclictest0-21swapper/311:05:253
25869992419,3cyclictest41-21ksoftirqd/310:57:373
136991240,0ptp4l401ktimersoftd/312:10:233
136991240,0ptp4l401ktimersoftd/307:40:303
25868992217,3cyclictest33-21ksoftirqd/210:07:142
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional