You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-17 - 17:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Wed Sep 17, 2025 12:45:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191234168,22phc2sys0-21swapper/307:08:113
114432206171,23sleep10-21swapper/107:06:451
113852202169,22sleep00-21swapper/007:06:000
114492201168,22sleep20-21swapper/207:06:512
15082640,5sleep0101ktimersoftd/011:15:260
203582590,1sleep30-21swapper/309:40:253
11995995621,6cyclictest9-21ksoftirqd/008:05:000
136991550,0ptp4l401ktimersoftd/310:51:193
11995995524,7cyclictest9-21ksoftirqd/010:15:000
11995995424,7cyclictest9-21ksoftirqd/009:20:010
11995995421,7cyclictest9-21ksoftirqd/012:10:010
11995995421,5cyclictest9-21ksoftirqd/010:50:000
11995995421,5cyclictest9-21ksoftirqd/010:00:000
11995995420,6cyclictest9-21ksoftirqd/010:40:010
11995995417,6cyclictest9-21ksoftirqd/010:45:000
11995995317,2cyclictest121rcu_preempt09:00:240
11995995316,5cyclictest9-21ksoftirqd/008:25:010
255242520,1sleep10-21swapper/111:00:141
11995995215,8cyclictest9-21ksoftirqd/010:15:190
11995995124,7cyclictest9-21ksoftirqd/007:45:000
11995995120,6cyclictest9-21ksoftirqd/008:25:210
11995995120,4cyclictest9-21ksoftirqd/007:30:290
11995995119,4cyclictest9-21ksoftirqd/009:10:220
11995995118,6cyclictest9-21ksoftirqd/011:30:130
11995995117,6cyclictest9-21ksoftirqd/009:49:590
11995995115,7cyclictest9-21ksoftirqd/011:55:160
11995995025,3cyclictest9-21ksoftirqd/009:25:010
11995995021,3cyclictest9-21ksoftirqd/009:30:250
11995995016,6cyclictest9-21ksoftirqd/011:50:210
11995995016,6cyclictest9-21ksoftirqd/007:50:250
1199599498,6cyclictest9-21ksoftirqd/010:55:240
1199599497,7cyclictest9-21ksoftirqd/011:10:220
11995994919,4cyclictest9-21ksoftirqd/011:05:000
11995994918,4cyclictest9-21ksoftirqd/009:00:010
11995994917,6cyclictest9-21ksoftirqd/011:25:240
11995994917,6cyclictest9-21ksoftirqd/008:50:140
11995994917,6cyclictest9-21ksoftirqd/007:15:220
11995994916,6cyclictest9-21ksoftirqd/009:05:260
11995994916,6cyclictest9-21ksoftirqd/008:35:210
11995994915,6cyclictest9-21ksoftirqd/010:10:010
11995994915,6cyclictest9-21ksoftirqd/008:15:160
1199599489,7cyclictest9-21ksoftirqd/009:30:010
1199599489,7cyclictest9-21ksoftirqd/008:10:190
11995994819,4cyclictest9-21ksoftirqd/008:40:190
11995994816,6cyclictest9-21ksoftirqd/012:10:180
11995994816,6cyclictest9-21ksoftirqd/009:50:170
11995994816,4cyclictest9-21ksoftirqd/007:45:280
11995994815,6cyclictest9-21ksoftirqd/012:35:160
11995994815,5cyclictest9-21ksoftirqd/010:30:210
11995994814,6cyclictest9-21ksoftirqd/011:35:210
11995994812,6cyclictest9-21ksoftirqd/010:25:200
136991470,1ptp4l401ktimersoftd/307:15:233
11997994734,11cyclictest33-21ksoftirqd/208:40:002
1199599479,4cyclictest9-21ksoftirqd/012:00:160
1199599479,4cyclictest9-21ksoftirqd/009:35:210
1199599478,4cyclictest9-21ksoftirqd/008:45:230
11995994719,4cyclictest9-21ksoftirqd/012:25:000
11995994718,6cyclictest9-21ksoftirqd/010:50:190
11995994715,6cyclictest9-21ksoftirqd/012:15:240
11995994715,6cyclictest9-21ksoftirqd/011:50:000
11995994715,6cyclictest9-21ksoftirqd/010:00:170
11995994712,7cyclictest9-21ksoftirqd/010:24:590
11995994712,4cyclictest9-21ksoftirqd/011:20:170
11995994619,6cyclictest9-21ksoftirqd/008:30:110
11995994616,4cyclictest9-21ksoftirqd/008:05:230
11995994613,6cyclictest9-21ksoftirqd/012:30:250
1199699457,24cyclictest3356-21seq07:58:561
1199599459,4cyclictest9-21ksoftirqd/011:05:240
1199599459,4cyclictest9-21ksoftirqd/009:40:260
1199599458,7cyclictest9-21ksoftirqd/012:25:180
11995994515,6cyclictest9-21ksoftirqd/011:40:160
11995994513,5cyclictest9-21ksoftirqd/007:35:180
136991440,0ptp4l401ktimersoftd/308:55:123
136991430,0ptp4l401ktimersoftd/310:20:213
11995994314,4cyclictest9-21ksoftirqd/007:20:170
11995994313,5cyclictest9-21ksoftirqd/007:25:270
136991420,0ptp4l401ktimersoftd/312:20:223
1199799424,4cyclictest33-21ksoftirqd/209:20:232
11995994212,6cyclictest9-21ksoftirqd/007:55:200
136991410,1ptp4l401ktimersoftd/307:14:373
136991410,0ptp4l401ktimersoftd/312:30:193
136991400,0ptp4l401ktimersoftd/311:32:093
11997994030,9cyclictest33-21ksoftirqd/210:45:282
1199699400,38cyclictest0-21swapper/108:21:361
136991390,0ptp4l401ktimersoftd/307:55:013
11997993935,3cyclictest33-21ksoftirqd/212:10:012
11997993935,2cyclictest33-21ksoftirqd/211:24:592
11997993933,3cyclictest33-21ksoftirqd/207:55:002
132891380,2getstats0-21swapper/308:40:483
11997993834,3cyclictest33-21ksoftirqd/212:35:002
11997993833,3cyclictest33-21ksoftirqd/211:50:002
11997993833,3cyclictest33-21ksoftirqd/210:00:012
11997993833,3cyclictest33-21ksoftirqd/209:04:592
11997993832,3cyclictest33-21ksoftirqd/208:05:002
11997993826,10cyclictest33-21ksoftirqd/212:25:272
11997993825,10cyclictest33-21ksoftirqd/210:20:302
11996993832,4cyclictest25-21ksoftirqd/111:40:011
132891370,2getstats0-21swapper/308:35:493
11998993731,4cyclictest7088-21cron09:15:003
11997993732,3cyclictest33-21ksoftirqd/212:20:002
11997993732,3cyclictest33-21ksoftirqd/209:00:012
11997993726,9cyclictest33-21ksoftirqd/211:41:412
11997993725,10cyclictest33-21ksoftirqd/209:05:292
11997993719,10cyclictest33-21ksoftirqd/209:15:252
11996993723,12cyclictest25-21ksoftirqd/108:55:011
59298360,2rtkit-daemon0-21swapper/112:12:531
136991360,0ptp4l401ktimersoftd/308:09:263
11997993632,2cyclictest33-21ksoftirqd/210:59:592
11997993631,3cyclictest33-21ksoftirqd/211:20:012
11997993631,3cyclictest33-21ksoftirqd/210:19:592
11997993631,3cyclictest33-21ksoftirqd/208:05:142
11997993631,3cyclictest33-21ksoftirqd/207:30:012
11997993631,3cyclictest1285-21snmpd08:42:452
11997993631,2cyclictest33-21ksoftirqd/209:45:002
11997993630,3cyclictest33-21ksoftirqd/208:00:002
11997993629,4cyclictest33-21ksoftirqd/208:55:012
11997993624,10cyclictest33-21ksoftirqd/207:15:282
11997993617,5cyclictest33-21ksoftirqd/210:50:192
11996993630,4cyclictest25-21ksoftirqd/108:40:081
1199599360,2cyclictest121rcu_preempt07:10:250
11998993529,4cyclictest41-21ksoftirqd/311:42:253
11997993530,3cyclictest33-21ksoftirqd/211:35:002
11997993530,3cyclictest33-21ksoftirqd/210:15:002
11997993530,3cyclictest33-21ksoftirqd/209:50:002
11997993530,3cyclictest33-21ksoftirqd/209:35:172
11997993530,3cyclictest33-21ksoftirqd/207:10:192
11997993530,2cyclictest33-21ksoftirqd/212:10:192
11997993529,4cyclictest33-21ksoftirqd/211:14:272
11997993529,4cyclictest33-21ksoftirqd/209:26:032
11996993530,3cyclictest25-21ksoftirqd/110:37:391
11996993530,3cyclictest25-21ksoftirqd/110:06:021
11996993529,4cyclictest25-21ksoftirqd/111:56:541
11996993529,4cyclictest25-21ksoftirqd/111:31:551
11996993529,4cyclictest25-21ksoftirqd/110:48:591
11996993529,4cyclictest25-21ksoftirqd/109:39:381
11996993529,4cyclictest25-21ksoftirqd/107:22:581
11998993428,4cyclictest41-21ksoftirqd/312:03:463
11998993428,4cyclictest41-21ksoftirqd/308:24:343
11998993428,4cyclictest41-21ksoftirqd/307:32:353
11998993428,3cyclictest41-21ksoftirqd/309:30:063
11997993430,3cyclictest33-21ksoftirqd/212:00:002
11997993430,3cyclictest33-21ksoftirqd/207:20:192
11997993430,2cyclictest33-21ksoftirqd/209:50:202
11997993429,3cyclictest33-21ksoftirqd/212:23:152
11997993429,3cyclictest33-21ksoftirqd/212:05:002
11997993429,3cyclictest33-21ksoftirqd/210:43:082
11997993429,3cyclictest33-21ksoftirqd/210:09:582
11997993429,3cyclictest33-21ksoftirqd/207:32:322
11997993428,4cyclictest33-21ksoftirqd/207:47:062
11997993428,4cyclictest33-21ksoftirqd/207:36:272
11997993421,11cyclictest33-21ksoftirqd/207:45:012
11997993420,5cyclictest33-21ksoftirqd/210:02:432
11996993428,4cyclictest25-21ksoftirqd/112:24:031
11996993428,4cyclictest25-21ksoftirqd/110:42:291
11996993428,4cyclictest25-21ksoftirqd/109:29:021
136991330,0ptp4l401ktimersoftd/310:40:173
136991330,0ptp4l401ktimersoftd/309:55:193
136991330,0ptp4l401ktimersoftd/307:40:153
11998993328,3cyclictest41-21ksoftirqd/310:31:233
11998993328,3cyclictest41-21ksoftirqd/308:19:363
11998993327,4cyclictest41-21ksoftirqd/309:35:103
11998993327,4cyclictest41-21ksoftirqd/309:07:233
11998993327,4cyclictest41-21ksoftirqd/308:52:593
11997993328,3cyclictest33-21ksoftirqd/211:00:272
11997993328,3cyclictest33-21ksoftirqd/210:30:162
11997993328,3cyclictest33-21ksoftirqd/210:30:002
11997993328,3cyclictest33-21ksoftirqd/209:10:142
11997993328,3cyclictest33-21ksoftirqd/208:30:122
11997993327,4cyclictest33-21ksoftirqd/209:33:262
11997993327,4cyclictest33-21ksoftirqd/208:20:012
11997993327,4cyclictest33-21ksoftirqd/208:11:012
1199699339,21cyclictest15476-21cat07:15:221
1199699339,21cyclictest1-21systemd08:02:401
11996993328,3cyclictest25-21ksoftirqd/108:31:011
11996993327,4cyclictest25-21ksoftirqd/111:54:571
11996993327,4cyclictest25-21ksoftirqd/109:17:281
11996993327,4cyclictest25-21ksoftirqd/108:06:311
11996993327,4cyclictest25-21ksoftirqd/107:49:461
11996993327,4cyclictest25-21ksoftirqd/107:41:311
11996993327,4cyclictest25-21ksoftirqd/107:33:171
11996993310,20cyclictest25549-21sed07:35:261
136991320,0ptp4l401ktimersoftd/310:45:173
136991320,0ptp4l401ktimersoftd/310:10:163
136991320,0ptp4l401ktimersoftd/310:08:363
11998993227,3cyclictest41-21ksoftirqd/312:11:173
11998993227,3cyclictest41-21ksoftirqd/307:23:563
11998993226,4cyclictest41-21ksoftirqd/312:05:463
11998993226,4cyclictest41-21ksoftirqd/311:22:593
11998993226,4cyclictest41-21ksoftirqd/311:09:303
11998993226,4cyclictest41-21ksoftirqd/309:04:023
1199799323,2cyclictest33-21ksoftirqd/212:35:152
11997993227,3cyclictest33-21ksoftirqd/211:50:162
11997993227,3cyclictest33-21ksoftirqd/211:38:182
11997993227,3cyclictest33-21ksoftirqd/210:40:012
11997993226,4cyclictest33-21ksoftirqd/208:22:412
11997993220,10cyclictest33-21ksoftirqd/208:45:272
11996993227,3cyclictest25-21ksoftirqd/111:29:551
11996993226,4cyclictest25-21ksoftirqd/112:30:361
11996993226,4cyclictest25-21ksoftirqd/112:30:001
11996993226,4cyclictest25-21ksoftirqd/111:16:181
11996993226,4cyclictest25-21ksoftirqd/110:54:041
11996993226,4cyclictest25-21ksoftirqd/110:03:411
11996993226,4cyclictest25-21ksoftirqd/108:38:411
11996993226,4cyclictest25-21ksoftirqd/107:52:101
11996993225,5cyclictest25-21ksoftirqd/109:31:361
11996993210,20cyclictest3608-21sed11:20:201
136991310,1ptp4l401ktimersoftd/311:37:023
136991310,0ptp4l401ktimersoftd/312:26:283
136991310,0ptp4l401ktimersoftd/310:57:503
136991310,0ptp4l401ktimersoftd/310:18:573
136991310,0ptp4l401ktimersoftd/310:04:123
11998993126,3cyclictest41-21ksoftirqd/312:18:593
11998993126,3cyclictest41-21ksoftirqd/309:15:103
11998993126,3cyclictest41-21ksoftirqd/308:49:153
11998993126,3cyclictest41-21ksoftirqd/307:35:473
11998993125,4cyclictest41-21ksoftirqd/312:39:563
11998993125,4cyclictest41-21ksoftirqd/309:28:203
11998993125,4cyclictest41-21ksoftirqd/308:30:363
11998993125,4cyclictest41-21ksoftirqd/307:27:263
11997993127,3cyclictest33-21ksoftirqd/208:25:222
11997993126,3cyclictest33-21ksoftirqd/211:06:172
11997993125,3cyclictest33-21ksoftirqd/211:25:222
11996993126,3cyclictest25-21ksoftirqd/112:06:281
11996993126,3cyclictest25-21ksoftirqd/111:41:051
11996993126,3cyclictest25-21ksoftirqd/110:21:151
11996993126,3cyclictest25-21ksoftirqd/109:56:051
11996993125,4cyclictest25-21ksoftirqd/111:14:211
11996993125,4cyclictest25-21ksoftirqd/109:54:591
11996993125,4cyclictest25-21ksoftirqd/109:49:011
11996993125,4cyclictest25-21ksoftirqd/109:02:071
11996993125,4cyclictest25-21ksoftirqd/108:19:591
11996993124,5cyclictest25-21ksoftirqd/108:29:261
1199699310,3cyclictest11025-21/usr/sbin/munin10:30:151
1199699310,27cyclictest22244-21sshd12:00:171
136991300,0ptp4l401ktimersoftd/311:15:593
136991300,0ptp4l401ktimersoftd/311:10:153
136991300,0ptp4l401ktimersoftd/308:26:373
11998993025,3cyclictest41-21ksoftirqd/308:03:183
11998993024,4cyclictest41-21ksoftirqd/310:27:463
11996993025,3cyclictest25-21ksoftirqd/111:05:381
11996993025,3cyclictest25-21ksoftirqd/110:13:071
11996993025,3cyclictest25-21ksoftirqd/109:13:501
1199699300,3cyclictest20224-21missed_timers07:25:241
136991290,0ptp4l401ktimersoftd/309:22:073
136991290,0ptp4l401ktimersoftd/308:11:423
11998992924,3cyclictest41-21ksoftirqd/311:50:453
1199699293,22cyclictest12199-21tr07:10:141
1199699290,3cyclictest10581-21seq10:28:551
1199699290,3cyclictest0-21swapper/112:15:041
11998992824,3cyclictest41-21ksoftirqd/311:45:423
11998992823,3cyclictest41-21ksoftirqd/309:49:423
11998992822,4cyclictest41-21ksoftirqd/311:26:563
1199699287,18cyclictest30285-21cpuspeed_turbos08:55:141
11996992823,3cyclictest25-21ksoftirqd/109:23:401
11996992822,4cyclictest25-21ksoftirqd/111:47:121
11996992822,4cyclictest25-21ksoftirqd/108:47:341
11998992722,3cyclictest41-21ksoftirqd/310:35:043
11998992721,4cyclictest41-21ksoftirqd/311:02:053
1199699278,16cyclictest2598-21apt09:05:151
1199699277,17cyclictest9142-21fschecks_time08:10:171
1199699276,18cyclictest19443-21cstates09:40:171
11996992722,3cyclictest25-21ksoftirqd/112:39:181
136991260,0ptp4l401ktimersoftd/309:50:193
11998992620,4cyclictest41-21ksoftirqd/307:45:433
1199699267,16cyclictest23251-21tr10:55:161
11998992520,3cyclictest41-21ksoftirqd/307:56:513
11998992519,4cyclictest41-21ksoftirqd/311:56:123
1199699250,3cyclictest4444-21iostat_ios10:15:201
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional