You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-12 - 11:06
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Sat Jul 12, 2025 00:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137391211170,30phc2sys0-21swapper/319:09:323
233262205172,22sleep20-21swapper/219:09:032
230612205171,22sleep10-21swapper/119:05:401
230602203170,22sleep00-21swapper/019:05:390
362121410,3sleep02369499cyclictest22:55:220
1372911110,89ptp4l0-21swapper/319:10:003
137291740,1ptp4l9977-21/usr/sbin/munin20:55:273
137291650,9ptp4l401ktimersoftd/322:55:353
8282620,2sleep30-21swapper/319:30:133
23696996130,6cyclictest33-21ksoftirqd/222:25:192
23696996026,6cyclictest33-21ksoftirqd/221:35:252
23696995724,4cyclictest33-21ksoftirqd/222:40:182
23696995625,9cyclictest33-21ksoftirqd/221:25:202
137291560,1ptp4l401ktimersoftd/319:21:273
137291560,1ptp4l401ktimersoftd/319:21:273
71992550,4sleep00-21swapper/023:05:010
23696995528,4cyclictest33-21ksoftirqd/223:25:132
23696995527,9cyclictest33-21ksoftirqd/220:35:172
23696995316,4cyclictest33-21ksoftirqd/222:55:192
135762530,1sleep30-21swapper/323:15:263
2369699524,8cyclictest33-21ksoftirqd/219:35:122
2369699523,8cyclictest10842-21head23:10:252
23696995122,4cyclictest33-21ksoftirqd/223:40:172
2369699493,7cyclictest11215-21cpuspeed_turbos00:20:122
161482490,2sleep00-21swapper/020:00:190
2369699484,7cyclictest33-21ksoftirqd/223:45:192
2369699483,2cyclictest26752-21irqrtprio19:15:212
306642470,3sleep00-21swapper/020:30:160
2369699473,6cyclictest33-21ksoftirqd/223:30:272
2369699471,9cyclictest29873-21mailstats19:20:232
2369699471,9cyclictest29873-21mailstats19:20:232
23696994716,4cyclictest33-21ksoftirqd/219:50:322
2369699466,5cyclictest33-21ksoftirqd/223:00:252
2369699466,5cyclictest33-21ksoftirqd/221:50:292
2369699461,7cyclictest22270-21sed23:35:242
2369699460,8cyclictest321ktimersoftd/220:05:262
23694994638,3cyclictest121rcu_preempt23:45:000
2369699452,6cyclictest33-21ksoftirqd/200:30:242
2369699445,4cyclictest33-21ksoftirqd/222:21:562
2369699442,6cyclictest33-21ksoftirqd/221:12:122
2369699441,7cyclictest1562-21timerwakeupswit22:50:292
23696994329,4cyclictest33-21ksoftirqd/222:15:292
23696994329,4cyclictest33-21ksoftirqd/221:40:242
23696994328,6cyclictest33-21ksoftirqd/200:25:202
23696994328,5cyclictest33-21ksoftirqd/222:30:232
2369699432,5cyclictest33-21ksoftirqd/219:10:142
2369699431,6cyclictest33-21ksoftirqd/220:01:522
23695994338,3cyclictest25-21ksoftirqd/119:19:591
137291430,2ptp4l401ktimersoftd/320:33:113
137291430,1ptp4l401ktimersoftd/300:26:073
2369699423,6cyclictest33-21ksoftirqd/220:25:192
23696994229,3cyclictest33-21ksoftirqd/220:45:162
23696994227,5cyclictest33-21ksoftirqd/200:05:172
2369699422,5cyclictest33-21ksoftirqd/200:05:012
2369699422,3cyclictest121rcu_preempt21:45:242
2369699422,3cyclictest121rcu_preempt21:45:232
2369699420,5cyclictest33-21ksoftirqd/223:55:232
137291420,0ptp4l401ktimersoftd/322:37:013
2369699414,5cyclictest33-21ksoftirqd/223:50:222
23696994128,4cyclictest33-21ksoftirqd/200:15:172
137291410,0ptp4l401ktimersoftd/323:45:133
137291410,0ptp4l401ktimersoftd/300:15:193
2369699405,6cyclictest33-21ksoftirqd/219:34:592
2369699404,4cyclictest33-21ksoftirqd/221:00:232
2369699401,6cyclictest33-21ksoftirqd/223:20:182
2369699401,5cyclictest33-21ksoftirqd/221:55:462
2369699401,5cyclictest33-21ksoftirqd/221:30:282
23694994035,3cyclictest9-21ksoftirqd/019:25:000
23694994035,3cyclictest9-21ksoftirqd/019:25:000
137291400,0ptp4l401ktimersoftd/319:57:053
2369699398,5cyclictest33-21ksoftirqd/220:20:162
2369699398,5cyclictest33-21ksoftirqd/220:20:162
23696993926,4cyclictest33-21ksoftirqd/200:35:232
23695993935,3cyclictest25-21ksoftirqd/119:30:001
23695993935,2cyclictest25-21ksoftirqd/119:35:001
23695993935,2cyclictest25-21ksoftirqd/100:00:001
23694993934,3cyclictest9-21ksoftirqd/019:50:010
23694993934,2cyclictest9-21ksoftirqd/020:30:000
23694993933,3cyclictest9-21ksoftirqd/022:50:210
23694993933,3cyclictest9-21ksoftirqd/022:10:000
137291390,0ptp4l401ktimersoftd/321:25:283
23696993834,3cyclictest33-21ksoftirqd/220:45:012
2369699382,5cyclictest33-21ksoftirqd/223:05:212
2369699381,5cyclictest33-21ksoftirqd/222:35:242
2369599384,3cyclictest25-21ksoftirqd/100:25:191
2369599381,7cyclictest121rcu_preempt00:02:281
23694993834,2cyclictest9-21ksoftirqd/020:50:010
23694993833,3cyclictest9-21ksoftirqd/020:45:010
23694993832,3cyclictest9-21ksoftirqd/021:55:170
23697993725,7cyclictest41-21ksoftirqd/320:35:133
23696993730,5cyclictest33-21ksoftirqd/221:05:192
2369699372,6cyclictest33-21ksoftirqd/222:45:142
2369699372,6cyclictest33-21ksoftirqd/200:10:062
23695993732,3cyclictest25-21ksoftirqd/121:55:011
23695993732,3cyclictest25-21ksoftirqd/121:24:591
23695993731,4cyclictest25-21ksoftirqd/119:13:541
23695993730,4cyclictest25-21ksoftirqd/119:50:231
2369599372,3cyclictest25-21ksoftirqd/123:15:241
2369599372,3cyclictest25-21ksoftirqd/120:55:231
2369599372,3cyclictest121rcu_preempt20:20:301
2369599372,3cyclictest121rcu_preempt20:20:301
2369599371,3cyclictest131rcu_sched00:07:421
23694993733,2cyclictest9-21ksoftirqd/021:10:000
23694993732,3cyclictest9-21ksoftirqd/023:55:000
23694993730,4cyclictest9-21ksoftirqd/020:07:530
23694993724,3cyclictest9-21ksoftirqd/000:07:430
23697993629,4cyclictest41-21ksoftirqd/322:29:333
2369699363,5cyclictest33-21ksoftirqd/221:25:002
2369699361,5cyclictest33-21ksoftirqd/222:10:132
2369599366,5cyclictest25-21ksoftirqd/121:40:241
2369599366,3cyclictest25-21ksoftirqd/120:01:271
2369599363,6cyclictest25-21ksoftirqd/119:55:181
2369599363,3cyclictest25-21ksoftirqd/121:00:271
23695993632,2cyclictest25-21ksoftirqd/120:55:001
23695993631,3cyclictest25-21ksoftirqd/122:55:271
23695993631,3cyclictest25-21ksoftirqd/122:50:011
23695993631,3cyclictest25-21ksoftirqd/122:40:001
23695993631,3cyclictest25-21ksoftirqd/120:10:141
23695993631,3cyclictest25-21ksoftirqd/100:30:161
23695993631,3cyclictest25-21ksoftirqd/100:20:131
23695993631,3cyclictest25-21ksoftirqd/100:20:001
23695993629,4cyclictest25-21ksoftirqd/100:12:251
2369599362,7cyclictest25-21ksoftirqd/120:30:221
2369599362,2cyclictest25-21ksoftirqd/119:40:301
2369599361,4cyclictest25-21ksoftirqd/123:45:211
2369499363,3cyclictest121rcu_preempt22:40:210
23694993632,3cyclictest9-21ksoftirqd/021:40:210
23694993621,4cyclictest9-21ksoftirqd/022:15:230
2369499361,5cyclictest0-21swapper/023:45:130
137291360,0ptp4l401ktimersoftd/323:00:133
23697993529,4cyclictest41-21ksoftirqd/300:11:303
2369699354,5cyclictest321ktimersoftd/221:15:272
2369699352,5cyclictest33-21ksoftirqd/223:17:592
2369699352,5cyclictest33-21ksoftirqd/222:02:222
2369599355,6cyclictest25-21ksoftirqd/121:30:171
2369599353,2cyclictest25-21ksoftirqd/122:10:251
23695993530,3cyclictest4969-21basename23:00:101
23695993530,3cyclictest25-21ksoftirqd/123:15:011
23695993530,3cyclictest25-21ksoftirqd/122:00:161
23695993530,3cyclictest25-21ksoftirqd/121:29:591
23695993530,3cyclictest25-21ksoftirqd/119:40:011
23695993529,4cyclictest25-21ksoftirqd/123:31:011
23695993529,4cyclictest25-21ksoftirqd/119:22:371
23695993529,4cyclictest25-21ksoftirqd/119:22:371
2369599352,7cyclictest25-21ksoftirqd/100:35:251
2369599352,6cyclictest25-21ksoftirqd/121:55:241
2369599352,5cyclictest25-21ksoftirqd/123:20:171
2369599352,3cyclictest121rcu_preempt22:15:221
2369599352,2cyclictest25-21ksoftirqd/120:15:191
2369599351,3cyclictest25-21ksoftirqd/121:15:161
23694993531,3cyclictest9-21ksoftirqd/021:20:230
23694993531,2cyclictest9-21ksoftirqd/022:50:000
23694993530,3cyclictest9-21ksoftirqd/023:35:240
23694993530,3cyclictest9-21ksoftirqd/023:25:180
23694993530,3cyclictest9-21ksoftirqd/022:35:280
23694993530,3cyclictest9-21ksoftirqd/019:55:170
23694993530,3cyclictest9-21ksoftirqd/019:15:280
23694993530,3cyclictest9-21ksoftirqd/000:40:000
23694993529,4cyclictest9-21ksoftirqd/022:22:000
23694993529,4cyclictest9-21ksoftirqd/021:46:380
23694993529,4cyclictest9-21ksoftirqd/021:46:370
23694993529,3cyclictest9-21ksoftirqd/000:30:200
23694993528,5cyclictest9-21ksoftirqd/019:37:390
23694993528,4cyclictest9-21ksoftirqd/022:33:590
2369499352,5cyclictest14762-21ptp4l-jitter00:25:240
2369499351,7cyclictest121rcu_preempt19:30:240
23697993429,3cyclictest41-21ksoftirqd/321:05:123
23696993430,2cyclictest311rcuc/219:41:482
23696993429,3cyclictest33-21ksoftirqd/220:15:192
23696993429,3cyclictest33-21ksoftirqd/219:45:272
23696993418,6cyclictest33-21ksoftirqd/219:59:352
2369599345,5cyclictest121rcu_preempt20:45:271
2369599343,6cyclictest25-21ksoftirqd/123:05:221
2369599343,5cyclictest25-21ksoftirqd/123:25:121
2369599343,5cyclictest25-21ksoftirqd/121:05:261
2369599343,2cyclictest25-21ksoftirqd/120:35:191
23695993430,2cyclictest25-21ksoftirqd/119:50:011
23695993429,3cyclictest25-21ksoftirqd/121:45:141
23695993429,3cyclictest25-21ksoftirqd/121:45:141
23695993428,4cyclictest25-21ksoftirqd/120:28:561
23695993428,3cyclictest25-21ksoftirqd/122:05:151
23695993428,3cyclictest25-21ksoftirqd/121:10:201
23695993427,5cyclictest25-21ksoftirqd/122:40:071
2369599342,2cyclictest25-21ksoftirqd/120:40:191
23694993429,3cyclictest9-21ksoftirqd/023:55:190
23694993429,3cyclictest9-21ksoftirqd/021:50:220
23694993429,3cyclictest9-21ksoftirqd/021:25:140
23694993429,3cyclictest9-21ksoftirqd/020:15:240
23694993429,3cyclictest9-21ksoftirqd/000:16:420
23694993428,4cyclictest9-21ksoftirqd/021:32:420
23694993428,4cyclictest9-21ksoftirqd/000:01:280
23694993428,3cyclictest9-21ksoftirqd/023:20:150
23697993327,4cyclictest41-21ksoftirqd/321:12:233
23697993327,4cyclictest41-21ksoftirqd/320:04:273
23697993327,4cyclictest41-21ksoftirqd/319:29:173
23696993330,2cyclictest311rcuc/220:14:502
2369599333,3cyclictest25-21ksoftirqd/123:35:181
23695993328,3cyclictest25-21ksoftirqd/122:55:011
23695993328,3cyclictest25-21ksoftirqd/122:35:011
23695993327,4cyclictest25-21ksoftirqd/120:08:061
23695993327,3cyclictest25-21ksoftirqd/121:35:151
2369599331,6cyclictest25-21ksoftirqd/123:50:221
2369599331,2cyclictest25-21ksoftirqd/122:20:191
23694993330,2cyclictest9-21ksoftirqd/023:15:200
23694993329,3cyclictest9-21ksoftirqd/020:15:000
23694993329,2cyclictest9-21ksoftirqd/021:37:180
23694993328,3cyclictest9-21ksoftirqd/023:15:000
23694993328,3cyclictest9-21ksoftirqd/021:10:110
23694993328,3cyclictest9-21ksoftirqd/020:55:010
23694993328,3cyclictest9-21ksoftirqd/019:50:200
23694993328,3cyclictest9-21ksoftirqd/000:20:180
23694993327,4cyclictest9-21ksoftirqd/023:31:370
23694993327,4cyclictest9-21ksoftirqd/023:06:370
23694993327,4cyclictest9-21ksoftirqd/019:40:410
23694993319,4cyclictest9-21ksoftirqd/021:20:010
23694993316,4cyclictest9-21ksoftirqd/019:29:590
23697993227,3cyclictest41-21ksoftirqd/323:55:123
23697993227,3cyclictest41-21ksoftirqd/320:10:123
23697993226,4cyclictest41-21ksoftirqd/323:25:493
23697993226,4cyclictest41-21ksoftirqd/321:17:363
23697993226,4cyclictest41-21ksoftirqd/320:28:503
23697993226,4cyclictest41-21ksoftirqd/319:16:083
23696993227,3cyclictest33-21ksoftirqd/222:05:162
23696993227,3cyclictest33-21ksoftirqd/220:55:162
2369599325,3cyclictest25-21ksoftirqd/122:25:161
23695993227,3cyclictest25-21ksoftirqd/123:40:231
23694993227,3cyclictest9-21ksoftirqd/022:26:160
23694993227,3cyclictest9-21ksoftirqd/019:13:210
23694993226,3cyclictest9-21ksoftirqd/000:15:020
23694993218,4cyclictest9-21ksoftirqd/021:00:280
137291320,0ptp4l401ktimersoftd/323:43:253
137291320,0ptp4l401ktimersoftd/322:24:163
137291320,0ptp4l401ktimersoftd/320:52:133
137291320,0ptp4l401ktimersoftd/320:42:193
23697993126,3cyclictest41-21ksoftirqd/323:39:243
23697993126,3cyclictest41-21ksoftirqd/323:11:503
23697993126,3cyclictest41-21ksoftirqd/320:48:193
23697993125,4cyclictest41-21ksoftirqd/321:55:013
23697993125,4cyclictest41-21ksoftirqd/319:40:523
23697993125,4cyclictest41-21ksoftirqd/300:07:253
23696993126,3cyclictest33-21ksoftirqd/220:52:112
23694993127,3cyclictest9-21ksoftirqd/020:55:190
23694993126,3cyclictest9-21ksoftirqd/022:15:010
23694993116,3cyclictest9-21ksoftirqd/020:20:260
23694993116,3cyclictest9-21ksoftirqd/020:20:260
137291310,0ptp4l401ktimersoftd/322:31:553
137291310,0ptp4l401ktimersoftd/322:07:003
137291310,0ptp4l401ktimersoftd/321:58:203
137291310,0ptp4l401ktimersoftd/321:45:103
137291310,0ptp4l401ktimersoftd/321:45:103
137291310,0ptp4l401ktimersoftd/320:22:193
137291310,0ptp4l401ktimersoftd/320:22:193
137291310,0ptp4l401ktimersoftd/320:15:183
137291310,0ptp4l401ktimersoftd/319:51:013
137291310,0ptp4l401ktimersoftd/319:48:153
23697993025,3cyclictest41-21ksoftirqd/300:04:553
23697993024,4cyclictest41-21ksoftirqd/322:52:233
23697993023,5cyclictest41-21ksoftirqd/323:33:073
23696993026,3cyclictest33-21ksoftirqd/220:30:132
23696993025,3cyclictest33-21ksoftirqd/219:29:162
23694993024,4cyclictest9-21ksoftirqd/022:03:580
137291300,0ptp4l401ktimersoftd/323:06:103
137291300,0ptp4l401ktimersoftd/322:42:293
137291300,0ptp4l401ktimersoftd/320:06:163
23697992924,3cyclictest41-21ksoftirqd/322:20:003
23697992923,4cyclictest41-21ksoftirqd/323:51:003
23697992923,4cyclictest41-21ksoftirqd/321:40:183
23697992923,4cyclictest41-21ksoftirqd/300:24:383
23697992922,5cyclictest41-21ksoftirqd/321:21:493
23697992922,4cyclictest41-21ksoftirqd/300:30:153
23694992916,3cyclictest9-21ksoftirqd/020:35:140
137291290,0ptp4l401ktimersoftd/323:20:223
137291290,0ptp4l401ktimersoftd/322:00:213
137291290,0ptp4l401ktimersoftd/321:38:493
23697992823,3cyclictest41-21ksoftirqd/322:12:273
23697992722,3cyclictest41-21ksoftirqd/322:48:063
23697992722,3cyclictest41-21ksoftirqd/321:34:143
23697992722,3cyclictest41-21ksoftirqd/319:38:153
23697992621,3cyclictest41-21ksoftirqd/321:03:473
23697992520,3cyclictest41-21ksoftirqd/300:38:553
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional