You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-19 - 07:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot4.osadl.org (updated Fri Sep 19, 2025 00:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
134791205171,23phc2sys0-21swapper/319:05:103
30192203170,22sleep10-21swapper/119:07:231
28962203169,23sleep00-21swapper/019:05:480
9162200167,22sleep20-21swapper/219:05:102
2740321380,3sleep2352599cyclictest22:10:212
318722640,1sleep10-21swapper/121:15:161
3526995831,2cyclictest121rcu_preempt19:15:013
134991580,1ptp4l401ktimersoftd/322:00:223
70712560,2sleep20-21swapper/219:15:222
134991540,1ptp4l401ktimersoftd/323:15:513
352699517,10cyclictest41-21ksoftirqd/321:00:203
3525995015,4cyclictest33-21ksoftirqd/221:05:282
262112470,1sleep30-21swapper/323:15:013
3526994616,4cyclictest41-21ksoftirqd/300:30:243
3524994640,4cyclictest6367-21cron21:30:001
352699452,8cyclictest41-21ksoftirqd/320:20:163
3526994433,9cyclictest41-21ksoftirqd/323:20:243
3525994414,3cyclictest33-21ksoftirqd/220:40:262
134991440,0ptp4l401ktimersoftd/323:50:173
352699437,7cyclictest41-21ksoftirqd/321:35:013
3526994338,3cyclictest41-21ksoftirqd/322:19:593
3523994337,4cyclictest23083-21turbostat.cron20:55:000
352699424,10cyclictest41-21ksoftirqd/319:40:223
3526994231,9cyclictest41-21ksoftirqd/321:15:183
352699422,7cyclictest41-21ksoftirqd/320:45:043
352699420,3cyclictest121rcu_preempt20:15:003
352599427,4cyclictest33-21ksoftirqd/221:15:212
3525994230,10cyclictest33-21ksoftirqd/221:40:012
3525994214,3cyclictest33-21ksoftirqd/223:55:012
352699417,10cyclictest41-21ksoftirqd/321:35:153
3526994136,3cyclictest41-21ksoftirqd/321:30:003
352699410,2cyclictest121rcu_preempt22:45:243
3525994128,10cyclictest33-21ksoftirqd/200:25:192
3525994122,3cyclictest33-21ksoftirqd/222:55:252
352599411,2cyclictest121rcu_preempt00:00:002
352599411,2cyclictest121rcu_preempt00:00:002
3525994110,5cyclictest121rcu_preempt23:35:182
3525994110,15cyclictest33-21ksoftirqd/223:40:172
134991410,0ptp4l401ktimersoftd/320:59:303
134991410,0ptp4l401ktimersoftd/320:01:143
134991410,0ptp4l401ktimersoftd/320:01:133
352699408,6cyclictest41-21ksoftirqd/319:35:163
352699407,9cyclictest41-21ksoftirqd/319:15:203
352699407,10cyclictest41-21ksoftirqd/322:50:243
352699405,3cyclictest41-21ksoftirqd/321:40:173
3526994035,3cyclictest41-21ksoftirqd/323:05:263
3526994034,3cyclictest41-21ksoftirqd/320:40:003
3526994034,3cyclictest41-21ksoftirqd/319:55:003
352699403,2cyclictest121rcu_preempt22:40:133
352699403,10cyclictest41-21ksoftirqd/322:30:253
352699401,7cyclictest41-21ksoftirqd/321:50:223
352699401,5cyclictest41-21ksoftirqd/320:05:273
267132400,2sleep00-21swapper/023:15:140
352699395,3cyclictest121rcu_preempt20:30:003
3526993933,4cyclictest41-21ksoftirqd/323:43:093
3526993933,4cyclictest41-21ksoftirqd/319:56:463
3526993932,4cyclictest41-21ksoftirqd/323:30:463
3526993927,3cyclictest41-21ksoftirqd/319:30:263
352699391,7cyclictest41-21ksoftirqd/321:10:183
352699391,11cyclictest41-21ksoftirqd/300:15:133
352699391,10cyclictest41-21ksoftirqd/300:10:163
3525993933,3cyclictest33-21ksoftirqd/222:55:002
3525993928,2cyclictest33-21ksoftirqd/220:00:292
3525993928,2cyclictest33-21ksoftirqd/220:00:292
3525993918,13cyclictest33-21ksoftirqd/222:00:252
352599391,35cyclictest21209-21cron22:00:002
36998380,5rtkit-daemon368-21rtkit-daemon20:39:161
352699387,8cyclictest41-21ksoftirqd/322:55:273
352699384,8cyclictest41-21ksoftirqd/320:45:013
3526993834,2cyclictest41-21ksoftirqd/300:30:003
3526993833,3cyclictest41-21ksoftirqd/322:15:013
3526993833,3cyclictest41-21ksoftirqd/321:20:103
3526993832,3cyclictest41-21ksoftirqd/323:40:013
3526993831,4cyclictest41-21ksoftirqd/323:56:413
3526993831,4cyclictest41-21ksoftirqd/323:56:413
3526993831,4cyclictest41-21ksoftirqd/322:29:443
3526993830,5cyclictest41-21ksoftirqd/323:46:023
352699382,9cyclictest41-21ksoftirqd/300:00:183
3525993834,2cyclictest33-21ksoftirqd/223:10:002
3525993833,3cyclictest33-21ksoftirqd/222:40:002
3525993824,4cyclictest33-21ksoftirqd/200:10:172
352599382,3cyclictest121rcu_preempt19:41:212
3525993816,4cyclictest33-21ksoftirqd/223:15:142
352699376,9cyclictest41-21ksoftirqd/322:05:243
3526993732,3cyclictest41-21ksoftirqd/323:25:213
3526993732,3cyclictest41-21ksoftirqd/322:40:013
3526993732,3cyclictest41-21ksoftirqd/321:55:143
3526993732,3cyclictest41-21ksoftirqd/320:50:193
3526993732,3cyclictest41-21ksoftirqd/320:20:003
3526993731,4cyclictest41-21ksoftirqd/319:27:023
3526993731,3cyclictest41-21ksoftirqd/319:45:213
3525993726,3cyclictest33-21ksoftirqd/221:20:242
352599372,5cyclictest0-21swapper/220:15:152
3525993725,3cyclictest33-21ksoftirqd/223:10:012
3524993732,3cyclictest25-21ksoftirqd/123:30:201
3524993732,3cyclictest25-21ksoftirqd/122:59:591
3524993732,3cyclictest25-21ksoftirqd/120:20:001
3524993731,4cyclictest25-21ksoftirqd/123:29:391
3523993732,3cyclictest9-21ksoftirqd/000:10:010
3523993731,4cyclictest9-21ksoftirqd/019:16:310
3526993631,3cyclictest41-21ksoftirqd/321:45:203
3526993631,3cyclictest41-21ksoftirqd/300:35:533
3526993629,4cyclictest41-21ksoftirqd/320:34:543
352599367,4cyclictest33-21ksoftirqd/200:05:222
3525993632,3cyclictest33-21ksoftirqd/219:47:412
3525993632,2cyclictest33-21ksoftirqd/222:20:002
3525993631,3cyclictest33-21ksoftirqd/221:40:252
3525993631,3cyclictest33-21ksoftirqd/220:30:172
3525993631,3cyclictest33-21ksoftirqd/219:55:012
3525993630,4cyclictest33-21ksoftirqd/220:57:072
3525993630,4cyclictest33-21ksoftirqd/219:11:042
3525993630,4cyclictest33-21ksoftirqd/200:32:222
3525993630,4cyclictest33-21ksoftirqd/200:03:382
3525993626,3cyclictest33-21ksoftirqd/200:20:222
3525993624,3cyclictest33-21ksoftirqd/222:45:232
3525993622,4cyclictest33-21ksoftirqd/223:25:142
3525993622,4cyclictest33-21ksoftirqd/222:40:252
352599361,3cyclictest121rcu_preempt23:45:192
352599361,3cyclictest121rcu_preempt00:15:282
3524993630,4cyclictest25-21ksoftirqd/123:44:041
3524993630,4cyclictest25-21ksoftirqd/119:30:371
3524993629,4cyclictest25-21ksoftirqd/100:17:361
3523993630,4cyclictest9-21ksoftirqd/022:34:540
3523993630,4cyclictest9-21ksoftirqd/021:46:400
3526993531,2cyclictest41-21ksoftirqd/300:06:473
3526993530,3cyclictest41-21ksoftirqd/323:00:043
3526993530,3cyclictest41-21ksoftirqd/322:20:143
3526993530,3cyclictest41-21ksoftirqd/321:05:303
352699350,8cyclictest41-21ksoftirqd/319:20:163
352599354,3cyclictest16252-21cstates19:35:152
3525993532,2cyclictest33-21ksoftirqd/223:24:452
3525993531,3cyclictest33-21ksoftirqd/220:25:212
3525993530,4cyclictest33-21ksoftirqd/200:40:002
3525993530,3cyclictest33-21ksoftirqd/223:00:302
3525993530,3cyclictest33-21ksoftirqd/221:52:572
3525993530,3cyclictest33-21ksoftirqd/221:30:282
3525993530,3cyclictest33-21ksoftirqd/221:00:102
3525993529,4cyclictest33-21ksoftirqd/222:07:532
3525993521,4cyclictest33-21ksoftirqd/219:55:162
3524993531,3cyclictest25-21ksoftirqd/121:05:011
3524993531,3cyclictest25-21ksoftirqd/100:05:151
3524993530,3cyclictest25-21ksoftirqd/121:10:011
3524993530,3cyclictest25-21ksoftirqd/119:19:591
3524993529,4cyclictest25-21ksoftirqd/122:36:071
3524993529,4cyclictest25-21ksoftirqd/121:47:561
3524993529,4cyclictest25-21ksoftirqd/121:31:121
3524993529,4cyclictest25-21ksoftirqd/121:13:111
3524993529,4cyclictest25-21ksoftirqd/120:50:561
3524993529,4cyclictest25-21ksoftirqd/120:08:041
3524993529,3cyclictest25-21ksoftirqd/119:55:151
3523993530,3cyclictest9-21ksoftirqd/023:20:390
3525993430,3cyclictest33-21ksoftirqd/219:35:002
3525993430,2cyclictest33-21ksoftirqd/220:35:182
3525993429,3cyclictest33-21ksoftirqd/220:50:142
3525993429,3cyclictest33-21ksoftirqd/220:45:282
3525993429,3cyclictest33-21ksoftirqd/220:10:152
3525993422,3cyclictest33-21ksoftirqd/223:30:242
3525993422,3cyclictest33-21ksoftirqd/221:25:202
3525993421,4cyclictest33-21ksoftirqd/222:25:142
352599340,2cyclictest121rcu_preempt20:05:232
3524993429,3cyclictest25-21ksoftirqd/120:45:011
3524993429,3cyclictest25-21ksoftirqd/100:28:141
3524993428,4cyclictest25-21ksoftirqd/123:57:321
3524993428,4cyclictest25-21ksoftirqd/123:57:321
3524993428,4cyclictest25-21ksoftirqd/123:13:221
3524993428,4cyclictest25-21ksoftirqd/122:28:131
3524993428,4cyclictest25-21ksoftirqd/122:20:061
3524993428,4cyclictest25-21ksoftirqd/119:24:471
3524993427,4cyclictest25-21ksoftirqd/100:39:241
3523993428,4cyclictest9-21ksoftirqd/022:21:580
3523993428,4cyclictest9-21ksoftirqd/021:21:200
3523993428,4cyclictest9-21ksoftirqd/021:09:210
3523993428,4cyclictest9-21ksoftirqd/019:32:120
3523993428,4cyclictest9-21ksoftirqd/000:19:290
3523993427,4cyclictest9-21ksoftirqd/020:35:160
3526993327,3cyclictest41-21ksoftirqd/300:20:233
3525993329,3cyclictest33-21ksoftirqd/221:45:142
3525993328,3cyclictest33-21ksoftirqd/222:30:292
3525993328,3cyclictest33-21ksoftirqd/220:25:002
3525993328,3cyclictest33-21ksoftirqd/219:25:152
3524993328,3cyclictest25-21ksoftirqd/123:45:211
3524993328,3cyclictest25-21ksoftirqd/121:55:201
3524993328,3cyclictest25-21ksoftirqd/100:10:181
3524993327,4cyclictest25-21ksoftirqd/123:06:361
3524993327,4cyclictest25-21ksoftirqd/122:53:451
3524993327,4cyclictest25-21ksoftirqd/122:43:541
3524993327,4cyclictest25-21ksoftirqd/120:46:151
3524993327,4cyclictest25-21ksoftirqd/120:31:391
3524993327,4cyclictest25-21ksoftirqd/119:25:071
3524993326,4cyclictest25-21ksoftirqd/122:14:291
3523993328,3cyclictest9-21ksoftirqd/022:52:070
3523993328,3cyclictest9-21ksoftirqd/022:19:420
3523993328,3cyclictest9-21ksoftirqd/021:15:070
3523993328,3cyclictest9-21ksoftirqd/020:45:500
3523993328,3cyclictest9-21ksoftirqd/000:21:590
3523993327,4cyclictest9-21ksoftirqd/022:45:050
3523993327,4cyclictest9-21ksoftirqd/020:40:360
3523993327,4cyclictest9-21ksoftirqd/000:26:540
3523993327,4cyclictest9-21ksoftirqd/000:14:360
3523993327,3cyclictest9-21ksoftirqd/023:08:510
3523993326,4cyclictest9-21ksoftirqd/023:30:010
3523993326,4cyclictest9-21ksoftirqd/023:04:430
36998320,6rtkit-daemon1524-21sendmail-mta22:01:041
352599324,3cyclictest33-21ksoftirqd/221:10:262
3525993218,4cyclictest33-21ksoftirqd/222:23:022
3524993227,3cyclictest25-21ksoftirqd/119:45:251
3524993226,4cyclictest25-21ksoftirqd/123:18:121
3524993226,4cyclictest25-21ksoftirqd/121:22:141
3524993226,4cyclictest25-21ksoftirqd/119:54:201
3523993227,3cyclictest9-21ksoftirqd/020:27:450
3523993227,3cyclictest9-21ksoftirqd/019:20:340
3523993226,4cyclictest9-21ksoftirqd/023:49:030
3523993226,4cyclictest9-21ksoftirqd/023:12:280
3523993226,4cyclictest9-21ksoftirqd/021:59:400
3523993226,4cyclictest9-21ksoftirqd/021:44:030
3523993226,4cyclictest9-21ksoftirqd/020:23:390
3523993224,5cyclictest9-21ksoftirqd/021:37:290
3525993126,2cyclictest33-21ksoftirqd/219:20:202
3524993126,3cyclictest25-21ksoftirqd/123:53:581
3524993126,3cyclictest25-21ksoftirqd/122:35:001
3524993126,3cyclictest25-21ksoftirqd/121:55:001
3524993126,3cyclictest25-21ksoftirqd/100:22:271
3524993125,4cyclictest25-21ksoftirqd/120:01:021
3524993125,4cyclictest25-21ksoftirqd/120:01:021
3524993125,4cyclictest25-21ksoftirqd/119:10:351
3524993124,4cyclictest25-21ksoftirqd/119:39:431
352499311,2cyclictest0-21swapper/100:00:241
3523993127,3cyclictest9-21ksoftirqd/019:55:450
3523993125,4cyclictest9-21ksoftirqd/021:34:520
3523993125,4cyclictest9-21ksoftirqd/020:08:430
3523993125,4cyclictest9-21ksoftirqd/019:43:030
3524993026,3cyclictest25-21ksoftirqd/120:30:001
3524993025,3cyclictest25-21ksoftirqd/121:40:011
3523993025,3cyclictest9-21ksoftirqd/022:11:230
3523993024,4cyclictest9-21ksoftirqd/023:58:310
3523993024,4cyclictest9-21ksoftirqd/023:58:310
3523993024,4cyclictest9-21ksoftirqd/022:09:110
3523993024,4cyclictest9-21ksoftirqd/020:32:300
3523993024,4cyclictest9-21ksoftirqd/000:38:180
3524992924,3cyclictest25-21ksoftirqd/123:35:171
3524992924,3cyclictest25-21ksoftirqd/120:11:291
3524992924,3cyclictest25-21ksoftirqd/119:43:221
3524992924,3cyclictest25-21ksoftirqd/100:30:271
3524992923,4cyclictest25-21ksoftirqd/122:47:231
3524992923,4cyclictest25-21ksoftirqd/120:21:281
3523992924,3cyclictest9-21ksoftirqd/023:42:270
3523992924,3cyclictest9-21ksoftirqd/021:00:080
3523992924,3cyclictest9-21ksoftirqd/020:00:380
3523992924,3cyclictest9-21ksoftirqd/020:00:380
3523992923,4cyclictest9-21ksoftirqd/023:54:500
3523992923,4cyclictest9-21ksoftirqd/019:52:100
3523992923,4cyclictest9-21ksoftirqd/019:28:430
3524992823,3cyclictest25-21ksoftirqd/123:21:041
3524992823,3cyclictest25-21ksoftirqd/122:05:161
3524992823,3cyclictest25-21ksoftirqd/121:40:201
3523992823,3cyclictest9-21ksoftirqd/022:02:480
3523992823,3cyclictest9-21ksoftirqd/021:26:080
3523992823,3cyclictest9-21ksoftirqd/019:13:470
3523992822,4cyclictest9-21ksoftirqd/019:47:290
3523992822,3cyclictest9-21ksoftirqd/020:14:230
3524992721,4cyclictest25-21ksoftirqd/120:55:061
3523992722,3cyclictest9-21ksoftirqd/021:10:370
3523992722,3cyclictest9-21ksoftirqd/020:16:490
3523992722,3cyclictest9-21ksoftirqd/000:03:440
3524992620,4cyclictest25-21ksoftirqd/123:03:441
3523992621,3cyclictest9-21ksoftirqd/023:35:400
3523992621,3cyclictest9-21ksoftirqd/022:56:440
3523992620,4cyclictest9-21ksoftirqd/021:53:220
3524992520,3cyclictest25-21ksoftirqd/122:20:001
3523992520,3cyclictest9-21ksoftirqd/022:29:120
3523992318,3cyclictest9-21ksoftirqd/023:28:240
3523992317,4cyclictest9-21ksoftirqd/022:40:000
3523992116,3cyclictest9-21ksoftirqd/020:57:430
3523992015,3cyclictest9-21ksoftirqd/019:35:010
3523992015,3cyclictest9-21ksoftirqd/000:33:520
3523991813,3cyclictest9875-21kernelversion22:40:200
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional