You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-18 - 16:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Thu Sep 18, 2025 12:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
209862205171,23sleep30-21swapper/307:05:563
211592203171,22sleep20-21swapper/207:08:122
212152202169,22sleep10-21swapper/107:08:561
210802201167,23sleep00-21swapper/007:07:100
259921620,5sleep22159599cyclictest08:45:122
3006521600,5sleep22159599cyclictest10:50:012
298762690,2sleep20-21swapper/207:25:252
21594996923,7cyclictest25-21ksoftirqd/107:50:281
21593996328,7cyclictest9-21ksoftirqd/009:55:170
21594996259,2cyclictest231rcuc/112:00:231
21594996259,2cyclictest231rcuc/110:25:261
21593996233,4cyclictest9-21ksoftirqd/011:00:000
21593996229,6cyclictest9-21ksoftirqd/011:50:240
21593996229,6cyclictest9-21ksoftirqd/010:35:000
21593996032,4cyclictest9-21ksoftirqd/010:35:270
21593996029,7cyclictest9-21ksoftirqd/011:15:200
21593996027,7cyclictest9-21ksoftirqd/009:00:250
21593996027,7cyclictest9-21ksoftirqd/009:00:250
153542600,2sleep00-21swapper/011:25:210
21594995956,2cyclictest231rcuc/109:50:271
21593995931,4cyclictest9-21ksoftirqd/012:05:200
21593995931,3cyclictest9-21ksoftirqd/007:15:260
21593995931,3cyclictest9-21ksoftirqd/007:15:250
21593995929,7cyclictest9-21ksoftirqd/012:15:260
21593995929,4cyclictest9-21ksoftirqd/011:15:010
21593995928,4cyclictest9-21ksoftirqd/007:30:110
21594995854,2cyclictest231rcuc/110:23:091
21594995826,10cyclictest25-21ksoftirqd/111:25:281
21593995831,4cyclictest9-21ksoftirqd/010:45:120
21593995828,8cyclictest9-21ksoftirqd/009:40:270
21593995826,4cyclictest9-21ksoftirqd/008:40:160
21593995824,8cyclictest9-21ksoftirqd/008:15:210
21593995727,5cyclictest9-21ksoftirqd/011:45:240
21593995727,3cyclictest9-21ksoftirqd/008:05:260
256622560,2sleep20-21swapper/211:45:252
21594995624,7cyclictest25-21ksoftirqd/109:15:211
21593995631,8cyclictest9-21ksoftirqd/009:50:140
21593995631,4cyclictest9-21ksoftirqd/007:10:260
21593995629,3cyclictest9-21ksoftirqd/008:00:120
21593995628,8cyclictest9-21ksoftirqd/012:25:260
21593995628,4cyclictest9-21ksoftirqd/010:15:250
21593995627,3cyclictest9-21ksoftirqd/007:50:140
21593995626,7cyclictest9-21ksoftirqd/007:25:190
21593995626,6cyclictest9-21ksoftirqd/007:35:240
21593995626,4cyclictest9-21ksoftirqd/012:10:150
21593995624,5cyclictest9-21ksoftirqd/012:30:230
21593995620,3cyclictest9-21ksoftirqd/008:35:000
21594995552,2cyclictest231rcuc/109:11:001
21594995552,2cyclictest231rcuc/108:43:481
21593995528,4cyclictest9-21ksoftirqd/007:20:190
21593995524,7cyclictest9-21ksoftirqd/010:00:150
21593995524,4cyclictest9-21ksoftirqd/007:45:220
21593995521,5cyclictest9-21ksoftirqd/008:55:160
136991550,1ptp4l401ktimersoftd/309:57:363
21594995451,2cyclictest231rcuc/110:31:481
21593995426,4cyclictest9-21ksoftirqd/011:05:250
21593995426,4cyclictest9-21ksoftirqd/009:30:160
21593995425,6cyclictest9-21ksoftirqd/008:10:250
21593995424,7cyclictest9-21ksoftirqd/011:45:010
21593995423,7cyclictest9-21ksoftirqd/008:25:190
21593995423,6cyclictest9-21ksoftirqd/012:05:010
21593995423,6cyclictest9-21ksoftirqd/010:05:170
21595995316,5cyclictest33-21ksoftirqd/207:35:192
21593995326,4cyclictest9-21ksoftirqd/012:20:270
21593995325,7cyclictest9-21ksoftirqd/007:55:290
21593995325,4cyclictest9-21ksoftirqd/009:45:190
21593995324,4cyclictest9-21ksoftirqd/009:30:000
21593995322,7cyclictest9-21ksoftirqd/010:10:210
21593995320,4cyclictest9-21ksoftirqd/010:40:280
136991530,1ptp4l401ktimersoftd/311:40:203
2159499523,6cyclictest25-21ksoftirqd/109:20:251
2159499520,6cyclictest241ktimersoftd/108:14:591
21593995236,3cyclictest9-21ksoftirqd/010:20:260
21593995224,3cyclictest9-21ksoftirqd/010:50:160
21593995223,7cyclictest9-21ksoftirqd/011:30:140
21593995223,7cyclictest9-21ksoftirqd/009:15:290
21593995222,6cyclictest9-21ksoftirqd/011:35:130
2159499516,6cyclictest25-21ksoftirqd/108:25:001
21594995121,7cyclictest25-21ksoftirqd/108:25:441
2159499510,5cyclictest241ktimersoftd/110:40:001
21593995125,7cyclictest9-21ksoftirqd/011:20:270
21593995123,4cyclictest9-21ksoftirqd/009:05:150
21593995118,4cyclictest9-21ksoftirqd/011:00:180
2159499503,6cyclictest25-21ksoftirqd/110:15:251
21594995013,7cyclictest25-21ksoftirqd/109:29:381
2159499500,7cyclictest241ktimersoftd/110:05:001
21593995020,9cyclictest9-21ksoftirqd/012:40:010
2159499496,6cyclictest25-21ksoftirqd/111:50:011
2159499493,5cyclictest25-21ksoftirqd/109:35:251
2159499492,6cyclictest241ktimersoftd/107:10:151
2159499492,5cyclictest25-21ksoftirqd/111:05:251
21594994912,4cyclictest25-21ksoftirqd/109:04:511
21594994912,4cyclictest25-21ksoftirqd/109:04:511
21593994943,4cyclictest7143-21apt08:55:000
21593994917,4cyclictest9-21ksoftirqd/009:10:200
21593994916,5cyclictest9-21ksoftirqd/007:40:260
136991490,1ptp4l401ktimersoftd/308:52:053
2159499486,6cyclictest25-21ksoftirqd/111:20:181
2159499483,6cyclictest25-21ksoftirqd/112:20:191
2159499482,7cyclictest241ktimersoftd/109:30:221
2159499482,6cyclictest25-21ksoftirqd/108:55:161
2159499482,5cyclictest25-21ksoftirqd/112:10:271
2159499482,5cyclictest25-21ksoftirqd/109:40:271
21594994825,11cyclictest25-21ksoftirqd/112:05:171
2159499481,6cyclictest25-21ksoftirqd/110:50:101
2159499480,5cyclictest241ktimersoftd/112:20:011
2159499474,6cyclictest25-21ksoftirqd/110:10:001
2159499473,8cyclictest241ktimersoftd/111:15:271
2159499473,5cyclictest25-21ksoftirqd/108:05:221
2159499472,5cyclictest25-21ksoftirqd/109:45:191
21594994717,4cyclictest25-21ksoftirqd/112:34:301
2159499471,6cyclictest26836-21grep11:50:151
2159499470,8cyclictest241ktimersoftd/107:20:001
2159499470,8cyclictest241ktimersoftd/107:20:001
2159499470,7cyclictest241ktimersoftd/111:30:141
21593994725,9cyclictest9-21ksoftirqd/011:55:290
21593994720,7cyclictest9-21ksoftirqd/008:35:230
21593994717,4cyclictest9-21ksoftirqd/010:25:130
1371914738,3phc2sys0-21swapper/307:10:003
2159499463,7cyclictest25-21ksoftirqd/107:55:171
2159499462,6cyclictest241ktimersoftd/108:15:241
2159499462,5cyclictest25-21ksoftirqd/108:30:271
2159499460,7cyclictest241ktimersoftd/109:58:341
21593994634,3cyclictest9-21ksoftirqd/008:45:260
21593994622,3cyclictest9-21ksoftirqd/009:35:190
21595994517,19cyclictest33-21ksoftirqd/209:05:222
21594994540,3cyclictest13142-21latency_hist12:30:001
2159499453,7cyclictest25-21ksoftirqd/108:00:171
2159499452,6cyclictest25-21ksoftirqd/107:35:001
2159499451,5cyclictest241ktimersoftd/110:55:291
2159499450,6cyclictest241ktimersoftd/112:35:231
264052440,2sleep30-21swapper/307:20:133
2159499445,4cyclictest241ktimersoftd/108:35:161
2159499442,6cyclictest25-21ksoftirqd/108:50:171
2159499442,6cyclictest241ktimersoftd/110:45:271
2159499442,5cyclictest25-21ksoftirqd/107:30:131
21594994417,3cyclictest25-21ksoftirqd/111:58:571
21594994411,9cyclictest25-21ksoftirqd/108:45:271
2159499440,6cyclictest241ktimersoftd/110:45:011
21593994430,4cyclictest9-21ksoftirqd/009:20:250
59298430,11rtkit-daemon4551-21kworker/2:212:10:392
21595994339,2cyclictest33-21ksoftirqd/210:00:002
2159499436,2cyclictest25-21ksoftirqd/110:13:401
2159499431,6cyclictest25-21ksoftirqd/111:00:011
2159399430,3cyclictest121rcu_preempt08:25:000
21595994230,10cyclictest33-21ksoftirqd/208:55:272
2159499424,7cyclictest25-21ksoftirqd/107:45:261
2159499422,5cyclictest0-21swapper/111:35:261
2159499421,6cyclictest241ktimersoftd/111:10:191
136991420,0ptp4l401ktimersoftd/311:10:293
21595994136,3cyclictest33-21ksoftirqd/211:30:002
21595994135,3cyclictest33-21ksoftirqd/209:30:002
2159499415,10cyclictest25-21ksoftirqd/109:05:161
2159499412,5cyclictest25-21ksoftirqd/107:44:551
136991410,1ptp4l401ktimersoftd/309:38:493
136991410,0ptp4l401ktimersoftd/309:45:173
2159599406,5cyclictest33-21ksoftirqd/209:55:002
21595994035,3cyclictest33-21ksoftirqd/207:50:002
2159499403,6cyclictest25-21ksoftirqd/107:25:181
21595993934,3cyclictest33-21ksoftirqd/212:05:002
21595993931,5cyclictest33-21ksoftirqd/208:00:432
2159599392,3cyclictest121rcu_preempt11:38:082
2159599391,3cyclictest33-21ksoftirqd/210:45:012
2159499392,5cyclictest25-21ksoftirqd/111:40:201
2159599386,4cyclictest33-21ksoftirqd/208:45:012
2159599384,3cyclictest33-21ksoftirqd/208:20:202
2159499383,5cyclictest241ktimersoftd/107:20:261
136991380,0ptp4l401ktimersoftd/309:05:233
2159599378,9cyclictest33-21ksoftirqd/211:35:002
21595993733,2cyclictest33-21ksoftirqd/208:40:012
21595993733,2cyclictest33-21ksoftirqd/208:00:002
21595993732,3cyclictest33-21ksoftirqd/211:10:002
21595993732,3cyclictest33-21ksoftirqd/209:35:002
21595993731,4cyclictest33-21ksoftirqd/212:00:002
21595993726,10cyclictest33-21ksoftirqd/207:40:182
21595993723,4cyclictest33-21ksoftirqd/207:30:162
21596993630,4cyclictest41-21ksoftirqd/311:45:503
21595993631,3cyclictest33-21ksoftirqd/209:45:002
21595993630,4cyclictest33-21ksoftirqd/212:20:352
21595993630,4cyclictest33-21ksoftirqd/209:46:062
21595993630,4cyclictest33-21ksoftirqd/209:21:352
2159599362,7cyclictest33-21ksoftirqd/207:25:002
2159599362,4cyclictest33-21ksoftirqd/212:20:002
21595993624,10cyclictest33-21ksoftirqd/208:25:162
21595993615,12cyclictest33-21ksoftirqd/209:35:282
21596993530,3cyclictest41-21ksoftirqd/308:31:033
21596993529,4cyclictest41-21ksoftirqd/312:37:013
21596993529,4cyclictest41-21ksoftirqd/311:53:413
21596993529,4cyclictest41-21ksoftirqd/311:05:093
21596993529,4cyclictest41-21ksoftirqd/310:36:453
21596993529,4cyclictest41-21ksoftirqd/308:08:553
21595993531,3cyclictest33-21ksoftirqd/208:05:232
21595993531,2cyclictest33-21ksoftirqd/207:20:002
21595993531,2cyclictest33-21ksoftirqd/207:20:002
21595993531,2cyclictest29789-21sort08:35:002
21595993530,3cyclictest33-21ksoftirqd/210:20:442
21595993530,3cyclictest33-21ksoftirqd/210:10:552
21595993529,4cyclictest33-21ksoftirqd/212:38:452
21595993529,4cyclictest33-21ksoftirqd/211:04:292
136991350,0ptp4l401ktimersoftd/309:50:133
21596993429,3cyclictest41-21ksoftirqd/311:24:453
21596993429,3cyclictest18924-21sshd11:30:443
21596993428,4cyclictest41-21ksoftirqd/312:11:103
21596993428,4cyclictest41-21ksoftirqd/311:01:573
21596993428,4cyclictest41-21ksoftirqd/310:25:073
21596993428,4cyclictest41-21ksoftirqd/308:57:293
21596993428,4cyclictest41-21ksoftirqd/308:14:443
21595993429,3cyclictest33-21ksoftirqd/211:50:202
21595993429,3cyclictest33-21ksoftirqd/210:05:002
21595993429,3cyclictest33-21ksoftirqd/209:20:012
21595993429,3cyclictest33-21ksoftirqd/208:50:192
21595993428,4cyclictest33-21ksoftirqd/210:57:072
21595993428,4cyclictest33-21ksoftirqd/210:27:382
21596993328,3cyclictest41-21ksoftirqd/309:12:573
21596993327,4cyclictest41-21ksoftirqd/312:24:183
21596993327,4cyclictest41-21ksoftirqd/310:46:413
21596993327,4cyclictest41-21ksoftirqd/308:46:543
21596993327,4cyclictest41-21ksoftirqd/307:55:353
21596993327,4cyclictest41-21ksoftirqd/307:41:113
21596993327,4cyclictest41-21ksoftirqd/307:16:393
21596993327,4cyclictest41-21ksoftirqd/307:16:393
21595993329,3cyclictest33-21ksoftirqd/210:50:172
21595993328,3cyclictest33-21ksoftirqd/211:12:302
21595993328,3cyclictest33-21ksoftirqd/208:10:542
21595993327,4cyclictest33-21ksoftirqd/209:10:562
21595993326,4cyclictest33-21ksoftirqd/211:23:592
2159599331,4cyclictest33-21ksoftirqd/212:30:182
21596993227,3cyclictest41-21ksoftirqd/310:15:333
21596993227,3cyclictest41-21ksoftirqd/308:17:003
21596993226,4cyclictest41-21ksoftirqd/312:30:513
21596993226,4cyclictest41-21ksoftirqd/310:01:003
21596993226,4cyclictest41-21ksoftirqd/308:41:483
21596993226,4cyclictest41-21ksoftirqd/308:27:203
21596993226,4cyclictest41-21ksoftirqd/307:26:353
2159599325,10cyclictest121rcu_preempt12:25:202
21595993227,3cyclictest33-21ksoftirqd/210:30:272
21595993227,3cyclictest33-21ksoftirqd/208:19:592
136991320,28ptp4l41-21ksoftirqd/310:20:423
136991320,0ptp4l401ktimersoftd/309:00:103
136991320,0ptp4l401ktimersoftd/309:00:103
136991320,0ptp4l401ktimersoftd/308:00:163
21596993126,4cyclictest41-21ksoftirqd/309:22:333
21596993126,3cyclictest41-21ksoftirqd/312:06:043
21596993125,4cyclictest41-21ksoftirqd/311:18:273
21596993125,4cyclictest41-21ksoftirqd/309:40:583
21596993125,4cyclictest41-21ksoftirqd/308:36:033
21595993128,2cyclictest33-21ksoftirqd/211:45:012
21595993127,2cyclictest33-21ksoftirqd/207:50:192
21595993126,3cyclictest33-21ksoftirqd/209:00:172
21595993126,3cyclictest33-21ksoftirqd/209:00:172
21595993125,4cyclictest33-21ksoftirqd/211:16:572
21595993124,5cyclictest33-21ksoftirqd/207:10:202
21595993124,4cyclictest33-21ksoftirqd/212:05:162
21595993117,5cyclictest33-21ksoftirqd/210:40:002
136991310,0ptp4l401ktimersoftd/310:50:373
21596993025,3cyclictest41-21ksoftirqd/307:48:023
21596993024,4cyclictest41-21ksoftirqd/312:26:103
21596993024,4cyclictest41-21ksoftirqd/312:16:513
21596993024,4cyclictest41-21ksoftirqd/310:30:443
21596993024,4cyclictest41-21ksoftirqd/310:07:213
21596993024,3cyclictest41-21ksoftirqd/312:03:483
21595993020,9cyclictest33-21ksoftirqd/210:15:252
136991300,9ptp4l401ktimersoftd/309:31:193
136991300,0ptp4l401ktimersoftd/311:37:203
136991300,0ptp4l401ktimersoftd/311:25:433
136991300,0ptp4l401ktimersoftd/310:12:163
136991300,0ptp4l401ktimersoftd/307:33:133
21596992923,4cyclictest41-21ksoftirqd/308:20:513
21596992923,4cyclictest41-21ksoftirqd/307:51:473
21595992924,3cyclictest33-21ksoftirqd/210:05:162
136991290,0ptp4l401ktimersoftd/310:40:263
21596992822,4cyclictest41-21ksoftirqd/309:18:253
21596992722,3cyclictest41-21ksoftirqd/310:56:073
21596992722,3cyclictest41-21ksoftirqd/309:29:273
21596992722,3cyclictest41-21ksoftirqd/307:36:223
21596992520,3cyclictest41-21ksoftirqd/311:57:543
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional