You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-10 - 18:36
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Thu Jul 10, 2025 12:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
98532231167,21sleep10-21swapper/107:06:271
137391207174,22phc2sys0-21swapper/307:08:453
100792205172,22sleep20-21swapper/207:09:262
80032204171,22sleep00-21swapper/007:05:110
1948821840,6sleep11042599cyclictest11:55:191
2505921620,7sleep11042599cyclictest08:45:191
10425996224,9cyclictest25-21ksoftirqd/109:35:151
10425996224,9cyclictest25-21ksoftirqd/109:35:151
10425996127,9cyclictest25-21ksoftirqd/108:40:011
137291600,1ptp4l401ktimersoftd/308:17:083
1042499598,6cyclictest29786-21systemd-cgroups10:01:230
10425995828,9cyclictest25-21ksoftirqd/108:55:161
10425995828,4cyclictest25-21ksoftirqd/112:20:141
10425995728,4cyclictest25-21ksoftirqd/112:00:241
10425995726,9cyclictest25-21ksoftirqd/111:10:141
10425995722,9cyclictest25-21ksoftirqd/109:00:151
10425995629,9cyclictest25-21ksoftirqd/108:25:001
10425995628,10cyclictest25-21ksoftirqd/109:20:161
1042599556,10cyclictest25-21ksoftirqd/110:24:591
10425995523,11cyclictest25-21ksoftirqd/108:50:161
137291540,1ptp4l401ktimersoftd/307:26:423
123252540,3sleep30-21swapper/309:25:303
10425995423,9cyclictest25-21ksoftirqd/112:30:001
137291530,1ptp4l401ktimersoftd/308:29:113
10425995322,5cyclictest25-21ksoftirqd/108:40:131
1042599530,7cyclictest25-21ksoftirqd/111:40:001
1042599530,7cyclictest25-21ksoftirqd/109:50:011
1042599530,5cyclictest25-21ksoftirqd/109:10:001
137291520,7ptp4l401ktimersoftd/311:04:083
1042599522,6cyclictest25-21ksoftirqd/111:45:271
1042499528,7cyclictest6326-21/usr/sbin/munin11:30:150
1042599516,9cyclictest25-21ksoftirqd/110:40:261
1042599514,9cyclictest25-21ksoftirqd/107:20:191
1042599514,9cyclictest25-21ksoftirqd/107:20:191
1042599513,9cyclictest25-21ksoftirqd/107:45:191
1042599513,8cyclictest25-21ksoftirqd/112:35:211
10425995120,9cyclictest25-21ksoftirqd/109:40:201
10424995111,6cyclictest9-21ksoftirqd/010:53:150
10424995111,6cyclictest9-21ksoftirqd/008:25:260
10424995110,6cyclictest9-21ksoftirqd/009:25:220
137291500,1ptp4l401ktimersoftd/308:02:393
1042599504,8cyclictest25-21ksoftirqd/107:15:161
1042599496,4cyclictest25-21ksoftirqd/111:15:281
1042599493,5cyclictest25-21ksoftirqd/110:05:251
1042599493,10cyclictest25-21ksoftirqd/107:55:001
1042599492,9cyclictest25-21ksoftirqd/110:15:221
1042599492,9cyclictest25-21ksoftirqd/107:35:231
1042599492,6cyclictest25-21ksoftirqd/109:55:261
10425994926,3cyclictest25-21ksoftirqd/111:25:201
1042599491,7cyclictest25-21ksoftirqd/109:30:251
1042599490,7cyclictest25-21ksoftirqd/110:45:261
1042499496,7cyclictest16953-21if_enp4s008:30:160
1042499493,11cyclictest16730-21timerandwakeup07:20:260
1042499493,11cyclictest16730-21timerandwakeup07:20:260
10424994911,5cyclictest9-21ksoftirqd/012:18:010
10424994910,6cyclictest9-21ksoftirqd/009:57:120
10424994910,6cyclictest9-21ksoftirqd/007:45:370
1042599486,3cyclictest25-21ksoftirqd/111:20:141
1042599483,9cyclictest25-21ksoftirqd/111:50:021
1042599483,6cyclictest25-21ksoftirqd/108:30:141
1042599480,7cyclictest25-21ksoftirqd/109:25:291
1042599480,6cyclictest25-21ksoftirqd/112:30:161
1042599480,6cyclictest25-21ksoftirqd/107:10:141
1042499485,6cyclictest24562-21cstates11:00:140
10424994812,6cyclictest9-21ksoftirqd/011:15:210
10424994810,5cyclictest9-21ksoftirqd/012:04:580
1042599475,8cyclictest25-21ksoftirqd/108:15:221
1042599474,9cyclictest25-21ksoftirqd/110:29:591
1042599473,9cyclictest25-21ksoftirqd/107:30:171
1042599472,9cyclictest25-21ksoftirqd/111:40:241
1042599470,5cyclictest25-21ksoftirqd/112:10:251
1042599470,5cyclictest25-21ksoftirqd/110:40:011
1042599470,5cyclictest25-21ksoftirqd/110:40:011
10424994710,5cyclictest9-21ksoftirqd/008:05:170
1042599465,9cyclictest25-21ksoftirqd/110:50:201
1042599464,9cyclictest25-21ksoftirqd/110:35:011
1042599464,9cyclictest25-21ksoftirqd/108:00:171
1042599463,9cyclictest25-21ksoftirqd/109:10:171
1042599463,8cyclictest25-21ksoftirqd/111:09:591
1042599462,9cyclictest25-21ksoftirqd/110:00:271
1042599460,6cyclictest25-21ksoftirqd/111:30:391
1042599460,12cyclictest25-21ksoftirqd/107:40:211
1042499468,5cyclictest9-21ksoftirqd/008:10:240
1042499466,7cyclictest23183-21cstates09:50:160
1042499464,7cyclictest17110-21latency_hist10:45:000
149422450,2sleep20-21swapper/210:40:132
1042599452,6cyclictest25-21ksoftirqd/107:55:261
1042599451,6cyclictest25-21ksoftirqd/110:55:141
1042599450,8cyclictest25-21ksoftirqd/112:05:251
1042599450,7cyclictest25-21ksoftirqd/109:50:171
1042599450,6cyclictest25-21ksoftirqd/108:05:141
1042599450,6cyclictest19315-21grep07:25:281
1042499457,8cyclictest7503-21cat12:40:000
10424994540,3cyclictest26871-21cron07:45:000
1042499452,5cyclictest0-21swapper/009:10:280
10424994511,8cyclictest9-21ksoftirqd/011:06:120
1042499451,11cyclictest9027-21fschecks_count11:35:180
10424994510,5cyclictest9-21ksoftirqd/007:37:340
1042599443,10cyclictest25-21ksoftirqd/108:25:271
1042599440,7cyclictest25-21ksoftirqd/112:15:161
1042599440,6cyclictest25-21ksoftirqd/109:15:151
1042499446,6cyclictest9614-21/usr/sbin/munin09:20:220
1042499445,6cyclictest30659-21cat11:10:270
10424994412,8cyclictest9-21ksoftirqd/007:30:190
1042499441,11cyclictest19372-21df_inode08:35:160
10424994410,5cyclictest9-21ksoftirqd/010:11:390
137291430,0ptp4l401ktimersoftd/310:19:183
137291430,0ptp4l401ktimersoftd/308:35:173
1042599430,12cyclictest25-21ksoftirqd/111:00:121
1042499439,5cyclictest9-21ksoftirqd/008:48:150
1042499439,5cyclictest9-21ksoftirqd/007:53:070
1042499439,3cyclictest9-21ksoftirqd/008:00:260
1042499437,8cyclictest2762-21/usr/sbin/munin10:15:130
1042499436,6cyclictest5985-21irqrtprio10:20:190
1042499436,6cyclictest24406-21/usr/sbin/munin12:05:230
1042499434,6cyclictest17913-21cat09:40:010
1042499434,6cyclictest17913-21cat09:40:010
137291420,0ptp4l401ktimersoftd/310:31:263
137291420,0ptp4l401ktimersoftd/309:10:183
1042599422,10cyclictest25-21ksoftirqd/108:10:251
1042599420,6cyclictest25-21ksoftirqd/110:10:181
1042499427,4cyclictest9-21ksoftirqd/012:22:250
1042499426,6cyclictest16271-21cat11:50:140
137291410,0ptp4l401ktimersoftd/312:15:513
137291410,0ptp4l401ktimersoftd/309:59:563
1042499418,5cyclictest9-21ksoftirqd/007:59:250
1042499416,7cyclictest2089-21/usr/sbin/munin09:05:220
1042499408,5cyclictest9-21ksoftirqd/012:25:540
1042499407,5cyclictest9-21ksoftirqd/008:22:280
1042499406,6cyclictest13055-21expr07:15:160
1042499406,6cyclictest10916-21awk08:15:280
1042499406,5cyclictest30078-21sendmail_mailtr08:55:270
10427993931,5cyclictest41-21ksoftirqd/307:35:333
1042499398,5cyclictest9-21ksoftirqd/007:28:560
1042499396,4cyclictest9-21ksoftirqd/010:45:200
10424993915,3cyclictest9-21ksoftirqd/010:29:400
10426993833,3cyclictest1285-21runrttasks10:10:482
1042499385,6cyclictest12542-21ptp4l-jitter11:40:220
10427993732,3cyclictest19363-21latency_hist10:50:013
10426993731,3cyclictest22119-21cron07:35:002
1042499377,4cyclictest9-21ksoftirqd/012:30:250
10424993715,7cyclictest9-21ksoftirqd/011:20:350
42098360,5rtkit-daemon29167-21phc2sys-jitter10:00:252
137291360,0ptp4l401ktimersoftd/307:20:163
137291360,0ptp4l401ktimersoftd/307:20:153
10427993631,3cyclictest41-21ksoftirqd/312:11:413
10427993630,4cyclictest41-21ksoftirqd/311:54:253
10427993629,4cyclictest41-21ksoftirqd/307:41:553
1042499367,3cyclictest9-21ksoftirqd/009:16:290
10427993530,3cyclictest41-21ksoftirqd/309:50:013
10427993529,4cyclictest41-21ksoftirqd/309:51:173
10427993529,4cyclictest41-21ksoftirqd/309:00:583
10427993529,4cyclictest41-21ksoftirqd/308:51:283
10427993529,4cyclictest41-21ksoftirqd/308:09:073
10426993529,4cyclictest33-21ksoftirqd/212:34:152
10426993529,4cyclictest33-21ksoftirqd/208:37:262
1042499355,6cyclictest21617-21cat09:45:230
1042499354,6cyclictest9-21ksoftirqd/008:40:230
1042499354,6cyclictest14807-21sshd09:31:260
10424993529,4cyclictest9-21ksoftirqd/007:13:200
1042499350,15cyclictest32146-21runrttasks10:06:180
42098340,2rtkit-daemon0-21swapper/210:33:312
10427993428,4cyclictest41-21ksoftirqd/310:55:513
10427993428,4cyclictest41-21ksoftirqd/310:13:403
10427993428,4cyclictest41-21ksoftirqd/310:04:453
10427993428,4cyclictest41-21ksoftirqd/309:42:173
10427993428,4cyclictest41-21ksoftirqd/308:49:023
10427993428,4cyclictest41-21ksoftirqd/307:13:593
10427993427,5cyclictest41-21ksoftirqd/310:26:483
10426993428,4cyclictest33-21ksoftirqd/211:40:362
10426993428,4cyclictest33-21ksoftirqd/211:03:252
10426993428,4cyclictest33-21ksoftirqd/210:24:022
10426993428,4cyclictest33-21ksoftirqd/209:36:082
10426993428,4cyclictest33-21ksoftirqd/209:36:082
10426993428,4cyclictest33-21ksoftirqd/207:20:442
10426993428,4cyclictest33-21ksoftirqd/207:20:442
10424993428,4cyclictest9-21ksoftirqd/011:45:110
10427993327,4cyclictest41-21ksoftirqd/312:26:513
10427993327,4cyclictest41-21ksoftirqd/311:06:103
10427993327,4cyclictest41-21ksoftirqd/309:07:043
10427993327,4cyclictest41-21ksoftirqd/307:17:443
10426993327,4cyclictest33-21ksoftirqd/212:03:072
10426993327,4cyclictest33-21ksoftirqd/209:32:262
10426993327,4cyclictest33-21ksoftirqd/208:13:522
10426993327,4cyclictest33-21ksoftirqd/207:37:172
10426993326,4cyclictest33-21ksoftirqd/209:13:012
10424993327,4cyclictest9-21ksoftirqd/011:58:390
1042499330,10cyclictest13777-21timerandwakeup10:35:270
1042499330,10cyclictest13777-21timerandwakeup10:35:270
10427993228,3cyclictest41-21ksoftirqd/312:20:453
10427993227,3cyclictest41-21ksoftirqd/311:20:053
10427993227,3cyclictest41-21ksoftirqd/311:19:023
10427993226,4cyclictest41-21ksoftirqd/312:06:563
10427993226,4cyclictest41-21ksoftirqd/311:34:383
10427993226,4cyclictest41-21ksoftirqd/309:31:343
10426993227,3cyclictest33-21ksoftirqd/211:23:112
10426993227,3cyclictest33-21ksoftirqd/210:28:472
10426993226,4cyclictest33-21ksoftirqd/212:15:102
10426993226,4cyclictest33-21ksoftirqd/210:51:502
10426993226,4cyclictest33-21ksoftirqd/209:00:132
10426993225,5cyclictest33-21ksoftirqd/207:40:102
10424993228,3cyclictest9-21ksoftirqd/010:30:140
10424993227,3cyclictest9-21ksoftirqd/010:55:450
10424993226,4cyclictest9-21ksoftirqd/011:28:020
10424993226,4cyclictest9-21ksoftirqd/008:52:130
2632723125,2sleep233-21ksoftirqd/208:50:152
137291310,0ptp4l401ktimersoftd/311:11:413
137291310,0ptp4l401ktimersoftd/310:35:313
137291310,0ptp4l401ktimersoftd/310:35:313
137291310,0ptp4l401ktimersoftd/307:55:143
10427993126,3cyclictest41-21ksoftirqd/312:34:303
10427993126,3cyclictest41-21ksoftirqd/311:59:363
10427993125,4cyclictest41-21ksoftirqd/312:01:113
10427993125,4cyclictest41-21ksoftirqd/311:44:373
10427993125,4cyclictest41-21ksoftirqd/309:19:203
10427993124,4cyclictest41-21ksoftirqd/311:25:363
10426993127,3cyclictest33-21ksoftirqd/207:10:052
10426993125,4cyclictest33-21ksoftirqd/212:10:532
10426993125,4cyclictest33-21ksoftirqd/211:36:592
10426993125,4cyclictest33-21ksoftirqd/210:47:562
10426993125,4cyclictest33-21ksoftirqd/209:22:442
10426993125,4cyclictest33-21ksoftirqd/209:08:112
10426993125,4cyclictest33-21ksoftirqd/208:42:242
10426993125,4cyclictest33-21ksoftirqd/208:16:322
10426993125,4cyclictest33-21ksoftirqd/207:56:222
10426993125,3cyclictest33-21ksoftirqd/211:33:252
10424993126,3cyclictest9-21ksoftirqd/009:03:510
137291300,0ptp4l401ktimersoftd/311:36:253
137291300,0ptp4l401ktimersoftd/310:08:233
10427993026,3cyclictest41-21ksoftirqd/307:45:033
10427993025,3cyclictest41-21ksoftirqd/311:48:313
10427993025,3cyclictest41-21ksoftirqd/310:40:123
10427993025,3cyclictest41-21ksoftirqd/309:22:103
10427993024,4cyclictest41-21ksoftirqd/312:35:413
10427993024,4cyclictest41-21ksoftirqd/309:38:483
10427993024,4cyclictest41-21ksoftirqd/309:38:483
10427993024,4cyclictest41-21ksoftirqd/308:22:473
10427993024,4cyclictest41-21ksoftirqd/307:51:263
10426993025,3cyclictest33-21ksoftirqd/211:29:072
10426993025,3cyclictest33-21ksoftirqd/208:57:262
10426993025,3cyclictest33-21ksoftirqd/208:33:252
10426993025,3cyclictest33-21ksoftirqd/207:29:472
10426993025,3cyclictest33-21ksoftirqd/207:20:002
10426993024,4cyclictest33-21ksoftirqd/211:10:512
10426993024,4cyclictest33-21ksoftirqd/209:18:582
10426993024,4cyclictest33-21ksoftirqd/208:47:252
10426993024,4cyclictest33-21ksoftirqd/208:28:032
10426993024,4cyclictest33-21ksoftirqd/208:09:182
10426993024,4cyclictest33-21ksoftirqd/207:54:582
10426993023,4cyclictest33-21ksoftirqd/209:52:152
137291290,0ptp4l401ktimersoftd/310:50:233
10427992924,3cyclictest41-21ksoftirqd/308:59:193
10427992924,3cyclictest41-21ksoftirqd/308:30:033
10427992923,4cyclictest41-21ksoftirqd/307:32:123
10426992924,3cyclictest33-21ksoftirqd/212:23:472
10426992924,3cyclictest33-21ksoftirqd/212:06:462
10426992924,3cyclictest33-21ksoftirqd/211:54:532
10426992924,3cyclictest33-21ksoftirqd/211:18:402
10426992924,3cyclictest33-21ksoftirqd/211:09:252
10426992924,3cyclictest33-21ksoftirqd/210:57:112
10426992924,3cyclictest33-21ksoftirqd/210:36:492
10426992924,3cyclictest33-21ksoftirqd/210:36:482
10426992924,3cyclictest33-21ksoftirqd/209:40:522
1042499295,6cyclictest9-21ksoftirqd/009:40:230
1042499290,11cyclictest1285-21runrttasks12:12:300
10427992823,3cyclictest41-21ksoftirqd/308:41:053
10427992823,3cyclictest41-21ksoftirqd/308:11:403
10426992823,3cyclictest33-21ksoftirqd/211:47:422
10426992823,3cyclictest33-21ksoftirqd/209:26:132
10426992823,3cyclictest33-21ksoftirqd/208:23:082
10426992621,3cyclictest33-21ksoftirqd/210:17:412
10426992620,4cyclictest33-21ksoftirqd/212:26:282
10426992620,4cyclictest33-21ksoftirqd/209:59:182
10426992620,4cyclictest33-21ksoftirqd/208:02:042
10426992620,3cyclictest33-21ksoftirqd/207:46:152
10426992520,3cyclictest33-21ksoftirqd/211:56:022
10426992520,3cyclictest33-21ksoftirqd/210:08:312
137291240,0ptp4l401ktimersoftd/310:23:343
10426992318,3cyclictest33-21ksoftirqd/209:48:372
10426992317,4cyclictest33-21ksoftirqd/212:36:052
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional