You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-12 - 00:00
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Thu Dec 11, 2025 12:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
136691229164,22phc2sys0-21swapper/307:07:443
59092206173,22sleep10-21swapper/107:09:401
59082206172,23sleep00-21swapper/007:09:380
57232206172,23sleep20-21swapper/207:07:142
2053321670,6sleep2628699cyclictest09:54:592
59382162123,14sleep20-21swapper/207:10:012
128421410,7sleep0628499cyclictest12:35:250
196972690,2sleep30-21swapper/307:35:233
6284996212,17cyclictest4569-21awk08:10:270
166272580,5sleep116629-21irqrtprio09:45:211
133391570,9getstats0-21swapper/312:26:033
133391570,9getstats0-21swapper/312:26:033
628499520,3cyclictest26464-21runrttasks08:58:170
628499510,3cyclictest21371-21seq08:46:210
133391470,1getstats0-21swapper/307:30:593
628499430,3cyclictest11871-21seq08:26:120
51698430,7rtkit-daemon0-21swapper/109:53:511
136591430,0ptp4l401ktimersoftd/309:49:173
136591430,0ptp4l401ktimersoftd/309:09:573
628499425,23cyclictest26981-21seq12:20:440
136591420,0ptp4l401ktimersoftd/311:34:433
628499416,22cyclictest22256-21seq12:11:060
136591410,0ptp4l401ktimersoftd/310:10:003
136591410,0ptp4l401ktimersoftd/307:51:463
628499400,4cyclictest32056-21runrttasks10:16:330
628499400,3cyclictest13239-21taskset09:39:090
628499395,21cyclictest18048-21seq09:49:520
628499391,2cyclictest0-21swapper/008:31:260
628499390,3cyclictest32237-21seq08:03:170
628499390,3cyclictest1307-21runrttasks10:26:150
628499381,2cyclictest15410-21seq11:59:430
628499371,2cyclictest12870-21seq11:52:280
6287993614,2cyclictest27344-21awk12:25:013
628499364,19cyclictest20406-21seq07:38:500
628499361,3cyclictest13048-21runrttasks07:20:290
628499360,3cyclictest17683-21seq12:03:120
6286993524,9cyclictest33-21ksoftirqd/211:08:232
6286993524,9cyclictest33-21ksoftirqd/211:08:232
6285993529,4cyclictest25-21ksoftirqd/110:40:081
6285993529,3cyclictest25-21ksoftirqd/107:30:001
6285993528,4cyclictest25-21ksoftirqd/110:13:101
6284993529,4cyclictest9-21ksoftirqd/007:44:120
628499350,3cyclictest10355-21runrttasks11:45:380
6287993413,3cyclictest19600-21ls11:00:133
6287993412,4cyclictest31114-21ls12:30:203
6287993411,3cyclictest25320-21sed07:50:013
6286993428,4cyclictest33-21ksoftirqd/211:02:312
628599347,3cyclictest25-21ksoftirqd/111:55:171
6285993429,3cyclictest25-21ksoftirqd/111:50:201
6284993428,4cyclictest9-21ksoftirqd/008:23:310
6284993413,18cyclictest1152-21sed08:05:190
6284993413,18cyclictest1152-21sed08:05:180
628499340,3cyclictest27339-21runrttasks07:51:260
628499340,3cyclictest20128-21seq09:51:080
628499340,3cyclictest18954-21runrttasks10:56:210
6287993327,4cyclictest41-21ksoftirqd/310:43:263
6287993327,4cyclictest41-21ksoftirqd/310:26:273
6287993313,18cyclictest24478-21/usr/sbin/munin08:55:183
628699331,30cyclictest25185-21cron10:05:012
628699331,30cyclictest25185-21cron10:05:012
6285993328,3cyclictest25-21ksoftirqd/108:20:451
6284993327,4cyclictest9-21ksoftirqd/008:35:590
6284993326,5cyclictest9-21ksoftirqd/007:18:400
6284993314,16cyclictest29403-21timerwakeupswit10:10:260
6284993314,16cyclictest22196-21sed11:05:140
6284993314,16cyclictest22196-21sed11:05:140
136591330,1ptp4l391rcuc/311:40:313
6287993226,4cyclictest41-21ksoftirqd/312:36:123
6287993226,4cyclictest41-21ksoftirqd/312:05:033
6287993226,4cyclictest41-21ksoftirqd/308:35:063
6287993226,4cyclictest41-21ksoftirqd/308:02:043
6287993211,3cyclictest10990-21sed08:25:203
628799320,3cyclictest8450-1kworker/3:1H09:30:003
6286993228,3cyclictest33-21ksoftirqd/212:20:182
6286993226,4cyclictest33-21ksoftirqd/211:30:132
6286993226,4cyclictest33-21ksoftirqd/210:09:412
6286993226,3cyclictest33-21ksoftirqd/209:20:202
6286993225,5cyclictest33-21ksoftirqd/207:20:432
628699321,29cyclictest537-1kworker/2:0H11:41:162
6285993228,3cyclictest25-21ksoftirqd/108:15:191
6285993228,2cyclictest25-21ksoftirqd/112:19:591
6285993227,3cyclictest25-21ksoftirqd/111:15:191
6285993227,3cyclictest25-21ksoftirqd/110:56:231
6285993227,3cyclictest25-21ksoftirqd/110:54:591
6285993227,3cyclictest25-21ksoftirqd/110:25:011
6285993227,3cyclictest25-21ksoftirqd/108:10:131
6285993227,3cyclictest25-21ksoftirqd/108:10:011
6285993227,3cyclictest25-21ksoftirqd/108:10:011
6285993227,2cyclictest25-21ksoftirqd/108:05:001
6285993226,4cyclictest25-21ksoftirqd/112:11:311
6285993226,4cyclictest25-21ksoftirqd/110:48:341
6285993226,4cyclictest25-21ksoftirqd/108:50:081
628499327,22cyclictest19823-21df_abs11:00:150
6284993226,4cyclictest9-21ksoftirqd/009:01:180
51698320,1rtkit-daemon0-21swapper/010:30:340
6287993125,4cyclictest41-21ksoftirqd/311:16:413
6287993125,4cyclictest41-21ksoftirqd/310:56:153
6287993125,4cyclictest41-21ksoftirqd/310:07:523
6287993125,4cyclictest41-21ksoftirqd/309:54:213
6287993125,4cyclictest41-21ksoftirqd/308:19:003
6286993126,3cyclictest33-21ksoftirqd/208:50:452
6286993126,3cyclictest33-21ksoftirqd/207:50:182
6286993125,4cyclictest33-21ksoftirqd/210:33:552
6286993125,4cyclictest33-21ksoftirqd/209:49:342
6286993125,4cyclictest33-21ksoftirqd/209:41:232
6286993125,4cyclictest33-21ksoftirqd/209:16:052
6286993125,4cyclictest33-21ksoftirqd/208:48:042
6286993125,4cyclictest33-21ksoftirqd/207:47:592
6286993120,9cyclictest33-21ksoftirqd/207:30:242
6286993118,10cyclictest33-21ksoftirqd/211:55:162
6285993127,2cyclictest25-21ksoftirqd/112:35:211
6285993127,2cyclictest25-21ksoftirqd/108:50:001
6285993127,2cyclictest25-21ksoftirqd/107:45:011
6285993126,3cyclictest25-21ksoftirqd/110:35:151
6285993126,3cyclictest25-21ksoftirqd/109:10:201
6285993126,3cyclictest25-21ksoftirqd/107:15:001
6285993125,4cyclictest25-21ksoftirqd/111:06:531
6285993125,4cyclictest25-21ksoftirqd/111:06:531
6285993125,4cyclictest25-21ksoftirqd/110:33:551
6285993125,4cyclictest25-21ksoftirqd/110:27:011
6285993125,4cyclictest25-21ksoftirqd/109:26:541
6285993125,4cyclictest25-21ksoftirqd/107:47:581
6285993121,8cyclictest25-21ksoftirqd/109:02:241
628499318,20cyclictest364-21expr10:20:140
6284993126,3cyclictest9-21ksoftirqd/011:41:220
6284993125,4cyclictest9-21ksoftirqd/011:39:130
6284993125,4cyclictest9-21ksoftirqd/011:28:140
6284993125,4cyclictest9-21ksoftirqd/011:15:060
6284993125,4cyclictest9-21ksoftirqd/007:30:400
6284993115,14cyclictest6963-21hddtemp_smartct09:25:170
136591310,1ptp4l0-21swapper/308:11:593
136591310,0ptp4l401ktimersoftd/308:48:253
6287993026,2cyclictest136591ptp4l07:25:393
6287993025,3cyclictest41-21ksoftirqd/310:53:313
6287993025,3cyclictest41-21ksoftirqd/309:13:493
6287993024,4cyclictest41-21ksoftirqd/311:07:393
6287993024,4cyclictest41-21ksoftirqd/311:07:393
6287993024,4cyclictest41-21ksoftirqd/309:38:533
6287993024,4cyclictest41-21ksoftirqd/308:05:573
6287993024,4cyclictest41-21ksoftirqd/308:05:573
6287993013,3cyclictest10402-21ls09:30:293
6287993011,3cyclictest29356-21cat07:55:273
6287993010,3cyclictest18373-21phc2sys08:40:253
6287993010,3cyclictest13606-21sh11:55:153
628699303,26cyclictest0-21swapper/210:55:252
6286993026,3cyclictest33-21ksoftirqd/208:00:412
6286993025,3cyclictest33-21ksoftirqd/212:34:552
6286993025,3cyclictest33-21ksoftirqd/212:16:472
6286993025,3cyclictest33-21ksoftirqd/207:41:552
6286993024,4cyclictest33-21ksoftirqd/212:01:502
6286993024,4cyclictest33-21ksoftirqd/211:36:592
6286993024,4cyclictest33-21ksoftirqd/211:12:222
6286993024,4cyclictest33-21ksoftirqd/210:13:062
6286993024,4cyclictest33-21ksoftirqd/208:32:232
6286993023,4cyclictest33-21ksoftirqd/208:40:422
6286993019,9cyclictest33-21ksoftirqd/208:05:282
6286993019,9cyclictest33-21ksoftirqd/208:05:272
6286993018,9cyclictest33-21ksoftirqd/211:45:162
6285993025,4cyclictest25-21ksoftirqd/110:15:551
6285993025,3cyclictest25-21ksoftirqd/112:20:191
6285993025,3cyclictest25-21ksoftirqd/109:40:541
6285993025,3cyclictest25-21ksoftirqd/108:35:281
6285993024,4cyclictest25-21ksoftirqd/112:05:571
6285993024,4cyclictest25-21ksoftirqd/111:37:371
6285993024,4cyclictest25-21ksoftirqd/108:58:191
6285993023,5cyclictest25-21ksoftirqd/112:25:251
6285993023,5cyclictest25-21ksoftirqd/112:25:251
628499307,20cyclictest24091-21latency07:45:200
6284993025,3cyclictest9-21ksoftirqd/009:30:110
6284993025,3cyclictest9-21ksoftirqd/009:05:440
628499300,3cyclictest26820-21/usr/sbin/munin10:05:260
256662300,3sleep10-21swapper/111:10:251
136591300,0ptp4l401ktimersoftd/311:38:263
628799290,5cyclictest26365-21cron11:15:003
6286992924,3cyclictest33-21ksoftirqd/207:26:272
6286992923,4cyclictest33-21ksoftirqd/212:38:242
6286992923,4cyclictest33-21ksoftirqd/211:19:582
6286992923,4cyclictest33-21ksoftirqd/208:23:382
6286992923,4cyclictest33-21ksoftirqd/207:15:462
6286992917,10cyclictest33-21ksoftirqd/208:10:272
628599296,3cyclictest121rcu_preempt12:05:001
6285992925,3cyclictest25-21ksoftirqd/109:35:191
6285992924,3cyclictest25-21ksoftirqd/112:30:281
6285992924,3cyclictest25-21ksoftirqd/111:45:001
6285992924,3cyclictest25-21ksoftirqd/108:30:181
6285992923,4cyclictest25-21ksoftirqd/111:25:411
6285992923,4cyclictest25-21ksoftirqd/110:02:211
6285992923,4cyclictest25-21ksoftirqd/110:02:211
6285992923,4cyclictest25-21ksoftirqd/109:22:171
6285992923,4cyclictest25-21ksoftirqd/107:39:511
628599292,2cyclictest121rcu_preempt09:15:161
6285992922,4cyclictest25-21ksoftirqd/109:30:121
628599290,2cyclictest121rcu_preempt08:40:261
628499296,20cyclictest1318-21/usr/sbin/munin11:30:200
6284992924,3cyclictest9-21ksoftirqd/012:30:390
6284992924,3cyclictest9-21ksoftirqd/011:12:000
6284992924,3cyclictest9-21ksoftirqd/010:38:330
6284992924,3cyclictest9-21ksoftirqd/008:43:570
6284992924,3cyclictest9-21ksoftirqd/008:19:230
6284992923,4cyclictest9-21ksoftirqd/011:21:200
6284992923,4cyclictest9-21ksoftirqd/010:43:480
6284992923,4cyclictest9-21ksoftirqd/007:58:150
6284992910,16cyclictest18081-21apt12:05:140
136591290,9ptp4l401ktimersoftd/307:10:563
136591290,0ptp4l401ktimersoftd/307:20:273
6287992823,3cyclictest41-21ksoftirqd/312:03:543
6287992823,3cyclictest41-21ksoftirqd/311:26:033
6287992823,3cyclictest41-21ksoftirqd/308:54:493
6287992823,3cyclictest41-21ksoftirqd/307:43:433
6287992822,4cyclictest41-21ksoftirqd/310:38:133
6287992822,4cyclictest41-21ksoftirqd/310:19:013
6287992822,4cyclictest41-21ksoftirqd/309:00:583
6287992810,3cyclictest21789-21sendmail_mailqu12:10:243
628799280,13cyclictest13066-21cron11:55:003
6286992823,3cyclictest33-21ksoftirqd/208:35:192
6286992822,4cyclictest33-21ksoftirqd/211:29:402
6286992822,4cyclictest33-21ksoftirqd/210:25:572
6286992822,4cyclictest33-21ksoftirqd/209:03:372
6286992822,4cyclictest33-21ksoftirqd/208:28:512
6286992816,11cyclictest33-21ksoftirqd/212:28:472
6286992816,11cyclictest33-21ksoftirqd/212:28:472
6286992815,10cyclictest33-21ksoftirqd/210:20:142
6285992824,3cyclictest25-21ksoftirqd/107:55:211
6285992823,3cyclictest25-21ksoftirqd/111:50:001
6285992823,3cyclictest25-21ksoftirqd/107:50:151
6285992822,4cyclictest25-21ksoftirqd/109:06:441
6285992822,4cyclictest25-21ksoftirqd/107:32:531
6285992822,3cyclictest25-21ksoftirqd/107:20:011
628599281,8cyclictest25-21ksoftirqd/110:10:001
628599281,3cyclictest25-21ksoftirqd/108:25:221
628499289,17cyclictest23457-21gzip08:50:230
6284992823,3cyclictest9-21ksoftirqd/012:16:070
6284992823,3cyclictest9-21ksoftirqd/010:52:110
6284992823,3cyclictest9-21ksoftirqd/009:23:450
6284992822,4cyclictest9-21ksoftirqd/009:19:120
6284992821,4cyclictest9-21ksoftirqd/012:30:000
6284992821,4cyclictest9-21ksoftirqd/012:30:000
628499280,3cyclictest23698-21interrupts10:00:180
628499280,3cyclictest23698-21interrupts10:00:180
6287992720,4cyclictest41-21ksoftirqd/311:20:063
6286992721,4cyclictest33-21ksoftirqd/209:57:012
6286992721,4cyclictest33-21ksoftirqd/209:06:182
6286992721,4cyclictest33-21ksoftirqd/208:56:262
6286992715,10cyclictest33-21ksoftirqd/210:40:142
6285992722,3cyclictest25-21ksoftirqd/110:00:001
6285992721,4cyclictest25-21ksoftirqd/111:24:131
628499275,19cyclictest15111-21timerandwakeup09:40:260
6284992721,4cyclictest9-21ksoftirqd/009:13:580
6287992621,3cyclictest41-21ksoftirqd/310:04:213
6287992621,3cyclictest41-21ksoftirqd/310:04:213
6287992621,3cyclictest41-21ksoftirqd/309:44:233
6287992620,4cyclictest41-21ksoftirqd/312:17:593
6287992620,3cyclictest41-21ksoftirqd/310:23:263
6286992622,2cyclictest33-21ksoftirqd/210:51:592
6286992620,4cyclictest33-21ksoftirqd/209:29:132
6286992620,4cyclictest33-21ksoftirqd/208:18:322
6286992615,9cyclictest33-21ksoftirqd/209:30:152
6286992614,2cyclictest33-21ksoftirqd/210:35:342
628599264,3cyclictest121rcu_preempt11:30:221
6285992621,3cyclictest25-21ksoftirqd/111:00:131
628499265,18cyclictest20877-21wc09:55:130
6284992621,3cyclictest9-21ksoftirqd/007:26:470
628499260,3cyclictest6523-21cstates07:10:130
136591260,5ptp4l401ktimersoftd/311:46:053
6287992520,3cyclictest41-21ksoftirqd/310:49:053
6287992520,3cyclictest41-21ksoftirqd/309:55:093
6287992520,3cyclictest41-21ksoftirqd/309:24:083
6287992520,3cyclictest41-21ksoftirqd/309:15:423
6287992520,3cyclictest41-21ksoftirqd/308:34:063
6287992520,3cyclictest41-21ksoftirqd/308:22:483
6286992520,3cyclictest33-21ksoftirqd/207:57:532
6286992520,3cyclictest33-21ksoftirqd/207:37:572
6286992514,9cyclictest33-21ksoftirqd/212:10:252
628499250,3cyclictest13595-21python10:45:260
6287992418,4cyclictest41-21ksoftirqd/310:30:523
6286992419,3cyclictest33-21ksoftirqd/212:09:232
6286992419,3cyclictest33-21ksoftirqd/211:20:432
6286992419,3cyclictest33-21ksoftirqd/210:49:082
6285992419,3cyclictest25-21ksoftirqd/107:20:181
136591240,0ptp4l401ktimersoftd/307:15:283
6286992217,3cyclictest33-21ksoftirqd/210:16:002
6286992217,3cyclictest33-21ksoftirqd/209:10:202
6286992117,3cyclictest33-21ksoftirqd/211:50:252
6286992116,3cyclictest33-21ksoftirqd/209:39:122
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional