You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-29 - 13:09
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Sun Mar 29, 2026 00:45:58)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
139591235168,22phc2sys0-21swapper/319:09:093
244802209174,23sleep00-21swapper/019:06:400
226082205171,23sleep20-21swapper/219:05:052
226062203168,23sleep10-21swapper/119:05:051
2190921540,2sleep30-21swapper/322:25:173
2498621520,5sleep32503999cyclictest22:30:223
1544621280,3sleep32503999cyclictest23:20:003
1544621280,3sleep32503999cyclictest23:20:003
1395918969,11phc2sys0-21swapper/319:10:023
25038997814,62cyclictest28326-21kworker/2:119:11:252
314732630,4sleep02503699cyclictest20:30:170
25039994811,35cyclictest11461-21kworker/3:222:10:253
139291470,1ptp4l401ktimersoftd/321:12:543
25039994610,24cyclictest1308-21runrttasks00:03:193
25037994639,4cyclictest50792irq/128-enp1s0-23:10:461
25037994639,4cyclictest50792irq/128-enp1s0-23:10:461
2503899451,43cyclictest3930-21kworker/2:120:50:252
25039994310,31cyclictest9312-21kworker/3:120:53:253
139291420,0ptp4l401ktimersoftd/300:25:253
2503899412,36cyclictest12967-21cat23:15:002
2503899412,36cyclictest12967-21cat23:15:002
25037994135,3cyclictest31069-21kernelversion23:50:181
139291400,0ptp4l401ktimersoftd/321:50:133
25039993933,4cyclictest41-21ksoftirqd/323:05:323
25039993933,4cyclictest41-21ksoftirqd/319:43:013
25039993832,4cyclictest41-21ksoftirqd/322:07:233
25039993832,4cyclictest41-21ksoftirqd/321:21:583
25039993832,4cyclictest41-21ksoftirqd/320:33:193
25039993832,4cyclictest41-21ksoftirqd/319:31:143
25037993832,4cyclictest25-21ksoftirqd/119:23:051
25037993810,27cyclictest0-21swapper/120:11:151
25037993810,27cyclictest0-21swapper/120:11:151
2503799380,37cyclictest0-21swapper/119:13:361
2503799380,1cyclictest0-21swapper/121:05:261
2503799380,1cyclictest0-21swapper/121:05:251
25036993832,3cyclictest9-21ksoftirqd/019:45:050
25039993732,3cyclictest41-21ksoftirqd/323:45:123
25039993732,3cyclictest41-21ksoftirqd/320:42:373
25039993732,3cyclictest41-21ksoftirqd/300:36:063
25039993731,4cyclictest41-21ksoftirqd/322:19:343
25039993731,4cyclictest41-21ksoftirqd/300:21:303
25039993730,5cyclictest41-21ksoftirqd/320:04:033
25039993730,4cyclictest41-21ksoftirqd/300:14:123
25038993731,4cyclictest33-21ksoftirqd/220:31:072
25037993732,3cyclictest25-21ksoftirqd/122:58:441
25037993731,4cyclictest25-21ksoftirqd/122:21:571
25039993631,3cyclictest41-21ksoftirqd/300:31:493
25039993630,4cyclictest41-21ksoftirqd/323:28:273
25039993630,4cyclictest41-21ksoftirqd/322:47:193
25039993630,4cyclictest41-21ksoftirqd/320:25:053
25039993630,4cyclictest41-21ksoftirqd/320:20:333
25039993630,4cyclictest41-21ksoftirqd/320:14:383
25039993630,4cyclictest41-21ksoftirqd/320:14:383
25039993630,4cyclictest41-21ksoftirqd/319:38:483
25038993631,3cyclictest33-21ksoftirqd/221:29:352
25038993630,4cyclictest33-21ksoftirqd/222:27:202
25038993630,4cyclictest33-21ksoftirqd/222:03:132
25038993630,4cyclictest33-21ksoftirqd/221:47:292
25038993630,4cyclictest33-21ksoftirqd/220:36:032
25038993630,4cyclictest33-21ksoftirqd/219:43:172
25038993611,22cyclictest1312-21snmpd00:36:032
25037993631,3cyclictest25-21ksoftirqd/123:48:111
25037993631,3cyclictest25-21ksoftirqd/121:41:571
25037993631,3cyclictest25-21ksoftirqd/119:25:111
25037993630,4cyclictest25-21ksoftirqd/121:37:331
25037993630,4cyclictest25-21ksoftirqd/120:19:291
25037993630,4cyclictest25-21ksoftirqd/119:34:171
25036993631,3cyclictest9-21ksoftirqd/021:05:100
25036993631,3cyclictest9-21ksoftirqd/021:05:100
25036993630,4cyclictest9-21ksoftirqd/019:43:420
25036993630,4cyclictest9-21ksoftirqd/000:36:460
25036993630,4cyclictest9-21ksoftirqd/000:26:490
25036993630,4cyclictest9-21ksoftirqd/000:21:310
25036993629,4cyclictest9-21ksoftirqd/021:30:130
2503699361,31cyclictest17397-21tr00:30:130
25039993530,3cyclictest41-21ksoftirqd/321:35:353
25039993530,3cyclictest41-21ksoftirqd/321:26:393
25039993530,3cyclictest41-21ksoftirqd/320:57:193
25039993529,4cyclictest41-21ksoftirqd/300:09:023
25038993530,3cyclictest33-21ksoftirqd/222:50:112
25038993530,3cyclictest29906-21sh23:50:002
25038993529,4cyclictest33-21ksoftirqd/221:44:432
25038993513,19cyclictest11971-21ls19:50:142
25038993512,20cyclictest28879-21ptp4l21:30:232
25038993512,20cyclictest15566-21switchtime19:55:262
25038993511,21cyclictest31407-21hddtemp_smartct22:45:162
25038993511,21cyclictest21270-21cut21:15:192
25037993530,3cyclictest25-21ksoftirqd/123:05:031
25037993530,3cyclictest25-21ksoftirqd/121:15:141
25037993530,3cyclictest25-21ksoftirqd/120:25:101
25037993530,3cyclictest25-21ksoftirqd/100:39:041
25037993529,4cyclictest25-21ksoftirqd/123:34:501
25037993529,4cyclictest25-21ksoftirqd/123:28:161
25037993529,4cyclictest25-21ksoftirqd/120:57:121
25037993529,4cyclictest25-21ksoftirqd/120:38:351
25037993529,4cyclictest25-21ksoftirqd/100:11:251
25036993530,3cyclictest9-21ksoftirqd/021:35:110
25036993530,3cyclictest9-21ksoftirqd/021:16:490
25036993529,4cyclictest9-21ksoftirqd/020:52:380
25036993529,4cyclictest9-21ksoftirqd/020:35:060
25036993529,4cyclictest9-21ksoftirqd/019:37:120
25036993529,4cyclictest9-21ksoftirqd/019:34:070
25036993512,3cyclictest6641-21sed00:05:250
25039993429,3cyclictest41-21ksoftirqd/323:36:573
25039993428,4cyclictest41-21ksoftirqd/323:55:343
25039993428,4cyclictest41-21ksoftirqd/323:54:223
25039993428,4cyclictest41-21ksoftirqd/323:31:313
25039993428,4cyclictest41-21ksoftirqd/322:57:093
25039993428,4cyclictest41-21ksoftirqd/322:50:393
25039993428,4cyclictest41-21ksoftirqd/320:08:363
25039993428,4cyclictest41-21ksoftirqd/319:56:143
25039993428,3cyclictest41-21ksoftirqd/319:27:483
25039993427,5cyclictest41-21ksoftirqd/321:48:533
25039993427,4cyclictest41-21ksoftirqd/320:18:413
25039993413,18cyclictest895-21/usr/sbin/munin20:35:133
2503899345,27cyclictest21990-21kworker/2:220:10:262
2503899345,27cyclictest21990-21kworker/2:220:10:252
2503899344,29cyclictest28326-21kworker/2:120:06:182
25038993429,3cyclictest33-21ksoftirqd/223:45:002
25038993429,3cyclictest33-21ksoftirqd/222:40:132
25038993429,3cyclictest33-21ksoftirqd/221:53:072
25038993429,3cyclictest33-21ksoftirqd/219:23:322
25038993428,4cyclictest33-21ksoftirqd/222:11:432
25038993428,4cyclictest33-21ksoftirqd/200:22:412
25038993411,20cyclictest3055-21expr00:00:142
25037993429,3cyclictest25-21ksoftirqd/120:52:151
25037993429,3cyclictest25-21ksoftirqd/100:33:271
25037993428,4cyclictest25-21ksoftirqd/122:27:191
25037993427,4cyclictest25-21ksoftirqd/120:25:011
25036993428,4cyclictest9-21ksoftirqd/023:45:160
25036993428,4cyclictest9-21ksoftirqd/023:11:100
25036993428,4cyclictest9-21ksoftirqd/023:11:100
25036993428,4cyclictest9-21ksoftirqd/022:41:420
25036993428,4cyclictest9-21ksoftirqd/022:27:100
25036993428,4cyclictest9-21ksoftirqd/021:22:240
25036993428,4cyclictest9-21ksoftirqd/021:11:240
25036993428,4cyclictest9-21ksoftirqd/019:15:540
25036993428,4cyclictest9-21ksoftirqd/000:19:300
25036993428,4cyclictest9-21ksoftirqd/000:19:290
25036993428,4cyclictest9-21ksoftirqd/000:11:040
25036993427,4cyclictest9-21ksoftirqd/022:36:080
25036993427,4cyclictest9-21ksoftirqd/020:47:490
25036993412,3cyclictest9002-21sed23:05:190
25039993328,3cyclictest41-21ksoftirqd/322:20:273
25039993328,3cyclictest41-21ksoftirqd/320:49:043
25039993327,4cyclictest41-21ksoftirqd/323:42:273
25039993327,4cyclictest41-21ksoftirqd/322:41:093
25039993327,4cyclictest41-21ksoftirqd/321:19:333
25039993327,4cyclictest41-21ksoftirqd/300:18:373
25039993327,4cyclictest41-21ksoftirqd/300:18:373
25039993326,4cyclictest41-21ksoftirqd/323:10:123
25039993326,4cyclictest41-21ksoftirqd/323:10:123
2503899337,3cyclictest18875-21cut22:20:002
2503899333,28cyclictest3930-21kworker/2:121:00:132
2503899332,8cyclictest1312-21snmpd00:05:122
25038993328,3cyclictest33-21ksoftirqd/221:58:492
25038993328,3cyclictest33-21ksoftirqd/219:35:002
25038993327,4cyclictest33-21ksoftirqd/223:02:542
25038993327,4cyclictest33-21ksoftirqd/220:58:512
2503899332,29cyclictest7662-21kworker/2:020:48:132
2503899332,29cyclictest28326-21kworker/2:119:38:372
2503899332,29cyclictest25789-21latency_hist20:20:002
25038993312,18cyclictest13879-21if_err_enp1s023:15:172
25038993312,18cyclictest13879-21if_err_enp1s023:15:172
25038993311,19cyclictest19407-21latency_hist00:35:012
25038993310,3cyclictest14065-21latency_hist22:10:002
25037993328,3cyclictest25-21ksoftirqd/122:07:191
25037993328,3cyclictest25-21ksoftirqd/121:30:411
25037993328,3cyclictest25-21ksoftirqd/121:24:181
25037993328,3cyclictest25-21ksoftirqd/120:45:141
25037993327,4cyclictest25-21ksoftirqd/122:14:151
25037993327,4cyclictest25-21ksoftirqd/120:33:421
25037993327,3cyclictest25-21ksoftirqd/123:15:011
25037993327,3cyclictest25-21ksoftirqd/123:15:011
25036993328,3cyclictest9-21ksoftirqd/020:06:040
25036993328,3cyclictest9-21ksoftirqd/019:24:010
25036993327,4cyclictest9-21ksoftirqd/023:19:250
25036993327,4cyclictest9-21ksoftirqd/023:19:250
25036993327,4cyclictest9-21ksoftirqd/022:32:510
25036993327,4cyclictest9-21ksoftirqd/021:01:220
25036993327,4cyclictest9-21ksoftirqd/020:04:440
25039993227,3cyclictest41-21ksoftirqd/321:31:233
25039993227,3cyclictest41-21ksoftirqd/319:49:133
25039993226,4cyclictest41-21ksoftirqd/323:21:583
25039993226,4cyclictest41-21ksoftirqd/321:07:343
25039993226,4cyclictest41-21ksoftirqd/321:07:343
25039993226,4cyclictest41-21ksoftirqd/321:01:283
2503999320,3cyclictest8493-21gzip21:55:243
2503899328,4cyclictest10080-21irqrtprio19:45:192
25038993226,4cyclictest33-21ksoftirqd/221:24:592
25038993225,4cyclictest33-21ksoftirqd/200:28:592
2503899322,28cyclictest21990-21kworker/2:220:26:572
2503899321,29cyclictest21990-21kworker/2:220:41:092
2503899321,29cyclictest21990-21kworker/2:220:23:252
25038993211,3cyclictest8881-21if_enp1s023:05:172
25038993211,3cyclictest3577-21expr22:55:142
25038993211,3cyclictest17522-21cat20:00:202
25037993227,3cyclictest25-21ksoftirqd/122:34:051
25037993227,3cyclictest25-21ksoftirqd/119:40:111
25037993226,4cyclictest25-21ksoftirqd/123:40:481
25037993226,4cyclictest25-21ksoftirqd/119:17:471
25037993225,4cyclictest25-21ksoftirqd/120:00:141
25036993227,3cyclictest9-21ksoftirqd/023:53:070
25036993227,3cyclictest9-21ksoftirqd/022:59:350
25036993227,3cyclictest9-21ksoftirqd/022:49:040
25036993227,3cyclictest9-21ksoftirqd/022:19:530
25036993227,3cyclictest9-21ksoftirqd/020:59:560
25036993226,4cyclictest9-21ksoftirqd/023:56:560
25036993226,4cyclictest9-21ksoftirqd/023:33:330
25036993226,4cyclictest9-21ksoftirqd/021:56:210
25036993226,4cyclictest9-21ksoftirqd/021:25:440
25036993226,4cyclictest9-21ksoftirqd/019:58:340
25036993226,4cyclictest9-21ksoftirqd/019:25:090
25039993126,3cyclictest41-21ksoftirqd/321:40:513
25039993111,18cyclictest7873-21latency_hist23:05:003
25038993126,3cyclictest33-21ksoftirqd/219:27:372
25038993125,4cyclictest33-21ksoftirqd/222:24:352
25037993126,3cyclictest25-21ksoftirqd/122:45:401
25037993126,3cyclictest25-21ksoftirqd/120:42:401
25037993126,3cyclictest25-21ksoftirqd/100:23:251
25037993125,4cyclictest25-21ksoftirqd/122:16:361
25037993125,4cyclictest25-21ksoftirqd/119:56:041
25037993125,4cyclictest25-21ksoftirqd/100:18:071
25037993125,4cyclictest25-21ksoftirqd/100:18:071
25037993125,4cyclictest25-21ksoftirqd/100:03:511
25036993126,3cyclictest9-21ksoftirqd/023:42:520
25036993126,3cyclictest9-21ksoftirqd/023:37:300
25036993126,3cyclictest9-21ksoftirqd/022:23:310
25036993126,3cyclictest9-21ksoftirqd/021:50:120
25036993126,3cyclictest9-21ksoftirqd/021:49:180
25036993125,4cyclictest9-21ksoftirqd/023:22:100
25036993125,4cyclictest9-21ksoftirqd/021:40:520
25036993125,4cyclictest9-21ksoftirqd/000:00:090
25036993125,3cyclictest9-21ksoftirqd/020:16:380
25036993110,3cyclictest28697-21cat20:25:120
25039993025,3cyclictest41-21ksoftirqd/322:00:443
25039993010,18cyclictest28916-21cat19:15:263
2503899308,4cyclictest17960-21cpuspeed_turbos21:10:132
2503899308,3cyclictest27583-21cpuspeed_turbos19:15:142
2503899307,3cyclictest31337-21tail23:50:212
2503899307,3cyclictest11253-21cut00:15:212
2503899307,3cyclictest11253-21cut00:15:212
2503899306,4cyclictest32074-21cron21:40:002
25038993025,3cyclictest33-21ksoftirqd/223:33:152
25038993025,3cyclictest33-21ksoftirqd/221:08:232
25038993025,3cyclictest33-21ksoftirqd/221:08:232
25038993024,4cyclictest33-21ksoftirqd/223:35:072
25038993024,4cyclictest33-21ksoftirqd/223:26:292
25038993024,4cyclictest33-21ksoftirqd/223:23:562
25038993010,17cyclictest2261-21latency_hist00:00:002
2503899300,2cyclictest24149-21/usr/sbin/munin22:30:132
25037993025,3cyclictest25-21ksoftirqd/123:55:031
25037993025,3cyclictest25-21ksoftirqd/121:03:231
25037993024,4cyclictest25-21ksoftirqd/122:37:581
25037993024,4cyclictest25-21ksoftirqd/121:54:091
2503699308,4cyclictest23792chrt22:50:240
25036993025,3cyclictest9-21ksoftirqd/022:08:540
25036993025,3cyclictest9-21ksoftirqd/022:01:060
25036993025,3cyclictest9-21ksoftirqd/020:12:490
25036993025,3cyclictest9-21ksoftirqd/020:12:490
25036993025,3cyclictest9-21ksoftirqd/019:54:160
25039992924,3cyclictest41-21ksoftirqd/322:37:533
25039992924,3cyclictest41-21ksoftirqd/319:52:193
25039992924,3cyclictest41-21ksoftirqd/319:23:353
2503899291,9cyclictest9464-21grep00:10:272
25037992924,3cyclictest25-21ksoftirqd/123:01:011
25037992924,3cyclictest25-21ksoftirqd/122:42:001
25037992924,3cyclictest25-21ksoftirqd/121:11:181
25036992923,4cyclictest9-21ksoftirqd/022:10:450
25036992923,4cyclictest9-21ksoftirqd/019:11:570
2503899282,7cyclictest26149-21apt-get22:35:112
25037992823,3cyclictest25-21ksoftirqd/122:53:061
25037992823,3cyclictest25-21ksoftirqd/122:04:481
25037992823,3cyclictest25-21ksoftirqd/119:46:161
25037992823,3cyclictest25-21ksoftirqd/100:29:501
2503799280,1cyclictest0-21swapper/123:23:131
25036992823,3cyclictest9-21ksoftirqd/020:44:310
25036992822,4cyclictest9-21ksoftirqd/023:01:520
25037992722,3cyclictest25-21ksoftirqd/120:06:391
25037992721,3cyclictest25-21ksoftirqd/119:36:181
25036992721,3cyclictest9-21ksoftirqd/020:21:110
25037992621,3cyclictest25-21ksoftirqd/123:39:321
25037992621,3cyclictest25-21ksoftirqd/121:56:141
25037992621,3cyclictest25-21ksoftirqd/121:26:131
2503799261,2cyclictest121rcu_preempt00:09:561
25036992520,3cyclictest9-21ksoftirqd/023:27:030
25037992419,3cyclictest25-21ksoftirqd/119:52:241
25037992216,4cyclictest25-21ksoftirqd/121:49:281
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional