You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-23 - 21:42
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Tue Apr 23, 2024 12:46:30)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
8255911750,53ptp4l41-21ksoftirqd/307:05:303
426421440,8sleep21556599cyclictest11:20:162
151362141119,10sleep10-21swapper/107:08:181
152032132112,9sleep00-21swapper/007:09:090
119422840,4sleep311931-21systemctl09:20:003
174572650,6sleep31556699cyclictest10:40:143
825591620,1ptp4l401ktimersoftd/312:09:103
825591620,1ptp4l401ktimersoftd/311:29:513
825591620,1ptp4l401ktimersoftd/308:47:123
825591620,1ptp4l401ktimersoftd/308:47:123
825591610,1ptp4l401ktimersoftd/308:09:413
15566996044,7cyclictest41-21ksoftirqd/308:35:133
213342580,2sleep30-21swapper/309:40:003
825591570,1ptp4l391rcuc/312:18:283
15564995444,5cyclictest25-21ksoftirqd/111:15:111
15564995346,4cyclictest1608-21cron07:50:011
15563995346,4cyclictest20733-21sh08:29:590
825591510,1ptp4l0-21swapper/310:05:223
825591500,1ptp4l401ktimersoftd/309:54:303
825591490,3ptp4l29768-21kworker/3:108:01:043
57698490,8rtkit-daemon0-21swapper/007:56:470
57698490,2rtkit-daemon0-21swapper/110:41:201
15566994931,10cyclictest41-21ksoftirqd/310:35:103
15564994942,4cyclictest25-21ksoftirqd/109:00:001
825591480,1ptp4l401ktimersoftd/308:41:423
15566994834,7cyclictest41-21ksoftirqd/309:45:113
15566994832,8cyclictest41-21ksoftirqd/308:25:113
1515324815,20sleep20-21swapper/207:08:312
15564994740,4cyclictest25-21ksoftirqd/109:05:011
15564994737,6cyclictest25-21ksoftirqd/107:20:091
15564994737,6cyclictest25-21ksoftirqd/107:20:091
15566994640,4cyclictest41-21ksoftirqd/311:20:003
15564994636,6cyclictest25-21ksoftirqd/107:15:111
15564994636,6cyclictest25-21ksoftirqd/107:15:111
44112450,3sleep3121rcu_preempt10:10:243
44112450,3sleep3121rcu_preempt10:10:243
15566994538,4cyclictest41-21ksoftirqd/307:40:013
15566994532,6cyclictest41-21ksoftirqd/308:20:093
15564994539,4cyclictest25-21ksoftirqd/109:10:001
15564994539,3cyclictest25-21ksoftirqd/110:20:001
15564994534,7cyclictest25-21ksoftirqd/112:15:111
15564994437,4cyclictest25-21ksoftirqd/110:50:121
15564994432,7cyclictest25-21ksoftirqd/111:20:081
15564994432,7cyclictest25-21ksoftirqd/110:55:121
15566994327,8cyclictest41-21ksoftirqd/312:30:103
15564994336,4cyclictest25-21ksoftirqd/111:09:591
1556499430,40cyclictest7015-21irqrtprio11:25:221
15566994236,4cyclictest41-21ksoftirqd/308:15:323
15564994237,3cyclictest25-21ksoftirqd/110:40:011
15564994237,3cyclictest25-21ksoftirqd/109:25:001
15564994235,4cyclictest25-21ksoftirqd/108:00:001
1556399429,30cyclictest649-21sshd10:04:130
15563994236,3cyclictest9-21ksoftirqd/009:55:000
15566994135,4cyclictest41-21ksoftirqd/312:15:003
15566994135,4cyclictest41-21ksoftirqd/311:50:313
15566994135,4cyclictest41-21ksoftirqd/311:35:003
15566994135,3cyclictest41-21ksoftirqd/310:00:163
15566994134,4cyclictest41-21ksoftirqd/309:10:213
15564994135,4cyclictest25-21ksoftirqd/112:35:001
15564994135,3cyclictest25-21ksoftirqd/109:30:011
15564994134,4cyclictest25-21ksoftirqd/109:50:001
15564994134,4cyclictest25-21ksoftirqd/108:15:001
15564994133,5cyclictest25-21ksoftirqd/111:50:011
57698400,2rtkit-daemon0-21swapper/010:31:190
15566994034,4cyclictest41-21ksoftirqd/311:40:003
15564994034,4cyclictest25-21ksoftirqd/112:00:001
15564994034,4cyclictest25-21ksoftirqd/109:35:191
15564994033,4cyclictest25-21ksoftirqd/112:25:311
15564994033,4cyclictest25-21ksoftirqd/112:05:281
15564994032,4cyclictest25-21ksoftirqd/110:09:131
15563994033,4cyclictest9-21ksoftirqd/007:50:000
825591390,1ptp4l401ktimersoftd/312:04:543
825591390,13ptp4l0-21swapper/309:05:313
15566993934,3cyclictest41-21ksoftirqd/309:35:003
15566993933,4cyclictest41-21ksoftirqd/309:30:013
15566993933,4cyclictest41-21ksoftirqd/308:10:203
15566993933,3cyclictest41-21ksoftirqd/307:29:593
15566993933,3cyclictest41-21ksoftirqd/307:25:003
15566993933,3cyclictest41-21ksoftirqd/307:25:003
15565993933,4cyclictest33-21ksoftirqd/209:13:392
15565993932,5cyclictest33-21ksoftirqd/209:35:122
15565993926,10cyclictest33-21ksoftirqd/208:21:062
15564993933,3cyclictest25-21ksoftirqd/108:10:001
15564993933,3cyclictest25-21ksoftirqd/107:25:141
15564993932,4cyclictest25-21ksoftirqd/112:39:591
15564993932,4cyclictest25-21ksoftirqd/111:40:281
15564993932,4cyclictest25-21ksoftirqd/111:40:281
15564993932,4cyclictest25-21ksoftirqd/108:40:001
15564993931,5cyclictest25-21ksoftirqd/107:50:321
15566993831,4cyclictest41-21ksoftirqd/311:40:203
15566993831,4cyclictest41-21ksoftirqd/311:40:203
15566993826,7cyclictest41-21ksoftirqd/309:00:143
15566993826,7cyclictest41-21ksoftirqd/307:50:123
15564993833,3cyclictest25-21ksoftirqd/110:30:181
15564993832,4cyclictest25-21ksoftirqd/112:10:141
15564993832,4cyclictest25-21ksoftirqd/109:15:211
15564993832,4cyclictest25-21ksoftirqd/108:20:201
15564993831,4cyclictest25-21ksoftirqd/110:15:001
15564993831,4cyclictest25-21ksoftirqd/110:15:001
15564993831,4cyclictest25-21ksoftirqd/108:00:121
15564993829,7cyclictest25-21ksoftirqd/109:10:301
15563993831,4cyclictest9-21ksoftirqd/008:15:060
825591370,2ptp4l0-21swapper/308:33:303
7702370,9sleep31556699cyclictest07:45:293
15566993732,3cyclictest29768-21kworker/3:107:55:193
15566993731,3cyclictest41-21ksoftirqd/307:45:003
15566993730,4cyclictest41-21ksoftirqd/310:21:103
15565993731,4cyclictest33-21ksoftirqd/209:25:472
15565993731,4cyclictest33-21ksoftirqd/207:25:002
15565993731,4cyclictest33-21ksoftirqd/207:25:002
15565993730,4cyclictest33-21ksoftirqd/211:33:002
15565993730,4cyclictest33-21ksoftirqd/210:04:582
15565993714,3cyclictest27011-21expr11:00:152
15565993713,4cyclictest27265-21/usr/sbin/munin07:35:222
15565993713,3cyclictest26661-21cat09:50:122
15565993712,4cyclictest29965-21basename12:15:112
1556499374,3cyclictest121rcu_preempt11:50:171
15564993731,4cyclictest25-21ksoftirqd/108:50:121
15564993731,3cyclictest25-21ksoftirqd/112:05:011
15564993731,3cyclictest25-21ksoftirqd/111:40:001
15564993730,5cyclictest25-21ksoftirqd/108:18:591
15564993725,5cyclictest25-21ksoftirqd/111:10:131
15563993731,3cyclictest9-21ksoftirqd/012:18:170
15563993730,4cyclictest9-21ksoftirqd/009:25:190
15563993730,4cyclictest9-21ksoftirqd/007:30:590
15563993729,5cyclictest9-21ksoftirqd/007:28:400
15566993629,4cyclictest41-21ksoftirqd/311:55:133
15566993629,4cyclictest41-21ksoftirqd/311:46:033
15566993629,4cyclictest41-21ksoftirqd/309:40:293
15566993629,4cyclictest41-21ksoftirqd/309:21:583
1556599367,9cyclictest31959-21unixbench_multi08:50:322
1556599363,6cyclictest0-21swapper/207:55:082
15565993631,3cyclictest33-21ksoftirqd/207:46:472
15565993630,3cyclictest33-21ksoftirqd/209:46:322
15565993629,4cyclictest33-21ksoftirqd/212:20:542
15565993629,4cyclictest33-21ksoftirqd/211:27:272
15565993629,4cyclictest33-21ksoftirqd/209:25:002
15565993613,4cyclictest30911-21sed10:00:002
15565993613,4cyclictest17737-21wc07:15:002
15564993631,3cyclictest25-21ksoftirqd/109:50:221
15564993631,3cyclictest25-21ksoftirqd/108:35:001
15564993630,4cyclictest25-21ksoftirqd/108:45:211
15564993630,4cyclictest25-21ksoftirqd/108:45:211
15564993630,3cyclictest25-21ksoftirqd/112:25:011
15564993629,4cyclictest25-21ksoftirqd/110:45:331
15564993628,5cyclictest25-21ksoftirqd/111:33:001
15564993628,5cyclictest25-21ksoftirqd/109:30:201
15563993630,3cyclictest9-21ksoftirqd/011:35:110
15563993629,4cyclictest9-21ksoftirqd/009:42:530
15563993629,4cyclictest9-21ksoftirqd/009:40:000
15563993628,5cyclictest9-21ksoftirqd/011:11:580
15563993628,5cyclictest9-21ksoftirqd/009:47:560
15566993530,3cyclictest41-21ksoftirqd/311:10:133
15566993530,3cyclictest41-21ksoftirqd/310:25:333
15566993529,3cyclictest41-21ksoftirqd/312:25:013
15566993529,3cyclictest41-21ksoftirqd/310:50:013
15566993529,3cyclictest41-21ksoftirqd/307:35:013
15566993528,4cyclictest41-21ksoftirqd/312:27:263
15566993528,4cyclictest41-21ksoftirqd/311:20:583
15566993528,4cyclictest41-21ksoftirqd/311:06:363
1556599353,7cyclictest27691-21apt-get12:10:132
15565993529,4cyclictest33-21ksoftirqd/210:32:212
15565993529,3cyclictest33-21ksoftirqd/211:44:042
15565993529,3cyclictest33-21ksoftirqd/211:44:032
15565993528,4cyclictest33-21ksoftirqd/212:36:342
15565993528,4cyclictest33-21ksoftirqd/211:58:082
15565993528,4cyclictest33-21ksoftirqd/209:16:162
15565993528,4cyclictest33-21ksoftirqd/208:46:112
15565993528,4cyclictest33-21ksoftirqd/208:46:112
15565993528,4cyclictest33-21ksoftirqd/208:05:342
15565993528,4cyclictest33-21ksoftirqd/207:43:542
15565993527,5cyclictest33-21ksoftirqd/207:26:012
15564993529,4cyclictest25-21ksoftirqd/109:55:111
15564993529,4cyclictest25-21ksoftirqd/109:45:001
15564993529,4cyclictest25-21ksoftirqd/107:40:201
15564993528,4cyclictest25-21ksoftirqd/107:40:001
15563993530,3cyclictest9-21ksoftirqd/007:20:000
15563993530,3cyclictest9-21ksoftirqd/007:20:000
15563993528,4cyclictest9-21ksoftirqd/011:55:510
15563993528,4cyclictest9-21ksoftirqd/010:17:030
15563993528,4cyclictest9-21ksoftirqd/009:10:480
15563993527,5cyclictest9-21ksoftirqd/009:07:010
825591340,1ptp4l401ktimersoftd/307:13:043
15566993428,4cyclictest41-21ksoftirqd/310:15:173
15566993428,4cyclictest41-21ksoftirqd/309:55:253
15566993427,4cyclictest41-21ksoftirqd/312:35:223
15565993428,4cyclictest33-21ksoftirqd/211:50:092
15565993427,4cyclictest33-21ksoftirqd/212:06:042
15565993427,4cyclictest33-21ksoftirqd/210:59:022
15565993427,4cyclictest33-21ksoftirqd/209:33:452
15565993427,4cyclictest33-21ksoftirqd/208:40:592
15565993427,4cyclictest33-21ksoftirqd/208:34:502
15565993427,4cyclictest33-21ksoftirqd/208:12:342
1556499343,3cyclictest121rcu_preempt08:43:321
15564993428,4cyclictest25-21ksoftirqd/111:00:251
15564993428,4cyclictest25-21ksoftirqd/110:20:191
15564993427,4cyclictest25-21ksoftirqd/110:25:241
15564993426,5cyclictest25-21ksoftirqd/107:14:281
15563993427,4cyclictest9-21ksoftirqd/011:52:460
15563993427,4cyclictest9-21ksoftirqd/010:38:540
15563993427,4cyclictest9-21ksoftirqd/008:35:000
15566993327,4cyclictest41-21ksoftirqd/310:30:163
15566993327,3cyclictest41-21ksoftirqd/311:05:003
15566993326,4cyclictest41-21ksoftirqd/310:50:123
15565993327,4cyclictest33-21ksoftirqd/212:28:272
15565993327,4cyclictest33-21ksoftirqd/212:00:192
15565993327,4cyclictest33-21ksoftirqd/210:15:592
15565993327,4cyclictest33-21ksoftirqd/209:42:562
15565993327,4cyclictest33-21ksoftirqd/208:26:272
15565993327,3cyclictest33-21ksoftirqd/211:14:482
15565993326,4cyclictest33-21ksoftirqd/210:47:442
15565993326,4cyclictest33-21ksoftirqd/210:21:422
15565993326,4cyclictest33-21ksoftirqd/210:06:042
15565993326,4cyclictest33-21ksoftirqd/209:04:082
15565993326,4cyclictest33-21ksoftirqd/208:17:212
15565993311,4cyclictest1235-21/usr/sbin/munin11:15:272
15564993326,4cyclictest25-21ksoftirqd/107:31:351
15563993326,4cyclictest9-21ksoftirqd/012:28:580
15563993326,4cyclictest9-21ksoftirqd/012:12:260
15563993326,4cyclictest9-21ksoftirqd/011:47:380
15563993326,4cyclictest9-21ksoftirqd/011:09:500
15563993326,4cyclictest9-21ksoftirqd/010:24:540
15563993326,4cyclictest9-21ksoftirqd/009:58:350
15563993326,4cyclictest9-21ksoftirqd/008:41:310
15563993326,4cyclictest9-21ksoftirqd/008:06:540
15566993227,3cyclictest41-21ksoftirqd/308:50:303
15566993226,4cyclictest41-21ksoftirqd/308:55:193
15565993227,3cyclictest33-21ksoftirqd/210:42:492
15565993226,4cyclictest33-21ksoftirqd/209:05:332
15565993226,4cyclictest33-21ksoftirqd/208:37:082
15565993226,3cyclictest33-21ksoftirqd/207:33:212
15565993225,4cyclictest33-21ksoftirqd/212:31:462
15565993225,4cyclictest33-21ksoftirqd/211:36:042
15565993225,4cyclictest33-21ksoftirqd/210:12:232
15565993225,4cyclictest33-21ksoftirqd/210:12:232
15565993225,4cyclictest33-21ksoftirqd/208:58:242
15565993225,4cyclictest33-21ksoftirqd/208:03:432
15564993226,4cyclictest25-21ksoftirqd/110:00:231
1556499321,4cyclictest121rcu_preempt08:25:301
15563993227,3cyclictest9-21ksoftirqd/011:45:000
15563993227,3cyclictest9-21ksoftirqd/011:45:000
15563993226,3cyclictest9-21ksoftirqd/012:01:350
15563993226,3cyclictest9-21ksoftirqd/011:25:420
15563993226,3cyclictest9-21ksoftirqd/010:07:180
15563993226,3cyclictest9-21ksoftirqd/008:12:070
15563993226,3cyclictest9-21ksoftirqd/007:42:430
15563993225,4cyclictest9-21ksoftirqd/012:37:390
15563993225,4cyclictest9-21ksoftirqd/011:17:490
15563993225,4cyclictest9-21ksoftirqd/009:01:350
15565993125,4cyclictest33-21ksoftirqd/210:25:552
15565993124,4cyclictest33-21ksoftirqd/210:35:452
15565993124,4cyclictest33-21ksoftirqd/207:50:222
15565993123,5cyclictest33-21ksoftirqd/210:52:212
15563993125,3cyclictest9-21ksoftirqd/010:11:040
15563993125,3cyclictest9-21ksoftirqd/010:11:040
15563993124,5cyclictest9-21ksoftirqd/007:10:530
15563993124,4cyclictest9-21ksoftirqd/010:55:050
15563993124,4cyclictest9-21ksoftirqd/010:26:540
15563993124,4cyclictest9-21ksoftirqd/009:30:370
15563993124,4cyclictest9-21ksoftirqd/009:16:360
15563993124,4cyclictest9-21ksoftirqd/008:57:160
15563993124,4cyclictest9-21ksoftirqd/008:54:220
15563993124,4cyclictest9-21ksoftirqd/008:39:500
15563993124,4cyclictest9-21ksoftirqd/007:35:430
825591300,1ptp4l401ktimersoftd/307:15:183
825591300,1ptp4l401ktimersoftd/307:15:183
15563993025,3cyclictest9-21ksoftirqd/012:20:220
15563993024,3cyclictest9-21ksoftirqd/010:52:100
15563993023,4cyclictest9-21ksoftirqd/010:43:160
15563993023,4cyclictest9-21ksoftirqd/008:01:480
15566992923,4cyclictest41-21ksoftirqd/310:58:413
15565992922,4cyclictest33-21ksoftirqd/211:09:402
15565992922,4cyclictest33-21ksoftirqd/207:16:012
15565992922,4cyclictest33-21ksoftirqd/207:16:012
15563992923,3cyclictest9-21ksoftirqd/011:33:250
15563992923,3cyclictest9-21ksoftirqd/007:22:440
15563992923,3cyclictest9-21ksoftirqd/007:22:440
15563992922,4cyclictest9-21ksoftirqd/012:31:160
15565992821,4cyclictest33-21ksoftirqd/211:48:142
15563992822,3cyclictest9-21ksoftirqd/012:05:500
15563992721,4cyclictest9-21ksoftirqd/008:46:470
15563992721,4cyclictest9-21ksoftirqd/008:46:470
15563992721,3cyclictest9-21ksoftirqd/011:01:410
15563992720,4cyclictest9-21ksoftirqd/011:20:570
15563992720,4cyclictest9-21ksoftirqd/009:20:010
15563992720,4cyclictest9-21ksoftirqd/007:50:450
15563992518,4cyclictest9-21ksoftirqd/010:49:140
15563992013,4cyclictest9-21ksoftirqd/008:20:550
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional