You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-23 - 22:07
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Tue Apr 23, 2024 12:46:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1299911700,5ptp4l401ktimersoftd/307:09:123
2299621540,3sleep2114899cyclictest09:05:012
8442132109,10sleep20-21swapper/207:09:542
2528921320,6sleep0114699cyclictest08:00:140
298621030,2sleep20-21swapper/210:40:012
1146998978,6cyclictest9-21ksoftirqd/007:55:090
1146998780,4cyclictest9-21ksoftirqd/008:05:100
1146998778,5cyclictest9-21ksoftirqd/007:15:110
68028564,10sleep00-21swapper/007:07:460
1146998578,4cyclictest9-21ksoftirqd/010:00:100
1146998475,5cyclictest9-21ksoftirqd/008:10:120
1146998374,5cyclictest9-21ksoftirqd/009:25:130
1146998173,5cyclictest9-21ksoftirqd/011:40:110
129991800,1ptp4l401ktimersoftd/309:01:193
129991770,2ptp4l1165-21/usr/sbin/munin07:10:343
5922754,19sleep10-21swapper/107:06:391
1148997535,8cyclictest33-21ksoftirqd/210:03:462
1148997433,9cyclictest33-21ksoftirqd/209:35:132
1148997335,5cyclictest33-21ksoftirqd/211:00:292
1148997334,7cyclictest33-21ksoftirqd/209:45:122
1148997334,7cyclictest33-21ksoftirqd/209:45:112
1148997331,12cyclictest33-21ksoftirqd/211:10:102
1146997229,7cyclictest9-21ksoftirqd/012:15:160
1148997133,11cyclictest33-21ksoftirqd/210:55:172
1148997131,6cyclictest33-21ksoftirqd/211:50:012
1148997032,8cyclictest33-21ksoftirqd/210:30:192
1146997036,4cyclictest9-21ksoftirqd/011:45:290
1148996930,11cyclictest33-21ksoftirqd/208:40:002
1148996930,11cyclictest33-21ksoftirqd/207:20:202
1146996938,8cyclictest9-21ksoftirqd/012:05:280
1146996937,7cyclictest9-21ksoftirqd/009:00:180
1146996936,4cyclictest9-21ksoftirqd/010:35:130
1148996831,6cyclictest33-21ksoftirqd/208:15:142
1146996831,5cyclictest9-21ksoftirqd/007:40:180
1148996732,6cyclictest33-21ksoftirqd/208:50:122
1148996729,9cyclictest33-21ksoftirqd/207:43:092
1148996728,9cyclictest33-21ksoftirqd/211:50:452
1148996728,10cyclictest33-21ksoftirqd/207:11:052
1146996735,7cyclictest9-21ksoftirqd/007:30:490
1146996732,5cyclictest9-21ksoftirqd/009:16:190
1146996726,8cyclictest9-21ksoftirqd/008:15:200
1148996632,4cyclictest33-21ksoftirqd/210:10:312
1148996627,9cyclictest33-21ksoftirqd/209:33:382
1146996658,4cyclictest9-21ksoftirqd/008:25:050
1146996634,8cyclictest9-21ksoftirqd/012:30:120
1146996634,8cyclictest9-21ksoftirqd/012:30:120
114699661,9cyclictest21680-21apt-get11:20:000
74702650,3sleep2114899cyclictest10:50:002
31432650,2sleep30-21swapper/308:20:253
31432650,2sleep30-21swapper/308:20:243
1148996531,10cyclictest33-21ksoftirqd/211:55:122
1148996531,10cyclictest33-21ksoftirqd/211:15:162
114899648,6cyclictest209-21systemd-journal07:40:002
114899647,8cyclictest33-21ksoftirqd/208:25:262
114899645,6cyclictest33-21ksoftirqd/212:35:002
114899645,6cyclictest33-21ksoftirqd/212:34:592
114899642,8cyclictest33-21ksoftirqd/210:05:322
1148996424,9cyclictest33-21ksoftirqd/208:05:292
1146996448,4cyclictest9-21ksoftirqd/007:25:300
1146996436,5cyclictest9-21ksoftirqd/010:50:200
1146996432,5cyclictest9-21ksoftirqd/010:25:310
1146996415,5cyclictest9-21ksoftirqd/010:55:130
1148996332,9cyclictest33-21ksoftirqd/212:20:102
1148996330,11cyclictest33-21ksoftirqd/209:20:232
1148996328,8cyclictest33-21ksoftirqd/208:40:262
1148996326,9cyclictest33-21ksoftirqd/208:30:192
1148996326,5cyclictest33-21ksoftirqd/212:10:002
1146996355,4cyclictest9-21ksoftirqd/012:00:100
1146996355,4cyclictest9-21ksoftirqd/008:30:050
1146996351,3cyclictest9-21ksoftirqd/009:40:120
1146996321,12cyclictest9-21ksoftirqd/007:20:240
1146996320,8cyclictest9-21ksoftirqd/008:35:130
1146996320,10cyclictest9-21ksoftirqd/011:00:180
74612620,2sleep30-21swapper/307:20:273
114899623,10cyclictest33-21ksoftirqd/212:15:332
1148996226,10cyclictest33-21ksoftirqd/212:00:182
1146996230,7cyclictest9-21ksoftirqd/009:08:070
1146996223,6cyclictest9-21ksoftirqd/008:55:250
114899616,7cyclictest33-21ksoftirqd/208:00:142
114899612,9cyclictest33-21ksoftirqd/209:50:272
1148996120,7cyclictest33-21ksoftirqd/210:25:332
114899610,15cyclictest33-21ksoftirqd/208:55:112
1146996151,3cyclictest9-21ksoftirqd/010:20:340
114699613,8cyclictest9-21ksoftirqd/011:25:000
1146996125,7cyclictest9-21ksoftirqd/009:55:000
114899607,9cyclictest31236-21cron11:40:002
114899605,8cyclictest33-21ksoftirqd/207:55:002
114899605,7cyclictest33-21ksoftirqd/208:20:132
114899605,7cyclictest33-21ksoftirqd/208:20:132
1148996046,7cyclictest33-21ksoftirqd/210:50:122
114899604,10cyclictest33-21ksoftirqd/208:45:182
114899603,9cyclictest33-21ksoftirqd/209:15:162
114899603,8cyclictest33-21ksoftirqd/212:40:002
114899603,8cyclictest33-21ksoftirqd/209:14:592
114899602,7cyclictest33-21ksoftirqd/208:15:002
1148996027,5cyclictest33-21ksoftirqd/210:20:162
114899600,15cyclictest33-21ksoftirqd/211:40:172
1146996053,4cyclictest9-21ksoftirqd/012:10:240
1146996052,4cyclictest9-21ksoftirqd/010:00:000
1146996051,5cyclictest9-21ksoftirqd/011:50:110
114699603,7cyclictest9-21ksoftirqd/012:00:000
1146996021,8cyclictest9-21ksoftirqd/007:10:560
1146996020,8cyclictest9-21ksoftirqd/012:38:120
114899595,8cyclictest33-21ksoftirqd/211:30:312
1148995927,9cyclictest33-21ksoftirqd/207:45:382
1148995923,4cyclictest33-21ksoftirqd/210:40:332
1146995948,3cyclictest9-21ksoftirqd/010:10:250
114699594,4cyclictest9-21ksoftirqd/008:45:310
1146995934,9cyclictest9-21ksoftirqd/012:20:320
1146995919,8cyclictest9-21ksoftirqd/009:39:390
1146995919,10cyclictest9-21ksoftirqd/008:40:310
1148995845,3cyclictest33-21ksoftirqd/207:55:202
1148995844,4cyclictest33-21ksoftirqd/207:30:282
1148995837,10cyclictest33-21ksoftirqd/210:15:162
1148995825,9cyclictest33-21ksoftirqd/212:25:202
1148995819,9cyclictest33-21ksoftirqd/207:19:362
114899581,7cyclictest33-21ksoftirqd/210:00:002
1146995846,4cyclictest9-21ksoftirqd/009:20:270
1146995818,7cyclictest9-21ksoftirqd/011:35:230
1146995818,7cyclictest9-21ksoftirqd/011:12:160
114899577,9cyclictest33-21ksoftirqd/211:25:112
114899575,8cyclictest33-21ksoftirqd/209:25:152
114899575,6cyclictest33-21ksoftirqd/212:10:232
114899573,9cyclictest33-21ksoftirqd/211:20:182
114899573,7cyclictest33-21ksoftirqd/211:10:012
114899571,10cyclictest33-21ksoftirqd/209:40:132
114699575,4cyclictest9-21ksoftirqd/007:45:170
114699575,4cyclictest9-21ksoftirqd/007:35:350
1146995750,4cyclictest9-21ksoftirqd/009:50:010
1146995750,4cyclictest9-21ksoftirqd/009:50:000
1146995721,7cyclictest9-21ksoftirqd/008:51:330
1146995721,4cyclictest9-21ksoftirqd/007:52:590
1146995720,7cyclictest9-21ksoftirqd/010:40:580
1146995718,8cyclictest9-21ksoftirqd/010:33:110
1146995718,7cyclictest9-21ksoftirqd/012:25:430
1146995718,6cyclictest9-21ksoftirqd/011:25:350
184102560,2sleep30-21swapper/307:45:203
114699565,7cyclictest9-21ksoftirqd/011:30:150
1146995635,8cyclictest9-21ksoftirqd/010:10:010
1146995621,9cyclictest9-21ksoftirqd/008:20:110
1146995621,9cyclictest9-21ksoftirqd/008:20:100
114899551,6cyclictest8606-21sed07:25:142
114699558,4cyclictest9-21ksoftirqd/011:05:130
114699552,8cyclictest9-21ksoftirqd/010:45:230
1148995422,7cyclictest33-21ksoftirqd/209:08:452
114699544,6cyclictest9-21ksoftirqd/010:20:000
114699525,7cyclictest9-21ksoftirqd/009:30:190
1146995237,12cyclictest9-21ksoftirqd/009:10:130
1149995132,15cyclictest41-21ksoftirqd/310:34:393
142092490,2sleep10-21swapper/112:10:201
1149994930,16cyclictest41-21ksoftirqd/307:38:223
1149994929,16cyclictest41-21ksoftirqd/307:58:133
129991430,1ptp4l401ktimersoftd/309:53:143
56498420,10rtkit-daemon0-21swapper/108:34:591
1149994235,4cyclictest41-21ksoftirqd/311:38:163
1147994236,4cyclictest25-21ksoftirqd/107:11:451
129991410,1ptp4l401ktimersoftd/308:35:593
1298914134,3phc2sys41-21ksoftirqd/307:50:333
1147994134,4cyclictest25-21ksoftirqd/108:14:211
1147994133,5cyclictest25-21ksoftirqd/108:46:051
1147994133,5cyclictest25-21ksoftirqd/107:26:031
1147994133,4cyclictest25-21ksoftirqd/107:44:311
1149994033,4cyclictest41-21ksoftirqd/311:52:283
1147994035,3cyclictest25-21ksoftirqd/110:15:001
1147994035,3cyclictest25-21ksoftirqd/107:55:271
1147994033,4cyclictest25-21ksoftirqd/109:11:371
1147994032,5cyclictest25-21ksoftirqd/112:30:041
1147994032,5cyclictest25-21ksoftirqd/112:30:041
1149993933,3cyclictest41-21ksoftirqd/312:09:273
1149993933,3cyclictest41-21ksoftirqd/311:25:273
1149993933,3cyclictest41-21ksoftirqd/310:56:523
1149993933,3cyclictest41-21ksoftirqd/307:17:063
1149993932,4cyclictest41-21ksoftirqd/308:41:223
1147993934,3cyclictest25-21ksoftirqd/110:25:011
1147993934,3cyclictest25-21ksoftirqd/109:00:001
1147993933,4cyclictest25-21ksoftirqd/107:45:301
1147993933,3cyclictest25-21ksoftirqd/111:27:371
1147993933,3cyclictest25-21ksoftirqd/109:35:051
1147993932,4cyclictest25-21ksoftirqd/112:24:251
1147993932,4cyclictest25-21ksoftirqd/111:12:131
1147993932,4cyclictest25-21ksoftirqd/110:03:531
1147993932,4cyclictest25-21ksoftirqd/108:40:501
1147993932,4cyclictest25-21ksoftirqd/108:09:421
1149993832,3cyclictest41-21ksoftirqd/312:28:593
1149993831,4cyclictest41-21ksoftirqd/312:03:523
1149993831,4cyclictest41-21ksoftirqd/310:29:083
1149993831,4cyclictest41-21ksoftirqd/308:10:113
1149993831,4cyclictest41-21ksoftirqd/307:32:583
1147993832,3cyclictest25-21ksoftirqd/112:15:421
1147993832,3cyclictest25-21ksoftirqd/111:51:431
1147993832,3cyclictest25-21ksoftirqd/111:45:011
1147993832,3cyclictest25-21ksoftirqd/109:24:171
1147993832,3cyclictest25-21ksoftirqd/109:07:091
1147993832,3cyclictest25-21ksoftirqd/109:03:391
1147993831,4cyclictest25-21ksoftirqd/111:19:531
1147993831,4cyclictest25-21ksoftirqd/111:03:391
1147993831,4cyclictest25-21ksoftirqd/109:45:351
1147993831,4cyclictest25-21ksoftirqd/109:45:341
1147993831,4cyclictest25-21ksoftirqd/108:53:021
1147993831,4cyclictest25-21ksoftirqd/108:35:221
1147993830,5cyclictest25-21ksoftirqd/110:16:061
1147993830,5cyclictest25-21ksoftirqd/109:41:121
1149993731,3cyclictest41-21ksoftirqd/310:51:183
1149993731,3cyclictest41-21ksoftirqd/309:46:563
1149993731,3cyclictest41-21ksoftirqd/309:46:563
1149993730,4cyclictest41-21ksoftirqd/312:37:363
1149993730,4cyclictest41-21ksoftirqd/311:05:473
1149993730,4cyclictest41-21ksoftirqd/310:49:093
1149993730,4cyclictest41-21ksoftirqd/310:11:223
1149993730,4cyclictest41-21ksoftirqd/308:59:093
1149993730,4cyclictest41-21ksoftirqd/308:31:213
1149993730,4cyclictest41-21ksoftirqd/308:27:243
1149993728,6cyclictest41-21ksoftirqd/307:29:143
1147993731,4cyclictest25-21ksoftirqd/110:50:211
1147993731,3cyclictest25-21ksoftirqd/111:39:151
1147993731,3cyclictest25-21ksoftirqd/111:21:101
1147993731,3cyclictest25-21ksoftirqd/109:51:171
1147993731,3cyclictest25-21ksoftirqd/108:27:461
1147993731,3cyclictest25-21ksoftirqd/107:51:371
1147993730,4cyclictest25-21ksoftirqd/110:45:411
1147993730,4cyclictest25-21ksoftirqd/110:41:511
1147993730,4cyclictest25-21ksoftirqd/110:27:391
1147993730,4cyclictest25-21ksoftirqd/109:17:391
1147993730,4cyclictest25-21ksoftirqd/107:24:141
129991360,12ptp4l28704-21irqrtprio09:15:203
1149993629,4cyclictest41-21ksoftirqd/310:37:403
1149993629,4cyclictest41-21ksoftirqd/310:02:083
1149993629,4cyclictest41-21ksoftirqd/307:44:043
1147993631,3cyclictest25-21ksoftirqd/107:31:441
1147993630,4cyclictest25-21ksoftirqd/108:20:181
1147993630,4cyclictest25-21ksoftirqd/108:20:171
1147993630,3cyclictest25-21ksoftirqd/110:39:471
1147993630,3cyclictest25-21ksoftirqd/108:16:521
1147993629,4cyclictest25-21ksoftirqd/111:31:021
1147993629,4cyclictest25-21ksoftirqd/111:09:571
1147993629,4cyclictest25-21ksoftirqd/110:58:131
1147993629,4cyclictest25-21ksoftirqd/110:31:591
1147993629,4cyclictest25-21ksoftirqd/109:27:081
1147993628,4cyclictest25-21ksoftirqd/112:25:121
114999354,3cyclictest121rcu_preempt08:09:243
1149993529,4cyclictest41-21ksoftirqd/308:52:213
1149993528,4cyclictest41-21ksoftirqd/312:23:483
1149993528,4cyclictest41-21ksoftirqd/311:02:263
1149993528,4cyclictest41-21ksoftirqd/310:08:253
1149993528,4cyclictest41-21ksoftirqd/309:36:543
1149993528,4cyclictest41-21ksoftirqd/309:09:163
1149993528,4cyclictest41-21ksoftirqd/308:46:593
1149993527,4cyclictest41-21ksoftirqd/308:01:113
1147993530,3cyclictest25-21ksoftirqd/109:58:201
1147993529,4cyclictest25-21ksoftirqd/112:07:551
1147993529,3cyclictest25-21ksoftirqd/112:02:311
1147993528,4cyclictest25-21ksoftirqd/112:37:021
1147993528,4cyclictest25-21ksoftirqd/107:19:201
1149993428,3cyclictest41-21ksoftirqd/312:34:053
1149993428,3cyclictest41-21ksoftirqd/312:34:053
1149993428,3cyclictest41-21ksoftirqd/312:15:593
1149993427,4cyclictest41-21ksoftirqd/311:56:593
1149993427,4cyclictest41-21ksoftirqd/311:42:163
1149993427,4cyclictest41-21ksoftirqd/309:33:453
1149993427,4cyclictest41-21ksoftirqd/309:29:033
1149993427,4cyclictest41-21ksoftirqd/309:22:523
1147993429,3cyclictest25-21ksoftirqd/107:35:271
1149993327,4cyclictest41-21ksoftirqd/311:16:113
1149993327,3cyclictest41-21ksoftirqd/311:21:253
1149993327,3cyclictest41-21ksoftirqd/310:18:153
1149993326,4cyclictest41-21ksoftirqd/311:14:023
1147993326,4cyclictest25-21ksoftirqd/108:02:481
1147993325,5cyclictest4616-21apt09:35:001
1149993225,4cyclictest41-21ksoftirqd/309:59:173
1147993226,3cyclictest25-21ksoftirqd/111:57:111
1149993125,3cyclictest41-21ksoftirqd/309:10:323
1149993024,3cyclictest41-21ksoftirqd/311:48:403
1147993024,4cyclictest25-21ksoftirqd/111:48:111
1149992923,4cyclictest41-21ksoftirqd/309:44:263
1149992921,5cyclictest41-21ksoftirqd/308:18:003
129991280,1ptp4l401ktimersoftd/312:13:133
129991270,1ptp4l401ktimersoftd/310:22:203
1147992721,3cyclictest25-21ksoftirqd/110:05:211
1149992620,4cyclictest41-21ksoftirqd/311:32:203
1149992519,3cyclictest41-21ksoftirqd/310:41:463
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional