You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-12-10 - 21:42
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot4.osadl.org (updated Tue Dec 10, 2024 12:45:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
114142203171,21sleep20-21swapper/207:08:302
114372202168,23sleep30-21swapper/307:08:473
111992190157,23sleep00-21swapper/007:05:470
2048221760,7sleep11182499cyclictest09:50:111
112572166134,22sleep10-21swapper/107:06:321
1600721590,1sleep00-21swapper/010:45:140
1199421360,3sleep00-21swapper/010:35:230
211592950,1sleep30-21swapper/309:50:173
11825996327,9cyclictest33-21ksoftirqd/211:10:162
11825996130,6cyclictest33-21ksoftirqd/210:10:142
11825996028,4cyclictest33-21ksoftirqd/207:30:192
11825996025,5cyclictest33-21ksoftirqd/208:30:182
94942590,2sleep01182399cyclictest09:20:130
11825995930,5cyclictest33-21ksoftirqd/210:45:172
11825995927,5cyclictest33-21ksoftirqd/212:35:222
11825995927,5cyclictest33-21ksoftirqd/211:50:242
11825995927,5cyclictest33-21ksoftirqd/211:50:242
11825995924,5cyclictest33-21ksoftirqd/212:20:152
11825995924,5cyclictest33-21ksoftirqd/212:20:152
11825995924,5cyclictest33-21ksoftirqd/208:40:222
11825995923,6cyclictest33-21ksoftirqd/212:15:282
11825995831,6cyclictest33-21ksoftirqd/209:05:222
11825995827,4cyclictest33-21ksoftirqd/210:35:292
11825995826,18cyclictest33-21ksoftirqd/208:55:002
11825995826,18cyclictest33-21ksoftirqd/208:55:002
11825995825,5cyclictest33-21ksoftirqd/210:15:212
11825995823,5cyclictest33-21ksoftirqd/209:40:262
11825995823,5cyclictest33-21ksoftirqd/209:40:262
11825995821,6cyclictest33-21ksoftirqd/207:20:252
1182599580,12cyclictest33-21ksoftirqd/212:15:002
11825995730,9cyclictest33-21ksoftirqd/207:15:002
11825995727,3cyclictest33-21ksoftirqd/208:55:142
11825995725,6cyclictest33-21ksoftirqd/210:50:182
11825995724,7cyclictest33-21ksoftirqd/210:05:242
11825995723,5cyclictest33-21ksoftirqd/211:55:232
11825995722,6cyclictest33-21ksoftirqd/211:05:272
11825995627,4cyclictest33-21ksoftirqd/211:40:232
11825995625,5cyclictest33-21ksoftirqd/209:55:252
11825995623,6cyclictest33-21ksoftirqd/207:10:202
11825995622,3cyclictest33-21ksoftirqd/209:23:062
11825995621,5cyclictest33-21ksoftirqd/208:35:182
11825995620,5cyclictest33-21ksoftirqd/207:50:292
11825995524,5cyclictest33-21ksoftirqd/211:15:182
11825995522,4cyclictest33-21ksoftirqd/207:25:212
11825995521,5cyclictest33-21ksoftirqd/211:40:012
11825995520,6cyclictest33-21ksoftirqd/209:16:012
11825995427,8cyclictest33-21ksoftirqd/208:00:202
11825995418,4cyclictest33-21ksoftirqd/209:14:012
11825995323,5cyclictest33-21ksoftirqd/212:00:222
11825995322,5cyclictest33-21ksoftirqd/208:00:002
11825995320,3cyclictest33-21ksoftirqd/209:00:172
244312520,1sleep20-21swapper/208:45:132
11825995222,6cyclictest33-21ksoftirqd/212:05:122
11825995219,8cyclictest33-21ksoftirqd/212:30:122
11825995214,5cyclictest33-21ksoftirqd/207:35:332
1182599515,6cyclictest33-21ksoftirqd/212:30:002
1182599515,6cyclictest33-21ksoftirqd/209:35:152
11825995122,9cyclictest33-21ksoftirqd/211:45:122
11825995121,9cyclictest33-21ksoftirqd/209:50:092
1182599511,8cyclictest33-21ksoftirqd/208:25:252
130691500,1getstats19782-1kworker/3:1H11:45:163
1182599507,2cyclictest33-21ksoftirqd/210:40:252
1182599503,7cyclictest33-21ksoftirqd/210:58:392
1182599502,7cyclictest33-21ksoftirqd/210:00:252
1182599502,7cyclictest33-21ksoftirqd/208:25:002
11825995022,8cyclictest33-21ksoftirqd/211:20:162
11825995020,16cyclictest33-21ksoftirqd/211:35:012
1182599501,5cyclictest33-21ksoftirqd/209:30:002
1182599495,6cyclictest33-21ksoftirqd/207:45:112
1182599495,6cyclictest33-21ksoftirqd/207:45:112
1182599494,6cyclictest33-21ksoftirqd/210:35:002
1182599494,4cyclictest33-21ksoftirqd/211:00:162
1182599491,6cyclictest33-21ksoftirqd/208:15:212
1182599484,5cyclictest33-21ksoftirqd/208:05:152
1182599474,7cyclictest8071-21latency_hist10:30:012
1182599473,5cyclictest28508-21cron07:45:002
1182599473,5cyclictest28508-21cron07:45:002
11825994720,5cyclictest33-21ksoftirqd/208:15:012
1182599471,6cyclictest33-21ksoftirqd/211:30:012
134991440,0ptp4l401ktimersoftd/311:10:053
1182599443,7cyclictest33-21ksoftirqd/210:20:252
1182599440,5cyclictest33-21ksoftirqd/209:46:412
134991430,0ptp4l401ktimersoftd/310:04:273
11823994329,12cyclictest9-21ksoftirqd/007:30:110
134991420,0ptp4l401ktimersoftd/312:00:063
134991410,0ptp4l401ktimersoftd/311:44:513
134991410,0ptp4l401ktimersoftd/310:21:313
134991410,0ptp4l401ktimersoftd/307:45:113
134991410,0ptp4l401ktimersoftd/307:45:113
134991410,0ptp4l401ktimersoftd/307:28:453
11823994133,5cyclictest822-21cron07:55:000
130691400,1getstats0-21swapper/311:30:163
11826993925,11cyclictest41-21ksoftirqd/310:55:593
11826993832,4cyclictest41-21ksoftirqd/310:10:383
11826993832,4cyclictest41-21ksoftirqd/307:34:183
11826993831,4cyclictest41-21ksoftirqd/308:10:123
11824993818,17cyclictest25-21ksoftirqd/110:05:101
11826993731,4cyclictest41-21ksoftirqd/311:36:163
11826993731,4cyclictest41-21ksoftirqd/310:34:423
11826993731,4cyclictest41-21ksoftirqd/309:14:033
11826993731,4cyclictest41-21ksoftirqd/307:50:423
11824993731,4cyclictest25-21ksoftirqd/111:53:151
11824993731,4cyclictest25-21ksoftirqd/111:53:151
11824993731,3cyclictest25-21ksoftirqd/108:55:111
11824993713,21cyclictest2773-21memory09:05:211
11826993630,4cyclictest41-21ksoftirqd/312:23:343
11826993630,4cyclictest41-21ksoftirqd/312:23:343
11826993630,4cyclictest41-21ksoftirqd/311:08:203
11826993630,4cyclictest41-21ksoftirqd/308:59:183
11826993630,4cyclictest41-21ksoftirqd/307:41:323
11826993630,4cyclictest41-21ksoftirqd/307:41:323
11824993630,4cyclictest25-21ksoftirqd/111:46:571
11824993630,4cyclictest25-21ksoftirqd/109:56:291
11824993630,4cyclictest25-21ksoftirqd/109:47:061
11824993630,4cyclictest25-21ksoftirqd/107:12:541
11824993629,4cyclictest25-21ksoftirqd/109:27:491
11824993618,16cyclictest25-21ksoftirqd/108:25:001
11823993630,4cyclictest9-21ksoftirqd/008:40:500
11823993630,3cyclictest6370-21cron08:10:000
11826993530,3cyclictest41-21ksoftirqd/311:00:133
11826993530,3cyclictest41-21ksoftirqd/309:05:123
11826993529,4cyclictest41-21ksoftirqd/312:13:463
11826993529,4cyclictest41-21ksoftirqd/312:07:413
11826993529,4cyclictest41-21ksoftirqd/308:34:153
1182699350,2cyclictest121rcu_preempt09:40:173
1182699350,2cyclictest121rcu_preempt09:40:173
11824993530,3cyclictest25-21ksoftirqd/112:36:071
11824993529,4cyclictest25-21ksoftirqd/111:24:461
11824993529,4cyclictest25-21ksoftirqd/111:00:481
11824993529,4cyclictest25-21ksoftirqd/110:42:021
11824993529,4cyclictest25-21ksoftirqd/109:34:141
11824993529,4cyclictest25-21ksoftirqd/108:44:441
11824993529,4cyclictest25-21ksoftirqd/108:35:331
11824993529,4cyclictest25-21ksoftirqd/108:31:001
11824993529,4cyclictest25-21ksoftirqd/108:29:561
11824993529,4cyclictest25-21ksoftirqd/108:10:461
11824993529,4cyclictest25-21ksoftirqd/107:43:591
11824993529,4cyclictest25-21ksoftirqd/107:43:591
11824993529,4cyclictest25-21ksoftirqd/107:39:451
11824993512,20cyclictest10876-21cstates11:40:191
11824993511,21cyclictest26317-21awk10:00:251
11823993530,3cyclictest9-21ksoftirqd/008:39:380
11823993529,4cyclictest9-21ksoftirqd/012:35:330
134991340,0ptp4l401ktimersoftd/307:39:393
11826993428,4cyclictest41-21ksoftirqd/310:50:023
11826993428,4cyclictest41-21ksoftirqd/308:53:413
11826993428,4cyclictest41-21ksoftirqd/308:53:413
11826993428,4cyclictest41-21ksoftirqd/308:43:303
11826993428,4cyclictest41-21ksoftirqd/307:13:083
11826993413,3cyclictest23749-21gzip09:55:223
1182599343,2cyclictest33-21ksoftirqd/209:27:202
11824993429,3cyclictest25-21ksoftirqd/108:54:341
11824993429,3cyclictest25-21ksoftirqd/108:54:341
11824993428,4cyclictest25-21ksoftirqd/111:35:381
11824993428,4cyclictest25-21ksoftirqd/110:39:131
11824993428,4cyclictest25-21ksoftirqd/109:22:151
11824993428,4cyclictest25-21ksoftirqd/108:46:051
11824993427,5cyclictest25-21ksoftirqd/112:17:331
11824993427,4cyclictest25-21ksoftirqd/111:18:281
11824993414,17cyclictest2543-21if_err_enp1s008:00:131
11824993412,20cyclictest1236-21seq07:56:331
11824993411,20cyclictest8519-21cron09:17:001
11824993411,20cyclictest20312-21latency_hist12:00:011
11823993429,3cyclictest9-21ksoftirqd/007:15:000
11823993428,4cyclictest9-21ksoftirqd/012:12:110
11823993428,4cyclictest9-21ksoftirqd/011:39:380
11823993428,4cyclictest9-21ksoftirqd/010:06:150
11823993428,4cyclictest9-21ksoftirqd/009:30:080
11823993428,4cyclictest9-21ksoftirqd/008:57:230
11826993328,3cyclictest41-21ksoftirqd/310:48:383
11826993327,4cyclictest41-21ksoftirqd/312:36:093
11826993327,4cyclictest41-21ksoftirqd/312:17:233
11826993327,4cyclictest41-21ksoftirqd/309:36:213
11826993326,5cyclictest41-21ksoftirqd/308:22:203
11826993311,3cyclictest19014-21sed11:55:223
1182499339,21cyclictest30568-21seq07:46:061
1182499339,21cyclictest30568-21seq07:46:061
1182499339,21cyclictest17687-21sed07:20:211
1182499339,21cyclictest14902-21sh07:15:141
11824993328,3cyclictest25-21ksoftirqd/110:21:391
11824993328,3cyclictest25-21ksoftirqd/109:10:111
11824993328,3cyclictest25-21ksoftirqd/108:19:131
11824993327,4cyclictest25-21ksoftirqd/111:13:351
11824993327,4cyclictest25-21ksoftirqd/110:57:591
11824993327,4cyclictest25-21ksoftirqd/109:03:501
11823993328,3cyclictest9-21ksoftirqd/008:26:540
11823993327,4cyclictest9-21ksoftirqd/011:41:580
11823993327,4cyclictest9-21ksoftirqd/011:09:320
11823993326,5cyclictest9-21ksoftirqd/010:45:000
11826993226,4cyclictest41-21ksoftirqd/310:08:183
11826993226,4cyclictest41-21ksoftirqd/308:06:033
11826993213,3cyclictest655-21cpuspeed_turbos10:15:123
11826993212,4cyclictest3428-21tr11:25:143
11824993227,3cyclictest25-21ksoftirqd/110:13:531
11824993226,4cyclictest25-21ksoftirqd/112:32:141
11824993226,4cyclictest25-21ksoftirqd/111:29:461
11824993226,4cyclictest25-21ksoftirqd/110:19:031
11824993226,4cyclictest25-21ksoftirqd/109:41:291
11824993226,4cyclictest25-21ksoftirqd/109:41:291
11824993226,4cyclictest25-21ksoftirqd/107:32:191
11823993227,3cyclictest9-21ksoftirqd/011:34:080
11823993227,3cyclictest9-21ksoftirqd/009:19:130
11823993227,3cyclictest9-21ksoftirqd/008:17:310
11823993226,4cyclictest9-21ksoftirqd/011:27:260
11823993226,4cyclictest9-21ksoftirqd/009:49:380
11823993226,4cyclictest9-21ksoftirqd/009:26:150
11823993226,4cyclictest9-21ksoftirqd/007:25:360
11826993126,3cyclictest41-21ksoftirqd/311:15:333
11826993126,3cyclictest41-21ksoftirqd/309:23:163
11826993125,4cyclictest41-21ksoftirqd/308:46:553
11826993111,3cyclictest9251-21expr08:15:153
1182499318,20cyclictest10501-21sh10:35:001
1182499317,3cyclictest2556-21seq12:27:481
11824993126,3cyclictest25-21ksoftirqd/108:05:481
11824993125,4cyclictest25-21ksoftirqd/111:34:291
11824993125,4cyclictest25-21ksoftirqd/110:54:181
11824993125,4cyclictest25-21ksoftirqd/110:29:511
11823993126,3cyclictest9-21ksoftirqd/012:01:470
11823993126,3cyclictest9-21ksoftirqd/010:53:020
11823993126,3cyclictest9-21ksoftirqd/009:38:270
11823993125,4cyclictest9-21ksoftirqd/009:57:120
11823993125,4cyclictest9-21ksoftirqd/009:52:470
11823993125,4cyclictest9-21ksoftirqd/009:07:540
11823993125,4cyclictest9-21ksoftirqd/007:59:300
11826993025,3cyclictest41-21ksoftirqd/309:34:333
11826993025,3cyclictest41-21ksoftirqd/309:25:263
11826993025,3cyclictest41-21ksoftirqd/308:28:183
11826993025,3cyclictest41-21ksoftirqd/308:01:333
11826993025,3cyclictest41-21ksoftirqd/307:21:423
11826993024,4cyclictest41-21ksoftirqd/312:29:193
11826993024,4cyclictest41-21ksoftirqd/309:18:003
1182499308,4cyclictest15137-21fschecks_count09:35:161
1182499306,4cyclictest31282-21cpuspeed_turbos07:50:161
11824993025,3cyclictest25-21ksoftirqd/112:04:211
11824993024,4cyclictest25-21ksoftirqd/111:05:371
11824993024,4cyclictest25-21ksoftirqd/110:47:591
11824993024,4cyclictest25-21ksoftirqd/107:27:021
11823993025,3cyclictest9-21ksoftirqd/012:15:400
11823993025,3cyclictest9-21ksoftirqd/011:15:070
11823993025,3cyclictest9-21ksoftirqd/010:05:000
11823993025,3cyclictest9-21ksoftirqd/007:35:150
11823993024,4cyclictest9-21ksoftirqd/012:20:100
11823993024,4cyclictest9-21ksoftirqd/012:20:100
11823993024,4cyclictest9-21ksoftirqd/010:32:580
11823993024,4cyclictest9-21ksoftirqd/010:22:180
11823993024,4cyclictest9-21ksoftirqd/008:01:230
11823993024,4cyclictest9-21ksoftirqd/007:16:500
11826992923,4cyclictest41-21ksoftirqd/311:21:593
11826992923,4cyclictest41-21ksoftirqd/309:03:513
11826992923,4cyclictest41-21ksoftirqd/308:35:483
11826992923,4cyclictest41-21ksoftirqd/307:55:363
11824992923,4cyclictest25-21ksoftirqd/112:07:591
11823992924,3cyclictest9-21ksoftirqd/008:54:280
11823992924,3cyclictest9-21ksoftirqd/008:54:280
11823992924,3cyclictest9-21ksoftirqd/007:22:260
11823992923,4cyclictest9-21ksoftirqd/012:08:460
11823992923,4cyclictest9-21ksoftirqd/011:03:590
11823992923,4cyclictest9-21ksoftirqd/010:26:280
11823992923,4cyclictest9-21ksoftirqd/007:49:470
11823992923,4cyclictest9-21ksoftirqd/007:49:470
11823992923,4cyclictest9-21ksoftirqd/007:43:410
11823992923,4cyclictest9-21ksoftirqd/007:43:410
11826992822,4cyclictest41-21ksoftirqd/310:41:153
11824992822,4cyclictest25-21ksoftirqd/112:14:201
11826992722,3cyclictest41-21ksoftirqd/312:31:403
11826992722,3cyclictest41-21ksoftirqd/309:45:283
1182399272,6cyclictest17029-21apt-get09:40:120
1182399272,6cyclictest17029-21apt-get09:40:110
11823992722,3cyclictest9-21ksoftirqd/011:47:350
11823992722,3cyclictest9-21ksoftirqd/011:22:360
11823992722,3cyclictest9-21ksoftirqd/009:13:440
11823992722,3cyclictest9-21ksoftirqd/008:32:340
11823992721,4cyclictest9-21ksoftirqd/012:29:080
11823992721,4cyclictest9-21ksoftirqd/011:13:220
11823992721,3cyclictest9-21ksoftirqd/008:47:060
11826992621,3cyclictest41-21ksoftirqd/310:36:153
11826992621,3cyclictest41-21ksoftirqd/310:27:233
11826992621,3cyclictest41-21ksoftirqd/307:18:173
11824992621,3cyclictest25-21ksoftirqd/112:21:391
11824992621,3cyclictest25-21ksoftirqd/112:21:381
11823992621,3cyclictest9-21ksoftirqd/010:14:510
11823992620,4cyclictest9-21ksoftirqd/010:59:460
11823992620,4cyclictest9-21ksoftirqd/010:18:460
11826992519,4cyclictest41-21ksoftirqd/311:52:013
11826992519,4cyclictest41-21ksoftirqd/311:52:013
11823992520,3cyclictest9-21ksoftirqd/009:00:060
11823992418,4cyclictest9-21ksoftirqd/008:13:540
11823992317,4cyclictest9-21ksoftirqd/008:24:330
11823992014,4cyclictest9-21ksoftirqd/011:50:280
11823992014,4cyclictest9-21ksoftirqd/011:50:280
1182399198,8cyclictest19446-21ptp4l11:55:270
1182399194,11cyclictest5218-21latency_hist12:35:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional