You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-04-15 - 20:17
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Mon Apr 15, 2024 12:46:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3229021630,7sleep23123199cyclictest11:45:172
1299911420,25ptp4l401ktimersoftd/307:09:423
1384821350,8sleep13123099cyclictest07:40:251
564981260,99rtkit-daemon8585-21apache207:07:080
2761721140,5sleep23123199cyclictest11:35:172
31231998975,7cyclictest33-21ksoftirqd/209:00:072
31229998072,5cyclictest9-21ksoftirqd/010:30:070
31229997971,5cyclictest9-21ksoftirqd/011:35:060
31229997871,4cyclictest9-21ksoftirqd/008:20:060
31231997763,9cyclictest33-21ksoftirqd/211:20:062
31231997763,9cyclictest33-21ksoftirqd/211:20:062
31229997668,4cyclictest9-21ksoftirqd/008:25:070
31229997668,4cyclictest9-21ksoftirqd/008:25:060
31231997539,6cyclictest33-21ksoftirqd/207:55:132
308122754,58sleep20-21swapper/207:08:262
31231997437,6cyclictest33-21ksoftirqd/207:15:012
31229997467,4cyclictest9-21ksoftirqd/010:55:060
31229997466,5cyclictest9-21ksoftirqd/011:25:060
31229997466,5cyclictest9-21ksoftirqd/011:25:060
31229997464,5cyclictest9-21ksoftirqd/009:10:080
129991740,1ptp4l401ktimersoftd/309:03:323
31231997335,5cyclictest33-21ksoftirqd/208:40:012
31229997364,5cyclictest9-21ksoftirqd/007:30:060
309142724,55sleep10-21swapper/107:09:431
31231997134,10cyclictest33-21ksoftirqd/210:00:102
31229997162,6cyclictest9-21ksoftirqd/010:00:060
31229997162,5cyclictest9-21ksoftirqd/012:05:060
31229997162,5cyclictest9-21ksoftirqd/009:20:060
31231997031,10cyclictest33-21ksoftirqd/210:15:262
31229997062,4cyclictest9-21ksoftirqd/009:30:080
31231996932,7cyclictest33-21ksoftirqd/208:50:312
31231996931,7cyclictest33-21ksoftirqd/209:05:302
31231996931,5cyclictest33-21ksoftirqd/209:30:212
31229996960,5cyclictest9-21ksoftirqd/009:15:050
31231996833,5cyclictest33-21ksoftirqd/212:20:222
31231996833,5cyclictest33-21ksoftirqd/208:45:332
3123199678,9cyclictest33-21ksoftirqd/209:45:192
3123199677,9cyclictest33-21ksoftirqd/211:10:002
31231996732,5cyclictest33-21ksoftirqd/211:50:042
31229996758,5cyclictest9-21ksoftirqd/011:50:050
129991670,2ptp4l401ktimersoftd/310:15:273
3123199667,8cyclictest24364-21apt08:05:002
3123199665,9cyclictest33-21ksoftirqd/209:44:592
3123199665,10cyclictest33-21ksoftirqd/208:25:372
3123199665,10cyclictest33-21ksoftirqd/208:25:362
31231996629,5cyclictest33-21ksoftirqd/212:25:152
31231996629,4cyclictest33-21ksoftirqd/208:20:122
31229996634,7cyclictest9-21ksoftirqd/009:35:270
3123199656,9cyclictest33-21ksoftirqd/208:05:342
31231996558,4cyclictest33-21ksoftirqd/212:35:052
31231996531,4cyclictest33-21ksoftirqd/211:25:082
31231996531,4cyclictest33-21ksoftirqd/211:25:072
31231996527,9cyclictest33-21ksoftirqd/211:10:202
3123199646,9cyclictest33-21ksoftirqd/210:25:072
3123199646,9cyclictest10157-21needreboot08:40:232
3123199645,10cyclictest33-21ksoftirqd/209:25:162
3123199645,10cyclictest33-21ksoftirqd/209:10:132
31231996429,5cyclictest33-21ksoftirqd/207:35:072
31231996428,5cyclictest33-21ksoftirqd/207:50:202
31231996425,9cyclictest33-21ksoftirqd/207:25:122
99992630,8sleep23123199cyclictest11:00:002
3123199636,9cyclictest9908-21grep07:30:342
3123199635,9cyclictest33-21ksoftirqd/209:35:082
3123199634,10cyclictest33-21ksoftirqd/210:05:122
31229996354,6cyclictest9-21ksoftirqd/007:25:050
31229996352,7cyclictest9-21ksoftirqd/010:10:060
129991630,1ptp4l401ktimersoftd/308:10:153
3123199627,10cyclictest33-21ksoftirqd/207:15:142
3123199626,11cyclictest33-21ksoftirqd/208:55:262
3123199625,9cyclictest33-21ksoftirqd/210:35:082
3123199624,9cyclictest33-21ksoftirqd/210:15:012
3123199623,8cyclictest33-21ksoftirqd/207:45:012
31231996227,6cyclictest33-21ksoftirqd/208:13:312
31231996225,6cyclictest33-21ksoftirqd/207:45:062
31229996253,6cyclictest9-21ksoftirqd/010:05:060
3123199613,9cyclictest33-21ksoftirqd/210:45:012
245182610,3sleep30-21swapper/308:05:003
129991610,2ptp4l0-21swapper/307:18:163
129991610,1ptp4l401ktimersoftd/309:40:363
3123199605,7cyclictest33-21ksoftirqd/212:30:122
3123199602,9cyclictest33-21ksoftirqd/209:55:162
31231996024,11cyclictest33-21ksoftirqd/210:30:062
3123199601,8cyclictest27932-21sendmail-msp09:20:002
56498590,14rtkit-daemon563-21rtkit-daemon07:20:141
3123199597,8cyclictest33-21ksoftirqd/212:00:212
3123199597,7cyclictest33-21ksoftirqd/207:20:222
3123199594,9cyclictest33-21ksoftirqd/211:00:082
3123199594,10cyclictest33-21ksoftirqd/212:15:082
3123199593,8cyclictest33-21ksoftirqd/210:20:182
31229995913,9cyclictest9-21ksoftirqd/007:20:260
153712590,5sleep1241ktimersoftd/112:20:051
3123199587,8cyclictest33-21ksoftirqd/210:45:112
3123199586,6cyclictest33-21ksoftirqd/211:40:132
3123199584,9cyclictest33-21ksoftirqd/209:20:152
3123199584,12cyclictest33-21ksoftirqd/210:50:052
3123199583,13cyclictest33-21ksoftirqd/211:15:062
3123199582,8cyclictest33-21ksoftirqd/212:05:222
31231995821,10cyclictest33-21ksoftirqd/208:31:042
31229995852,3cyclictest24344-21sh08:05:000
3123199573,10cyclictest33-21ksoftirqd/208:15:102
3123199572,9cyclictest33-21ksoftirqd/209:50:072
3123199571,7cyclictest33-21ksoftirqd/211:30:182
3123199565,9cyclictest33-21ksoftirqd/212:10:072
3123199562,8cyclictest33-21ksoftirqd/212:00:012
31229995619,8cyclictest9-21ksoftirqd/012:15:000
257562550,2sleep10-21swapper/109:15:001
163502540,2sleep30-21swapper/311:10:213
3122999539,8cyclictest9-21ksoftirqd/009:55:160
31229995319,4cyclictest9-21ksoftirqd/008:35:280
56498520,2rtkit-daemon563-21rtkit-daemon07:45:311
31229995246,4cyclictest9-21ksoftirqd/011:05:000
3122999521,47cyclictest17419-21cron12:24:590
157962520,2sleep10-21swapper/110:00:211
31229995146,3cyclictest9-21ksoftirqd/009:55:000
31229995144,4cyclictest9-21ksoftirqd/007:50:000
31232995043,4cyclictest14549-21cron11:09:593
31229995044,3cyclictest9-21ksoftirqd/012:20:000
31229995044,3cyclictest9-21ksoftirqd/011:09:590
31229995041,4cyclictest9-21ksoftirqd/010:35:050
129991500,1ptp4l401ktimersoftd/310:38:143
31229994943,3cyclictest9-21ksoftirqd/012:35:000
31229994941,5cyclictest9-21ksoftirqd/011:10:040
31229994941,4cyclictest9-21ksoftirqd/010:25:010
129991490,1ptp4l401ktimersoftd/310:20:093
31229994842,4cyclictest9-21ksoftirqd/009:10:000
31229994842,4cyclictest9-21ksoftirqd/007:10:160
31229994842,3cyclictest2851-21cron10:44:590
31230994742,3cyclictest25-21ksoftirqd/111:20:001
31229994742,3cyclictest9-21ksoftirqd/009:29:590
31229994741,4cyclictest9-21ksoftirqd/011:50:000
31229994741,3cyclictest9-21ksoftirqd/010:20:000
31229994740,4cyclictest9-21ksoftirqd/010:30:000
3122999470,5cyclictest3258-21sshd07:19:280
31229994641,3cyclictest9-21ksoftirqd/009:00:010
31229994641,3cyclictest9-21ksoftirqd/008:50:010
31229994640,3cyclictest9-21ksoftirqd/012:05:000
31229994639,4cyclictest9-21ksoftirqd/011:40:060
31229994639,4cyclictest9-21ksoftirqd/007:50:130
31229994639,3cyclictest9-21ksoftirqd/012:30:000
31229994638,5cyclictest9-21ksoftirqd/012:40:000
31229994540,3cyclictest9-21ksoftirqd/008:10:000
31229994539,4cyclictest9-21ksoftirqd/010:45:240
31229994539,4cyclictest9-21ksoftirqd/009:45:070
31229994539,3cyclictest9-21ksoftirqd/008:45:010
31229994539,3cyclictest9-21ksoftirqd/008:35:000
31229994539,3cyclictest9-21ksoftirqd/007:45:000
31229994538,4cyclictest9-21ksoftirqd/011:20:150
31229994538,4cyclictest9-21ksoftirqd/011:20:140
31229994521,3cyclictest9-21ksoftirqd/007:35:100
31229994512,5cyclictest9-21ksoftirqd/011:15:150
31230994438,4cyclictest25-21ksoftirqd/109:35:281
31230994437,4cyclictest25-21ksoftirqd/107:40:001
31229994438,4cyclictest9-21ksoftirqd/008:00:000
31229994438,3cyclictest9-21ksoftirqd/008:20:010
31229994437,4cyclictest9-21ksoftirqd/011:30:170
31229994437,4cyclictest9-21ksoftirqd/008:50:040
31229994437,3cyclictest9-21ksoftirqd/009:00:100
31229994426,4cyclictest9-21ksoftirqd/009:40:230
31232994337,3cyclictest41-21ksoftirqd/312:20:003
31229994338,3cyclictest9-21ksoftirqd/008:10:090
31229994337,3cyclictest9-21ksoftirqd/011:55:210
31232994235,4cyclictest41-21ksoftirqd/311:18:203
31230994237,3cyclictest25-21ksoftirqd/112:20:001
31229994235,4cyclictest9-21ksoftirqd/010:50:150
129991420,1ptp4l401ktimersoftd/311:45:343
31232994134,4cyclictest41-21ksoftirqd/307:24:173
3123099410,3cyclictest121rcu_preempt08:56:401
31232994034,4cyclictest41-21ksoftirqd/307:41:593
31232994034,3cyclictest41-21ksoftirqd/312:05:353
31232994034,3cyclictest41-21ksoftirqd/307:48:193
31230994035,3cyclictest25-21ksoftirqd/110:50:111
31230994034,3cyclictest25-21ksoftirqd/108:29:481
31230994034,3cyclictest25-21ksoftirqd/108:29:481
31230994034,3cyclictest25-21ksoftirqd/108:22:421
31230994033,4cyclictest25-21ksoftirqd/107:17:401
31230994033,4cyclictest25-21ksoftirqd/107:14:281
129991400,1ptp4l401ktimersoftd/308:55:333
108812400,2sleep30-21swapper/312:10:073
31232993932,4cyclictest41-21ksoftirqd/312:23:583
31232993932,4cyclictest41-21ksoftirqd/309:11:053
31232993932,4cyclictest41-21ksoftirqd/308:40:053
31230993933,4cyclictest25-21ksoftirqd/109:06:251
31230993933,3cyclictest25-21ksoftirqd/109:21:061
31230993933,3cyclictest25-21ksoftirqd/108:49:031
31230993932,4cyclictest25-21ksoftirqd/112:34:001
31230993932,4cyclictest25-21ksoftirqd/111:42:451
31230993932,4cyclictest25-21ksoftirqd/109:53:221
31230993932,4cyclictest25-21ksoftirqd/107:34:561
129991390,1ptp4l401ktimersoftd/311:40:223
129991390,1ptp4l401ktimersoftd/310:50:123
129991390,1ptp4l401ktimersoftd/309:25:023
31232993832,3cyclictest41-21ksoftirqd/307:52:283
31232993831,4cyclictest41-21ksoftirqd/310:08:043
31230993832,3cyclictest25-21ksoftirqd/108:42:451
31230993832,3cyclictest25-21ksoftirqd/107:29:261
31230993831,4cyclictest25-21ksoftirqd/112:05:461
31230993831,4cyclictest25-21ksoftirqd/111:20:491
31230993831,4cyclictest25-21ksoftirqd/111:20:491
31230993831,4cyclictest25-21ksoftirqd/110:36:071
31230993831,4cyclictest25-21ksoftirqd/110:31:321
31230993831,4cyclictest25-21ksoftirqd/110:10:361
31230993831,4cyclictest25-21ksoftirqd/108:33:251
31230993831,4cyclictest25-21ksoftirqd/107:53:301
129991380,1ptp4l401ktimersoftd/307:10:193
31232993731,3cyclictest41-21ksoftirqd/311:53:383
31232993730,4cyclictest41-21ksoftirqd/312:28:063
31232993730,4cyclictest41-21ksoftirqd/312:02:403
31232993730,4cyclictest41-21ksoftirqd/311:57:223
31232993730,4cyclictest41-21ksoftirqd/309:35:493
31232993730,4cyclictest41-21ksoftirqd/309:23:253
31232993730,4cyclictest41-21ksoftirqd/308:36:583
31232993730,4cyclictest41-21ksoftirqd/308:28:423
31232993730,4cyclictest41-21ksoftirqd/308:28:413
31230993732,3cyclictest25-21ksoftirqd/108:19:311
31230993731,3cyclictest25-21ksoftirqd/111:03:011
31230993730,4cyclictest25-21ksoftirqd/111:33:151
31230993730,4cyclictest25-21ksoftirqd/109:48:001
31230993730,4cyclictest25-21ksoftirqd/109:33:301
31230993730,4cyclictest25-21ksoftirqd/109:28:211
31230993730,4cyclictest25-21ksoftirqd/107:59:201
31230993729,5cyclictest25-21ksoftirqd/111:53:551
129991370,1ptp4l401ktimersoftd/309:57:013
1298913729,4phc2sys41-21ksoftirqd/310:45:113
31232993630,3cyclictest41-21ksoftirqd/312:37:173
31232993630,3cyclictest41-21ksoftirqd/310:29:353
31232993630,3cyclictest41-21ksoftirqd/310:11:523
31232993630,3cyclictest41-21ksoftirqd/308:20:393
31232993630,3cyclictest41-21ksoftirqd/307:31:063
31232993630,3cyclictest41-21ksoftirqd/307:29:113
31232993629,4cyclictest41-21ksoftirqd/311:21:063
31232993629,4cyclictest41-21ksoftirqd/311:21:053
31232993629,4cyclictest41-21ksoftirqd/310:42:593
31232993629,4cyclictest41-21ksoftirqd/308:50:013
31232993629,4cyclictest41-21ksoftirqd/307:58:263
31230993630,4cyclictest25-21ksoftirqd/110:17:391
31230993630,3cyclictest25-21ksoftirqd/111:06:021
31230993630,3cyclictest25-21ksoftirqd/110:50:001
31230993630,3cyclictest25-21ksoftirqd/109:44:581
31230993629,4cyclictest25-21ksoftirqd/112:27:151
129991360,1ptp4l401ktimersoftd/310:03:573
31232993530,3cyclictest41-21ksoftirqd/311:35:223
31232993529,3cyclictest41-21ksoftirqd/309:17:243
31232993528,4cyclictest41-21ksoftirqd/311:02:483
31232993528,4cyclictest41-21ksoftirqd/309:47:273
31232993528,4cyclictest41-21ksoftirqd/309:08:313
31232993528,4cyclictest41-21ksoftirqd/308:08:253
31232993527,5cyclictest41-21ksoftirqd/310:56:313
31232993527,5cyclictest41-21ksoftirqd/308:17:413
31230993529,3cyclictest25-21ksoftirqd/109:03:121
31230993528,4cyclictest25-21ksoftirqd/112:38:121
31230993528,4cyclictest25-21ksoftirqd/112:04:441
31230993528,4cyclictest25-21ksoftirqd/110:27:031
31232993428,3cyclictest41-21ksoftirqd/311:31:343
31232993427,4cyclictest41-21ksoftirqd/310:31:543
31230993428,4cyclictest25-21ksoftirqd/110:40:351
31230993428,3cyclictest25-21ksoftirqd/108:05:101
31230993427,4cyclictest25-21ksoftirqd/111:46:451
31230993427,4cyclictest25-21ksoftirqd/111:37:381
31230993427,4cyclictest25-21ksoftirqd/109:19:461
129991340,1ptp4l401ktimersoftd/308:30:513
31232993326,4cyclictest41-21ksoftirqd/308:50:533
31230993327,3cyclictest25-21ksoftirqd/112:10:541
31230993327,3cyclictest25-21ksoftirqd/109:57:521
31230993327,3cyclictest25-21ksoftirqd/108:03:481
31230993326,4cyclictest25-21ksoftirqd/111:57:581
31230993326,4cyclictest25-21ksoftirqd/110:09:001
31232993225,4cyclictest41-21ksoftirqd/311:28:233
31232993225,4cyclictest41-21ksoftirqd/311:28:233
31230993227,3cyclictest25-21ksoftirqd/108:38:581
31230993226,4cyclictest25-21ksoftirqd/111:26:461
31230993226,4cyclictest25-21ksoftirqd/111:26:451
31230993226,3cyclictest25-21ksoftirqd/108:54:221
31232993125,3cyclictest41-21ksoftirqd/312:34:543
31230993125,3cyclictest25-21ksoftirqd/111:13:151
31230993124,4cyclictest25-21ksoftirqd/110:21:441
31230993023,4cyclictest25-21ksoftirqd/108:11:131
31232992923,3cyclictest41-21ksoftirqd/307:35:433
31230992923,3cyclictest25-21ksoftirqd/110:55:391
31232992721,3cyclictest41-21ksoftirqd/309:53:413
31232992720,4cyclictest41-21ksoftirqd/309:32:063
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional