You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-06-15 - 12:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot4.osadl.org (updated Sat Jun 15, 2024 00:46:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
451021740,8sleep03168999cyclictest00:00:280
820721520,7sleep23169199cyclictest23:00:282
1299911440,116ptp4l401ktimersoftd/319:08:453
31269210785,10sleep10-21swapper/119:08:181
31691998573,7cyclictest33-21ksoftirqd/223:40:142
31691998269,8cyclictest33-21ksoftirqd/221:30:112
31691998169,6cyclictest33-21ksoftirqd/222:10:152
31691997966,8cyclictest33-21ksoftirqd/223:45:112
31691997966,7cyclictest33-21ksoftirqd/222:45:092
311552794,63sleep20-21swapper/219:06:522
129991790,2ptp4l391rcuc/319:10:213
31691997764,8cyclictest33-21ksoftirqd/220:15:102
31691997764,8cyclictest33-21ksoftirqd/220:15:092
31691997763,8cyclictest33-21ksoftirqd/222:55:102
31691997462,7cyclictest33-21ksoftirqd/223:55:102
3169099731,28cyclictest12616-21chrt20:54:451
3169099730,30cyclictest9203-21chrt23:03:451
31691997158,7cyclictest33-21ksoftirqd/221:50:102
3115326949,10sleep00-21swapper/019:06:500
31691996855,7cyclictest33-21ksoftirqd/223:50:132
31691996756,7cyclictest33-21ksoftirqd/200:25:092
31691996726,5cyclictest33-21ksoftirqd/200:40:002
31691996726,5cyclictest33-21ksoftirqd/200:39:592
31691996646,8cyclictest33-21ksoftirqd/221:50:012
31691996646,8cyclictest33-21ksoftirqd/221:50:012
31691996154,4cyclictest33-21ksoftirqd/221:35:052
31691996151,6cyclictest33-21ksoftirqd/200:05:042
3169099610,26cyclictest26189-21cstates23:40:161
31691996047,8cyclictest33-21ksoftirqd/222:00:112
31691995952,4cyclictest33-21ksoftirqd/200:00:052
267322590,2sleep10-21swapper/121:25:001
31691995847,6cyclictest33-21ksoftirqd/220:50:082
31691995822,5cyclictest33-21ksoftirqd/220:15:012
31691995744,4cyclictest33-21ksoftirqd/219:51:092
31691995723,4cyclictest33-21ksoftirqd/219:25:012
31691995620,6cyclictest33-21ksoftirqd/219:15:112
31691995620,4cyclictest33-21ksoftirqd/219:10:162
150402560,2sleep30-21swapper/321:00:013
31691995544,7cyclictest33-21ksoftirqd/222:25:122
31691995543,6cyclictest33-21ksoftirqd/220:00:122
31691995513,7cyclictest33-21ksoftirqd/223:25:012
31691995441,10cyclictest33-21ksoftirqd/222:30:232
31691995441,10cyclictest33-21ksoftirqd/222:20:312
31691995438,12cyclictest33-21ksoftirqd/223:25:352
31691995420,5cyclictest33-21ksoftirqd/200:30:352
31691995414,7cyclictest33-21ksoftirqd/223:10:312
31691995414,7cyclictest33-21ksoftirqd/223:10:312
168872540,6sleep116890-21timerandwakeup00:25:311
31691995347,3cyclictest33-21ksoftirqd/222:10:002
31691995339,4cyclictest33-21ksoftirqd/221:30:002
31691995338,4cyclictest33-21ksoftirqd/222:15:112
31691995321,4cyclictest33-21ksoftirqd/221:55:202
31691995315,4cyclictest33-21ksoftirqd/223:35:012
31691995247,3cyclictest33-21ksoftirqd/221:20:002
31691995246,3cyclictest33-21ksoftirqd/219:55:312
31691995245,4cyclictest33-21ksoftirqd/200:10:172
31691995220,4cyclictest33-21ksoftirqd/219:40:362
31691995217,6cyclictest33-21ksoftirqd/219:25:192
31691995145,3cyclictest33-21ksoftirqd/223:10:002
31691995144,4cyclictest33-21ksoftirqd/222:39:592
31691995144,4cyclictest33-21ksoftirqd/220:40:012
31691995119,4cyclictest33-21ksoftirqd/221:00:102
31691995117,4cyclictest33-21ksoftirqd/221:20:122
31691995116,7cyclictest33-21ksoftirqd/220:45:342
31691995114,10cyclictest33-21ksoftirqd/221:40:172
31691995111,8cyclictest33-21ksoftirqd/223:40:012
31691995044,3cyclictest33-21ksoftirqd/220:07:252
31691995041,5cyclictest33-21ksoftirqd/222:44:592
31691995019,4cyclictest33-21ksoftirqd/200:20:142
31691995018,10cyclictest33-21ksoftirqd/200:15:082
31691995013,5cyclictest33-21ksoftirqd/220:30:162
31689995043,4cyclictest9014-21anacron23:01:260
56498490,5rtkit-daemon25-21ksoftirqd/120:30:321
3169199495,7cyclictest121rcu_preempt21:15:002
31691994942,4cyclictest33-21ksoftirqd/222:50:222
31691994942,4cyclictest33-21ksoftirqd/220:20:162
31691994941,4cyclictest33-21ksoftirqd/219:40:012
31691994935,4cyclictest33-21ksoftirqd/220:40:292
31691994912,6cyclictest33-21ksoftirqd/223:20:002
31692994831,14cyclictest41-21ksoftirqd/323:45:583
31691994841,4cyclictest33-21ksoftirqd/220:55:132
31691994841,4cyclictest33-21ksoftirqd/220:30:002
129991480,23ptp4l3169299cyclictest19:25:133
31692994730,14cyclictest41-21ksoftirqd/323:06:433
31691994742,3cyclictest33-21ksoftirqd/219:50:002
31691994741,3cyclictest33-21ksoftirqd/219:35:002
31692994639,4cyclictest27666-21cron22:34:593
3169199464,4cyclictest121rcu_preempt21:05:192
31689994639,4cyclictest1681-21cron21:39:590
31692994536,7cyclictest41-21ksoftirqd/300:24:373
31692994528,14cyclictest41-21ksoftirqd/300:27:143
31692994528,14cyclictest41-21ksoftirqd/300:12:363
3169099451,40cyclictest10041-21grep00:10:381
3169099451,29cyclictest588-21gdbus19:51:091
31690994438,4cyclictest25-21ksoftirqd/123:57:271
31690994434,7cyclictest25-21ksoftirqd/120:17:571
31690994434,7cyclictest25-21ksoftirqd/120:17:571
31689994437,4cyclictest9-21ksoftirqd/019:51:080
31689994437,4cyclictest9-21ksoftirqd/019:40:580
45422430,9sleep33169299cyclictest20:35:233
3169099433,32cyclictest0-21swapper/122:40:141
3169099432,34cyclictest3373-21apt-get00:00:111
31692994236,4cyclictest41-21ksoftirqd/323:33:273
3169099422,31cyclictest0-21swapper/119:35:071
250062420,2sleep00-21swapper/021:20:140
1298914235,3phc2sys41-21ksoftirqd/322:55:303
31689994133,5cyclictest9-21ksoftirqd/022:44:080
31692994033,4cyclictest41-21ksoftirqd/323:57:353
31692994033,4cyclictest41-21ksoftirqd/300:01:483
31692994032,5cyclictest41-21ksoftirqd/319:17:513
31690994034,3cyclictest25-21ksoftirqd/123:05:221
31690994033,4cyclictest25-21ksoftirqd/122:55:001
31689994034,4cyclictest9-21ksoftirqd/022:01:370
31689994032,4cyclictest9-21ksoftirqd/021:16:580
31692993932,4cyclictest41-21ksoftirqd/300:38:463
31692993932,4cyclictest41-21ksoftirqd/300:38:453
31690993932,4cyclictest25-21ksoftirqd/122:57:541
31690993932,4cyclictest25-21ksoftirqd/121:58:241
31690993932,4cyclictest25-21ksoftirqd/121:53:071
31690993932,4cyclictest25-21ksoftirqd/120:25:381
31690993932,4cyclictest25-21ksoftirqd/119:29:331
31690993932,3cyclictest25-21ksoftirqd/120:03:321
31690993931,5cyclictest25-21ksoftirqd/119:43:111
3169099392,29cyclictest2006-21apt-get21:40:141
31690993912,24cyclictest31552-21latency_hist21:35:001
31690993912,22cyclictest17763-21apt-get00:30:121
31689993933,4cyclictest9-21ksoftirqd/020:13:460
31689993933,3cyclictest9-21ksoftirqd/023:59:590
31689993933,3cyclictest9-21ksoftirqd/020:53:150
31689993933,3cyclictest9-21ksoftirqd/020:02:580
31689993932,4cyclictest9-21ksoftirqd/023:10:110
31689993932,4cyclictest9-21ksoftirqd/023:10:100
31689993932,4cyclictest9-21ksoftirqd/022:50:020
31689993932,4cyclictest9-21ksoftirqd/021:57:440
31689993932,4cyclictest9-21ksoftirqd/021:31:130
31689993932,4cyclictest9-21ksoftirqd/021:05:560
3169299383,30cyclictest0-21swapper/322:05:133
31692993832,4cyclictest41-21ksoftirqd/319:57:443
31692993831,4cyclictest41-21ksoftirqd/322:52:103
31692993831,4cyclictest41-21ksoftirqd/321:22:233
31692993831,4cyclictest41-21ksoftirqd/321:00:123
31692993831,4cyclictest41-21ksoftirqd/319:47:343
31692993829,5cyclictest41-21ksoftirqd/321:05:153
31690993832,4cyclictest25-21ksoftirqd/122:33:381
31690993831,4cyclictest25-21ksoftirqd/122:00:411
31690993831,4cyclictest25-21ksoftirqd/100:38:081
31690993831,4cyclictest25-21ksoftirqd/100:38:071
31690993830,5cyclictest25-21ksoftirqd/100:08:451
3169099382,33cyclictest15129-21cron00:25:001
3169099382,29cyclictest10753-21apt-get00:15:101
31690993812,23cyclictest18159-21sed23:20:361
31690993811,24cyclictest19788-21date21:09:591
31689993832,3cyclictest9-21ksoftirqd/020:46:320
31689993832,3cyclictest9-21ksoftirqd/000:12:030
31689993831,4cyclictest9-21ksoftirqd/023:55:010
31689993831,4cyclictest9-21ksoftirqd/021:48:380
31689993831,4cyclictest9-21ksoftirqd/021:48:370
31689993831,4cyclictest9-21ksoftirqd/021:27:240
31689993831,4cyclictest9-21ksoftirqd/020:24:450
31689993831,4cyclictest9-21ksoftirqd/019:45:440
31689993831,4cyclictest9-21ksoftirqd/000:21:090
129991380,13ptp4l3169299cyclictest21:39:033
3169299373,29cyclictest0-21swapper/323:10:123
3169299373,29cyclictest0-21swapper/323:10:123
3169299373,28cyclictest0-21swapper/323:35:103
31692993731,4cyclictest41-21ksoftirqd/322:39:173
31692993731,4cyclictest41-21ksoftirqd/321:19:003
31692993730,4cyclictest41-21ksoftirqd/322:47:093
31692993730,4cyclictest41-21ksoftirqd/322:43:323
31692993730,4cyclictest41-21ksoftirqd/322:23:323
31692993730,4cyclictest41-21ksoftirqd/320:47:523
31692993730,4cyclictest41-21ksoftirqd/320:44:153
31692993730,4cyclictest41-21ksoftirqd/320:19:073
31692993730,4cyclictest41-21ksoftirqd/320:19:063
31692993712,22cyclictest11147-21grep19:35:293
31690993731,4cyclictest25-21ksoftirqd/120:22:511
31690993731,3cyclictest25-21ksoftirqd/120:14:011
31690993730,4cyclictest25-21ksoftirqd/123:48:421
31690993730,4cyclictest25-21ksoftirqd/123:15:041
31690993730,4cyclictest25-21ksoftirqd/123:13:291
31690993730,4cyclictest25-21ksoftirqd/123:13:291
31690993730,4cyclictest25-21ksoftirqd/120:47:541
31690993730,4cyclictest25-21ksoftirqd/119:12:301
3169099372,29cyclictest4423-21apt-get21:45:121
3169099372,29cyclictest4423-21apt-get21:45:111
31690993711,23cyclictest6242-21expr20:40:151
31690993711,22cyclictest20687-21sed21:10:201
31689993732,3cyclictest9-21ksoftirqd/000:20:000
31689993731,3cyclictest9-21ksoftirqd/000:32:580
31689993730,4cyclictest9-21ksoftirqd/022:47:460
31689993730,4cyclictest9-21ksoftirqd/022:26:500
31689993730,4cyclictest9-21ksoftirqd/021:52:090
31689993730,4cyclictest9-21ksoftirqd/019:58:310
129991370,15ptp4l3169299cyclictest19:30:283
1298913728,5phc2sys41-21ksoftirqd/321:50:143
31692993630,3cyclictest41-21ksoftirqd/322:17:583
31692993630,3cyclictest41-21ksoftirqd/320:10:093
31692993630,3cyclictest41-21ksoftirqd/319:50:523
31692993629,4cyclictest41-21ksoftirqd/323:26:033
31692993629,4cyclictest41-21ksoftirqd/323:02:593
31692993629,4cyclictest41-21ksoftirqd/321:28:553
31692993629,4cyclictest41-21ksoftirqd/320:06:013
31692993629,4cyclictest41-21ksoftirqd/320:04:283
31692993629,4cyclictest41-21ksoftirqd/300:15:053
31692993628,5cyclictest41-21ksoftirqd/322:04:083
31692993620,13cyclictest41-21ksoftirqd/321:48:513
31692993620,13cyclictest41-21ksoftirqd/321:48:503
31692993613,20cyclictest12056-21sed20:50:333
31690993629,4cyclictest25-21ksoftirqd/120:09:561
31690993613,20cyclictest4642-21grep20:35:251
31690993610,23cyclictest5611-21timerwakeupswit19:20:371
31689993631,3cyclictest9-21ksoftirqd/020:18:470
31689993631,3cyclictest9-21ksoftirqd/020:18:460
31689993630,4cyclictest9-21ksoftirqd/020:05:330
31689993629,4cyclictest9-21ksoftirqd/023:48:360
31689993629,4cyclictest9-21ksoftirqd/023:32:190
31689993629,4cyclictest9-21ksoftirqd/023:07:400
31689993629,4cyclictest9-21ksoftirqd/022:38:070
31689993629,4cyclictest9-21ksoftirqd/020:26:210
31689993629,4cyclictest9-21ksoftirqd/019:17:000
31689993629,4cyclictest9-21ksoftirqd/000:37:030
31689993629,4cyclictest9-21ksoftirqd/000:37:020
31689993629,4cyclictest9-21ksoftirqd/000:09:530
31689993628,5cyclictest9-21ksoftirqd/019:21:250
31692993530,3cyclictest41-21ksoftirqd/319:23:543
31692993528,4cyclictest41-21ksoftirqd/323:52:493
31692993528,4cyclictest41-21ksoftirqd/323:40:023
31692993528,4cyclictest41-21ksoftirqd/323:24:593
31692993528,4cyclictest41-21ksoftirqd/320:32:093
31692993528,4cyclictest41-21ksoftirqd/300:30:123
3169099358,23cyclictest18089-21cron22:15:001
31690993528,4cyclictest25-21ksoftirqd/122:28:031
3169099351,30cyclictest2183-21perl19:15:161
31689993529,3cyclictest9-21ksoftirqd/020:32:420
31689993528,4cyclictest9-21ksoftirqd/023:36:220
31689993528,4cyclictest9-21ksoftirqd/022:58:010
31689993528,4cyclictest9-21ksoftirqd/022:20:590
3169299346,4cyclictest13529-21sed19:40:333
3169299343,27cyclictest0-21swapper/320:20:093
31692993428,3cyclictest41-21ksoftirqd/322:26:073
31692993427,4cyclictest41-21ksoftirqd/323:15:393
31692993427,4cyclictest41-21ksoftirqd/321:41:083
31692993411,20cyclictest21336-21sort21:10:303
31690993427,4cyclictest25-21ksoftirqd/122:38:551
31690993426,5cyclictest25-21ksoftirqd/123:39:141
3169099341,29cyclictest18392-21apt-get22:15:091
3169099340,30cyclictest31553-21apt-get21:35:051
31689993428,4cyclictest9-21ksoftirqd/021:13:420
31689993428,3cyclictest9-21ksoftirqd/023:23:530
31689993428,3cyclictest9-21ksoftirqd/000:28:040
31689993427,4cyclictest9-21ksoftirqd/021:04:390
31689993426,5cyclictest9-21ksoftirqd/019:14:580
31692993326,4cyclictest41-21ksoftirqd/321:57:433
31692993326,4cyclictest41-21ksoftirqd/320:27:243
31692993325,5cyclictest41-21ksoftirqd/321:31:043
3169099337,23cyclictest20329-21switchtime23:25:331
3169099337,23cyclictest15415-21cut21:00:141
3169099337,22cyclictest14330-21if_enp1s022:05:201
3169099336,23cyclictest21471-21expr23:30:121
31690993326,5cyclictest25-21ksoftirqd/119:55:501
31690993326,4cyclictest25-21ksoftirqd/122:49:231
3169099331,28cyclictest14662-21grep19:50:011
3169099331,28cyclictest12944-21apt-get20:55:091
3169099331,26cyclictest22316-21apt-get21:15:121
3169099330,29cyclictest32215-21grep23:50:331
31689993328,3cyclictest9-21ksoftirqd/022:32:230
31689993327,3cyclictest9-21ksoftirqd/023:19:400
31689993326,4cyclictest9-21ksoftirqd/022:08:270
31689993326,4cyclictest9-21ksoftirqd/021:42:220
31689993326,4cyclictest9-21ksoftirqd/020:37:570
3169299326,4cyclictest16377-21df_abs22:10:183
3169099327,22cyclictest9268-21cron19:35:011
3169099323,25cyclictest28113-21proc_pri21:25:271
3169099320,28cyclictest21403-21/usr/sbin/munin22:20:161
31689993226,3cyclictest9-21ksoftirqd/022:19:310
31689993226,3cyclictest9-21ksoftirqd/020:55:370
31689993225,4cyclictest9-21ksoftirqd/020:43:070
3168999315,15cyclictest561-21rs:main0
31689993125,4cyclictest9-21ksoftirqd/019:34:180
31689993125,3cyclictest9-21ksoftirqd/023:43:500
3169299306,3cyclictest0-21swapper/300:05:183
31689992721,4cyclictest9-21ksoftirqd/022:12:370
31689992520,3cyclictest9-21ksoftirqd/023:28:250
31689992518,4cyclictest9-21ksoftirqd/019:39:440
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional