You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-07-13 - 20:27
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Sat Jul 13, 2024 00:46:24)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1949423370,5sleep30-21swapper/319:09:233
1949423370,5sleep30-21swapper/319:09:223
2441522960,3sleep00-21swapper/019:09:310
2441522960,3sleep00-21swapper/019:09:310
2970222260,7sleep129670-21sh19:06:531
2970222260,7sleep129670-21sh19:06:531
320422110,6sleep23202-21od19:07:392
320422110,6sleep23202-21od19:07:392
2903921320,9sleep1769399cyclictest19:10:451
580721130,8sleep0769299cyclictest19:12:050
7695998268,8cyclictest41-21ksoftirqd/320:40:113
7695998268,8cyclictest41-21ksoftirqd/320:40:113
769499797,23cyclictest1464-21/usr/sbin/munin22:20:292
769499740,25cyclictest12936-21latency20:25:262
7695997359,7cyclictest41-21ksoftirqd/322:55:113
7694997330,21cyclictest33-21ksoftirqd/223:08:592
7695997128,7cyclictest41-21ksoftirqd/321:34:163
7695996855,7cyclictest41-21ksoftirqd/320:00:093
7695996755,6cyclictest41-21ksoftirqd/323:50:123
7695996755,6cyclictest41-21ksoftirqd/323:05:103
7695996754,7cyclictest41-21ksoftirqd/319:20:103
129991670,1ptp4l401ktimersoftd/300:31:303
7695996654,7cyclictest41-21ksoftirqd/300:25:123
135812650,4sleep2769499cyclictest19:10:162
115822650,2sleep10-21swapper/123:50:141
7695996451,7cyclictest41-21ksoftirqd/322:25:123
7695996349,8cyclictest41-21ksoftirqd/322:35:123
7693996348,9cyclictest25-21ksoftirqd/121:15:111
7693996147,9cyclictest25-21ksoftirqd/122:40:111
7693996146,9cyclictest25-21ksoftirqd/119:35:101
129991610,1ptp4l401ktimersoftd/319:50:143
84422600,2sleep30-21swapper/321:25:143
7695996053,4cyclictest41-21ksoftirqd/320:19:593
7695996052,5cyclictest41-21ksoftirqd/321:05:093
7695996049,6cyclictest41-21ksoftirqd/323:00:133
7695996048,6cyclictest41-21ksoftirqd/322:30:123
129991600,1ptp4l401ktimersoftd/322:00:453
129991600,1ptp4l401ktimersoftd/320:09:523
7695995948,6cyclictest41-21ksoftirqd/323:55:113
7693995946,7cyclictest25-21ksoftirqd/121:50:121
7695995750,4cyclictest41-21ksoftirqd/319:12:063
7695995745,7cyclictest41-21ksoftirqd/319:25:103
7695995651,3cyclictest41-21ksoftirqd/321:00:003
7695995648,4cyclictest41-21ksoftirqd/300:40:003
7695995645,6cyclictest41-21ksoftirqd/322:20:093
7693995650,4cyclictest25-21ksoftirqd/123:40:001
7695995549,3cyclictest41-21ksoftirqd/321:25:013
7695995548,3cyclictest41-21ksoftirqd/321:20:013
7695995541,8cyclictest41-21ksoftirqd/323:10:123
7695995539,9cyclictest41-21ksoftirqd/319:55:113
7695995448,3cyclictest41-21ksoftirqd/300:05:003
7695995442,8cyclictest41-21ksoftirqd/320:25:133
7695995347,3cyclictest41-21ksoftirqd/322:15:003
7695995339,7cyclictest41-21ksoftirqd/300:10:103
769499531,29cyclictest4075-21irqrtprio21:15:232
7693995247,3cyclictest25-21ksoftirqd/100:34:591
7693995246,3cyclictest25-21ksoftirqd/122:20:011
56498520,2rtkit-daemon0-21swapper/022:40:130
7695995144,4cyclictest41-21ksoftirqd/319:20:003
7695995144,4cyclictest41-21ksoftirqd/319:20:003
7693995145,3cyclictest25-21ksoftirqd/100:10:011
7693995144,4cyclictest25-21ksoftirqd/122:30:131
7693995144,4cyclictest25-21ksoftirqd/121:05:111
56498510,2rtkit-daemon0-21swapper/119:59:011
7695995044,4cyclictest41-21ksoftirqd/300:24:593
7695995043,4cyclictest41-21ksoftirqd/319:40:013
7695995039,6cyclictest41-21ksoftirqd/322:50:113
7693995045,3cyclictest25-21ksoftirqd/122:00:001
7693995043,4cyclictest25-21ksoftirqd/123:50:001
7693995043,4cyclictest25-21ksoftirqd/122:14:591
7693995036,7cyclictest25-21ksoftirqd/119:40:121
7695994944,3cyclictest41-21ksoftirqd/300:20:003
7695994943,3cyclictest41-21ksoftirqd/321:55:013
7695994942,4cyclictest41-21ksoftirqd/320:55:013
7695994942,4cyclictest41-21ksoftirqd/320:50:003
7695994914,8cyclictest41-21ksoftirqd/300:05:103
7695994912,8cyclictest41-21ksoftirqd/321:45:413
769499490,32cyclictest30540-21kill19:55:192
7693994942,4cyclictest25-21ksoftirqd/121:34:151
7693994942,4cyclictest25-21ksoftirqd/120:40:001
7693994942,4cyclictest25-21ksoftirqd/120:35:001
769399490,6cyclictest131rcu_sched19:54:281
56498490,2rtkit-daemon0-21swapper/022:13:450
212782490,5sleep09-21ksoftirqd/019:35:340
7695994842,3cyclictest41-21ksoftirqd/321:15:013
7695994841,4cyclictest41-21ksoftirqd/321:35:223
769599482,8cyclictest41-21ksoftirqd/322:17:123
7693994843,3cyclictest25-21ksoftirqd/121:40:001
7695994742,3cyclictest41-21ksoftirqd/319:35:003
7695994741,3cyclictest41-21ksoftirqd/323:40:003
7695994740,4cyclictest41-21ksoftirqd/323:25:003
7695994740,4cyclictest41-21ksoftirqd/320:15:003
7695994740,3cyclictest41-21ksoftirqd/320:30:143
769599471,8cyclictest41-21ksoftirqd/319:44:473
7693994735,7cyclictest25-21ksoftirqd/121:45:141
7695994641,3cyclictest41-21ksoftirqd/323:45:123
7695994640,3cyclictest41-21ksoftirqd/321:55:253
7695994639,4cyclictest41-21ksoftirqd/320:35:113
7693994641,3cyclictest25-21ksoftirqd/122:40:011
7693994640,3cyclictest25-21ksoftirqd/100:40:001
7693994639,4cyclictest25-21ksoftirqd/100:05:001
7693994639,3cyclictest25-21ksoftirqd/120:19:591
7695994540,3cyclictest41-21ksoftirqd/323:30:163
7695994539,4cyclictest41-21ksoftirqd/322:40:143
7695994538,3cyclictest41-21ksoftirqd/323:25:143
7695994538,3cyclictest41-21ksoftirqd/323:25:133
7695994510,8cyclictest41-21ksoftirqd/319:45:383
7693994539,3cyclictest25-21ksoftirqd/120:50:001
7693994539,3cyclictest25-21ksoftirqd/119:35:011
7693994539,3cyclictest25-21ksoftirqd/100:30:001
7693994530,8cyclictest25-21ksoftirqd/121:40:081
7695994439,3cyclictest41-21ksoftirqd/321:00:273
7695994438,4cyclictest41-21ksoftirqd/320:25:013
7695994437,4cyclictest41-21ksoftirqd/323:15:163
7694994428,13cyclictest33-21ksoftirqd/223:02:592
7693994438,3cyclictest25-21ksoftirqd/123:05:001
7693994438,3cyclictest25-21ksoftirqd/122:05:001
7693994437,4cyclictest25-21ksoftirqd/100:10:221
7695994337,4cyclictest41-21ksoftirqd/322:45:243
7695994337,3cyclictest41-21ksoftirqd/321:40:363
7695994336,4cyclictest41-21ksoftirqd/322:05:123
7694994338,3cyclictest33-21ksoftirqd/219:54:202
7694994332,8cyclictest33-21ksoftirqd/223:20:002
7693994338,3cyclictest25-21ksoftirqd/120:20:201
7693994337,4cyclictest25-21ksoftirqd/123:40:221
7693994337,4cyclictest25-21ksoftirqd/119:45:141
7693994337,3cyclictest25-21ksoftirqd/121:29:591
7693994336,4cyclictest25-21ksoftirqd/123:00:001
7693994336,4cyclictest25-21ksoftirqd/122:25:261
7693994336,4cyclictest25-21ksoftirqd/120:10:231
7695994235,4cyclictest41-21ksoftirqd/323:40:143
769499422,37cyclictest9679-21ls23:45:192
7693994237,3cyclictest25-21ksoftirqd/121:20:111
7693994237,3cyclictest25-21ksoftirqd/121:10:301
7693994236,3cyclictest25-21ksoftirqd/121:00:001
7693994235,4cyclictest25-21ksoftirqd/123:05:231
7693994235,4cyclictest25-21ksoftirqd/120:45:001
7693994235,4cyclictest25-21ksoftirqd/120:44:591
7694994135,4cyclictest33-21ksoftirqd/222:13:412
7694994135,4cyclictest33-21ksoftirqd/221:11:392
7694994134,4cyclictest33-21ksoftirqd/222:54:262
7693994135,4cyclictest25-21ksoftirqd/123:29:401
7693994135,4cyclictest25-21ksoftirqd/123:29:401
7693994135,3cyclictest25-21ksoftirqd/122:45:241
7693994133,5cyclictest25-21ksoftirqd/120:05:001
7692994134,4cyclictest9-21ksoftirqd/019:54:510
7694994033,4cyclictest33-21ksoftirqd/222:09:522
7694994032,5cyclictest33-21ksoftirqd/223:31:402
769499402,30cyclictest19083-21apt-get20:40:112
769499402,30cyclictest19083-21apt-get20:40:112
769499402,30cyclictest11443-21apt-get23:50:112
769499401,24cyclictest8376-21cstates21:25:142
7693994035,3cyclictest25-21ksoftirqd/119:25:241
7693994034,4cyclictest25-21ksoftirqd/100:20:261
7693994034,3cyclictest25-21ksoftirqd/119:20:011
7693994034,3cyclictest25-21ksoftirqd/119:20:001
7693994032,4cyclictest25-21ksoftirqd/120:05:411
7692994033,4cyclictest9-21ksoftirqd/000:17:000
7694993932,4cyclictest33-21ksoftirqd/221:32:562
769499391,29cyclictest18111-21apt-get22:55:112
7693993934,3cyclictest25-21ksoftirqd/123:20:381
7693993934,3cyclictest25-21ksoftirqd/122:25:001
7693993933,4cyclictest25-21ksoftirqd/122:50:191
7693993932,4cyclictest25-21ksoftirqd/120:53:591
7693993932,4cyclictest25-21ksoftirqd/119:20:091
7693993931,5cyclictest25-21ksoftirqd/123:31:111
7692993934,3cyclictest9-21ksoftirqd/021:10:370
7692993933,3cyclictest9-21ksoftirqd/021:00:000
7692993933,3cyclictest9-21ksoftirqd/000:12:270
7692993932,4cyclictest9-21ksoftirqd/022:55:370
7692993932,4cyclictest9-21ksoftirqd/020:30:580
7692993932,4cyclictest9-21ksoftirqd/020:16:080
7692993932,4cyclictest9-21ksoftirqd/020:04:010
7692993932,4cyclictest23477-21cron20:49:590
7694993832,4cyclictest33-21ksoftirqd/222:40:002
7694993831,4cyclictest33-21ksoftirqd/221:02:592
7694993831,4cyclictest33-21ksoftirqd/220:46:062
7694993831,4cyclictest33-21ksoftirqd/219:20:242
7694993831,4cyclictest33-21ksoftirqd/200:18:492
7694993830,5cyclictest33-21ksoftirqd/223:35:132
769499382,29cyclictest30774-21apt-get21:05:092
769499380,33cyclictest3782-21grep20:05:302
7693993833,3cyclictest25-21ksoftirqd/122:05:221
7693993832,4cyclictest25-21ksoftirqd/121:05:011
7693993832,3cyclictest25-21ksoftirqd/120:27:441
7693993832,3cyclictest25-21ksoftirqd/100:00:001
7693993831,4cyclictest25-21ksoftirqd/123:15:351
7692993832,3cyclictest9-21ksoftirqd/023:31:160
7692993832,3cyclictest9-21ksoftirqd/022:53:090
7692993832,3cyclictest9-21ksoftirqd/022:36:490
7692993832,3cyclictest9-21ksoftirqd/020:41:250
7692993832,3cyclictest9-21ksoftirqd/020:41:250
7692993831,4cyclictest9-21ksoftirqd/023:13:150
7692993831,4cyclictest9-21ksoftirqd/022:27:540
7692993831,4cyclictest9-21ksoftirqd/022:08:430
7692993831,4cyclictest9-21ksoftirqd/019:15:460
7692993831,4cyclictest9-21ksoftirqd/019:15:460
769499373,29cyclictest0-21swapper/223:10:112
7694993732,3cyclictest33-21ksoftirqd/221:35:072
7694993730,4cyclictest33-21ksoftirqd/222:45:592
7694993730,4cyclictest33-21ksoftirqd/200:08:252
7694993723,12cyclictest33-21ksoftirqd/222:02:302
769499372,28cyclictest26109-21apt-get20:55:132
769499371,30cyclictest26459-21apt-get00:25:122
7692993731,4cyclictest9-21ksoftirqd/000:25:210
7692993731,3cyclictest9-21ksoftirqd/023:51:340
7692993730,4cyclictest9-21ksoftirqd/023:49:520
7692993730,4cyclictest9-21ksoftirqd/023:15:570
7692993730,4cyclictest9-21ksoftirqd/023:07:210
7692993730,4cyclictest9-21ksoftirqd/021:58:150
7692993730,4cyclictest9-21ksoftirqd/021:46:340
7692993730,4cyclictest9-21ksoftirqd/021:34:590
7692993730,4cyclictest9-21ksoftirqd/000:01:000
7692993729,5cyclictest9-21ksoftirqd/021:43:420
7692993729,5cyclictest9-21ksoftirqd/020:27:170
7692993729,4cyclictest9-21ksoftirqd/020:50:260
769299372,3cyclictest121rcu_preempt21:51:260
769499363,28cyclictest0-21swapper/220:15:142
769499363,25cyclictest3924-21apt-get22:25:112
7694993630,3cyclictest33-21ksoftirqd/223:24:482
7694993629,4cyclictest33-21ksoftirqd/219:31:052
7694993629,4cyclictest33-21ksoftirqd/219:19:142
7694993629,4cyclictest33-21ksoftirqd/219:19:142
769499362,27cyclictest6248-21apt-get22:30:132
769499362,27cyclictest15031-21apt-get19:25:112
769499362,27cyclictest13774-21apt-get23:55:122
769499360,5cyclictest25939-21timerwakeupswit19:45:372
769499360,4cyclictest5259-21expr20:10:132
7693993631,3cyclictest25-21ksoftirqd/100:15:121
7692993631,3cyclictest9-21ksoftirqd/021:18:460
7692993630,4cyclictest9-21ksoftirqd/023:56:280
7692993630,4cyclictest9-21ksoftirqd/021:26:160
7692993630,3cyclictest9-21ksoftirqd/023:36:080
7692993630,3cyclictest9-21ksoftirqd/022:32:380
7692993630,3cyclictest9-21ksoftirqd/020:10:470
7692993629,4cyclictest9-21ksoftirqd/022:18:500
7692993629,4cyclictest9-21ksoftirqd/022:04:410
7692993629,4cyclictest9-21ksoftirqd/021:38:320
7692993629,4cyclictest9-21ksoftirqd/020:38:010
7692993629,4cyclictest9-21ksoftirqd/019:29:400
769499353,27cyclictest0-21swapper/223:40:112
7694993529,4cyclictest33-21ksoftirqd/219:37:202
7694993529,4cyclictest33-21ksoftirqd/200:13:212
7694993528,4cyclictest33-21ksoftirqd/222:41:492
7694993528,4cyclictest33-21ksoftirqd/221:56:582
769499352,26cyclictest318-21apt-get20:00:102
7694993514,18cyclictest26263-21cat00:25:002
769499350,3cyclictest162582sleep220:32:492
7693993530,3cyclictest25-21ksoftirqd/123:10:271
7692993528,4cyclictest9-21ksoftirqd/023:27:560
7692993528,4cyclictest9-21ksoftirqd/023:27:560
7692993528,4cyclictest9-21ksoftirqd/022:47:460
7692993528,4cyclictest9-21ksoftirqd/000:23:160
7692993528,4cyclictest9-21ksoftirqd/000:06:310
769499346,24cyclictest244482chrt20:50:242
769499345,26cyclictest10253-21fschecks_time20:20:162
769499345,25cyclictest28730-21acpi00:30:112
7694993428,3cyclictest33-21ksoftirqd/221:41:392
769499340,3cyclictest5550-21dpkg21:20:012
769499340,3cyclictest19455-21chrt21:47:532
7692993429,3cyclictest9-21ksoftirqd/019:56:100
7692993428,3cyclictest9-21ksoftirqd/022:21:390
7692993428,3cyclictest9-21ksoftirqd/019:20:390
7692993427,4cyclictest9-21ksoftirqd/000:32:160
7692993426,5cyclictest9-21ksoftirqd/021:23:220
313042340,5sleep09-21ksoftirqd/021:05:200
7694993327,4cyclictest33-21ksoftirqd/219:40:582
7694993326,4cyclictest33-21ksoftirqd/200:37:002
7694993325,5cyclictest33-21ksoftirqd/221:52:312
7692993327,3cyclictest9-21ksoftirqd/020:06:040
7692993326,4cyclictest9-21ksoftirqd/023:24:270
7692993326,4cyclictest9-21ksoftirqd/019:31:330
769499321,28cyclictest17161-21tune2fs20:35:162
769499321,27cyclictest1213-21cat23:25:362
769499321,27cyclictest1213-21cat23:25:362
769499320,27cyclictest31971-21df_abs22:15:152
7692993226,3cyclictest9-21ksoftirqd/023:00:500
7692993225,4cyclictest9-21ksoftirqd/023:41:080
7692993225,4cyclictest9-21ksoftirqd/021:00:140
7692993225,4cyclictest9-21ksoftirqd/019:42:040
7692993225,4cyclictest9-21ksoftirqd/000:36:460
7692993126,3cyclictest9-21ksoftirqd/019:47:510
7692993124,4cyclictest9-21ksoftirqd/020:20:150
769499301,25cyclictest16456-21latency_hist00:05:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional