You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-02-27 - 21:38
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot6.osadl.org (updated Tue Feb 27, 2024 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1592121740,4sleep11993199cyclictest13:06:191
1791911630,8ptp4l19326-21kworker/3:008:54:033
2160821410,5sleep11993199cyclictest13:14:341
76482690,9sleep11993199cyclictest14:15:161
175382630,2sleep30-21swapper/309:55:073
301622620,2sleep20-21swapper/211:15:312
278262620,2sleep10-21swapper/112:00:231
252032620,2sleep20-21swapper/211:10:132
19926996250,6cyclictest9-21ksoftirqd/011:05:090
232582580,4sleep1231rcuc/111:55:211
1994799565,12cyclictest15373-21cat11:45:093
325262540,1sleep20-21swapper/211:20:532
154762540,2sleep20-21swapper/214:24:532
1994799491,26cyclictest1198-21cat12:09:513
19941994835,6cyclictest33-21ksoftirqd/213:00:082
1994799475,10cyclictest11453-21expr10:50:113
1994799462,18cyclictest19622-21/usr/sbin/munin10:00:083
19926994632,7cyclictest9-21ksoftirqd/010:55:090
19926994632,7cyclictest9-21ksoftirqd/010:55:090
195052464,30sleep10-21swapper/108:50:401
1994799451,13cyclictest27726-21cat14:00:173
19926994533,6cyclictest9-21ksoftirqd/014:20:150
19926994533,6cyclictest9-21ksoftirqd/012:55:110
166632440,2sleep20-21swapper/211:45:222
1994799432,16cyclictest21424-21ssh13:14:103
19926994330,7cyclictest9-21ksoftirqd/013:50:140
228142410,2sleep10-21swapper/112:36:481
1994799412,17cyclictest2570-21latency_hist09:24:463
1994799405,7cyclictest0-21swapper/313:47:443
19926994028,5cyclictest9-21ksoftirqd/011:00:140
19926994027,6cyclictest9-21ksoftirqd/009:40:080
19926994026,8cyclictest9-21ksoftirqd/011:50:110
179191400,1ptp4l401ktimersoftd/313:00:233
19947993918,12cyclictest22863-21apt-get11:55:163
189272397,13sleep20-21swapper/208:50:212
179191390,1ptp4l401ktimersoftd/313:27:063
179191390,1ptp4l401ktimersoftd/312:43:033
179191390,1ptp4l401ktimersoftd/310:59:263
179191390,1ptp4l401ktimersoftd/310:59:263
19931993814,3cyclictest11347-21tail13:40:271
19931993813,3cyclictest8681-21sed11:35:131
1968923820,8sleep00-21swapper/008:53:050
179191380,1ptp4l401ktimersoftd/314:19:073
179191380,1ptp4l401ktimersoftd/312:58:503
179191380,1ptp4l401ktimersoftd/312:49:043
179191380,1ptp4l401ktimersoftd/312:09:583
179191380,1ptp4l401ktimersoftd/312:01:003
179191380,1ptp4l401ktimersoftd/311:52:533
179191380,1ptp4l401ktimersoftd/311:39:433
179191380,1ptp4l401ktimersoftd/311:11:513
179191380,1ptp4l401ktimersoftd/310:59:503
179191380,0ptp4l401ktimersoftd/313:57:043
1994799376,6cyclictest24549-21mailstats09:00:203
179191370,1ptp4l401ktimersoftd/314:08:593
179191370,1ptp4l401ktimersoftd/313:44:503
179191370,1ptp4l401ktimersoftd/313:36:033
179191370,1ptp4l401ktimersoftd/313:21:043
179191370,1ptp4l401ktimersoftd/313:18:053
179191370,1ptp4l401ktimersoftd/311:20:413
179191370,1ptp4l401ktimersoftd/310:24:233
179191370,0ptp4l401ktimersoftd/313:51:393
179191370,0ptp4l401ktimersoftd/311:33:253
19941993626,7cyclictest33-21ksoftirqd/212:34:512
19931993625,9cyclictest25-21ksoftirqd/109:24:461
19931993618,3cyclictest25-21ksoftirqd/109:02:051
19931993613,3cyclictest4287-21ls10:35:091
19926993630,3cyclictest9-21ksoftirqd/012:39:500
179191360,1ptp4l401ktimersoftd/312:51:013
179191360,1ptp4l401ktimersoftd/311:26:483
179191360,0ptp4l401ktimersoftd/312:34:303
19941993530,3cyclictest33-21ksoftirqd/213:59:522
19941993529,3cyclictest2590-21tr09:24:462
19931993512,5cyclictest11635-21apt-get14:20:141
19926993524,5cyclictest9-21ksoftirqd/009:35:070
19941993421,10cyclictest33-21ksoftirqd/213:20:172
1993199343,8cyclictest11236-21apt-get10:50:101
19926993429,3cyclictest9-21ksoftirqd/011:44:500
19926993428,3cyclictest9-21ksoftirqd/014:09:520
1994799333,17cyclictest14009-21/usr/sbin/munin13:05:153
19941993328,3cyclictest33-21ksoftirqd/210:04:472
19941993327,3cyclictest33-21ksoftirqd/213:25:132
19941993327,3cyclictest33-21ksoftirqd/209:05:072
19941993327,3cyclictest33-21ksoftirqd/209:05:072
19941993326,4cyclictest33-21ksoftirqd/213:40:362
1993199333,7cyclictest7631-21apt-get09:35:071
19931993313,3cyclictest13291-21diskmemload14:13:451
19931993313,3cyclictest13291-21diskmemload12:17:011
19931993312,3cyclictest12545-21basename09:45:091
19926993327,3cyclictest9-21ksoftirqd/010:40:170
19926993326,4cyclictest9-21ksoftirqd/009:24:460
19926993323,5cyclictest9-21ksoftirqd/012:05:110
19947993214,11cyclictest28606-21apt-get11:15:083
19941993227,3cyclictest33-21ksoftirqd/212:55:182
19941993226,3cyclictest33-21ksoftirqd/212:49:512
19941993226,3cyclictest33-21ksoftirqd/209:04:452
19941993225,4cyclictest33-21ksoftirqd/213:45:212
19941993224,4cyclictest33-21ksoftirqd/212:54:512
19931993213,3cyclictest13291-21diskmemload13:58:261
19931993212,4cyclictest22621-21latency_hist11:54:501
19926993227,3cyclictest9-21ksoftirqd/013:24:520
19926993226,3cyclictest9-21ksoftirqd/013:44:520
19926993225,4cyclictest17771-21rm13:48:590
207112310,3sleep220708-21ssh11:05:072
19941993126,3cyclictest33-21ksoftirqd/211:44:502
19941993126,3cyclictest33-21ksoftirqd/211:04:482
19941993126,3cyclictest33-21ksoftirqd/209:30:142
19941993125,3cyclictest33-21ksoftirqd/214:05:222
19941993125,3cyclictest33-21ksoftirqd/212:44:512
19941993125,3cyclictest33-21ksoftirqd/212:05:192
19941993125,3cyclictest33-21ksoftirqd/211:54:502
19926993126,3cyclictest9-21ksoftirqd/012:10:140
19926993126,3cyclictest9-21ksoftirqd/012:00:170
19926993125,3cyclictest9-21ksoftirqd/013:29:520
19926993125,3cyclictest9-21ksoftirqd/012:19:500
19941993026,3cyclictest33-21ksoftirqd/210:24:482
19941993025,3cyclictest33-21ksoftirqd/212:10:142
19941993024,4cyclictest33-21ksoftirqd/213:30:172
19941993024,3cyclictest33-21ksoftirqd/213:50:182
19941993024,3cyclictest33-21ksoftirqd/211:35:222
19941993024,3cyclictest33-21ksoftirqd/209:29:462
19941993023,4cyclictest33-21ksoftirqd/212:35:182
19926993025,3cyclictest9-21ksoftirqd/013:00:290
19926993025,3cyclictest9-21ksoftirqd/011:14:480
19926993024,3cyclictest9-21ksoftirqd/013:10:200
19926993024,3cyclictest9-21ksoftirqd/012:49:510
19926993024,3cyclictest9-21ksoftirqd/011:34:490
19926993023,4cyclictest9-21ksoftirqd/011:45:180
19926993023,4cyclictest9-21ksoftirqd/009:48:330
179191300,0ptp4l401ktimersoftd/311:06:433
276272290,5sleep01992699cyclictest12:43:090
1994799297,13cyclictest9600-21taskset09:38:533
19941992924,3cyclictest33-21ksoftirqd/212:04:502
19941992924,3cyclictest33-21ksoftirqd/211:55:242
19941992924,3cyclictest33-21ksoftirqd/210:15:262
19941992924,3cyclictest33-21ksoftirqd/209:44:472
19941992923,3cyclictest33-21ksoftirqd/214:10:172
19941992923,3cyclictest33-21ksoftirqd/210:05:312
19941992923,3cyclictest33-21ksoftirqd/209:45:162
19941992923,3cyclictest33-21ksoftirqd/209:39:472
1994199290,5cyclictest27639-21head14:00:162
19931992923,3cyclictest25-21ksoftirqd/113:28:081
19931992922,4cyclictest25-21ksoftirqd/109:55:041
19931992922,4cyclictest25-21ksoftirqd/109:53:201
19926992924,3cyclictest9-21ksoftirqd/010:45:120
19926992924,3cyclictest9-21ksoftirqd/009:15:090
19926992924,3cyclictest9-21ksoftirqd/009:10:110
19926992924,3cyclictest9-21ksoftirqd/009:10:110
19926992923,3cyclictest9-21ksoftirqd/008:59:460
19947992822,3cyclictest41-21ksoftirqd/311:40:213
19947992822,3cyclictest41-21ksoftirqd/310:25:223
19947992821,4cyclictest41-21ksoftirqd/312:15:063
19947992812,9cyclictest12601-21apt-get09:45:103
19941992823,3cyclictest33-21ksoftirqd/211:25:112
19941992823,3cyclictest33-21ksoftirqd/210:30:182
19941992822,4cyclictest33-21ksoftirqd/213:09:302
19941992822,4cyclictest33-21ksoftirqd/208:59:462
19941992822,3cyclictest33-21ksoftirqd/212:25:222
19941992822,3cyclictest33-21ksoftirqd/212:20:152
19941992822,3cyclictest33-21ksoftirqd/210:50:172
19941992822,3cyclictest33-21ksoftirqd/209:59:472
19926992823,3cyclictest9-21ksoftirqd/010:24:480
19926992823,3cyclictest9-21ksoftirqd/009:30:200
19926992823,3cyclictest9-21ksoftirqd/009:25:180
19926992822,4cyclictest9-21ksoftirqd/014:10:230
19926992822,3cyclictest9-21ksoftirqd/013:35:220
19926992822,3cyclictest9-21ksoftirqd/012:25:220
19926992822,3cyclictest9-21ksoftirqd/012:24:500
19926992822,3cyclictest9-21ksoftirqd/010:19:480
19926992822,3cyclictest9-21ksoftirqd/009:55:060
1992699281,3cyclictest121rcu_preempt11:15:140
237692270,5sleep023773-21irqrtprio11:55:240
1994799274,5cyclictest0-21swapper/310:40:223
19947992720,4cyclictest41-21ksoftirqd/310:39:273
19947992720,4cyclictest41-21ksoftirqd/309:41:183
19947992720,4cyclictest41-21ksoftirqd/309:25:083
19947992712,9cyclictest2177-21apt-get13:30:123
19941992722,3cyclictest33-21ksoftirqd/210:40:172
19941992722,3cyclictest33-21ksoftirqd/209:15:192
19941992721,3cyclictest33-21ksoftirqd/212:19:492
19941992721,3cyclictest33-21ksoftirqd/210:55:302
19941992721,3cyclictest33-21ksoftirqd/210:55:302
19941992721,3cyclictest33-21ksoftirqd/210:49:482
19931992722,3cyclictest25-21ksoftirqd/109:27:091
19931992721,3cyclictest25-21ksoftirqd/111:49:401
19931992721,3cyclictest25-21ksoftirqd/110:55:401
19931992721,3cyclictest25-21ksoftirqd/110:55:401
19931992721,3cyclictest25-21ksoftirqd/108:57:051
19926992723,3cyclictest9-21ksoftirqd/013:30:120
19926992722,3cyclictest9-21ksoftirqd/014:15:200
19926992722,3cyclictest9-21ksoftirqd/011:25:250
19926992722,3cyclictest9-21ksoftirqd/010:30:210
19926992722,3cyclictest9-21ksoftirqd/010:05:200
19926992722,3cyclictest9-21ksoftirqd/009:05:130
19926992722,3cyclictest9-21ksoftirqd/009:05:130
19926992722,3cyclictest9-21ksoftirqd/008:55:170
19926992721,3cyclictest9-21ksoftirqd/010:25:150
2571322619,3sleep125-21ksoftirqd/113:19:331
1994799268,11cyclictest1742-21apt-get10:30:133
19947992619,4cyclictest41-21ksoftirqd/308:56:493
19947992611,10cyclictest0-21swapper/312:35:103
19941992622,3cyclictest33-21ksoftirqd/213:15:212
19941992621,3cyclictest33-21ksoftirqd/210:35:172
19941992621,3cyclictest33-21ksoftirqd/209:10:142
19941992621,3cyclictest33-21ksoftirqd/209:10:142
19941992620,3cyclictest33-21ksoftirqd/213:14:522
19941992620,3cyclictest33-21ksoftirqd/211:34:492
19941992620,3cyclictest33-21ksoftirqd/210:10:082
19941992620,3cyclictest33-21ksoftirqd/209:50:202
19941992616,5cyclictest33-21ksoftirqd/213:35:162
19931992621,3cyclictest25-21ksoftirqd/113:51:311
19931992620,4cyclictest25-21ksoftirqd/111:18:151
19931992620,3cyclictest25-21ksoftirqd/110:49:151
19931992620,3cyclictest25-21ksoftirqd/109:33:101
19931992619,4cyclictest25-21ksoftirqd/109:43:281
19931992619,4cyclictest25-21ksoftirqd/109:17:151
19926992621,3cyclictest9-21ksoftirqd/013:09:510
19926992621,3cyclictest9-21ksoftirqd/012:30:150
19926992621,3cyclictest9-21ksoftirqd/010:04:470
19926992620,4cyclictest9-21ksoftirqd/012:50:230
19926992620,3cyclictest9-21ksoftirqd/013:55:160
19926992620,3cyclictest9-21ksoftirqd/013:19:520
19926992620,3cyclictest9-21ksoftirqd/010:51:120
19926992620,3cyclictest9-21ksoftirqd/010:34:500
19926992620,3cyclictest9-21ksoftirqd/010:10:130
19947992518,4cyclictest41-21ksoftirqd/312:23:053
19947992518,4cyclictest41-21ksoftirqd/310:11:043
19941992520,3cyclictest33-21ksoftirqd/214:15:172
19941992520,3cyclictest33-21ksoftirqd/210:25:152
19931992521,3cyclictest25-21ksoftirqd/110:25:241
19931992518,4cyclictest25-21ksoftirqd/109:07:471
19931992518,4cyclictest25-21ksoftirqd/109:07:471
19926992519,3cyclictest9-21ksoftirqd/011:39:500
13902250,5sleep09-21ksoftirqd/011:24:360
19931992418,3cyclictest25-21ksoftirqd/110:30:221
19931992418,3cyclictest25-21ksoftirqd/109:11:541
19931992418,3cyclictest25-21ksoftirqd/109:11:541
19926992419,3cyclictest9-21ksoftirqd/014:00:170
19926992418,4cyclictest9-21ksoftirqd/009:50:080
179191240,1ptp4l401ktimersoftd/314:22:313
179191240,1ptp4l401ktimersoftd/314:10:133
179191240,1ptp4l401ktimersoftd/312:25:143
179191240,1ptp4l401ktimersoftd/310:15:123
179191240,1ptp4l401ktimersoftd/309:50:213
179191240,1ptp4l401ktimersoftd/309:15:083
179191240,1ptp4l401ktimersoftd/309:10:103
179191240,1ptp4l401ktimersoftd/309:10:103
19931992318,3cyclictest25-21ksoftirqd/110:10:221
19931992317,3cyclictest25-21ksoftirqd/112:07:381
19931992317,3cyclictest25-21ksoftirqd/111:10:121
179191230,1ptp4l401ktimersoftd/310:45:123
179191230,1ptp4l401ktimersoftd/310:05:143
179191230,1ptp4l401ktimersoftd/309:30:113
179191230,1ptp4l401ktimersoftd/309:05:183
179191230,1ptp4l401ktimersoftd/309:05:183
135912230,3sleep10-21swapper/112:25:201
19931992116,3cyclictest25-21ksoftirqd/110:21:581
19931992115,4cyclictest25-21ksoftirqd/110:43:461
19931992115,3cyclictest12684-21grep11:40:241
19931992113,5cyclictest2696-21tail12:50:351
1993199202,16cyclictest7121-21kworker/1:014:01:351
1993199202,16cyclictest10897-21kworker/1:011:02:251
19931992015,3cyclictest25-21ksoftirqd/111:21:481
19931992014,3cyclictest2744-21latency_hist14:09:531
19931992014,3cyclictest25-21ksoftirqd/110:04:301
19931992014,3cyclictest13291-21diskmemload13:34:061
19931992014,3cyclictest12549-21sh12:24:401
19931992013,4cyclictest5989-21sh13:35:021
19931992013,4cyclictest13291-21diskmemload12:33:561
19931992013,4cyclictest13291-21diskmemload11:31:401
1993199191,4cyclictest10454-21ssh13:00:171
19931991914,3cyclictest28873-21cron10:19:481
19931991913,4cyclictest25-21ksoftirqd/110:06:251
19931991913,3cyclictest25-21ksoftirqd/113:19:551
19931991913,3cyclictest1715-21sh11:24:501
19931991913,3cyclictest1432-21/usr/sbin/munin12:10:301
19931991913,3cyclictest13291-21diskmemload12:56:031
19931991913,3cyclictest13291-21diskmemload11:07:471
19931991912,4cyclictest25-21ksoftirqd/112:46:361
1993199181,3cyclictest14273-21/usr/sbin/munin13:45:311
1993199180,2cyclictest0-21swapper/112:40:151
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional