You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-06-12 - 15:05
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of all highest latencies:
System rackdslot2.osadl.org (updated Thu Jun 12, 2025 00:45:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
120972210184,17sleep30-21swapper/319:09:593
119012205171,22sleep20-21swapper/219:07:242
118902204171,22sleep10-21swapper/119:07:161
118672202169,21sleep00-21swapper/019:06:580
192821810,5sleep21239399cyclictest00:25:162
1373918363,11phc2sys0-21swapper/319:10:013
1239199699,16cyclictest28009-21/usr/sbin/munin20:50:170
12391996510,12cyclictest31682-21ps20:55:240
12391996510,12cyclictest31682-21ps20:55:240
1239499599,23cyclictest25020-21head20:40:283
1239199587,17cyclictest1328-21/usr/sbin/munin22:10:200
12391995810,9cyclictest8903-21cat20:10:160
1239199577,16cyclictest25576-21/usr/sbin/munin23:00:160
1239199576,19cyclictest4496-21ls21:05:270
1239199576,16cyclictest20866-21mailstats21:40:280
204192560,1sleep00-21swapper/020:32:020
1239199567,17cyclictest1314-21snmpd23:56:290
1239199559,9cyclictest18088-21sed21:35:190
1239199549,9cyclictest2814-21cut00:25:220
245662530,5sleep341-21ksoftirqd/300:05:163
1239499538,16cyclictest28494-21fschecks_time20:50:173
12394995311,8cyclictest542-21cstates23:15:173
12394995311,12cyclictest9030-21cstates20:10:163
1239199518,7cyclictest30329-21meminfo00:15:220
1239499507,8cyclictest19120-21ps22:45:193
1239499507,17cyclictest21832-21/usr/sbin/munin21:45:223
1239199506,7cyclictest5938-21ls00:30:310
90352490,3sleep10-21swapper/122:25:161
1239499498,14cyclictest1328-21/usr/sbin/munin22:10:153
1239499496,8cyclictest3452-21ps23:20:203
1239499496,15cyclictest21499-21if_enp4s020:35:193
1239499495,14cyclictest0-21swapper/321:00:283
1239499494,17cyclictest0-21swapper/322:55:203
1239199497,7cyclictest14096-21users21:25:280
1239199497,7cyclictest14096-21users21:25:280
1239199496,8cyclictest26922-21apt-get00:10:120
1239199496,7cyclictest7588-21apt-get21:15:110
1239199488,8cyclictest15222-21perl21:30:170
1239199487,7cyclictest17584-21python20:25:260
1239199487,7cyclictest17584-21python20:25:260
1239499478,13cyclictest7259-21ls20:05:203
1239499476,13cyclictest32040-21ps22:05:203
1239199478,7cyclictest22834-21irqstats19:30:200
1239199477,7cyclictest22495-21hddtemp_smartct00:00:180
1239199477,7cyclictest22495-21hddtemp_smartct00:00:180
1239199477,7cyclictest15714-21irqstats19:15:200
1239499465,8cyclictest8583-21apt-config22:25:003
1239199468,18cyclictest10903-21irqstats21:20:210
1239199467,7cyclictest15517-21iostat23:45:190
1239199461,7cyclictest30537-21ls22:00:290
1239499456,8cyclictest5168-21apt-get23:25:133
1239199457,7cyclictest3448-21iostat_ios23:20:200
137291440,0ptp4l401ktimersoftd/319:58:463
12393994438,4cyclictest4913-21cron23:25:002
1239199448,7cyclictest12041-21irqstats22:30:190
1239199447,17cyclictest10398-21df23:35:150
12391994439,3cyclictest20589-21turbostat22:50:000
137291430,0ptp4l401ktimersoftd/320:17:423
137291430,0ptp4l401ktimersoftd/300:34:013
1239499437,15cyclictest3765-21/usr/sbin/munin22:15:263
1239199437,7cyclictest31774-21diskstats22:05:170
137291420,0ptp4l401ktimersoftd/320:25:013
137291420,0ptp4l401ktimersoftd/320:25:013
12392994237,3cyclictest25-21ksoftirqd/123:00:001
1239499415,13cyclictest14876-21apt-get23:45:133
12392994135,3cyclictest25-21ksoftirqd/121:14:591
137291400,0ptp4l401ktimersoftd/321:30:013
132691400,2getstats0-21swapper/323:12:263
1239499407,15cyclictest13484-21/usr/sbin/munin22:35:173
1239199406,7cyclictest21929-21meminfo20:35:220
12393993933,4cyclictest33-21ksoftirqd/220:20:042
12393993930,5cyclictest33-21ksoftirqd/220:35:152
42098380,5rtkit-daemon29611-21/usr/sbin/munin22:00:201
12392993834,2cyclictest25-21ksoftirqd/123:15:001
12392993834,2cyclictest25-21ksoftirqd/122:15:001
12392993833,3cyclictest25-21ksoftirqd/122:40:001
12392993832,3cyclictest25-21ksoftirqd/119:35:001
1239199388,7cyclictest29545-21hddtemp_smartct19:45:170
1239499378,16cyclictest10101-21/usr/sbin/munin23:35:153
1239499375,15cyclictest1314-21snmpd23:07:073
12393993731,4cyclictest33-21ksoftirqd/223:02:162
12393993731,4cyclictest33-21ksoftirqd/219:34:242
12392993732,3cyclictest25-21ksoftirqd/119:40:001
12392993731,3cyclictest25-21ksoftirqd/100:10:001
1239199379,18cyclictest1314-21snmpd23:06:350
1239199376,15cyclictest23936-21iostat_ios20:40:210
12391993732,3cyclictest9-21ksoftirqd/019:10:120
12391993731,4cyclictest9649-21cron23:35:010
12392993632,2cyclictest25-21ksoftirqd/120:55:001
12392993631,3cyclictest25-21ksoftirqd/123:40:001
12392993631,3cyclictest25-21ksoftirqd/122:44:591
12392993630,4cyclictest25-21ksoftirqd/120:12:581
1239199366,18cyclictest0-21swapper/022:55:190
12391993630,4cyclictest9-21ksoftirqd/020:18:070
1239499355,7cyclictest21101-21ls23:55:283
12394993530,3cyclictest41-21ksoftirqd/300:20:013
12394993529,4cyclictest41-21ksoftirqd/320:48:263
12393993529,4cyclictest33-21ksoftirqd/223:13:312
12393993529,4cyclictest33-21ksoftirqd/200:39:222
12393993529,4cyclictest33-21ksoftirqd/200:39:212
12392993530,3cyclictest25-21ksoftirqd/123:20:001
12392993530,3cyclictest25-21ksoftirqd/100:00:001
12392993529,3cyclictest25-21ksoftirqd/123:25:001
12392993529,3cyclictest25-21ksoftirqd/121:55:131
12392993529,3cyclictest25-21ksoftirqd/121:55:131
12392993529,3cyclictest25-21ksoftirqd/120:49:591
12392993528,4cyclictest25-21ksoftirqd/100:30:011
1239199359,11cyclictest30314-21/usr/sbin/munin23:10:250
1239199356,17cyclictest0-21swapper/021:55:250
1239199356,17cyclictest0-21swapper/021:55:250
12391993530,3cyclictest9-21ksoftirqd/022:35:580
12391993530,3cyclictest9-21ksoftirqd/020:50:000
12391993510,7cyclictest28825-21sed19:45:000
1239499345,17cyclictest0-21swapper/321:05:233
12394993429,3cyclictest41-21ksoftirqd/321:12:033
12394993428,4cyclictest41-21ksoftirqd/323:04:033
12394993428,3cyclictest41-21ksoftirqd/319:38:583
12394993427,4cyclictest41-21ksoftirqd/319:30:113
12393993428,4cyclictest33-21ksoftirqd/222:05:032
12393993428,4cyclictest33-21ksoftirqd/221:32:022
12393993428,4cyclictest33-21ksoftirqd/220:28:272
12393993428,4cyclictest33-21ksoftirqd/220:28:272
12393993428,3cyclictest33-21ksoftirqd/222:25:002
12393993427,4cyclictest33-21ksoftirqd/221:20:112
12392993430,2cyclictest25-21ksoftirqd/121:40:011
12392993429,3cyclictest25-21ksoftirqd/122:35:001
12392993429,3cyclictest25-21ksoftirqd/119:45:131
12392993428,4cyclictest25-21ksoftirqd/123:07:461
12392993428,4cyclictest25-21ksoftirqd/120:33:001
12392993428,4cyclictest25-21ksoftirqd/120:06:281
12392993428,4cyclictest25-21ksoftirqd/100:01:361
12392993428,4cyclictest25-21ksoftirqd/100:01:361
1239199347,16cyclictest0-21swapper/023:15:240
12391993429,3cyclictest9-21ksoftirqd/023:29:510
1239499333,17cyclictest0-21swapper/321:25:143
1239499333,17cyclictest0-21swapper/321:25:133
12394993326,4cyclictest41-21ksoftirqd/321:41:223
1239499332,17cyclictest0-21swapper/320:55:243
1239499332,17cyclictest0-21swapper/320:55:243
12393993327,4cyclictest33-21ksoftirqd/223:56:172
12393993327,4cyclictest33-21ksoftirqd/220:11:472
12393993327,4cyclictest33-21ksoftirqd/219:49:442
12393993327,4cyclictest33-21ksoftirqd/200:30:422
12393993327,3cyclictest33-21ksoftirqd/221:40:002
12393993326,4cyclictest33-21ksoftirqd/219:56:382
12393993319,12cyclictest33-21ksoftirqd/222:19:592
12392993328,3cyclictest25-21ksoftirqd/121:41:481
12392993328,3cyclictest25-21ksoftirqd/120:44:591
12392993328,2cyclictest25-21ksoftirqd/120:40:001
12392993327,4cyclictest25-21ksoftirqd/123:46:521
12392993327,4cyclictest25-21ksoftirqd/122:21:401
12392993327,4cyclictest25-21ksoftirqd/121:47:011
12392993327,4cyclictest25-21ksoftirqd/121:24:471
12392993327,4cyclictest25-21ksoftirqd/119:26:321
12392993327,4cyclictest25-21ksoftirqd/100:38:231
12392993327,4cyclictest25-21ksoftirqd/100:38:231
12392993327,4cyclictest25-21ksoftirqd/100:26:081
12392993327,3cyclictest25-21ksoftirqd/120:00:161
1239199335,19cyclictest0-21swapper/019:20:250
12391993328,3cyclictest9-21ksoftirqd/023:51:160
12391993327,4cyclictest9-21ksoftirqd/023:41:010
12391993327,4cyclictest9-21ksoftirqd/022:41:410
12391993327,4cyclictest9-21ksoftirqd/019:57:280
1239499324,13cyclictest14724-21irqstats20:20:223
1239499323,17cyclictest0-21swapper/323:30:173
1239499323,17cyclictest0-21swapper/319:45:143
12394993227,3cyclictest41-21ksoftirqd/323:40:123
12394993226,4cyclictest41-21ksoftirqd/323:53:323
12394993226,4cyclictest41-21ksoftirqd/322:42:323
12394993226,4cyclictest41-21ksoftirqd/319:40:513
1239499322,19cyclictest0-21swapper/319:50:133
12393993227,3cyclictest33-21ksoftirqd/220:17:092
12393993226,4cyclictest33-21ksoftirqd/222:54:502
12393993226,4cyclictest33-21ksoftirqd/221:27:562
12393993226,4cyclictest33-21ksoftirqd/221:27:562
12393993226,4cyclictest33-21ksoftirqd/221:06:382
12392993228,2cyclictest25-21ksoftirqd/120:24:591
12392993227,3cyclictest25-21ksoftirqd/122:20:001
12392993227,3cyclictest25-21ksoftirqd/120:20:001
1239199329,9cyclictest4891-21sed22:15:230
12391993227,3cyclictest9-21ksoftirqd/021:12:350
12391993226,4cyclictest9-21ksoftirqd/022:20:140
12391993226,4cyclictest9-21ksoftirqd/021:53:100
12391993212,17cyclictest32570-21grep00:20:200
1239499314,16cyclictest0-21swapper/322:00:193
1239499313,18cyclictest0-21swapper/321:20:203
1239499313,16cyclictest0-21swapper/300:20:143
12394993125,4cyclictest41-21ksoftirqd/319:28:143
1239499312,17cyclictest0-21swapper/319:20:273
12394993115,9cyclictest17090-21apt-get21:35:123
12393993126,3cyclictest33-21ksoftirqd/222:45:012
12393993126,3cyclictest33-21ksoftirqd/221:54:542
12393993126,3cyclictest33-21ksoftirqd/221:15:082
12393993126,3cyclictest33-21ksoftirqd/219:35:132
12393993126,3cyclictest33-21ksoftirqd/200:00:122
12393993126,3cyclictest33-21ksoftirqd/200:00:112
12393993125,4cyclictest33-21ksoftirqd/223:46:252
12393993125,4cyclictest33-21ksoftirqd/222:27:542
12393993125,4cyclictest33-21ksoftirqd/221:57:102
12393993125,4cyclictest33-21ksoftirqd/221:57:102
12393993125,4cyclictest33-21ksoftirqd/221:01:332
12393993125,4cyclictest33-21ksoftirqd/220:47:262
12393993125,4cyclictest33-21ksoftirqd/220:03:012
1239399311,28cyclictest1314-21snmpd23:35:282
12392993126,3cyclictest25-21ksoftirqd/123:30:291
12392993126,3cyclictest25-21ksoftirqd/123:25:011
12392993126,3cyclictest25-21ksoftirqd/121:27:231
12392993126,3cyclictest25-21ksoftirqd/121:27:221
12392993126,3cyclictest25-21ksoftirqd/119:40:201
12392993126,3cyclictest25-21ksoftirqd/100:20:101
12392993125,4cyclictest25-21ksoftirqd/120:59:401
12392993125,4cyclictest25-21ksoftirqd/120:59:391
12392993125,4cyclictest25-21ksoftirqd/119:12:371
12392993124,5cyclictest25-21ksoftirqd/119:20:001
1239199315,16cyclictest0-21swapper/021:45:200
12391993125,4cyclictest9-21ksoftirqd/019:29:570
12394993025,3cyclictest41-21ksoftirqd/321:50:553
12394993025,3cyclictest41-21ksoftirqd/319:16:173
12394993024,4cyclictest41-21ksoftirqd/300:39:013
12394993024,4cyclictest41-21ksoftirqd/300:39:013
1239499302,17cyclictest0-21swapper/322:50:143
12393993025,3cyclictest33-21ksoftirqd/221:43:422
12393993025,3cyclictest33-21ksoftirqd/220:07:382
12393993025,3cyclictest33-21ksoftirqd/219:14:592
12392993025,3cyclictest25-21ksoftirqd/119:23:231
12392993024,4cyclictest25-21ksoftirqd/121:16:401
12392993024,4cyclictest25-21ksoftirqd/121:01:171
1239199307,7cyclictest13319-21apt-get20:20:020
1239199307,10cyclictest0-21swapper/021:01:060
42098290,4rtkit-daemon27227-21ls23:00:291
12394992924,3cyclictest41-21ksoftirqd/300:13:443
12394992923,4cyclictest41-21ksoftirqd/322:23:313
12394992923,4cyclictest41-21ksoftirqd/320:03:253
12394992923,4cyclictest41-21ksoftirqd/300:01:473
12394992923,4cyclictest41-21ksoftirqd/300:01:473
12393992924,3cyclictest33-21ksoftirqd/222:45:542
12393992924,3cyclictest33-21ksoftirqd/219:43:052
12393992923,4cyclictest33-21ksoftirqd/223:15:042
12393992923,4cyclictest33-21ksoftirqd/219:15:022
12393992920,6cyclictest33-21ksoftirqd/222:11:242
12393992911,16cyclictest33-21ksoftirqd/223:45:002
12392992925,2cyclictest25-21ksoftirqd/122:10:001
12392992924,3cyclictest25-21ksoftirqd/121:05:191
12392992924,3cyclictest25-21ksoftirqd/100:12:191
12393992823,3cyclictest33-21ksoftirqd/222:35:572
12393992823,3cyclictest33-21ksoftirqd/220:34:222
12393992823,3cyclictest33-21ksoftirqd/219:52:512
12393992822,4cyclictest33-21ksoftirqd/223:33:382
12393992822,4cyclictest33-21ksoftirqd/222:30:032
12393992822,4cyclictest33-21ksoftirqd/221:12:492
12392992824,2cyclictest25-21ksoftirqd/123:45:001
12392992823,3cyclictest25-21ksoftirqd/122:47:451
12392992823,3cyclictest25-21ksoftirqd/121:30:371
12392992823,3cyclictest25-21ksoftirqd/119:55:151
12392992822,4cyclictest25-21ksoftirqd/120:26:391
12392992822,4cyclictest25-21ksoftirqd/120:26:391
12391992823,3cyclictest9-21ksoftirqd/022:27:560
12391992810,15cyclictest2494-21gnome-shell22:50:260
12394992722,3cyclictest41-21ksoftirqd/321:18:483
12394992721,4cyclictest41-21ksoftirqd/320:32:183
12394992721,4cyclictest41-21ksoftirqd/300:29:233
12393992722,3cyclictest33-21ksoftirqd/222:02:252
12393992722,3cyclictest33-21ksoftirqd/221:46:182
12393992721,4cyclictest33-21ksoftirqd/223:06:132
12393992721,4cyclictest33-21ksoftirqd/200:16:502
12392992724,2cyclictest25-21ksoftirqd/100:15:211
12392992723,2cyclictest25-21ksoftirqd/123:50:181
12392992722,3cyclictest25-21ksoftirqd/121:50:191
12391992722,3cyclictest9-21ksoftirqd/000:05:000
137291260,1ptp4l401ktimersoftd/322:30:113
12393992621,3cyclictest33-21ksoftirqd/223:52:112
12393992621,3cyclictest33-21ksoftirqd/200:21:132
12393992621,3cyclictest33-21ksoftirqd/200:05:452
12393992620,4cyclictest33-21ksoftirqd/222:56:102
12393992620,4cyclictest33-21ksoftirqd/220:52:232
12393992620,4cyclictest33-21ksoftirqd/219:28:512
12393992520,3cyclictest33-21ksoftirqd/220:43:542
12392992520,3cyclictest25-21ksoftirqd/122:51:441
12392992520,3cyclictest25-21ksoftirqd/119:55:011
12391992519,4cyclictest9-21ksoftirqd/020:03:460
12391992512,11cyclictest519-21timedrift19:50:250
12393992419,3cyclictest33-21ksoftirqd/220:56:142
12393992419,3cyclictest33-21ksoftirqd/220:56:142
12391992414,7cyclictest6929-21runrttasks20:05:190
137291230,0ptp4l401ktimersoftd/321:55:113
137291230,0ptp4l401ktimersoftd/321:55:113
12393992317,4cyclictest33-21ksoftirqd/223:27:592
12393992317,4cyclictest33-21ksoftirqd/219:20:522
12391992313,7cyclictest6960-21grep00:35:130
12391992313,7cyclictest6960-21grep00:35:130
12391992313,7cyclictest24743-21fschecks_time19:35:180
12393991914,3cyclictest28028-21grep00:10:222
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional