You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-02-06 - 14:21
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Thu Feb 06, 2025 00:45:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1647723430,61sleep00-21swapper/019:05:250
1647723430,61sleep00-21swapper/019:05:250
137391233167,22phc2sys0-21swapper/319:08:473
137391233167,22phc2sys0-21swapper/319:08:473
168652229168,50sleep10-21swapper/119:06:431
168652229168,50sleep10-21swapper/119:06:431
167652206173,22sleep20-21swapper/219:05:322
167652206173,22sleep20-21swapper/219:05:322
17414996710,11cyclictest560-21polkitd19:19:403
197062610,6sleep31741499cyclictest21:30:193
1741499564,16cyclictest0-21swapper/321:10:173
1741499557,14cyclictest15514-21cpu21:20:123
228642540,5sleep341-21ksoftirqd/320:26:533
17414995311,39cyclictest19809-21cron22:55:003
1741499518,15cyclictest8592-21latency_hist23:50:003
1741499517,17cyclictest13840-21/usr/sbin/munin20:10:323
1741499514,16cyclictest0-21swapper/300:10:153
1741499506,15cyclictest25787-21df_abs23:10:103
1741499499,17cyclictest1314-21snmpd20:40:043
1741499498,8cyclictest23217-21ls00:20:263
1741499498,16cyclictest5900-21sort21:00:133
1741499497,17cyclictest2494-21gnome-shell20:06:583
1741499494,16cyclictest0-21swapper/323:20:103
1741499493,16cyclictest0-21swapper/319:40:173
1741499486,8cyclictest24601-21ls20:30:263
1741499486,15cyclictest1508-21chrt22:05:403
1741499477,16cyclictest2489-21unixbench_singl20:50:263
1741499474,15cyclictest0-21swapper/300:32:403
1741499466,15cyclictest20355-21unixbench_singl20:20:293
1741499463,15cyclictest0-21swapper/319:20:153
1741499457,14cyclictest32327-21cat22:00:223
17412994539,3cyclictest23772-21idleruntime-cro00:25:001
1741499448,15cyclictest28834-21/usr/sbin/munin21:55:223
1741499447,9cyclictest11331-21python22:30:203
1741499447,16cyclictest2494-21gnome-shell19:34:593
1741499446,7cyclictest16870-21ps20:15:193
1741499436,8cyclictest28410-21awk23:15:183
1741499436,7cyclictest2930-21apt-get20:55:023
1741499427,14cyclictest2494-21gnome-shell22:56:583
1741499425,7cyclictest14209-21ls21:15:203
1741499423,7cyclictest12549-21ls23:55:273
137291420,0ptp4l401ktimersoftd/323:38:423
1741499417,16cyclictest2494-21gnome-shell22:49:583
17413994135,3cyclictest33-21ksoftirqd/219:19:402
1712024132,4sleep10-21swapper/119:10:001
137291410,0ptp4l401ktimersoftd/321:26:553
1741499408,13cyclictest23775-21df21:40:153
17413994034,3cyclictest9055-21cron22:25:002
1741399401,19cyclictest0-21swapper/219:45:162
1741499395,14cyclictest0-21swapper/322:10:203
17411993831,4cyclictest9-21ksoftirqd/023:00:010
1741499375,12cyclictest5730-21ls19:50:293
1741499374,7cyclictest1314-21snmpd19:58:573
1741499374,7cyclictest1314-21snmpd00:36:323
1741499374,6cyclictest1314-21snmpd22:19:243
17412993732,3cyclictest25-21ksoftirqd/121:35:011
17412993710,26cyclictest0-21swapper/120:33:591
17411993731,4cyclictest9-21ksoftirqd/000:07:330
1741499367,19cyclictest7487-21/usr/sbin/munin22:20:183
1741499367,13cyclictest8660-21/usr/sbin/munin23:50:103
17414993630,4cyclictest41-21ksoftirqd/323:32:063
17412993631,3cyclictest25-21ksoftirqd/100:40:001
17412993630,4cyclictest25-21ksoftirqd/120:05:391
17412993630,4cyclictest25-21ksoftirqd/100:01:201
17411993630,4cyclictest9-21ksoftirqd/022:00:570
1741499357,12cyclictest8750-21df_inode21:05:163
17413993530,3cyclictest33-21ksoftirqd/220:00:122
17412993529,4cyclictest25-21ksoftirqd/121:24:551
17412993529,4cyclictest25-21ksoftirqd/121:17:121
17411993529,4cyclictest9-21ksoftirqd/023:00:430
17411993529,4cyclictest9-21ksoftirqd/021:45:240
17411993529,4cyclictest9-21ksoftirqd/021:21:450
17411993529,4cyclictest9-21ksoftirqd/021:00:350
17411993529,3cyclictest9-21ksoftirqd/019:19:570
17414993428,4cyclictest41-21ksoftirqd/319:25:233
1741499342,17cyclictest0-21swapper/320:00:233
17413993428,4cyclictest33-21ksoftirqd/222:34:442
17413993428,4cyclictest33-21ksoftirqd/221:08:242
17412993429,3cyclictest25-21ksoftirqd/120:21:041
17412993428,4cyclictest25-21ksoftirqd/122:43:541
17412993428,4cyclictest25-21ksoftirqd/122:01:011
17412993428,4cyclictest25-21ksoftirqd/121:02:281
17412993428,4cyclictest25-21ksoftirqd/119:30:541
17412993427,4cyclictest25-21ksoftirqd/122:27:591
17411993429,3cyclictest9-21ksoftirqd/019:56:090
17411993428,4cyclictest9-21ksoftirqd/023:15:380
17411993428,4cyclictest9-21ksoftirqd/021:40:300
17411993428,4cyclictest9-21ksoftirqd/020:25:280
17411993428,4cyclictest9-21ksoftirqd/019:46:290
17411993428,4cyclictest9-21ksoftirqd/019:10:110
17411993428,4cyclictest9-21ksoftirqd/000:21:220
17411993428,4cyclictest9-21ksoftirqd/000:01:430
17411993428,3cyclictest9-21ksoftirqd/000:11:030
17411993427,4cyclictest9-21ksoftirqd/000:32:560
1741499338,17cyclictest22439-21sed21:35:253
17414993328,3cyclictest41-21ksoftirqd/323:25:523
17414993328,3cyclictest41-21ksoftirqd/319:15:003
17414993327,4cyclictest41-21ksoftirqd/321:45:143
17413993328,3cyclictest33-21ksoftirqd/220:06:492
17413993327,4cyclictest33-21ksoftirqd/223:58:002
17413993327,4cyclictest33-21ksoftirqd/223:46:332
17413993327,4cyclictest33-21ksoftirqd/223:21:342
17413993327,4cyclictest33-21ksoftirqd/223:19:292
17413993327,4cyclictest33-21ksoftirqd/223:13:552
17413993327,4cyclictest33-21ksoftirqd/222:11:412
17413993327,4cyclictest33-21ksoftirqd/221:27:562
17413993327,4cyclictest33-21ksoftirqd/221:11:402
17413993327,4cyclictest33-21ksoftirqd/220:58:492
17413993327,4cyclictest33-21ksoftirqd/220:52:352
17412993327,4cyclictest25-21ksoftirqd/123:42:161
17412993327,4cyclictest25-21ksoftirqd/123:37:461
17412993327,4cyclictest25-21ksoftirqd/122:47:591
17412993327,4cyclictest25-21ksoftirqd/122:18:541
17412993327,4cyclictest25-21ksoftirqd/122:09:201
17412993327,4cyclictest25-21ksoftirqd/121:50:061
17412993327,4cyclictest25-21ksoftirqd/119:24:451
17412993327,4cyclictest25-21ksoftirqd/119:18:071
17411993328,3cyclictest9-21ksoftirqd/021:50:060
17411993328,3cyclictest9-21ksoftirqd/020:35:110
17411993328,3cyclictest9-21ksoftirqd/020:15:010
17411993328,3cyclictest9-21ksoftirqd/019:34:170
17411993327,4cyclictest9-21ksoftirqd/023:28:140
17411993327,4cyclictest9-21ksoftirqd/023:05:270
17411993327,4cyclictest9-21ksoftirqd/021:38:340
17411993327,4cyclictest9-21ksoftirqd/020:06:040
1741499325,16cyclictest0-21swapper/321:50:163
17414993226,4cyclictest41-21ksoftirqd/300:29:063
17413993227,3cyclictest33-21ksoftirqd/219:26:412
17413993226,4cyclictest33-21ksoftirqd/222:49:202
17413993226,4cyclictest33-21ksoftirqd/222:36:042
17413993226,4cyclictest33-21ksoftirqd/222:16:392
17413993226,4cyclictest33-21ksoftirqd/220:23:342
17413993225,4cyclictest33-21ksoftirqd/220:30:362
17412993227,3cyclictest25-21ksoftirqd/122:37:081
17412993227,3cyclictest25-21ksoftirqd/121:35:331
17412993227,3cyclictest25-21ksoftirqd/120:13:141
17412993226,4cyclictest25-21ksoftirqd/123:52:501
17412993226,4cyclictest25-21ksoftirqd/123:19:361
17412993226,4cyclictest25-21ksoftirqd/121:46:331
17412993226,4cyclictest25-21ksoftirqd/121:08:541
17412993226,4cyclictest25-21ksoftirqd/120:55:111
17412993226,4cyclictest25-21ksoftirqd/120:01:021
17412993226,4cyclictest25-21ksoftirqd/119:37:001
17412993226,4cyclictest25-21ksoftirqd/100:31:451
17412993226,4cyclictest25-21ksoftirqd/100:09:061
17411993227,3cyclictest9-21ksoftirqd/023:40:510
17411993227,3cyclictest9-21ksoftirqd/023:37:190
17411993226,4cyclictest9-21ksoftirqd/022:43:530
17411993226,4cyclictest9-21ksoftirqd/021:25:580
17411993226,4cyclictest9-21ksoftirqd/021:12:230
17411993226,4cyclictest9-21ksoftirqd/020:47:390
17411993226,4cyclictest9-21ksoftirqd/020:33:390
17411993226,4cyclictest9-21ksoftirqd/020:15:340
17411993226,4cyclictest9-21ksoftirqd/000:37:060
17414993125,4cyclictest41-21ksoftirqd/322:41:393
17414993125,4cyclictest41-21ksoftirqd/300:07:403
17414993125,3cyclictest41-21ksoftirqd/322:29:273
17413993126,3cyclictest33-21ksoftirqd/223:37:582
17413993126,3cyclictest33-21ksoftirqd/220:39:032
17413993126,3cyclictest33-21ksoftirqd/219:54:212
17413993126,3cyclictest33-21ksoftirqd/219:20:062
17413993125,4cyclictest33-21ksoftirqd/219:57:112
17412993126,3cyclictest25-21ksoftirqd/120:16:511
17412993126,3cyclictest25-21ksoftirqd/119:28:501
17412993125,4cyclictest25-21ksoftirqd/123:14:141
17412993125,4cyclictest25-21ksoftirqd/120:52:211
17412993125,3cyclictest25-21ksoftirqd/122:30:081
17411993125,4cyclictest9-21ksoftirqd/021:16:230
17411993125,4cyclictest9-21ksoftirqd/019:39:430
17411993125,3cyclictest9-21ksoftirqd/023:45:060
17411993124,4cyclictest9-21ksoftirqd/019:23:020
1741499304,15cyclictest0-21swapper/319:45:133
17413993025,3cyclictest33-21ksoftirqd/223:27:072
17413993025,3cyclictest33-21ksoftirqd/221:40:212
17413993025,3cyclictest33-21ksoftirqd/221:19:132
17413993025,3cyclictest33-21ksoftirqd/200:37:442
17413993024,4cyclictest33-21ksoftirqd/223:54:552
17413993024,4cyclictest33-21ksoftirqd/223:44:162
17413993024,4cyclictest33-21ksoftirqd/222:27:462
17413993024,4cyclictest33-21ksoftirqd/220:47:012
17413993024,4cyclictest33-21ksoftirqd/219:33:552
17413993024,4cyclictest33-21ksoftirqd/200:24:242
17413993024,3cyclictest33-21ksoftirqd/222:05:472
17413993024,3cyclictest33-21ksoftirqd/200:14:552
17412993025,3cyclictest25-21ksoftirqd/123:59:241
17412993025,3cyclictest25-21ksoftirqd/121:42:191
17412993024,4cyclictest25-21ksoftirqd/123:04:441
17412993024,4cyclictest25-21ksoftirqd/122:57:181
17412993024,4cyclictest25-21ksoftirqd/120:29:521
17412993024,4cyclictest25-21ksoftirqd/119:59:421
17412993024,4cyclictest25-21ksoftirqd/100:11:331
17411993025,3cyclictest9-21ksoftirqd/019:42:560
17411993024,4cyclictest9-21ksoftirqd/021:05:370
17411993024,4cyclictest9-21ksoftirqd/020:52:280
17411993024,4cyclictest9-21ksoftirqd/000:25:420
17413992924,3cyclictest33-21ksoftirqd/221:59:212
17413992924,3cyclictest33-21ksoftirqd/220:44:342
17413992924,3cyclictest33-21ksoftirqd/200:05:472
17413992923,4cyclictest33-21ksoftirqd/220:12:032
17413992923,4cyclictest33-21ksoftirqd/219:12:502
17412992923,4cyclictest25-21ksoftirqd/123:48:151
17412992923,4cyclictest25-21ksoftirqd/123:08:491
17412992922,4cyclictest25-21ksoftirqd/100:17:171
17411992925,3cyclictest9-21ksoftirqd/022:10:150
17411992924,3cyclictest9-21ksoftirqd/023:58:020
17411992924,3cyclictest9-21ksoftirqd/023:51:150
17411992924,3cyclictest9-21ksoftirqd/023:23:380
17411992924,3cyclictest9-21ksoftirqd/022:29:300
17411992924,3cyclictest9-21ksoftirqd/022:21:380
17411992924,3cyclictest9-21ksoftirqd/022:06:150
17411992924,3cyclictest9-21ksoftirqd/020:23:280
17411992923,4cyclictest9-21ksoftirqd/023:31:430
17414992823,3cyclictest41-21ksoftirqd/323:01:093
17414992823,3cyclictest41-21ksoftirqd/320:36:303
17414992822,4cyclictest41-21ksoftirqd/323:43:023
17413992823,3cyclictest33-21ksoftirqd/219:40:122
17413992822,4cyclictest33-21ksoftirqd/222:58:562
17413992822,4cyclictest33-21ksoftirqd/219:36:442
17413992822,4cyclictest33-21ksoftirqd/200:31:502
17412992822,4cyclictest25-21ksoftirqd/123:26:181
17412992822,4cyclictest25-21ksoftirqd/120:37:421
17412992821,5cyclictest25-21ksoftirqd/121:11:351
17411992823,3cyclictest9-21ksoftirqd/022:46:130
17411992823,3cyclictest9-21ksoftirqd/021:32:320
17411992823,3cyclictest9-21ksoftirqd/000:17:070
17411992822,4cyclictest9-21ksoftirqd/019:29:360
1741499277,6cyclictest29988-21meminfo19:35:213
17413992722,3cyclictest33-21ksoftirqd/200:16:212
17413992721,4cyclictest33-21ksoftirqd/222:01:392
17413992721,4cyclictest33-21ksoftirqd/221:00:462
17412992722,3cyclictest25-21ksoftirqd/121:59:591
17412992722,3cyclictest25-21ksoftirqd/120:44:201
17412992721,4cyclictest25-21ksoftirqd/123:30:471
17412992721,4cyclictest25-21ksoftirqd/122:51:521
17412992721,4cyclictest25-21ksoftirqd/119:42:221
17411992722,3cyclictest9-21ksoftirqd/022:35:080
17411992722,3cyclictest9-21ksoftirqd/022:15:530
17411992721,4cyclictest9-21ksoftirqd/020:42:090
17411992720,5cyclictest9-21ksoftirqd/023:13:250
17414992620,4cyclictest41-21ksoftirqd/322:39:183
17413992621,3cyclictest33-21ksoftirqd/223:09:442
17413992621,3cyclictest33-21ksoftirqd/221:23:472
17413992621,3cyclictest33-21ksoftirqd/220:16:242
17413992621,3cyclictest33-21ksoftirqd/200:03:082
17413992620,4cyclictest33-21ksoftirqd/221:51:142
17412992621,3cyclictest25-21ksoftirqd/122:21:271
17412992621,3cyclictest25-21ksoftirqd/119:45:421
17412992620,3cyclictest25-21ksoftirqd/123:24:141
17411992620,4cyclictest9-21ksoftirqd/022:53:360
17414992520,3cyclictest41-21ksoftirqd/300:01:063
17413992520,3cyclictest33-21ksoftirqd/223:01:332
17413992520,3cyclictest33-21ksoftirqd/222:52:222
17413992520,3cyclictest33-21ksoftirqd/222:43:392
17413992520,3cyclictest33-21ksoftirqd/220:26:022
17413992512,11cyclictest56350irq/144-enp4s0-21:40:002
17412992520,3cyclictest25-21ksoftirqd/120:49:531
17411992520,3cyclictest9-21ksoftirqd/022:32:130
17411992520,3cyclictest9-21ksoftirqd/019:52:510
137291250,1ptp4l0-21swapper/320:45:493
17414992413,6cyclictest19248-21apt-get00:15:173
17413992419,3cyclictest33-21ksoftirqd/221:30:132
17413992418,4cyclictest33-21ksoftirqd/200:28:092
17412992419,3cyclictest25-21ksoftirqd/100:25:471
17412992418,4cyclictest25-21ksoftirqd/122:13:171
17411992420,2cyclictest9-21ksoftirqd/021:59:320
17411992419,3cyclictest9-21ksoftirqd/020:58:070
17411992418,4cyclictest9-21ksoftirqd/020:03:190
17413992216,4cyclictest33-21ksoftirqd/221:45:542
137291220,1ptp4l401ktimersoftd/323:07:173
17413992015,3cyclictest33-21ksoftirqd/223:34:132
17412992016,3cyclictest25-21ksoftirqd/121:30:011
17412991812,4cyclictest4350-21cat19:50:171
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional