You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-02-17 - 14:44
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Mon Feb 17, 2025 00:45:56)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137391234168,23phc2sys0-21swapper/319:07:483
38572205172,21sleep10-21swapper/119:08:011
39932204170,23sleep20-21swapper/219:09:482
37962201168,22sleep00-21swapper/019:07:120
50122790,2sleep30-21swapper/322:50:103
4305996634,7cyclictest25-21ksoftirqd/123:20:011
4305995828,7cyclictest25-21ksoftirqd/119:45:001
4305995726,8cyclictest25-21ksoftirqd/119:20:251
4305995723,4cyclictest25-21ksoftirqd/119:45:131
137291570,1ptp4l401ktimersoftd/323:55:173
4305995625,4cyclictest25-21ksoftirqd/121:40:001
4305995615,7cyclictest25-21ksoftirqd/122:20:131
137291560,1ptp4l401ktimersoftd/321:51:173
4305995521,4cyclictest25-21ksoftirqd/120:55:221
4305995520,4cyclictest25-21ksoftirqd/121:20:231
4305995515,8cyclictest25-21ksoftirqd/122:35:271
4305995515,7cyclictest25-21ksoftirqd/123:30:101
4305995427,3cyclictest25-21ksoftirqd/122:10:091
4305995426,4cyclictest25-21ksoftirqd/119:25:181
4305995426,4cyclictest25-21ksoftirqd/119:25:181
4305995425,4cyclictest25-21ksoftirqd/100:20:161
4305995414,7cyclictest25-21ksoftirqd/122:40:261
4305995327,6cyclictest25-21ksoftirqd/121:30:181
4305995323,4cyclictest25-21ksoftirqd/100:35:581
4305995318,4cyclictest25-21ksoftirqd/120:45:161
4305995318,4cyclictest25-21ksoftirqd/120:45:161
4305995315,7cyclictest25-21ksoftirqd/121:40:271
4305995315,7cyclictest25-21ksoftirqd/121:40:271
4305995314,7cyclictest25-21ksoftirqd/120:15:271
4305995314,7cyclictest25-21ksoftirqd/100:00:271
4305995313,7cyclictest25-21ksoftirqd/123:50:151
4305995313,7cyclictest25-21ksoftirqd/120:05:141
274392530,4sleep3401ktimersoftd/321:05:003
201972530,2sleep220200-21idleruntime-cro22:05:002
137291530,1ptp4l401ktimersoftd/320:33:123
4305995222,9cyclictest25-21ksoftirqd/120:41:491
4305995222,4cyclictest25-21ksoftirqd/100:10:201
4305995222,4cyclictest25-21ksoftirqd/100:10:201
4305995219,3cyclictest25-21ksoftirqd/121:10:171
4305995218,6cyclictest25-21ksoftirqd/121:00:101
4305995216,7cyclictest25-21ksoftirqd/120:20:221
4305995214,7cyclictest25-21ksoftirqd/119:55:181
4305995214,10cyclictest25-21ksoftirqd/123:10:101
4305995122,3cyclictest25-21ksoftirqd/122:56:041
4305995122,3cyclictest25-21ksoftirqd/100:34:411
4305995121,4cyclictest25-21ksoftirqd/119:38:241
4305995120,6cyclictest25-21ksoftirqd/120:10:251
4305995115,10cyclictest25-21ksoftirqd/119:15:171
430599505,7cyclictest25-21ksoftirqd/122:20:001
4305995023,3cyclictest25-21ksoftirqd/100:05:381
4305995022,4cyclictest25-21ksoftirqd/122:25:041
4305995022,3cyclictest25-21ksoftirqd/120:29:261
4305995021,4cyclictest25-21ksoftirqd/119:54:531
4305995020,4cyclictest25-21ksoftirqd/123:20:141
4305995018,7cyclictest25-21ksoftirqd/119:30:241
4305995017,3cyclictest25-21ksoftirqd/120:35:241
4305995016,6cyclictest25-21ksoftirqd/123:35:161
4305995016,10cyclictest25-21ksoftirqd/120:50:291
4305994922,3cyclictest25-21ksoftirqd/119:13:361
4305994917,7cyclictest25-21ksoftirqd/121:15:171
4305994916,8cyclictest25-21ksoftirqd/100:15:241
4305994915,8cyclictest25-21ksoftirqd/122:30:121
4305994915,8cyclictest25-21ksoftirqd/122:30:121
4305994915,8cyclictest25-21ksoftirqd/120:35:001
4305994915,7cyclictest25-21ksoftirqd/121:55:271
4305994915,7cyclictest25-21ksoftirqd/121:50:201
4305994821,7cyclictest25-21ksoftirqd/123:00:181
4305994819,3cyclictest25-21ksoftirqd/123:43:111
4305994817,8cyclictest25-21ksoftirqd/121:05:211
430799473,41cyclictest3347-21turbostat.cron20:15:003
4305994718,4cyclictest25-21ksoftirqd/123:55:191
4305994717,4cyclictest25-21ksoftirqd/122:05:011
430599453,5cyclictest30730-21apt-get20:05:021
4305994531,10cyclictest25-21ksoftirqd/122:54:591
430699432,39cyclictest8563-21sh00:20:012
430599430,3cyclictest25-21ksoftirqd/123:10:001
430599420,6cyclictest25-21ksoftirqd/123:29:591
4306994136,3cyclictest33-21ksoftirqd/221:40:002
137291410,0ptp4l401ktimersoftd/322:32:273
137291410,0ptp4l401ktimersoftd/322:32:273
137291410,0ptp4l401ktimersoftd/300:39:483
4306994035,3cyclictest33-21ksoftirqd/222:40:002
4305994034,3cyclictest25-21ksoftirqd/122:10:001
137291400,1ptp4l401ktimersoftd/323:52:033
4306993934,3cyclictest33-21ksoftirqd/221:05:002
4305993934,3cyclictest25-21ksoftirqd/122:50:011
4305993932,5cyclictest25-21ksoftirqd/100:30:001
4305993926,7cyclictest25-21ksoftirqd/121:30:001
137291390,0ptp4l401ktimersoftd/320:25:153
4307993826,10cyclictest41-21ksoftirqd/321:10:313
4306993832,3cyclictest33-21ksoftirqd/219:15:002
4306993830,5cyclictest33-21ksoftirqd/222:31:092
4306993830,5cyclictest33-21ksoftirqd/222:31:092
4306993812,8cyclictest33-21ksoftirqd/220:25:202
4305993833,2cyclictest25-21ksoftirqd/121:50:001
137291380,0ptp4l401ktimersoftd/320:04:043
4307993733,3cyclictest41-21ksoftirqd/300:04:593
4307993733,2cyclictest41-21ksoftirqd/321:50:003
4307993732,3cyclictest41-21ksoftirqd/319:55:003
4307993731,4cyclictest41-21ksoftirqd/321:57:233
4306993733,3cyclictest33-21ksoftirqd/220:25:002
4306993732,3cyclictest33-21ksoftirqd/221:20:192
4305993729,5cyclictest25-21ksoftirqd/123:50:011
42098370,8rtkit-daemon0-21swapper/019:30:590
4307993631,3cyclictest41-21ksoftirqd/323:05:003
4307993631,3cyclictest41-21ksoftirqd/322:55:203
4307993630,4cyclictest41-21ksoftirqd/300:10:423
4307993630,4cyclictest41-21ksoftirqd/300:10:423
4307993630,3cyclictest41-21ksoftirqd/319:56:493
4307993630,3cyclictest41-21ksoftirqd/319:15:003
4306993631,3cyclictest33-21ksoftirqd/220:15:212
4306993630,3cyclictest33-21ksoftirqd/222:26:182
4304993631,3cyclictest9-21ksoftirqd/020:47:000
4304993631,3cyclictest9-21ksoftirqd/020:47:000
4304993630,4cyclictest9-21ksoftirqd/000:09:390
4307993529,4cyclictest41-21ksoftirqd/322:38:563
4307993529,4cyclictest41-21ksoftirqd/320:42:503
4307993529,4cyclictest41-21ksoftirqd/320:15:343
4307993529,3cyclictest41-21ksoftirqd/322:15:003
4307993529,3cyclictest41-21ksoftirqd/300:15:193
4306993531,3cyclictest33-21ksoftirqd/221:05:142
4306993530,3cyclictest33-21ksoftirqd/220:35:002
4306993529,4cyclictest33-21ksoftirqd/221:57:222
4306993522,2cyclictest33-21ksoftirqd/221:35:002
4304993530,3cyclictest9-21ksoftirqd/000:15:000
4304993530,3cyclictest9-21ksoftirqd/000:14:590
4304993529,4cyclictest9-21ksoftirqd/019:13:020
4304993529,3cyclictest9-21ksoftirqd/023:26:100
4304993528,5cyclictest9-21ksoftirqd/019:22:070
137291350,0ptp4l401ktimersoftd/320:23:243
4307993430,3cyclictest41-21ksoftirqd/320:05:203
4307993430,2cyclictest41-21ksoftirqd/319:20:003
4307993429,3cyclictest41-21ksoftirqd/323:45:073
4307993429,3cyclictest41-21ksoftirqd/300:27:543
4307993429,3cyclictest16235-21cron19:35:003
4307993428,4cyclictest41-21ksoftirqd/323:29:533
4307993428,4cyclictest41-21ksoftirqd/322:18:213
4306993428,4cyclictest33-21ksoftirqd/221:50:442
4306993428,4cyclictest33-21ksoftirqd/200:23:372
4306993427,4cyclictest33-21ksoftirqd/223:49:382
4304993429,3cyclictest9-21ksoftirqd/022:46:590
4304993428,4cyclictest9-21ksoftirqd/023:34:170
4304993428,4cyclictest9-21ksoftirqd/023:07:570
4304993428,4cyclictest9-21ksoftirqd/022:51:120
4304993428,4cyclictest9-21ksoftirqd/022:36:560
4304993428,4cyclictest9-21ksoftirqd/020:04:070
137291340,0ptp4l401ktimersoftd/319:30:003
4307993329,3cyclictest41-21ksoftirqd/323:40:003
4307993328,3cyclictest41-21ksoftirqd/323:20:203
4307993328,3cyclictest41-21ksoftirqd/323:10:003
4307993328,3cyclictest41-21ksoftirqd/319:30:013
4307993328,3cyclictest41-21ksoftirqd/319:20:223
4307993327,4cyclictest41-21ksoftirqd/321:32:363
4307993327,4cyclictest41-21ksoftirqd/320:47:313
4307993327,4cyclictest41-21ksoftirqd/320:47:313
4306993328,3cyclictest33-21ksoftirqd/220:56:592
4306993328,2cyclictest33-21ksoftirqd/220:05:142
4306993327,4cyclictest33-21ksoftirqd/223:59:422
4306993327,4cyclictest33-21ksoftirqd/222:05:172
4306993327,4cyclictest33-21ksoftirqd/221:20:012
4304993327,4cyclictest9-21ksoftirqd/023:55:550
4304993327,4cyclictest9-21ksoftirqd/023:22:290
4304993327,4cyclictest9-21ksoftirqd/021:25:590
4304993327,4cyclictest9-21ksoftirqd/020:52:050
4304993327,4cyclictest9-21ksoftirqd/020:31:440
4304993327,4cyclictest9-21ksoftirqd/019:56:250
4304993327,4cyclictest9-21ksoftirqd/000:22:270
4307993227,3cyclictest41-21ksoftirqd/319:45:213
4307993227,3cyclictest41-21ksoftirqd/300:23:433
4307993226,4cyclictest41-21ksoftirqd/322:04:133
4307993226,4cyclictest41-21ksoftirqd/321:24:143
4307993226,3cyclictest14628-21cron23:15:003
4307993225,4cyclictest41-21ksoftirqd/322:06:463
4306993229,2cyclictest33-21ksoftirqd/223:05:002
4306993228,3cyclictest33-21ksoftirqd/219:15:212
4306993228,2cyclictest33-21ksoftirqd/220:40:002
4306993227,3cyclictest33-21ksoftirqd/223:51:292
4306993227,3cyclictest33-21ksoftirqd/200:13:012
4306993227,3cyclictest33-21ksoftirqd/200:13:012
4306993227,2cyclictest33-21ksoftirqd/219:30:002
4306993227,2cyclictest33-21ksoftirqd/219:30:002
4306993226,4cyclictest33-21ksoftirqd/222:46:012
4306993226,4cyclictest33-21ksoftirqd/221:25:532
4306993226,4cyclictest33-21ksoftirqd/200:33:442
4306993226,4cyclictest33-21ksoftirqd/200:08:412
4306993219,10cyclictest33-21ksoftirqd/220:40:282
4304993227,3cyclictest9-21ksoftirqd/023:01:000
4304993227,3cyclictest9-21ksoftirqd/021:12:190
4304993226,4cyclictest9-21ksoftirqd/022:42:130
4304993226,4cyclictest9-21ksoftirqd/022:16:540
4304993226,4cyclictest9-21ksoftirqd/021:20:500
137291320,11ptp4l0-21swapper/320:52:163
4307993126,2cyclictest41-21ksoftirqd/323:15:153
4307993125,4cyclictest41-21ksoftirqd/323:30:433
4307993125,4cyclictest41-21ksoftirqd/321:17:163
4306993126,3cyclictest33-21ksoftirqd/223:41:332
4306993126,3cyclictest33-21ksoftirqd/222:40:202
4306993126,3cyclictest33-21ksoftirqd/220:50:002
4306993126,3cyclictest33-21ksoftirqd/220:50:002
4306993126,3cyclictest33-21ksoftirqd/220:10:132
4306993126,3cyclictest33-21ksoftirqd/219:35:352
4306993126,2cyclictest33-21ksoftirqd/200:30:012
4306993125,4cyclictest33-21ksoftirqd/223:37:362
4306993125,4cyclictest33-21ksoftirqd/219:31:122
4306993125,4cyclictest33-21ksoftirqd/219:23:022
4306993125,4cyclictest33-21ksoftirqd/200:39:092
4306993125,3cyclictest33-21ksoftirqd/223:20:012
4306993125,3cyclictest33-21ksoftirqd/222:15:002
4306993125,3cyclictest33-21ksoftirqd/220:00:142
4306993124,4cyclictest33-21ksoftirqd/222:57:562
4306993124,4cyclictest33-21ksoftirqd/200:03:012
4306993124,3cyclictest33-21ksoftirqd/222:20:002
4304993126,3cyclictest9-21ksoftirqd/023:51:160
4304993126,3cyclictest9-21ksoftirqd/021:46:090
4304993126,3cyclictest9-21ksoftirqd/021:02:120
4304993126,3cyclictest9-21ksoftirqd/019:46:590
4304993126,3cyclictest9-21ksoftirqd/019:37:480
4304993126,3cyclictest9-21ksoftirqd/000:01:160
4304993125,4cyclictest9-21ksoftirqd/023:35:330
4307993026,3cyclictest41-21ksoftirqd/321:30:003
4307993026,3cyclictest41-21ksoftirqd/320:55:193
4307993025,3cyclictest41-21ksoftirqd/320:37:343
4307993025,3cyclictest41-21ksoftirqd/300:05:003
4307993024,4cyclictest41-21ksoftirqd/322:27:163
4307993024,4cyclictest41-21ksoftirqd/322:24:233
4307993024,4cyclictest41-21ksoftirqd/321:06:453
4307993023,4cyclictest41-21ksoftirqd/319:38:433
4306993025,3cyclictest33-21ksoftirqd/219:57:302
4304993025,3cyclictest9-21ksoftirqd/022:56:320
4304993025,3cyclictest9-21ksoftirqd/020:07:480
4304993024,4cyclictest9-21ksoftirqd/022:27:090
4304993024,4cyclictest9-21ksoftirqd/021:52:150
4304993024,4cyclictest9-21ksoftirqd/000:25:310
137291300,0ptp4l401ktimersoftd/319:40:363
4307992923,3cyclictest41-21ksoftirqd/300:35:003
4306992925,2cyclictest33-21ksoftirqd/223:35:002
4306992925,2cyclictest33-21ksoftirqd/219:50:012
4306992924,2cyclictest33-21ksoftirqd/223:10:132
4306992923,4cyclictest33-21ksoftirqd/223:21:392
4306992923,4cyclictest33-21ksoftirqd/222:51:502
4306992922,4cyclictest33-21ksoftirqd/219:50:422
4304992924,3cyclictest9-21ksoftirqd/021:40:480
4304992924,3cyclictest9-21ksoftirqd/021:40:480
4304992924,3cyclictest9-21ksoftirqd/019:26:250
4304992924,3cyclictest9-21ksoftirqd/019:26:250
4304992924,3cyclictest9-21ksoftirqd/000:30:330
4304992923,4cyclictest9-21ksoftirqd/022:12:130
4304992923,4cyclictest9-21ksoftirqd/022:05:070
4304992923,4cyclictest9-21ksoftirqd/020:19:520
4307992823,3cyclictest41-21ksoftirqd/323:40:203
4307992823,3cyclictest41-21ksoftirqd/321:45:003
4307992823,3cyclictest41-21ksoftirqd/321:45:003
4306992823,3cyclictest33-21ksoftirqd/223:09:092
4306992823,3cyclictest33-21ksoftirqd/220:53:042
4306992822,3cyclictest33-21ksoftirqd/221:10:312
4304992823,3cyclictest9-21ksoftirqd/022:01:090
4304992823,3cyclictest9-21ksoftirqd/020:22:380
4304992823,3cyclictest9-21ksoftirqd/019:40:490
4304992822,4cyclictest9-21ksoftirqd/023:15:470
4304992822,4cyclictest9-21ksoftirqd/021:19:250
4304992822,4cyclictest9-21ksoftirqd/021:05:490
4304992822,4cyclictest9-21ksoftirqd/020:55:100
4304992822,4cyclictest9-21ksoftirqd/020:42:310
4307992723,3cyclictest41-21ksoftirqd/322:45:013
4307992722,3cyclictest41-21ksoftirqd/322:47:063
4306992722,3cyclictest33-21ksoftirqd/219:41:442
4306992721,4cyclictest33-21ksoftirqd/223:28:132
4306992721,4cyclictest33-21ksoftirqd/221:46:512
4304992723,3cyclictest9-21ksoftirqd/000:19:190
4304992722,4cyclictest9-21ksoftirqd/020:26:570
4304992721,4cyclictest9-21ksoftirqd/021:59:450
4307992622,3cyclictest41-21ksoftirqd/321:39:103
4306992621,3cyclictest33-21ksoftirqd/222:20:262
4304992621,3cyclictest9-21ksoftirqd/022:20:000
4304992620,4cyclictest9-21ksoftirqd/023:47:560
4304992520,3cyclictest9-21ksoftirqd/019:52:440
4304992520,3cyclictest9-21ksoftirqd/019:17:260
4304992519,4cyclictest9-21ksoftirqd/023:12:290
4304992519,4cyclictest9-21ksoftirqd/020:36:290
4304992519,4cyclictest9-21ksoftirqd/000:39:230
4306992317,3cyclictest33-21ksoftirqd/221:45:002
4306992317,3cyclictest33-21ksoftirqd/221:45:002
4304992217,3cyclictest9-21ksoftirqd/023:43:580
4304992015,3cyclictest9-21ksoftirqd/022:32:300
4304992015,3cyclictest9-21ksoftirqd/022:32:290
4304992015,3cyclictest9-21ksoftirqd/021:35:090
4304992015,3cyclictest9-21ksoftirqd/021:31:300
4304991914,3cyclictest1358-21cstates20:10:160
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional