You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-28 - 18:03
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Fri Nov 28, 2025 12:45:57)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
227512204170,23sleep20-21swapper/207:08:072
137191204171,22phc2sys0-21swapper/307:07:163
227202203170,22sleep10-21swapper/107:07:411
228912201168,22sleep00-21swapper/007:09:460
1371918964,16phc2sys0-21swapper/307:10:013
23205996029,8cyclictest25-21ksoftirqd/108:35:011
23205996027,7cyclictest25-21ksoftirqd/112:05:191
23205995925,4cyclictest25-21ksoftirqd/109:20:141
23205995924,8cyclictest25-21ksoftirqd/110:00:141
23205995923,9cyclictest25-21ksoftirqd/108:40:241
23205995923,8cyclictest25-21ksoftirqd/110:50:001
23205995829,9cyclictest25-21ksoftirqd/111:45:271
23205995827,4cyclictest25-21ksoftirqd/108:35:131
23205995826,4cyclictest25-21ksoftirqd/111:30:131
23205995825,9cyclictest25-21ksoftirqd/107:40:001
23205995824,7cyclictest25-21ksoftirqd/107:40:161
23205995823,8cyclictest25-21ksoftirqd/108:15:241
23205995823,8cyclictest25-21ksoftirqd/107:15:151
23205995822,9cyclictest25-21ksoftirqd/110:50:181
23205995820,8cyclictest25-21ksoftirqd/108:45:171
2320699570,16cyclictest0-21swapper/207:25:262
23205995726,4cyclictest25-21ksoftirqd/110:15:011
23205995725,8cyclictest25-21ksoftirqd/108:20:141
23205995724,8cyclictest25-21ksoftirqd/109:55:151
23205995723,6cyclictest25-21ksoftirqd/108:10:211
23205995722,7cyclictest25-21ksoftirqd/108:00:131
23205995721,8cyclictest25-21ksoftirqd/108:50:241
23205995721,7cyclictest25-21ksoftirqd/112:00:221
136991570,1ptp4l391rcuc/310:30:273
2320699565,16cyclictest7564-21latency_hist07:45:012
23205995625,9cyclictest25-21ksoftirqd/112:25:161
23205995624,8cyclictest25-21ksoftirqd/107:55:231
23205995624,4cyclictest25-21ksoftirqd/110:35:221
23205995624,4cyclictest25-21ksoftirqd/110:35:211
23205995623,9cyclictest25-21ksoftirqd/109:10:211
23205995623,8cyclictest25-21ksoftirqd/112:20:261
23205995623,8cyclictest25-21ksoftirqd/110:55:161
23205995623,8cyclictest25-21ksoftirqd/107:30:121
23205995623,7cyclictest25-21ksoftirqd/109:25:191
23205995622,8cyclictest25-21ksoftirqd/111:55:221
23205995622,8cyclictest25-21ksoftirqd/109:50:251
23205995622,7cyclictest25-21ksoftirqd/109:05:171
23205995621,8cyclictest25-21ksoftirqd/107:50:241
23205995621,6cyclictest25-21ksoftirqd/111:10:241
23205995621,6cyclictest25-21ksoftirqd/111:10:241
23205995620,8cyclictest25-21ksoftirqd/111:40:231
23205995620,8cyclictest25-21ksoftirqd/109:45:241
23205995619,7cyclictest25-21ksoftirqd/111:15:261
23205995618,10cyclictest25-21ksoftirqd/109:15:201
136991560,1ptp4l401ktimersoftd/308:27:133
36302550,2sleep20-21swapper/209:50:162
2320699556,17cyclictest8699-21sed12:15:182
2320699552,16cyclictest0-21swapper/208:55:232
23205995522,8cyclictest25-21ksoftirqd/112:35:211
23205995522,8cyclictest25-21ksoftirqd/112:10:161
23205995522,8cyclictest25-21ksoftirqd/110:25:151
23205995522,8cyclictest25-21ksoftirqd/107:10:261
23205995521,8cyclictest25-21ksoftirqd/112:30:201
23205995521,8cyclictest25-21ksoftirqd/111:50:191
23205995521,8cyclictest25-21ksoftirqd/111:50:181
23205995521,8cyclictest25-21ksoftirqd/111:35:171
23205995521,8cyclictest25-21ksoftirqd/111:00:151
23205995521,8cyclictest25-21ksoftirqd/110:40:251
23205995521,8cyclictest25-21ksoftirqd/109:30:121
23205995521,8cyclictest25-21ksoftirqd/109:30:121
23205995521,8cyclictest25-21ksoftirqd/109:00:171
23205995520,8cyclictest25-21ksoftirqd/110:30:181
23205995520,7cyclictest25-21ksoftirqd/109:35:181
23205995520,7cyclictest25-21ksoftirqd/107:20:141
23205995519,8cyclictest25-21ksoftirqd/112:15:161
225272550,4sleep00-21swapper/008:15:150
2320699541,15cyclictest0-21swapper/208:45:262
23205995423,8cyclictest25-21ksoftirqd/108:25:161
23205995422,3cyclictest25-21ksoftirqd/108:05:231
23205995421,8cyclictest25-21ksoftirqd/107:25:191
23205995420,8cyclictest25-21ksoftirqd/111:20:141
23205995420,7cyclictest25-21ksoftirqd/111:25:191
23205995419,6cyclictest25-21ksoftirqd/111:05:151
23205995417,7cyclictest25-21ksoftirqd/109:40:231
23205995320,8cyclictest25-21ksoftirqd/107:45:201
23205995319,8cyclictest25-21ksoftirqd/110:05:171
2320699525,16cyclictest378-21latency_hist09:45:002
2320699522,16cyclictest0-21swapper/211:05:262
23205995220,9cyclictest25-21ksoftirqd/110:20:021
23205995220,8cyclictest25-21ksoftirqd/108:55:161
23205995217,9cyclictest25-21ksoftirqd/110:15:131
2320699515,7cyclictest24908-21mailstats09:25:232
2320699514,10cyclictest15876-21cut12:30:212
2320699512,15cyclictest2549-21sshd07:34:462
2320699502,16cyclictest0-21swapper/207:50:232
2320699501,16cyclictest0-21swapper/210:15:222
2320699498,17cyclictest26370-21awk11:45:202
2320699495,15cyclictest25502-21sed08:20:202
2320699495,11cyclictest32532-21sed08:35:162
2320699494,10cyclictest31237-21sed11:55:182
2320699491,17cyclictest0-21swapper/208:10:172
2320699485,16cyclictest22213-21date10:30:012
2320699484,15cyclictest29414-21date08:30:012
2320699481,16cyclictest0-21swapper/210:55:002
2320699475,15cyclictest10973-21sed10:05:202
2320699471,16cyclictest0-21swapper/210:30:142
23207994539,3cyclictest2600-21turbostat07:34:593
2320699454,7cyclictest19673-21ls11:30:212
2320699445,7cyclictest9548-21users07:45:272
2320699444,7cyclictest24808-21ls07:10:282
2320699443,8cyclictest19054-21ls12:35:282
2320699442,8cyclictest13757-21apt-get09:05:142
2320699441,15cyclictest0-21swapper/210:20:232
2320699440,14cyclictest0-21swapper/209:20:022
2320699430,14cyclictest0-21swapper/211:20:032
2320699424,10cyclictest17625-21ssh09:10:242
136991420,0ptp4l401ktimersoftd/311:55:153
136991420,0ptp4l401ktimersoftd/308:02:243
2320699414,8cyclictest25747-21meminfo10:35:192
2320699414,8cyclictest25747-21meminfo10:35:182
136991410,0ptp4l401ktimersoftd/309:49:593
136991410,0ptp4l401ktimersoftd/309:24:563
136991410,0ptp4l401ktimersoftd/307:39:403
2320699401,15cyclictest0-21swapper/212:13:142
2320699401,15cyclictest0-21swapper/211:00:282
2320699395,12cyclictest25990-21diskstats07:15:132
2320699393,7cyclictest2582-21ps10:55:172
2320699392,7cyclictest30123-21ps08:30:172
136991390,0ptp4l401ktimersoftd/312:25:133
59298380,9rtkit-daemon0-21swapper/311:09:353
59298380,7rtkit-daemon0-21swapper/310:36:063
59298380,7rtkit-daemon0-21swapper/310:36:053
59298380,6rtkit-daemon0-21swapper/310:42:553
23204993833,3cyclictest9-21ksoftirqd/012:30:010
2320699374,13cyclictest10088-21ls11:10:202
2320699374,13cyclictest10088-21ls11:10:202
2320699371,16cyclictest0-21swapper/212:20:252
2320699370,13cyclictest0-21swapper/212:00:222
23207993631,3cyclictest41-21ksoftirqd/307:18:243
23207993630,4cyclictest41-21ksoftirqd/309:41:563
23207993629,5cyclictest41-21ksoftirqd/309:06:233
23206993631,3cyclictest33-21ksoftirqd/210:04:552
23206993630,4cyclictest33-21ksoftirqd/209:37:342
23206993629,5cyclictest33-21ksoftirqd/208:02:582
2320699362,11cyclictest1285-21snmpd10:14:012
23204993630,4cyclictest9-21ksoftirqd/010:21:160
23204993630,4cyclictest9-21ksoftirqd/010:16:380
59298350,8rtkit-daemon0-21swapper/008:21:000
23207993530,3cyclictest18238-21cron09:15:003
2320699354,30cyclictest22766-21kworker/2:109:19:522
23206993530,3cyclictest33-21ksoftirqd/208:40:112
23206993529,4cyclictest33-21ksoftirqd/209:47:042
59298340,5rtkit-daemon1427-21gpm11:45:220
59298340,5rtkit-daemon11189-21kernelversion10:05:193
59298340,1rtkit-daemon0-21swapper/011:29:180
23207993428,4cyclictest41-21ksoftirqd/311:52:093
23207993428,4cyclictest41-21ksoftirqd/311:52:093
23207993428,4cyclictest41-21ksoftirqd/310:03:533
23207993428,4cyclictest41-21ksoftirqd/309:50:223
23207993428,4cyclictest41-21ksoftirqd/309:32:523
23207993428,4cyclictest41-21ksoftirqd/309:32:523
23207993428,4cyclictest41-21ksoftirqd/308:55:303
23207993428,4cyclictest41-21ksoftirqd/308:31:153
23207993428,4cyclictest41-21ksoftirqd/308:20:513
23207993428,4cyclictest41-21ksoftirqd/307:56:563
23207993428,4cyclictest41-21ksoftirqd/307:44:303
23207993427,4cyclictest41-21ksoftirqd/311:37:333
23206993429,3cyclictest33-21ksoftirqd/210:43:572
23206993428,4cyclictest33-21ksoftirqd/211:37:242
23206993428,4cyclictest33-21ksoftirqd/209:57:522
23204993429,3cyclictest9-21ksoftirqd/012:39:590
23204993429,3cyclictest9-21ksoftirqd/012:35:000
23204993429,3cyclictest9-21ksoftirqd/012:20:420
23204993429,3cyclictest9-21ksoftirqd/008:40:000
23204993428,4cyclictest9-21ksoftirqd/011:43:230
136991340,0ptp4l401ktimersoftd/308:50:213
59298330,8rtkit-daemon0-21swapper/008:03:390
59298330,1rtkit-daemon0-21swapper/011:31:280
23207993327,4cyclictest41-21ksoftirqd/312:30:563
23207993327,4cyclictest41-21ksoftirqd/311:32:433
23207993327,4cyclictest41-21ksoftirqd/310:48:113
23207993327,4cyclictest41-21ksoftirqd/309:58:123
23207993327,4cyclictest41-21ksoftirqd/308:10:333
23207993327,4cyclictest41-21ksoftirqd/307:54:323
23206993328,3cyclictest33-21ksoftirqd/209:02:452
23206993327,4cyclictest33-21ksoftirqd/212:29:152
23206993327,4cyclictest33-21ksoftirqd/207:59:332
23206993326,5cyclictest33-21ksoftirqd/209:30:132
23206993326,5cyclictest33-21ksoftirqd/209:30:132
23204993327,4cyclictest9-21ksoftirqd/011:20:460
23204993327,4cyclictest9-21ksoftirqd/007:49:110
23204993327,4cyclictest9-21ksoftirqd/007:25:530
23204993327,4cyclictest9-21ksoftirqd/007:21:190
59298320,9rtkit-daemon0-21swapper/009:43:170
23207993226,4cyclictest41-21ksoftirqd/311:40:463
23207993226,4cyclictest41-21ksoftirqd/308:39:023
23207993226,4cyclictest41-21ksoftirqd/308:16:143
23207993226,4cyclictest41-21ksoftirqd/307:21:033
2320699323,27cyclictest8211-21kworker/2:110:49:152
23206993227,3cyclictest33-21ksoftirqd/212:08:452
23206993227,3cyclictest33-21ksoftirqd/211:18:232
23206993226,4cyclictest33-21ksoftirqd/211:27:062
23204993227,3cyclictest9-21ksoftirqd/012:01:200
23204993227,3cyclictest9-21ksoftirqd/011:10:110
23204993227,3cyclictest9-21ksoftirqd/011:10:110
23204993226,4cyclictest9-21ksoftirqd/012:07:020
23204993226,4cyclictest9-21ksoftirqd/010:33:550
23204993226,4cyclictest9-21ksoftirqd/008:53:590
23207993126,3cyclictest41-21ksoftirqd/311:16:153
23207993126,3cyclictest41-21ksoftirqd/311:02:253
23207993126,3cyclictest41-21ksoftirqd/309:16:063
23207993125,4cyclictest41-21ksoftirqd/312:17:163
23207993125,4cyclictest41-21ksoftirqd/309:26:593
23206993126,3cyclictest33-21ksoftirqd/207:24:302
23206993125,4cyclictest33-21ksoftirqd/211:41:412
2320699312,28cyclictest8211-21kworker/2:111:53:472
2320699312,28cyclictest8211-21kworker/2:111:53:472
2320699310,29cyclictest22766-21kworker/2:108:15:312
23204993126,3cyclictest9-21ksoftirqd/011:56:010
23204993126,3cyclictest9-21ksoftirqd/010:40:000
23204993126,3cyclictest9-21ksoftirqd/010:40:000
23204993126,3cyclictest9-21ksoftirqd/009:34:070
23204993126,3cyclictest9-21ksoftirqd/009:34:070
23204993126,3cyclictest9-21ksoftirqd/009:00:110
23204993125,4cyclictest9-21ksoftirqd/012:11:120
23204993125,4cyclictest9-21ksoftirqd/009:10:320
23204993125,4cyclictest9-21ksoftirqd/008:13:020
23204993125,4cyclictest9-21ksoftirqd/007:11:370
23207993025,3cyclictest41-21ksoftirqd/312:05:003
23207993025,3cyclictest41-21ksoftirqd/308:46:213
23207993025,3cyclictest41-21ksoftirqd/308:44:153
23207993025,3cyclictest22105-21latency_hist10:29:593
23207993024,4cyclictest41-21ksoftirqd/312:35:433
23207993024,4cyclictest41-21ksoftirqd/310:19:313
23207993024,4cyclictest41-21ksoftirqd/309:37:543
23207993024,4cyclictest41-21ksoftirqd/307:47:313
23204993026,2cyclictest9-21ksoftirqd/010:45:210
23204993025,3cyclictest9-21ksoftirqd/007:39:110
23204993024,4cyclictest9-21ksoftirqd/010:56:100
136991300,0ptp4l401ktimersoftd/311:25:263
136991300,0ptp4l401ktimersoftd/309:02:243
23207992923,4cyclictest41-21ksoftirqd/311:47:373
23207992923,4cyclictest41-21ksoftirqd/310:57:373
2320699292,24cyclictest624-21kworker/2:207:35:392
2320699291,27cyclictest624-21kworker/2:208:07:542
23204992925,3cyclictest9-21ksoftirqd/009:20:180
23204992924,3cyclictest9-21ksoftirqd/011:55:000
23204992924,3cyclictest9-21ksoftirqd/011:55:000
23204992924,3cyclictest9-21ksoftirqd/011:36:250
23204992924,3cyclictest9-21ksoftirqd/010:26:220
23204992924,3cyclictest9-21ksoftirqd/009:30:000
23204992924,3cyclictest9-21ksoftirqd/009:19:510
23204992924,3cyclictest9-21ksoftirqd/007:55:170
23204992923,4cyclictest9-21ksoftirqd/008:41:270
23204992923,4cyclictest9-21ksoftirqd/008:26:230
23204992923,4cyclictest9-21ksoftirqd/007:44:430
136991290,0ptp4l401ktimersoftd/311:20:263
136991290,0ptp4l401ktimersoftd/308:05:283
23207992823,3cyclictest41-21ksoftirqd/312:13:473
23204992823,3cyclictest9-21ksoftirqd/010:02:190
23204992823,3cyclictest9-21ksoftirqd/009:56:560
136991280,0ptp4l401ktimersoftd/310:22:263
23207992722,3cyclictest41-21ksoftirqd/307:30:013
23204992724,2cyclictest9-21ksoftirqd/010:10:190
23204992723,3cyclictest9-21ksoftirqd/007:50:150
23204992722,3cyclictest9-21ksoftirqd/010:43:300
23204992722,3cyclictest9-21ksoftirqd/008:30:080
23204992721,4cyclictest9-21ksoftirqd/009:45:250
23204992721,4cyclictest9-21ksoftirqd/009:37:560
136991270,0ptp4l401ktimersoftd/312:06:213
136991270,0ptp4l401ktimersoftd/311:14:403
136991270,0ptp4l401ktimersoftd/311:14:403
23207992621,3cyclictest41-21ksoftirqd/310:10:563
23204992622,3cyclictest9-21ksoftirqd/008:05:190
23204992621,3cyclictest9-21ksoftirqd/008:55:060
23204992621,3cyclictest9-21ksoftirqd/007:32:150
23207992520,3cyclictest41-21ksoftirqd/312:23:053
23204992520,3cyclictest9-21ksoftirqd/010:50:200
23204992519,4cyclictest9-21ksoftirqd/009:06:190
136991250,0ptp4l401ktimersoftd/310:50:473
23204992419,3cyclictest9-21ksoftirqd/012:19:060
23204992419,3cyclictest9-21ksoftirqd/011:15:130
23204992419,3cyclictest9-21ksoftirqd/011:02:080
23204992419,3cyclictest9-21ksoftirqd/010:05:170
23204992318,3cyclictest9-21ksoftirqd/011:05:200
23206992217,3cyclictest33-21ksoftirqd/208:53:492
23204992116,3cyclictest9-21ksoftirqd/009:55:000
23204992116,3cyclictest9-21ksoftirqd/007:19:530
23204992017,2cyclictest9-21ksoftirqd/008:45:260
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional