You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-25 - 18:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Tue Nov 25, 2025 12:45:58)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191228163,22phc2sys0-21swapper/307:09:163
137191228163,22phc2sys0-21swapper/307:09:163
67422205172,22sleep20-21swapper/207:09:022
67422205172,22sleep20-21swapper/207:09:022
66692203170,22sleep00-21swapper/007:08:080
66692203170,22sleep00-21swapper/007:08:080
65622203170,22sleep10-21swapper/107:06:441
65622203170,22sleep10-21swapper/107:06:431
2444221490,5sleep3712199cyclictest07:45:163
3213121470,3sleep232134-21unixbench_singl09:05:272
682728562,15sleep00-21swapper/007:10:010
152562660,1sleep30-21swapper/309:40:153
7119996229,5cyclictest25-21ksoftirqd/107:15:241
7119996227,5cyclictest25-21ksoftirqd/112:30:141
242422620,2sleep10-21swapper/108:50:221
7119996126,6cyclictest25-21ksoftirqd/108:45:191
7119996122,8cyclictest25-21ksoftirqd/111:15:241
7119996029,8cyclictest25-21ksoftirqd/109:35:001
7119996026,7cyclictest25-21ksoftirqd/112:10:411
7119995930,6cyclictest25-21ksoftirqd/111:00:011
7119995929,4cyclictest25-21ksoftirqd/109:15:191
7119995929,10cyclictest25-21ksoftirqd/108:30:251
7119995928,9cyclictest25-21ksoftirqd/111:45:141
7119995928,7cyclictest25-21ksoftirqd/109:40:171
7119995928,4cyclictest25-21ksoftirqd/110:00:171
7119995926,9cyclictest25-21ksoftirqd/109:25:141
7119995925,8cyclictest25-21ksoftirqd/107:29:591
7119995925,3cyclictest25-21ksoftirqd/112:30:001
7119995925,3cyclictest25-21ksoftirqd/112:05:001
195002590,2sleep30-21swapper/310:55:203
7119995828,4cyclictest25-21ksoftirqd/111:40:181
7119995827,7cyclictest25-21ksoftirqd/110:30:281
7119995726,4cyclictest25-21ksoftirqd/107:55:281
7119995723,9cyclictest25-21ksoftirqd/110:30:011
7119995722,6cyclictest25-21ksoftirqd/108:05:251
7119995722,6cyclictest25-21ksoftirqd/108:05:241
7119995721,4cyclictest25-21ksoftirqd/111:30:261
7119995627,9cyclictest25-21ksoftirqd/109:10:151
7119995626,7cyclictest25-21ksoftirqd/109:55:131
7119995626,7cyclictest25-21ksoftirqd/109:55:131
7119995625,8cyclictest25-21ksoftirqd/110:20:181
7119995625,7cyclictest25-21ksoftirqd/108:55:231
7119995623,4cyclictest25-21ksoftirqd/110:15:201
712099553,15cyclictest5524-21sshd11:30:272
712099552,14cyclictest32429-21missed_timers11:20:222
7119995523,8cyclictest25-21ksoftirqd/107:45:161
7119995523,11cyclictest25-21ksoftirqd/109:35:181
7119995519,8cyclictest25-21ksoftirqd/109:45:171
712099547,9cyclictest14635-21if_enp4s010:45:172
7119995425,4cyclictest25-21ksoftirqd/111:35:121
136991540,1ptp4l391rcuc/312:39:383
712099532,10cyclictest26867-21/usr/sbin/munin10:05:162
711999536,9cyclictest25-21ksoftirqd/112:40:001
7119995319,8cyclictest25-21ksoftirqd/111:55:231
712099521,16cyclictest223-21systemd-journal10:28:052
712099521,16cyclictest223-21systemd-journal10:28:042
712099520,18cyclictest0-21swapper/212:15:142
7119995223,8cyclictest25-21ksoftirqd/108:20:281
7119995222,8cyclictest25-21ksoftirqd/111:10:231
7119995218,7cyclictest25-21ksoftirqd/107:10:151
7119995216,6cyclictest25-21ksoftirqd/109:22:451
7118995210,22cyclictest24908-21seq08:52:010
7119995123,4cyclictest25-21ksoftirqd/112:15:141
7119995122,8cyclictest25-21ksoftirqd/111:05:221
7119995120,6cyclictest25-21ksoftirqd/107:40:261
7119995116,4cyclictest25-21ksoftirqd/111:21:031
7119995016,5cyclictest25-21ksoftirqd/107:23:351
712099493,15cyclictest7681-21cut10:30:192
712099491,17cyclictest1285-21snmpd10:43:082
711999496,6cyclictest25-21ksoftirqd/112:05:121
711999495,8cyclictest25-21ksoftirqd/109:04:591
711999493,6cyclictest25-21ksoftirqd/110:05:181
711999493,10cyclictest25-21ksoftirqd/108:30:011
7119994917,4cyclictest25-21ksoftirqd/110:45:231
7119994916,7cyclictest25-21ksoftirqd/109:09:501
132691490,7getstats712199cyclictest10:12:323
712099483,15cyclictest22625-21date12:10:002
7119994818,8cyclictest25-21ksoftirqd/110:35:261
7119994816,4cyclictest25-21ksoftirqd/110:42:201
711899486,20cyclictest18453-21seq10:54:090
78972470,2sleep20-21swapper/207:10:182
712099475,39cyclictest3317-21sshd11:27:272
712099473,16cyclictest11804-21cut11:45:192
711999475,8cyclictest25-21ksoftirqd/107:50:221
7119994730,9cyclictest25-21ksoftirqd/108:00:271
711999472,7cyclictest25-21ksoftirqd/111:25:241
7119994719,8cyclictest25-21ksoftirqd/108:10:281
712099463,17cyclictest7072-21sed08:15:212
712099463,15cyclictest22868-21cat12:10:142
712099462,7cyclictest24126-21ls08:50:212
712099462,7cyclictest22041-21mailstats08:45:232
712099462,15cyclictest24758-21latency07:45:182
712099461,7cyclictest3130-21apt-get08:10:002
712099461,7cyclictest3130-21apt-get08:10:002
712099460,10cyclictest28935-21cpu11:15:142
711999464,7cyclictest25-21ksoftirqd/108:40:221
7119994619,9cyclictest25-21ksoftirqd/108:15:261
7119994619,8cyclictest25-21ksoftirqd/107:30:151
7119994616,7cyclictest25-21ksoftirqd/107:35:281
7119994616,7cyclictest25-21ksoftirqd/107:35:281
712099454,17cyclictest16407-21hddtemp_smartct08:35:182
711999455,7cyclictest25-21ksoftirqd/112:20:231
711999445,7cyclictest25-21ksoftirqd/110:50:191
711999445,7cyclictest25-21ksoftirqd/109:50:131
711999442,4cyclictest25-21ksoftirqd/110:10:141
7119994417,8cyclictest25-21ksoftirqd/110:25:161
712099432,16cyclictest13391-21cpuspeed08:30:132
712099431,8cyclictest12592-21ls08:25:292
711999430,6cyclictest25-21ksoftirqd/110:55:201
136991430,0ptp4l401ktimersoftd/310:00:163
136991430,0ptp4l401ktimersoftd/307:55:253
712099422,16cyclictest32222-21df_abs10:15:162
711999422,3cyclictest121rcu_preempt08:35:231
7118994235,4cyclictest3521-21cron11:30:000
136991420,0ptp4l401ktimersoftd/312:30:343
136991420,0ptp4l401ktimersoftd/311:32:403
136991420,0ptp4l401ktimersoftd/310:25:233
136991420,0ptp4l401ktimersoftd/310:25:223
136991420,0ptp4l401ktimersoftd/307:52:283
712099417,31cyclictest16932-21kworker/2:009:35:152
712099412,14cyclictest29362-21apt-config10:10:012
712099411,7cyclictest14965-21apt-get09:40:122
712099411,14cyclictest19389-21ls08:40:232
7118994134,3cyclictest26619-21cron10:05:000
136991410,0ptp4l401ktimersoftd/310:40:183
136991410,0ptp4l401ktimersoftd/309:36:193
712099407,13cyclictest479-21in:imuxsock11:38:172
712099404,7cyclictest19966-21systemd-cgroups12:02:292
712099403,13cyclictest22432-21ls07:40:212
712099402,8cyclictest20667-21ls07:35:272
712099402,8cyclictest20667-21ls07:35:272
712099401,37cyclictest16932-21kworker/2:009:53:162
7120993931,5cyclictest33-21ksoftirqd/207:22:592
712099393,14cyclictest957-21meminfo12:30:222
712099393,12cyclictest16400-21apt-get10:50:112
712099391,7cyclictest29915-21/usr/sbin/munin12:25:202
136991390,0ptp4l401ktimersoftd/309:45:303
7121993831,4cyclictest41-21ksoftirqd/310:35:013
712099386,30cyclictest16932-21kworker/2:009:46:272
7120993829,6cyclictest33-21ksoftirqd/211:45:002
712099382,8cyclictest24414-21ps11:05:202
712099375,31cyclictest16932-21kworker/2:011:02:152
712099375,31cyclictest12636-21kworker/2:007:28:312
712099372,7cyclictest32551-21ls08:00:292
711999370,7cyclictest25-21ksoftirqd/111:50:161
712099365,10cyclictest29383-21basename09:00:262
712099363,7cyclictest0-21swapper/209:58:152
712099363,7cyclictest0-21swapper/209:58:152
712099362,7cyclictest26118-21perl08:55:162
712099362,14cyclictest10915-21ls10:35:262
712099361,7cyclictest29542-21ls07:55:212
7121993528,5cyclictest41-21ksoftirqd/308:18:073
7121993528,4cyclictest41-21ksoftirqd/312:21:293
712099353,30cyclictest16932-21kworker/2:009:25:402
7120993530,3cyclictest33-21ksoftirqd/212:39:292
7118993529,4cyclictest9-21ksoftirqd/007:39:040
7118993529,4cyclictest9-21ksoftirqd/007:39:030
136991350,0ptp4l401ktimersoftd/308:45:123
7121993428,4cyclictest41-21ksoftirqd/312:11:553
7121993428,4cyclictest41-21ksoftirqd/309:12:193
7121993428,4cyclictest41-21ksoftirqd/308:30:343
712099344,29cyclictest17761-21kworker/2:207:18:142
7120993427,4cyclictest5710-21cron08:15:002
712099341,12cyclictest2898-21apt-config09:15:062
7118993428,4cyclictest9-21ksoftirqd/012:37:390
7118993428,4cyclictest9-21ksoftirqd/012:29:370
7118993428,4cyclictest9-21ksoftirqd/010:36:550
7118993428,4cyclictest9-21ksoftirqd/008:08:130
7118993428,4cyclictest9-21ksoftirqd/008:08:120
7118993428,3cyclictest9-21ksoftirqd/008:25:000
7118993410,21cyclictest18773-21bc10:55:120
711899340,4cyclictest14484-21tune2fs10:45:160
136991340,0ptp4l401ktimersoftd/308:00:273
7121993327,4cyclictest41-21ksoftirqd/308:56:013
7120993327,4cyclictest33-21ksoftirqd/210:20:052
7118993328,3cyclictest9-21ksoftirqd/007:30:130
7118993327,4cyclictest9-21ksoftirqd/011:34:520
7118993327,4cyclictest9-21ksoftirqd/008:12:500
7118993327,3cyclictest9-21ksoftirqd/009:54:590
7118993326,5cyclictest9-21ksoftirqd/012:21:100
136991330,0ptp4l401ktimersoftd/312:00:273
7121993227,3cyclictest41-21ksoftirqd/311:39:273
7121993227,3cyclictest41-21ksoftirqd/311:06:273
7121993227,3cyclictest41-21ksoftirqd/310:50:113
7121993226,4cyclictest41-21ksoftirqd/311:57:153
7121993226,4cyclictest41-21ksoftirqd/311:22:563
7121993226,4cyclictest41-21ksoftirqd/311:00:123
7121993226,4cyclictest41-21ksoftirqd/308:54:243
7121993225,4cyclictest41-21ksoftirqd/311:53:493
7120993226,4cyclictest33-21ksoftirqd/209:21:442
712099320,31cyclictest12636-21kworker/2:007:30:192
7118993227,3cyclictest9-21ksoftirqd/007:25:120
7118993226,4cyclictest9-21ksoftirqd/012:01:010
7118993226,4cyclictest9-21ksoftirqd/011:02:510
7118993226,4cyclictest9-21ksoftirqd/009:05:120
7118993210,19cyclictest27016-21tr08:55:250
711899320,4cyclictest23694-21irqrtprio12:10:190
136991320,1ptp4l391rcuc/308:21:433
7121993126,3cyclictest41-21ksoftirqd/309:23:343
7121993126,3cyclictest41-21ksoftirqd/307:24:403
7121993125,4cyclictest41-21ksoftirqd/311:27:573
7121993125,4cyclictest41-21ksoftirqd/310:36:183
7121993125,4cyclictest41-21ksoftirqd/307:18:093
7120993125,4cyclictest33-21ksoftirqd/209:13:572
712099312,28cyclictest16932-21kworker/2:010:03:392
711899316,22cyclictest16321-21irqrtprio11:55:190
7118993126,3cyclictest9-21ksoftirqd/007:17:520
7118993125,4cyclictest9-21ksoftirqd/011:39:580
7118993125,4cyclictest9-21ksoftirqd/010:28:500
7118993125,4cyclictest9-21ksoftirqd/010:28:490
7118993125,4cyclictest9-21ksoftirqd/008:41:310
7118993125,4cyclictest9-21ksoftirqd/008:34:290
7118993125,4cyclictest9-21ksoftirqd/008:26:580
7118993125,4cyclictest9-21ksoftirqd/008:00:540
136991310,8ptp4l401ktimersoftd/307:29:403
7121993025,3cyclictest41-21ksoftirqd/309:51:293
7121993025,3cyclictest41-21ksoftirqd/307:11:163
7121993024,4cyclictest41-21ksoftirqd/312:26:423
7121993024,4cyclictest41-21ksoftirqd/312:19:493
7121993024,4cyclictest41-21ksoftirqd/309:02:323
7121993024,4cyclictest41-21ksoftirqd/308:41:503
712099303,16cyclictest26700-21basename07:50:162
7120993024,4cyclictest33-21ksoftirqd/209:33:562
711899307,20cyclictest27008-21sed07:50:180
711899307,19cyclictest22538-21cron12:10:000
7118993025,3cyclictest9-21ksoftirqd/011:13:560
7118993025,3cyclictest9-21ksoftirqd/008:15:540
7118993024,4cyclictest9-21ksoftirqd/011:21:570
7118993024,4cyclictest9-21ksoftirqd/009:11:100
711899301,26cyclictest17496-21grep09:45:140
711899300,4cyclictest6740-21ptp4l09:20:240
711899300,3cyclictest9857-21ptp4l-jitter11:40:230
711899300,3cyclictest223-21systemd-journal12:33:280
711899300,3cyclictest11298-21/usr/sbin/munin11:45:150
136991300,0ptp4l401ktimersoftd/310:07:563
136991300,0ptp4l401ktimersoftd/307:39:073
136991300,0ptp4l401ktimersoftd/307:39:073
136991300,0ptp4l401ktimersoftd/307:34:393
7121992924,3cyclictest41-21ksoftirqd/308:13:433
7121992923,4cyclictest41-21ksoftirqd/311:45:433
7121992923,4cyclictest41-21ksoftirqd/308:08:243
7121992923,4cyclictest41-21ksoftirqd/308:08:233
7120992924,3cyclictest33-21ksoftirqd/211:10:212
711899298,18cyclictest48592chrt09:16:040
711899297,19cyclictest30676-21perf08:00:000
7118992924,3cyclictest9-21ksoftirqd/009:03:130
7118992923,4cyclictest9-21ksoftirqd/012:15:080
7118992923,4cyclictest9-21ksoftirqd/009:40:350
7118992910,17cyclictest1297-21runrttasks11:15:340
711899290,3cyclictest12939-21meminfo07:20:200
136991290,0ptp4l401ktimersoftd/309:30:213
7121992823,3cyclictest41-21ksoftirqd/312:07:233
7121992823,3cyclictest41-21ksoftirqd/311:20:003
7121992823,3cyclictest41-21ksoftirqd/308:38:543
7121992822,4cyclictest41-21ksoftirqd/308:26:523
7120992822,4cyclictest33-21ksoftirqd/210:58:212
7120992822,4cyclictest33-21ksoftirqd/208:21:102
712099281,26cyclictest13998-21kworker/2:011:57:202
712099280,27cyclictest21155-21kworker/2:212:24:512
711899287,19cyclictest16166-21expr08:35:150
7118992822,4cyclictest9-21ksoftirqd/011:53:260
7118992822,4cyclictest9-21ksoftirqd/010:06:020
7118992812,13cyclictest30953-21threads10:10:250
7118992810,15cyclictest21789-21df_abs07:40:160
711899280,4cyclictest9823-21seq09:28:320
711899280,4cyclictest24043-21df11:05:150
711899280,3cyclictest7555-21iostat_ios10:30:190
711899280,3cyclictest32173-21df10:15:160
711899280,3cyclictest22622-21hddtemp_smartct09:55:160
711899280,3cyclictest22622-21hddtemp_smartct09:55:160
136991280,0ptp4l401ktimersoftd/311:44:053
7121992722,3cyclictest41-21ksoftirqd/310:21:553
7121992721,4cyclictest41-21ksoftirqd/311:10:323
7120992722,3cyclictest33-21ksoftirqd/211:50:102
711899273,18cyclictest11669-21apt-get10:40:140
711899272,3cyclictest0-21swapper/010:20:130
7121992622,3cyclictest41-21ksoftirqd/309:55:053
7121992622,3cyclictest41-21ksoftirqd/309:55:053
7121992621,3cyclictest41-21ksoftirqd/310:19:133
711899266,3cyclictest10742-21basename09:30:170
7118992620,4cyclictest9-21ksoftirqd/008:46:350
711899254,2cyclictest0-21swapper/007:45:500
711899252,5cyclictest1958-21Xorg09:37:590
136991250,0ptp4l401ktimersoftd/309:25:123
136991250,0ptp4l401ktimersoftd/309:15:133
136991240,0ptp4l401ktimersoftd/310:46:203
136991240,0ptp4l401ktimersoftd/309:05:133
136991240,0ptp4l401ktimersoftd/307:40:163
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional