You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-02 - 17:45
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Tue Dec 02, 2025 12:45:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
311312206172,22sleep10-21swapper/107:06:381
137191206172,22phc2sys0-21swapper/307:05:343
311892203169,23sleep20-21swapper/207:07:232
312222202167,23sleep00-21swapper/007:07:490
313952163125,13sleep20-21swapper/207:10:002
1776621380,6sleep33169099cyclictest07:45:273
3168799658,17cyclictest0-21swapper/009:10:180
31687996514,10cyclictest27865-21ls08:10:010
31687996513,9cyclictest14070-21fschecks_count07:40:150
31687996510,11cyclictest3652-21fschecks_count10:40:170
31687996510,11cyclictest22075-21apt-config09:05:000
31687996510,11cyclictest22075-21apt-config09:05:000
31687996414,9cyclictest18307-21date07:50:000
31687996414,8cyclictest9007-21latency_hist12:00:000
31687996410,11cyclictest1073-21sort11:40:280
3168799639,16cyclictest0-21swapper/009:40:170
3168799638,9cyclictest0-21swapper/007:40:010
31687996312,10cyclictest11611-21ls08:40:270
31687996215,9cyclictest4247-21ls09:34:590
31687996214,9cyclictest29517-21sed10:25:240
31687996213,9cyclictest2626-21cut07:15:180
31687996213,9cyclictest19599-21apt-key09:00:010
31687996213,9cyclictest11675-21cpuspeed_turbos09:50:140
31687996213,11cyclictest23669-21grep08:00:150
31687996211,9cyclictest3022-21sendmail-msp10:40:000
31687996211,16cyclictest32038-21df_abs07:10:130
31687996210,11cyclictest27948-21/usr/sbin/munin08:10:270
133582620,5sleep013361-21irqrtprio08:45:210
31687996111,17cyclictest25834-21sed10:20:000
31687996111,10cyclictest5078-21sed08:30:000
31687996013,9cyclictest32164-21mailstats10:30:240
3168799599,15cyclictest0-21swapper/010:50:170
31687995910,11cyclictest15473-21timerwakeupswit09:55:260
3168799588,16cyclictest0-21swapper/011:00:260
3168799579,16cyclictest18438-21sh12:20:010
31687995711,10cyclictest16214-21sed12:14:590
31687995710,11cyclictest18209-21irqrtprio11:10:210
31687995612,7cyclictest445-21irqstats09:25:180
31687995611,10cyclictest4710-21cat11:50:150
3168799558,17cyclictest0-21swapper/011:25:160
3168799558,16cyclictest0-21swapper/010:05:130
3168799558,16cyclictest0-21swapper/010:05:130
3168799558,16cyclictest0-21swapper/007:25:210
31687995511,16cyclictest1996-21/usr/sbin/munin11:45:170
31687995511,15cyclictest9289-21cpuspeed_turbos09:45:140
31687995511,15cyclictest4585-21cstates09:35:150
136991550,1ptp4l401ktimersoftd/310:47:153
3168799548,16cyclictest0-21swapper/012:00:150
3168799548,16cyclictest0-21swapper/007:50:190
31687995412,8cyclictest22902-21diskstats11:20:150
31687995412,8cyclictest21074-21df_abs07:55:200
31687995315,9cyclictest16694-21diskstats12:15:150
31687995313,9cyclictest27702-21tune2fs11:30:160
136991530,1ptp4l401ktimersoftd/311:21:033
31687995213,6cyclictest20572-21hddtemp_smartct11:15:170
31687995212,7cyclictest7793-21df08:35:150
31687995112,7cyclictest32085-21users08:15:260
31687995112,7cyclictest21584-21hddtemp_smartct12:25:180
31687995112,6cyclictest5986-21diskstats10:45:160
31687995110,10cyclictest22754-21expr09:05:140
31687995012,7cyclictest21410-21diskstats10:10:150
31687995011,11cyclictest30292-21irqrtprio09:20:170
31687994911,7cyclictest10630-21df10:55:160
31687994812,17cyclictest9104-21cat07:30:160
31687994811,6cyclictest6161-21memory08:30:200
31687994811,6cyclictest15498-21diskstats11:05:160
31687994810,7cyclictest27567-21ssh10:20:280
3168899472,43cyclictest18103-21sshd12:15:591
3168999452,40cyclictest15778-21cron07:45:002
3168899440,42cyclictest19274-21sshd11:10:531
136991440,0ptp4l401ktimersoftd/312:12:063
31687994310,7cyclictest26376-21hddtemp_smartct12:35:190
31688994238,3cyclictest25-21ksoftirqd/112:00:011
136991420,0ptp4l401ktimersoftd/311:15:153
136991420,0ptp4l401ktimersoftd/308:54:433
31688994137,3cyclictest25-21ksoftirqd/110:39:591
3168799419,15cyclictest4138-21/usr/sbin/munin07:20:280
3168799419,15cyclictest4138-21/usr/sbin/munin07:20:270
136991410,1ptp4l401ktimersoftd/312:02:193
3169099407,3cyclictest121rcu_preempt08:30:173
31688994035,3cyclictest25-21ksoftirqd/111:30:011
31688994034,3cyclictest25-21ksoftirqd/110:04:591
31688994034,3cyclictest25-21ksoftirqd/108:25:001
136991400,1ptp4l401ktimersoftd/311:43:423
136991400,0ptp4l401ktimersoftd/307:25:273
59298390,4rtkit-daemon6774-21apt-get09:40:132
31690993934,3cyclictest41-21ksoftirqd/309:40:003
31688993935,3cyclictest25-21ksoftirqd/108:55:001
31688993934,3cyclictest25-21ksoftirqd/111:05:011
31688993934,3cyclictest25-21ksoftirqd/109:54:591
31688993933,3cyclictest25-21ksoftirqd/110:10:001
31688993933,3cyclictest25-21ksoftirqd/110:09:591
3168799398,15cyclictest18467-21runrttasks10:05:000
59298380,5rtkit-daemon31756-21cron11:40:002
31690993832,3cyclictest41-21ksoftirqd/309:25:013
31689993833,3cyclictest33-21ksoftirqd/212:33:102
31688993834,2cyclictest25-21ksoftirqd/112:15:001
31688993833,3cyclictest25-21ksoftirqd/109:59:591
31688993833,3cyclictest25-21ksoftirqd/109:40:001
31688993832,3cyclictest25-21ksoftirqd/107:20:001
59298370,7rtkit-daemon0-21swapper/207:15:552
31690993731,4cyclictest41-21ksoftirqd/309:59:013
31690993731,3cyclictest41-21ksoftirqd/308:20:013
31689993730,5cyclictest33-21ksoftirqd/209:59:332
31688993732,3cyclictest25-21ksoftirqd/111:20:011
31688993732,3cyclictest25-21ksoftirqd/108:59:591
31688993731,3cyclictest25-21ksoftirqd/109:25:191
31690993632,2cyclictest41-21ksoftirqd/309:00:003
31690993631,3cyclictest41-21ksoftirqd/309:54:593
31690993631,3cyclictest41-21ksoftirqd/309:05:003
31690993631,3cyclictest41-21ksoftirqd/309:05:003
31690993630,3cyclictest41-21ksoftirqd/310:20:013
31690993629,5cyclictest41-21ksoftirqd/308:12:033
31690993624,10cyclictest41-21ksoftirqd/309:45:003
31689993630,4cyclictest33-21ksoftirqd/210:58:382
31688993632,3cyclictest25-21ksoftirqd/112:35:001
31688993631,3cyclictest25-21ksoftirqd/109:15:201
31688993631,3cyclictest25-21ksoftirqd/108:50:001
31688993631,3cyclictest25-21ksoftirqd/108:40:151
31688993630,3cyclictest25-21ksoftirqd/109:00:201
31688993630,3cyclictest25-21ksoftirqd/109:00:201
136991360,0ptp4l401ktimersoftd/308:50:003
31690993531,3cyclictest41-21ksoftirqd/307:30:213
31690993530,3cyclictest41-21ksoftirqd/308:25:003
31690993529,4cyclictest41-21ksoftirqd/310:58:233
31690993529,4cyclictest41-21ksoftirqd/309:32:423
31690993529,3cyclictest41-21ksoftirqd/312:20:203
31689993529,4cyclictest33-21ksoftirqd/212:07:052
31689993528,5cyclictest33-21ksoftirqd/211:18:512
31688993531,2cyclictest25-21ksoftirqd/108:40:001
31688993530,3cyclictest25-21ksoftirqd/110:56:151
31688993530,3cyclictest25-21ksoftirqd/110:54:591
31688993530,3cyclictest25-21ksoftirqd/110:35:001
31688993530,3cyclictest25-21ksoftirqd/109:25:011
31688993530,3cyclictest25-21ksoftirqd/109:15:011
31688993530,3cyclictest25-21ksoftirqd/107:35:211
31688993530,2cyclictest25-21ksoftirqd/110:20:011
31688993528,4cyclictest25-21ksoftirqd/111:05:071
31688993522,3cyclictest25-21ksoftirqd/111:44:591
3168799359,16cyclictest0-21swapper/012:30:180
59298340,4rtkit-daemon5521-21cat10:45:012
31690993429,3cyclictest41-21ksoftirqd/308:25:133
31690993429,3cyclictest41-21ksoftirqd/308:10:003
31690993429,3cyclictest41-21ksoftirqd/308:05:003
31690993428,4cyclictest41-21ksoftirqd/311:55:563
31690993428,4cyclictest41-21ksoftirqd/311:45:193
31690993428,4cyclictest41-21ksoftirqd/310:28:063
31690993428,4cyclictest41-21ksoftirqd/310:02:343
31690993428,3cyclictest41-21ksoftirqd/311:50:293
31690993423,9cyclictest41-21ksoftirqd/312:25:273
31689993429,3cyclictest33-21ksoftirqd/211:25:102
31689993428,4cyclictest33-21ksoftirqd/209:53:592
31689993428,4cyclictest33-21ksoftirqd/209:36:142
31689993428,4cyclictest33-21ksoftirqd/209:15:522
31689993428,4cyclictest33-21ksoftirqd/208:17:392
31689993428,4cyclictest33-21ksoftirqd/207:53:142
31688993429,3cyclictest25-21ksoftirqd/112:40:001
31688993429,3cyclictest25-21ksoftirqd/112:00:181
31688993429,3cyclictest25-21ksoftirqd/110:40:131
31688993429,3cyclictest25-21ksoftirqd/109:30:191
31688993429,3cyclictest25-21ksoftirqd/108:10:141
31688993428,4cyclictest25-21ksoftirqd/109:08:491
31688993428,4cyclictest25-21ksoftirqd/108:00:291
31688993427,4cyclictest25-21ksoftirqd/112:07:411
3168799347,18cyclictest0-21swapper/011:35:220
3168799347,17cyclictest0-21swapper/008:20:110
31690993329,3cyclictest41-21ksoftirqd/312:05:223
31690993329,3cyclictest41-21ksoftirqd/308:35:203
31690993328,3cyclictest41-21ksoftirqd/312:40:003
31690993328,3cyclictest41-21ksoftirqd/311:39:593
31690993328,3cyclictest41-21ksoftirqd/307:40:013
31690993328,2cyclictest41-21ksoftirqd/309:49:593
31690993327,4cyclictest41-21ksoftirqd/310:33:113
31690993327,3cyclictest41-21ksoftirqd/311:30:003
31689993328,3cyclictest33-21ksoftirqd/212:14:022
31689993327,4cyclictest33-21ksoftirqd/211:52:532
31689993327,4cyclictest33-21ksoftirqd/210:29:012
31689993327,4cyclictest33-21ksoftirqd/209:02:362
31689993327,4cyclictest33-21ksoftirqd/209:02:362
31689993327,4cyclictest33-21ksoftirqd/208:36:252
31688993329,3cyclictest25-21ksoftirqd/111:34:591
31688993329,3cyclictest25-21ksoftirqd/107:55:001
31688993328,3cyclictest25-21ksoftirqd/112:30:001
31688993328,3cyclictest25-21ksoftirqd/110:10:201
31688993328,3cyclictest25-21ksoftirqd/107:30:001
31688993327,4cyclictest25-21ksoftirqd/111:53:091
31688993327,4cyclictest25-21ksoftirqd/110:26:561
31688993327,4cyclictest25-21ksoftirqd/107:47:091
31688993327,4cyclictest25-21ksoftirqd/107:41:481
31688993327,3cyclictest25-21ksoftirqd/111:35:201
31687993327,4cyclictest9-21ksoftirqd/008:54:360
31687993312,7cyclictest12598-21memory12:05:230
31690993229,2cyclictest41-21ksoftirqd/307:40:193
31690993227,3cyclictest41-21ksoftirqd/310:15:003
31690993227,3cyclictest41-21ksoftirqd/309:05:193
31690993227,3cyclictest41-21ksoftirqd/307:15:133
31690993226,4cyclictest41-21ksoftirqd/311:12:273
31690993226,4cyclictest41-21ksoftirqd/311:00:443
31690993226,4cyclictest41-21ksoftirqd/310:42:483
31690993226,3cyclictest41-21ksoftirqd/310:05:293
31690993226,3cyclictest41-21ksoftirqd/310:05:293
31689993227,3cyclictest33-21ksoftirqd/211:45:322
31689993227,3cyclictest33-21ksoftirqd/210:53:192
31689993227,3cyclictest33-21ksoftirqd/208:27:172
31689993227,3cyclictest33-21ksoftirqd/207:47:162
31689993227,3cyclictest33-21ksoftirqd/207:21:172
31689993227,3cyclictest33-21ksoftirqd/207:21:172
31689993226,4cyclictest33-21ksoftirqd/211:34:242
31689993226,4cyclictest33-21ksoftirqd/210:08:432
31689993226,4cyclictest33-21ksoftirqd/210:08:432
31689993226,4cyclictest33-21ksoftirqd/208:48:282
31689993226,4cyclictest33-21ksoftirqd/208:33:232
31689993226,4cyclictest33-21ksoftirqd/208:09:052
31689993226,4cyclictest33-21ksoftirqd/207:38:162
31689993226,4cyclictest33-21ksoftirqd/207:33:422
31689993226,4cyclictest33-21ksoftirqd/207:27:402
3168899324,3cyclictest121rcu_preempt11:25:011
31688993228,3cyclictest25-21ksoftirqd/108:35:001
31688993228,3cyclictest25-21ksoftirqd/108:30:001
31688993228,2cyclictest25-21ksoftirqd/107:25:001
31688993228,2cyclictest25-21ksoftirqd/107:25:001
31688993227,3cyclictest25-21ksoftirqd/110:25:011
31688993227,3cyclictest25-21ksoftirqd/107:55:191
31688993226,4cyclictest25-21ksoftirqd/112:20:201
31688993226,4cyclictest25-21ksoftirqd/109:42:391
31688993226,4cyclictest25-21ksoftirqd/107:13:191
31690993128,1cyclictest136991ptp4l09:10:493
31690993126,3cyclictest41-21ksoftirqd/307:55:243
31690993125,4cyclictest41-21ksoftirqd/311:07:223
31690993125,4cyclictest41-21ksoftirqd/309:16:593
31690993125,3cyclictest41-21ksoftirqd/307:20:193
31690993125,3cyclictest41-21ksoftirqd/307:20:193
3169099312,2cyclictest121rcu_preempt12:19:593
31689993127,3cyclictest33-21ksoftirqd/212:36:202
31689993126,3cyclictest33-21ksoftirqd/212:25:012
31689993126,3cyclictest33-21ksoftirqd/211:01:152
31689993126,3cyclictest33-21ksoftirqd/210:22:222
31689993126,3cyclictest33-21ksoftirqd/210:13:042
31689993125,4cyclictest33-21ksoftirqd/212:20:342
31689993125,4cyclictest33-21ksoftirqd/212:02:282
31689993125,4cyclictest33-21ksoftirqd/211:09:162
31689993125,4cyclictest33-21ksoftirqd/210:33:152
31689993125,4cyclictest33-21ksoftirqd/208:40:582
31689993125,4cyclictest33-21ksoftirqd/208:10:132
31689993125,4cyclictest33-21ksoftirqd/207:55:452
3168899314,3cyclictest25-21ksoftirqd/108:05:171
31688993126,3cyclictest25-21ksoftirqd/111:50:001
31688993126,3cyclictest25-21ksoftirqd/109:45:191
3168799316,16cyclictest0-21swapper/009:15:120
136991310,0ptp4l401ktimersoftd/310:50:213
31690993026,3cyclictest41-21ksoftirqd/308:40:213
31690993026,2cyclictest41-21ksoftirqd/311:34:193
31690993025,3cyclictest41-21ksoftirqd/310:23:393
31690993024,4cyclictest41-21ksoftirqd/307:11:293
31689993025,3cyclictest33-21ksoftirqd/210:18:182
31689993025,3cyclictest33-21ksoftirqd/210:02:392
31689993025,3cyclictest33-21ksoftirqd/209:21:372
31689993024,4cyclictest33-21ksoftirqd/211:56:062
31689993024,4cyclictest33-21ksoftirqd/209:08:282
31688993025,3cyclictest25-21ksoftirqd/110:45:271
31688993024,4cyclictest25-21ksoftirqd/107:31:251
136991300,0ptp4l401ktimersoftd/310:36:273
31690992925,3cyclictest41-21ksoftirqd/307:55:003
31689992924,3cyclictest33-21ksoftirqd/210:37:462
31689992923,4cyclictest33-21ksoftirqd/212:18:162
31689992923,4cyclictest33-21ksoftirqd/208:22:202
31688992925,3cyclictest25-21ksoftirqd/108:15:121
136991290,0ptp4l401ktimersoftd/309:25:293
31690992824,3cyclictest41-21ksoftirqd/312:30:183
31689992823,3cyclictest33-21ksoftirqd/209:30:062
31689992823,3cyclictest33-21ksoftirqd/209:28:512
31689992823,3cyclictest33-21ksoftirqd/208:02:202
31689992822,4cyclictest33-21ksoftirqd/211:43:192
31689992822,4cyclictest33-21ksoftirqd/208:59:112
31689992722,3cyclictest33-21ksoftirqd/211:24:442
31689992722,3cyclictest33-21ksoftirqd/211:13:192
31689992621,3cyclictest33-21ksoftirqd/208:50:432
31689992520,3cyclictest33-21ksoftirqd/209:49:452
31689992519,4cyclictest33-21ksoftirqd/210:46:142
31689992418,4cyclictest33-21ksoftirqd/209:10:102
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional