You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-04 - 15:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Thu Dec 04, 2025 00:45:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
232042228200,19sleep00-21swapper/019:05:580
234652208175,22sleep30-21swapper/319:09:153
232492205170,23sleep20-21swapper/219:06:292
232652203168,24sleep10-21swapper/119:06:411
2203421340,4sleep22382299cyclictest23:35:042
23822996613,20cyclictest2163-21sshd19:30:212
23822996514,10cyclictest11574-21sort00:20:142
23822996410,17cyclictest0-21swapper/220:45:252
23822996313,10cyclictest2601-21idleruntime-cro22:55:002
23822996312,11cyclictest21765-21dpkg23:35:012
23822996310,11cyclictest16369-21grep22:15:172
23822996215,10cyclictest28980-21idleruntime-cro23:50:012
23822996214,15cyclictest15404-21sed22:10:292
23822996213,17cyclictest18953-21sed20:05:222
23822996212,12cyclictest21681-21gzip20:10:232
23822996210,11cyclictest25823-21tr22:35:142
271662610,3sleep00-21swapper/021:30:170
271662610,3sleep00-21swapper/021:30:170
23822996116,15cyclictest713-21gdbus19:19:152
23822996114,9cyclictest3260-21sed00:00:282
23822996110,16cyclictest226-21systemd-journal19:45:142
2382299607,16cyclictest0-21swapper/221:40:122
23822996015,8cyclictest19260-21perf23:29:592
23822996014,11cyclictest424-21dbus-daemon19:25:282
23822996011,10cyclictest25567-21latency_hist22:35:002
2382299599,19cyclictest31301-21gpgv21:40:012
2382299599,10cyclictest15789-21expr20:00:142
2382299598,17cyclictest0-21swapper/223:40:172
23822995914,9cyclictest4352-21df_abs21:50:162
23822995913,10cyclictest23493-21cut20:15:182
23822995912,10cyclictest9783-21cstates20:55:152
23822995912,10cyclictest16961-21/usr/sbin/munin21:10:242
136591590,1ptp4l401ktimersoftd/322:28:343
2382299588,11cyclictest0-21swapper/223:50:232
23822995815,9cyclictest16031-21awk00:30:012
23822995813,9cyclictest13312-21awk21:00:242
23822995813,9cyclictest13312-21awk21:00:242
23822995813,11cyclictest29937-21sort20:30:132
23822995811,12cyclictest23341-21ls21:20:282
2382299579,10cyclictest7614-21cat00:10:242
23822995713,9cyclictest25231-21awk19:10:232
23822995711,9cyclictest4387-21ls22:55:272
23822995710,12cyclictest10384-21ls22:00:262
23822995710,11cyclictest31301-21irqrtprio22:45:182
2382299567,15cyclictest0-21swapper/223:15:172
23822995610,11cyclictest1814-21expr21:45:152
23822995610,10cyclictest10216-21cstates23:10:132
23821995621,8cyclictest25-21ksoftirqd/121:05:231
23821995621,8cyclictest25-21ksoftirqd/119:15:141
23821995620,9cyclictest25-21ksoftirqd/122:05:191
2382299558,10cyclictest0-21swapper/200:35:182
23822995514,16cyclictest25234-21grep20:20:172
23822995513,10cyclictest4177-21ls00:05:162
23822995511,17cyclictest15008-21expr23:20:152
23822995510,18cyclictest20869-21latency_hist22:25:002
23821995525,4cyclictest25-21ksoftirqd/121:35:191
23821995524,5cyclictest25-21ksoftirqd/123:50:281
23821995524,10cyclictest25-21ksoftirqd/121:30:001
23821995520,8cyclictest25-21ksoftirqd/120:55:251
23821995520,8cyclictest25-21ksoftirqd/119:25:211
23821995520,8cyclictest25-21ksoftirqd/100:25:151
23821995520,7cyclictest25-21ksoftirqd/100:20:141
23821995519,8cyclictest25-21ksoftirqd/121:45:251
23821995519,8cyclictest25-21ksoftirqd/100:30:241
136591550,1ptp4l401ktimersoftd/322:17:483
23822995413,10cyclictest29305-21iostat19:20:182
23822995411,16cyclictest28339-21cat22:40:132
23821995426,7cyclictest25-21ksoftirqd/119:20:161
23821995424,8cyclictest25-21ksoftirqd/120:40:141
23821995423,11cyclictest25-21ksoftirqd/122:45:161
23821995422,4cyclictest25-21ksoftirqd/120:00:251
23821995420,8cyclictest25-21ksoftirqd/122:55:171
23821995420,8cyclictest25-21ksoftirqd/122:34:591
23821995420,8cyclictest25-21ksoftirqd/119:40:211
23821995419,8cyclictest25-21ksoftirqd/121:50:241
23821995418,8cyclictest25-21ksoftirqd/122:15:191
23821995418,7cyclictest25-21ksoftirqd/120:05:171
23822995311,9cyclictest0-21swapper/223:55:272
23822995311,8cyclictest3563-21ptp4l20:40:252
23822995311,16cyclictest5191-21/usr/sbin/munin23:00:192
23821995327,4cyclictest25-21ksoftirqd/122:20:251
23821995322,6cyclictest25-21ksoftirqd/123:15:161
23821995322,4cyclictest25-21ksoftirqd/121:20:161
23821995320,8cyclictest25-21ksoftirqd/123:30:211
23821995320,8cyclictest25-21ksoftirqd/121:00:231
23821995320,8cyclictest25-21ksoftirqd/121:00:231
23821995320,8cyclictest25-21ksoftirqd/100:35:171
23821995319,9cyclictest25-21ksoftirqd/122:40:221
23821995319,8cyclictest25-21ksoftirqd/123:55:151
23821995319,8cyclictest25-21ksoftirqd/123:25:191
23821995319,8cyclictest25-21ksoftirqd/123:00:221
23821995319,8cyclictest25-21ksoftirqd/120:20:281
23821995319,8cyclictest25-21ksoftirqd/120:15:121
23821995319,7cyclictest25-21ksoftirqd/122:10:241
23821995319,7cyclictest25-21ksoftirqd/120:25:151
23821995319,7cyclictest25-21ksoftirqd/119:45:151
23821995318,9cyclictest25-21ksoftirqd/100:05:291
23821995318,8cyclictest25-21ksoftirqd/122:00:191
23821995318,8cyclictest25-21ksoftirqd/121:55:151
23821995318,8cyclictest25-21ksoftirqd/121:15:211
23821995318,8cyclictest25-21ksoftirqd/120:30:131
23821995318,8cyclictest25-21ksoftirqd/119:50:221
23821995318,7cyclictest25-21ksoftirqd/122:50:251
2382299528,10cyclictest0-21swapper/200:20:012
2382299528,10cyclictest0-21swapper/200:20:012
23822995211,18cyclictest9349-21cp20:55:002
23821995220,8cyclictest25-21ksoftirqd/123:05:251
23821995219,8cyclictest25-21ksoftirqd/120:50:121
23821995219,7cyclictest25-21ksoftirqd/100:00:251
23821995218,8cyclictest25-21ksoftirqd/123:10:121
23821995218,8cyclictest25-21ksoftirqd/120:10:151
23821995218,8cyclictest25-21ksoftirqd/119:30:211
23821995217,8cyclictest25-21ksoftirqd/119:55:231
23821995217,7cyclictest25-21ksoftirqd/100:10:181
23822995112,14cyclictest29723-21sed20:30:002
23822995111,16cyclictest6898-21fschecks_time21:55:142
23822995111,16cyclictest11550-21sed19:50:192
23822995111,11cyclictest13413-21cpuspeed_turbos19:55:142
23822995110,9cyclictest0-21swapper/222:30:002
23822995110,15cyclictest19729-21diskstats21:15:172
23821995119,8cyclictest25-21ksoftirqd/121:40:181
23821995118,8cyclictest25-21ksoftirqd/123:20:211
23821995118,8cyclictest25-21ksoftirqd/121:10:221
23821995117,9cyclictest25-21ksoftirqd/119:35:171
23821995117,7cyclictest25-21ksoftirqd/100:15:011
23821995117,7cyclictest25-21ksoftirqd/100:15:011
136591510,1ptp4l401ktimersoftd/300:03:473
23822995011,17cyclictest11815-21sed22:05:182
23821995023,6cyclictest25-21ksoftirqd/122:35:141
23821995020,8cyclictest25-21ksoftirqd/123:45:221
23821995019,8cyclictest25-21ksoftirqd/119:10:111
326382490,2sleep00-21swapper/020:35:170
23822994913,6cyclictest32601-21df_inode20:35:162
23822994912,7cyclictest17273-21meminfo00:30:212
23821994922,4cyclictest25-21ksoftirqd/121:30:281
23821994922,4cyclictest25-21ksoftirqd/121:30:271
23821994913,9cyclictest25-21ksoftirqd/122:25:251
23822994812,6cyclictest25131-21meminfo21:25:212
23822994811,7cyclictest27070-21df_inode21:30:162
23822994811,7cyclictest27070-21df_inode21:30:162
2382299467,16cyclictest0-21swapper/223:05:142
23822994610,8cyclictest5828-21systemctl19:40:002
23822994610,7cyclictest7091-21memory19:40:202
23821994614,4cyclictest25-21ksoftirqd/123:35:031
23821994516,4cyclictest25-21ksoftirqd/120:45:201
136591430,1ptp4l401ktimersoftd/320:07:383
2382199426,2cyclictest25-21ksoftirqd/120:35:151
2382199411,3cyclictest25964-21timerandwakeup23:40:291
136591410,0ptp4l401ktimersoftd/320:16:353
136591400,0ptp4l401ktimersoftd/319:35:143
136591390,1ptp4l401ktimersoftd/300:11:413
2382399381,5cyclictest41-21ksoftirqd/321:50:263
2382299380,16cyclictest15453-21missed_timers21:05:222
136591380,0ptp4l401ktimersoftd/322:10:013
23823993725,10cyclictest41-21ksoftirqd/321:35:163
2382099366,7cyclictest9-21ksoftirqd/020:05:160
51698350,8rtkit-daemon0-21swapper/021:56:000
136591350,0ptp4l401ktimersoftd/320:44:303
136591350,0ptp4l401ktimersoftd/320:00:193
2382399344,3cyclictest121rcu_preempt20:25:163
23823993429,3cyclictest41-21ksoftirqd/321:00:193
23823993429,3cyclictest41-21ksoftirqd/321:00:193
23823993428,3cyclictest41-21ksoftirqd/300:30:003
2382399341,3cyclictest131rcu_sched19:19:143
23820993429,3cyclictest9-21ksoftirqd/021:30:000
23820993428,3cyclictest9-21ksoftirqd/023:10:180
23820993427,4cyclictest9-21ksoftirqd/000:24:000
2382399334,3cyclictest121rcu_preempt21:20:013
23823993328,3cyclictest41-21ksoftirqd/323:35:013
23823993328,3cyclictest41-21ksoftirqd/322:34:593
23823993327,4cyclictest41-21ksoftirqd/323:22:053
23823993327,3cyclictest41-21ksoftirqd/322:40:003
23823993326,4cyclictest41-21ksoftirqd/321:31:563
23823993326,4cyclictest41-21ksoftirqd/321:31:553
2382099335,3cyclictest9-21ksoftirqd/022:10:160
23820993328,3cyclictest9-21ksoftirqd/022:40:130
23820993328,3cyclictest9-21ksoftirqd/021:10:140
23820993328,3cyclictest9-21ksoftirqd/000:00:200
23820993327,4cyclictest9-21ksoftirqd/023:39:510
23820993327,4cyclictest9-21ksoftirqd/019:16:450
2382099330,3cyclictest121rcu_preempt19:45:190
23823993227,3cyclictest41-21ksoftirqd/322:55:143
23823993227,3cyclictest41-21ksoftirqd/322:05:243
23823993227,3cyclictest41-21ksoftirqd/300:20:003
23823993227,3cyclictest41-21ksoftirqd/300:19:593
23823993227,2cyclictest41-21ksoftirqd/323:50:003
23823993226,4cyclictest41-21ksoftirqd/322:47:593
23823993226,4cyclictest41-21ksoftirqd/322:44:583
23823993226,4cyclictest41-21ksoftirqd/320:10:523
23823993226,3cyclictest41-21ksoftirqd/321:40:123
23823993225,4cyclictest41-21ksoftirqd/323:51:453
2382399322,3cyclictest121rcu_preempt22:00:263
2382399321,3cyclictest121rcu_preempt19:10:233
2382399321,2cyclictest121rcu_preempt20:59:213
2382099325,3cyclictest9-21ksoftirqd/023:55:250
2382099323,3cyclictest9-21ksoftirqd/020:25:250
23820993228,3cyclictest9-21ksoftirqd/023:30:170
23820993228,2cyclictest9-21ksoftirqd/020:15:200
23820993227,3cyclictest9-21ksoftirqd/023:40:170
23820993226,4cyclictest9-21ksoftirqd/023:06:090
23820993226,4cyclictest9-21ksoftirqd/022:28:540
23820993226,4cyclictest9-21ksoftirqd/022:02:250
23820993226,4cyclictest9-21ksoftirqd/021:49:180
23820993226,4cyclictest9-21ksoftirqd/019:28:010
23820993226,3cyclictest9-21ksoftirqd/022:10:000
2382099321,4cyclictest20897-21cat21:15:280
2382099320,4cyclictest30221-21timerandwakeup19:20:260
2382099320,2cyclictest121rcu_preempt19:30:200
2382399315,3cyclictest121rcu_preempt19:25:173
23823993127,3cyclictest41-21ksoftirqd/321:25:143
23823993127,2cyclictest41-21ksoftirqd/322:50:193
23823993126,3cyclictest41-21ksoftirqd/323:20:003
23823993126,3cyclictest41-21ksoftirqd/323:10:013
23823993126,3cyclictest41-21ksoftirqd/321:08:573
23823993126,3cyclictest41-21ksoftirqd/320:40:013
23823993125,4cyclictest41-21ksoftirqd/320:49:083
2382399310,3cyclictest121rcu_preempt00:05:173
2382099316,22cyclictest11128-21cstates19:50:150
23820993126,3cyclictest9-21ksoftirqd/023:53:370
23820993126,3cyclictest9-21ksoftirqd/023:15:390
23820993126,3cyclictest9-21ksoftirqd/022:50:010
23820993126,3cyclictest9-21ksoftirqd/020:55:200
23820993126,3cyclictest9-21ksoftirqd/020:10:380
23820993126,3cyclictest9-21ksoftirqd/020:00:140
23820993126,3cyclictest9-21ksoftirqd/020:00:000
23820993126,3cyclictest9-21ksoftirqd/019:37:280
23820993125,4cyclictest9-21ksoftirqd/023:26:260
23820993125,4cyclictest9-21ksoftirqd/023:02:520
23820993125,4cyclictest9-21ksoftirqd/021:04:410
23820993125,4cyclictest9-21ksoftirqd/021:04:410
23820993125,4cyclictest9-21ksoftirqd/019:12:200
23820993125,3cyclictest9-21ksoftirqd/023:46:590
23820993125,3cyclictest9-21ksoftirqd/021:05:200
2382099312,4cyclictest19573-21latency00:35:230
23820993124,4cyclictest9-21ksoftirqd/022:22:080
136591310,0ptp4l401ktimersoftd/323:00:193
136591310,0ptp4l401ktimersoftd/320:50:263
23823993026,2cyclictest41-21ksoftirqd/321:10:133
23823993026,2cyclictest41-21ksoftirqd/319:30:203
23823993025,3cyclictest41-21ksoftirqd/323:35:213
23823993025,3cyclictest41-21ksoftirqd/319:50:143
23823993025,3cyclictest41-21ksoftirqd/300:21:583
23823993024,4cyclictest41-21ksoftirqd/323:58:313
23823993024,4cyclictest41-21ksoftirqd/319:47:383
23823993024,3cyclictest41-21ksoftirqd/300:35:143
23823993023,4cyclictest41-21ksoftirqd/320:20:173
2382099304,3cyclictest9-21ksoftirqd/000:10:150
23820993027,2cyclictest9-21ksoftirqd/020:55:000
23820993026,3cyclictest9-21ksoftirqd/000:15:220
23820993026,3cyclictest9-21ksoftirqd/000:15:220
23820993026,2cyclictest9-21ksoftirqd/021:40:000
23820993025,3cyclictest9-21ksoftirqd/020:30:140
23820993025,3cyclictest9-21ksoftirqd/019:40:130
23820993024,4cyclictest9-21ksoftirqd/021:21:140
23820993023,4cyclictest9-21ksoftirqd/023:21:300
2382099301,3cyclictest121rcu_preempt22:55:160
136591300,9ptp4l0-21swapper/321:46:373
23823992925,3cyclictest41-21ksoftirqd/321:20:203
23823992924,3cyclictest41-21ksoftirqd/322:20:133
23823992924,3cyclictest41-21ksoftirqd/320:00:003
23823992917,9cyclictest41-21ksoftirqd/319:20:143
2382399291,3cyclictest41-21ksoftirqd/323:10:193
23820992925,2cyclictest9-21ksoftirqd/000:25:160
23820992924,3cyclictest9-21ksoftirqd/022:32:230
23820992924,3cyclictest9-21ksoftirqd/021:40:010
23820992924,3cyclictest9-21ksoftirqd/000:35:000
23820992924,3cyclictest9-21ksoftirqd/000:05:220
2382099292,2cyclictest121rcu_preempt20:40:210
23823992824,3cyclictest41-21ksoftirqd/320:30:183
23823992824,2cyclictest41-21ksoftirqd/323:25:183
23823992823,3cyclictest41-21ksoftirqd/319:45:003
23823992822,4cyclictest41-21ksoftirqd/323:43:343
2382099284,3cyclictest121rcu_preempt22:35:200
23820992823,3cyclictest9-21ksoftirqd/022:50:140
23820992822,4cyclictest9-21ksoftirqd/021:53:160
23820992822,4cyclictest9-21ksoftirqd/020:48:040
23820992820,3cyclictest9-21ksoftirqd/022:15:200
136591280,0ptp4l401ktimersoftd/300:30:203
23823992722,2cyclictest41-21ksoftirqd/321:55:143
2382099262,5cyclictest121rcu_preempt20:20:220
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional