You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-10 - 08:35
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Fri Jul 10, 2026 00:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
120852234168,22sleep00-21swapper/019:08:350
119732212186,16sleep20-21swapper/219:07:082
119972209175,22sleep10-21swapper/119:07:281
118642206172,22sleep30-21swapper/319:05:493
1248799751,25cyclictest27010-21vmstat23:00:292
1248799721,33cyclictest31112-21latency_hist00:20:012
1248799721,22cyclictest4493-21vmstat21:05:292
1248799711,24cyclictest21998-21sed00:00:152
1248799711,24cyclictest21998-21sed00:00:152
1248799700,24cyclictest3819-21cat00:30:132
12486997025,3cyclictest25-21ksoftirqd/120:00:591
1248799687,26cyclictest32564-21/usr/sbin/munin23:15:262
1248799680,29cyclictest22969-21sendmail-msp20:40:002
1248799671,23cyclictest8892-21sed23:30:262
1248799670,63cyclictest169072chrt19:18:472
1248799670,29cyclictest3002-21ls22:10:262
1248799670,25cyclictest22450-21which21:45:162
1248799670,24cyclictest8841-21cstates22:25:152
1248799670,23cyclictest8393-21latency_hist22:25:012
1248799670,23cyclictest8006-21df_abs21:15:172
1248799661,25cyclictest30576-21ps19:45:232
1248799661,24cyclictest661-21sed00:20:302
1248799661,22cyclictest19832-21expr21:40:152
1248799650,22cyclictest18121-21/usr/sbin/munin22:45:242
1248799650,22cyclictest18121-21/usr/sbin/munin22:45:242
12486996529,4cyclictest25-21ksoftirqd/120:15:001
1248799640,30cyclictest2798-21ls19:55:182
1248799640,25cyclictest13972-21cat22:35:162
1248799638,21cyclictest19401-21latency20:30:202
1248799631,27cyclictest5742-21ls20:00:272
1248799631,27cyclictest19566-21df23:55:152
1248799631,25cyclictest27952-21phc2sys19:40:222
1248799631,22cyclictest23169-21apt-get20:40:112
1248799631,22cyclictest23169-21apt-get20:40:112
1248799630,30cyclictest28960-21sed20:50:212
1248799630,23cyclictest13816-21expr20:20:132
12486996331,4cyclictest25-21ksoftirqd/120:55:261
1248799620,29cyclictest24610-21users22:55:312
1248799620,21cyclictest13828-21grep23:40:282
12485996231,3cyclictest9-21ksoftirqd/021:50:140
1248799610,25cyclictest0-21swapper/222:15:302
1248799610,23cyclictest30276-21grep20:55:122
1248799610,22cyclictest18598-21sensors21:35:262
1248799610,19cyclictest0-21swapper/223:50:282
12486996130,3cyclictest25-21ksoftirqd/120:25:201
12485996129,4cyclictest9-21ksoftirqd/021:10:180
12485996116,3cyclictest9-21ksoftirqd/019:50:120
1248799601,28cyclictest24879-21hddtemp_smartct19:35:152
1248799600,24cyclictest28005-21basename00:10:262
1248799600,23cyclictest15741-21uname21:30:192
12486996030,4cyclictest25-21ksoftirqd/123:20:201
12486996029,4cyclictest25-21ksoftirqd/123:45:161
12486996027,7cyclictest25-21ksoftirqd/120:05:181
12486996027,6cyclictest25-21ksoftirqd/122:20:201
12485996031,4cyclictest9-21ksoftirqd/000:00:310
12485996031,4cyclictest9-21ksoftirqd/000:00:310
12485996030,3cyclictest9-21ksoftirqd/022:40:220
12485996030,3cyclictest9-21ksoftirqd/020:15:010
12485996029,4cyclictest9-21ksoftirqd/019:20:130
12485996027,3cyclictest9-21ksoftirqd/023:45:200
1248799591,20cyclictest5315-21apt-get21:10:092
1248799590,21cyclictest10737-21irqrtprio21:20:202
1248799590,19cyclictest0-21swapper/200:25:222
1248799590,18cyclictest0-21swapper/219:10:142
1248799590,17cyclictest0-21swapper/222:00:272
12486995930,9cyclictest25-21ksoftirqd/123:55:221
12486995930,4cyclictest25-21ksoftirqd/121:45:151
12485995931,3cyclictest9-21ksoftirqd/000:10:230
12485995929,3cyclictest9-21ksoftirqd/021:45:260
12485995913,7cyclictest9-21ksoftirqd/000:15:270
1248799588,23cyclictest14974-21cut23:45:172
1248799581,23cyclictest2521-21gnome-shell23:35:262
1248799581,21cyclictest16054-21df22:40:142
1248799581,20cyclictest19978-21df_abs19:25:152
1248799580,23cyclictest23498-21ls19:30:252
12486995830,4cyclictest25-21ksoftirqd/123:40:151
12486995829,4cyclictest25-21ksoftirqd/123:25:271
12486995825,7cyclictest25-21ksoftirqd/123:10:241
12486995825,4cyclictest25-21ksoftirqd/123:50:221
12486995825,4cyclictest25-21ksoftirqd/120:50:131
12485995831,3cyclictest9-21ksoftirqd/020:05:000
12485995829,3cyclictest9-21ksoftirqd/023:25:240
12485995829,3cyclictest9-21ksoftirqd/022:25:280
12485995828,4cyclictest9-21ksoftirqd/020:15:160
139291570,1ptp4l391rcuc/320:50:263
135191570,7getstats1248899cyclictest19:59:323
1248799571,23cyclictest5257-21cat23:25:142
1248799570,25cyclictest2684-21grep23:20:132
1248799570,24cyclictest1160-21uname21:00:192
1248799570,20cyclictest0-21swapper/200:35:132
12486995728,4cyclictest25-21ksoftirqd/122:50:131
12486995727,4cyclictest25-21ksoftirqd/121:15:201
12486995726,3cyclictest25-21ksoftirqd/122:45:281
12486995726,3cyclictest25-21ksoftirqd/122:45:281
12486995725,4cyclictest25-21ksoftirqd/121:50:301
12486995724,4cyclictest25-21ksoftirqd/119:50:171
12486995721,4cyclictest25-21ksoftirqd/121:20:301
12485995726,3cyclictest9-21ksoftirqd/023:30:250
1248799561,27cyclictest18303-21memory19:20:212
1248799561,19cyclictest8908-21apt-get20:10:112
1248799560,25cyclictest16048-21apt-get20:25:112
12486995626,4cyclictest25-21ksoftirqd/122:35:131
12486995624,3cyclictest25-21ksoftirqd/120:46:481
12486995623,4cyclictest25-21ksoftirqd/123:30:281
12486995620,3cyclictest25-21ksoftirqd/120:40:151
12486995620,3cyclictest25-21ksoftirqd/120:40:141
12485995628,3cyclictest9-21ksoftirqd/020:45:150
12485995627,3cyclictest9-21ksoftirqd/022:35:140
12485995626,4cyclictest9-21ksoftirqd/019:55:180
12485995626,3cyclictest9-21ksoftirqd/022:25:010
12485995625,4cyclictest9-21ksoftirqd/020:40:190
12485995625,4cyclictest9-21ksoftirqd/020:40:190
12485995623,3cyclictest9-21ksoftirqd/000:20:160
1248799551,17cyclictest12449-21apt-get21:25:142
12486995526,4cyclictest25-21ksoftirqd/122:15:201
12486995525,4cyclictest25-21ksoftirqd/122:35:001
12486995525,4cyclictest25-21ksoftirqd/100:35:171
12486995525,3cyclictest25-21ksoftirqd/121:55:201
12486995525,3cyclictest25-21ksoftirqd/119:45:141
12486995523,4cyclictest25-21ksoftirqd/121:30:221
12485995527,3cyclictest9-21ksoftirqd/022:55:170
12485995525,4cyclictest9-21ksoftirqd/021:35:530
1248799541,23cyclictest12032-21irqrtprio20:15:182
1248799541,20cyclictest31433-21apt-get22:05:122
1248799541,20cyclictest27703-21meminfo21:55:212
1248799540,23cyclictest30846-21sed23:10:182
1248799540,22cyclictest12327-21ptp4l-jitter22:30:272
12486995423,4cyclictest25-21ksoftirqd/122:55:161
12486995421,3cyclictest25-21ksoftirqd/119:55:121
12485995427,3cyclictest9-21ksoftirqd/023:22:160
12485995424,3cyclictest9-21ksoftirqd/020:35:190
12485995422,3cyclictest9-21ksoftirqd/020:20:260
135191530,7getstats1248899cyclictest19:14:333
1248799531,23cyclictest24308-21apt-get21:50:122
12486995325,4cyclictest25-21ksoftirqd/119:40:241
12486995322,3cyclictest25-21ksoftirqd/121:05:271
12486995321,4cyclictest25-21ksoftirqd/100:10:151
12486995319,3cyclictest25-21ksoftirqd/122:10:231
12486995318,3cyclictest25-21ksoftirqd/121:25:301
12485995326,3cyclictest9-21ksoftirqd/023:35:150
139291520,1ptp4l391rcuc/300:05:443
12486995220,4cyclictest25-21ksoftirqd/119:15:151
12485995228,3cyclictest9-21ksoftirqd/021:20:000
12485995227,3cyclictest9-21ksoftirqd/023:55:180
1248599522,46cyclictest24134-21latency_hist19:35:000
12485995220,3cyclictest9-21ksoftirqd/022:30:160
12486995120,4cyclictest25-21ksoftirqd/119:30:131
12486995120,4cyclictest25-21ksoftirqd/119:25:191
12485995120,3cyclictest9-21ksoftirqd/022:10:130
12488995043,4cyclictest6027-21dump-pmu-power22:19:593
12486995024,4cyclictest25-21ksoftirqd/123:35:171
12486995015,11cyclictest25-21ksoftirqd/119:35:211
12485995020,6cyclictest9-21ksoftirqd/020:55:230
1248799491,27cyclictest1536-21latency_hist19:55:002
1248799490,20cyclictest0-21swapper/222:50:272
1248799490,18cyclictest0-21swapper/220:45:152
12486994934,4cyclictest25-21ksoftirqd/123:10:001
12486994914,8cyclictest25-21ksoftirqd/100:05:221
1248799480,29cyclictest29752-21latency_hist23:10:012
12486994833,4cyclictest25-21ksoftirqd/120:40:001
12486994823,3cyclictest25-21ksoftirqd/121:00:191
12486994814,8cyclictest25-21ksoftirqd/122:40:171
12486994811,6cyclictest25-21ksoftirqd/100:00:321
12486994811,6cyclictest25-21ksoftirqd/100:00:321
12485994829,4cyclictest9-21ksoftirqd/019:39:590
12485994821,3cyclictest9-21ksoftirqd/022:45:270
12485994821,3cyclictest9-21ksoftirqd/022:45:270
12485994821,3cyclictest9-21ksoftirqd/000:30:000
12485994817,3cyclictest9-21ksoftirqd/020:09:540
1219424834,7sleep10-21swapper/119:10:011
12486994729,4cyclictest25-21ksoftirqd/121:39:591
12486994714,7cyclictest25-21ksoftirqd/119:20:211
12485994730,4cyclictest9-21ksoftirqd/023:40:160
12485994630,3cyclictest9-21ksoftirqd/019:40:110
1248699455,3cyclictest25-21ksoftirqd/123:20:011
12486994530,3cyclictest25-21ksoftirqd/121:10:121
12486994530,3cyclictest25-21ksoftirqd/100:30:251
12486994526,10cyclictest25-21ksoftirqd/121:45:001
12486994523,2cyclictest25-21ksoftirqd/100:15:121
12486994517,4cyclictest25-21ksoftirqd/122:08:221
12485994529,6cyclictest9-21ksoftirqd/022:00:000
12485994528,4cyclictest9-21ksoftirqd/023:05:010
12485994528,3cyclictest9-21ksoftirqd/020:50:190
12485994516,3cyclictest9-21ksoftirqd/000:30:170
139291440,0ptp4l401ktimersoftd/321:22:103
135191440,7getstats1248899cyclictest19:29:333
1248699443,2cyclictest25-21ksoftirqd/100:29:591
12486994431,4cyclictest25-21ksoftirqd/120:30:241
12486994430,4cyclictest25-21ksoftirqd/100:20:251
12485994431,4cyclictest9-21ksoftirqd/019:25:270
12485994430,4cyclictest9-21ksoftirqd/021:05:160
12485994430,3cyclictest9-21ksoftirqd/020:30:140
12485994429,4cyclictest9-21ksoftirqd/022:15:240
12485994428,4cyclictest9-21ksoftirqd/000:35:200
12485994428,3cyclictest9-21ksoftirqd/021:00:150
139291430,0ptp4l401ktimersoftd/323:43:503
12486994327,3cyclictest25-21ksoftirqd/122:00:141
12486994324,8cyclictest25-21ksoftirqd/122:29:591
12486994314,3cyclictest25-21ksoftirqd/120:15:151
12485994329,4cyclictest9-21ksoftirqd/022:00:220
12485994329,4cyclictest9-21ksoftirqd/021:40:210
12485994329,3cyclictest9-21ksoftirqd/019:10:240
12485994327,3cyclictest9-21ksoftirqd/023:15:150
12485994327,3cyclictest9-21ksoftirqd/021:25:400
12485994326,6cyclictest9-21ksoftirqd/021:25:010
12485994317,3cyclictest9-21ksoftirqd/021:34:170
12485994314,4cyclictest9-21ksoftirqd/022:50:160
139291420,0ptp4l401ktimersoftd/321:32:483
1248799426,20cyclictest24334-21sed00:05:172
12486994229,3cyclictest25-21ksoftirqd/120:20:181
12485994229,3cyclictest9-21ksoftirqd/019:15:130
12485994226,3cyclictest9-21ksoftirqd/023:10:010
12485994225,3cyclictest28097-21kworker/0:200:05:430
12485994223,10cyclictest9-21ksoftirqd/023:15:010
139291410,0ptp4l401ktimersoftd/322:29:253
12485994129,3cyclictest9-21ksoftirqd/020:25:120
12486994025,3cyclictest25-21ksoftirqd/123:00:191
1248599402,3cyclictest121rcu_preempt23:50:270
12485993926,3cyclictest9-21ksoftirqd/022:05:250
12485993924,4cyclictest9-21ksoftirqd/019:45:270
41298380,1rtkit-daemon0-21swapper/323:33:293
12488993832,4cyclictest41-21ksoftirqd/322:30:053
12488993832,4cyclictest41-21ksoftirqd/322:02:123
12488993831,4cyclictest41-21ksoftirqd/319:45:123
12488993830,5cyclictest41-21ksoftirqd/321:10:113
139291370,1ptp4l401ktimersoftd/321:59:153
12488993732,3cyclictest41-21ksoftirqd/321:50:013
12488993732,3cyclictest41-21ksoftirqd/300:25:053
12488993731,4cyclictest41-21ksoftirqd/323:13:083
12488993731,4cyclictest41-21ksoftirqd/319:51:543
12488993731,4cyclictest41-21ksoftirqd/319:15:033
12488993731,4cyclictest41-21ksoftirqd/300:15:063
41298360,5rtkit-daemon14332-21sshd21:27:013
12488993630,4cyclictest41-21ksoftirqd/322:09:383
12488993630,4cyclictest41-21ksoftirqd/321:50:093
12488993630,4cyclictest41-21ksoftirqd/321:37:243
12488993630,4cyclictest41-21ksoftirqd/319:38:103
12488993630,4cyclictest41-21ksoftirqd/300:37:463
1248799361,20cyclictest7568-21meminfo20:05:202
41298350,1rtkit-daemon0-21swapper/320:30:223
12488993530,3cyclictest634-21fschecks_count21:00:163
12488993530,3cyclictest41-21ksoftirqd/323:07:583
12488993530,3cyclictest41-21ksoftirqd/321:06:563
12488993529,4cyclictest41-21ksoftirqd/319:32:413
12488993430,3cyclictest41-21ksoftirqd/322:37:553
12488993429,3cyclictest41-21ksoftirqd/323:56:233
12488993429,3cyclictest41-21ksoftirqd/323:54:133
12488993429,3cyclictest41-21ksoftirqd/323:16:563
12488993429,3cyclictest41-21ksoftirqd/323:02:423
12488993429,3cyclictest41-21ksoftirqd/300:20:063
12488993428,4cyclictest41-21ksoftirqd/319:22:503
12488993328,3cyclictest41-21ksoftirqd/321:15:153
12488993328,3cyclictest41-21ksoftirqd/320:56:413
12488993328,3cyclictest41-21ksoftirqd/320:15:173
12488993328,3cyclictest41-21ksoftirqd/320:09:233
12488993327,4cyclictest41-21ksoftirqd/322:48:543
12488993327,4cyclictest41-21ksoftirqd/322:48:543
12488993327,4cyclictest41-21ksoftirqd/320:29:373
12488993327,4cyclictest41-21ksoftirqd/320:00:133
12488993227,3cyclictest41-21ksoftirqd/320:20:073
12488993226,4cyclictest41-21ksoftirqd/322:21:573
12488993126,3cyclictest41-21ksoftirqd/323:45:393
12488993126,3cyclictest41-21ksoftirqd/320:43:523
12488993126,3cyclictest41-21ksoftirqd/320:43:523
12488993126,3cyclictest41-21ksoftirqd/300:33:073
12488993126,3cyclictest41-21ksoftirqd/300:11:103
12488993125,4cyclictest41-21ksoftirqd/319:43:283
12488993025,3cyclictest41-21ksoftirqd/323:27:483
12488993025,3cyclictest41-21ksoftirqd/322:54:123
12488993025,3cyclictest41-21ksoftirqd/321:40:503
12488993025,3cyclictest41-21ksoftirqd/320:45:093
139291290,0ptp4l401ktimersoftd/322:40:073
12488992924,3cyclictest41-21ksoftirqd/322:56:043
12488992924,3cyclictest41-21ksoftirqd/322:10:433
12488992924,3cyclictest41-21ksoftirqd/320:14:343
12488992923,4cyclictest41-21ksoftirqd/323:37:593
12488992823,3cyclictest41-21ksoftirqd/323:20:103
12488992520,3cyclictest41-21ksoftirqd/320:35:123
12488992519,4cyclictest41-21ksoftirqd/300:04:443
12488992519,4cyclictest41-21ksoftirqd/300:04:443
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional