You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 05:03
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Mon Dec 29, 2025 00:45:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
180802202169,22sleep00-21swapper/019:05:050
200462201167,23sleep30-21swapper/319:07:093
199872200167,22sleep20-21swapper/219:06:242
200442197165,22sleep10-21swapper/119:07:071
202752162124,13sleep20-21swapper/219:10:012
2410921380,4sleep02056799cyclictest20:25:040
2056799687,20cyclictest26942-21grep21:35:270
139391600,1ptp4l401ktimersoftd/323:40:233
139391560,1ptp4l401ktimersoftd/322:30:103
2056799550,3cyclictest24428-21seq23:45:450
170872550,2sleep00-21swapper/020:10:160
139391550,1ptp4l401ktimersoftd/322:52:193
139391550,1ptp4l401ktimersoftd/322:08:103
139391550,1ptp4l401ktimersoftd/320:47:553
2056799540,3cyclictest17341-21seq23:32:050
139391540,1ptp4l401ktimersoftd/323:51:533
139391530,0ptp4l401ktimersoftd/321:33:443
83692520,10sleep2321ktimersoftd/221:00:002
2056799520,2cyclictest14906-21seq23:26:120
2056799510,3cyclictest3016-21seq23:00:490
131722510,3sleep20-21swapper/220:00:232
20568994740,4cyclictest30733-21sh22:55:011
20567994439,3cyclictest5728-21sh23:10:000
20568994336,5cyclictest25-21ksoftirqd/119:55:001
2056799431,2cyclictest0-21swapper/023:21:190
139391430,0ptp4l401ktimersoftd/322:28:323
139391430,0ptp4l401ktimersoftd/321:26:013
20570994237,3cyclictest8347-21cron21:04:553
139391420,1ptp4l401ktimersoftd/321:07:013
139391420,0ptp4l401ktimersoftd/300:33:363
20569994136,3cyclictest26260-21idleruntime-cro20:30:012
139391410,0ptp4l401ktimersoftd/323:15:153
20568994036,2cyclictest25-21ksoftirqd/100:25:011
20568994035,3cyclictest25-21ksoftirqd/121:40:011
20568994027,10cyclictest25-21ksoftirqd/122:25:141
2056799406,21cyclictest9195-21seq00:21:310
139391400,0ptp4l401ktimersoftd/323:32:323
139391400,0ptp4l401ktimersoftd/300:10:003
20568993935,3cyclictest25-21ksoftirqd/100:15:001
20568993934,3cyclictest25-21ksoftirqd/120:25:001
20567993934,3cyclictest9-21ksoftirqd/020:05:000
2056799391,3cyclictest1317-21runrttasks23:16:250
2056799390,3cyclictest22381-21seq23:44:480
20570993833,3cyclictest1300-21snmpd23:35:263
20569993834,2cyclictest33-21ksoftirqd/222:40:002
20569993833,3cyclictest33-21ksoftirqd/219:50:002
20568993833,3cyclictest25-21ksoftirqd/121:25:001
20568993833,3cyclictest25-21ksoftirqd/121:24:591
20568993833,3cyclictest25-21ksoftirqd/119:30:001
20568993832,3cyclictest25-21ksoftirqd/121:35:001
20567993824,12cyclictest9-21ksoftirqd/021:15:110
2056799381,2cyclictest0-21swapper/000:31:420
2056799380,3cyclictest6876-21seq22:04:110
57898370,5rtkit-daemon6513-21ls23:10:183
20569993731,3cyclictest33-21ksoftirqd/221:40:122
20568993732,3cyclictest25-21ksoftirqd/121:30:001
20568993732,3cyclictest25-21ksoftirqd/120:45:201
20568993732,3cyclictest25-21ksoftirqd/120:35:201
20568993731,4cyclictest25-21ksoftirqd/123:38:061
20568993731,3cyclictest25-21ksoftirqd/119:13:591
2056799371,2cyclictest0-21swapper/023:13:000
2056799371,2cyclictest0-21swapper/020:55:240
139391370,0ptp4l401ktimersoftd/300:18:193
139391370,0ptp4l401ktimersoftd/300:18:183
20570993630,4cyclictest41-21ksoftirqd/321:20:593
20570993630,4cyclictest41-21ksoftirqd/321:20:583
20570993630,4cyclictest41-21ksoftirqd/320:01:403
20569993631,3cyclictest33-21ksoftirqd/222:20:112
20569993630,3cyclictest33-21ksoftirqd/223:00:042
20569993630,3cyclictest33-21ksoftirqd/221:55:012
20569993630,3cyclictest33-21ksoftirqd/219:40:002
20568993632,3cyclictest25-21ksoftirqd/122:10:211
20568993632,2cyclictest25-21ksoftirqd/123:30:001
20568993632,2cyclictest25-21ksoftirqd/120:00:191
20568993632,2cyclictest25-21ksoftirqd/119:55:171
20568993631,3cyclictest25-21ksoftirqd/123:10:191
20568993631,3cyclictest25-21ksoftirqd/122:05:201
20568993631,3cyclictest25-21ksoftirqd/121:20:001
20568993631,3cyclictest25-21ksoftirqd/100:05:001
20568993630,4cyclictest25-21ksoftirqd/122:55:161
20568993630,4cyclictest25-21ksoftirqd/120:25:091
20570993530,3cyclictest41-21ksoftirqd/322:00:123
20570993530,3cyclictest41-21ksoftirqd/300:25:133
20570993529,4cyclictest41-21ksoftirqd/321:14:293
20569993530,3cyclictest33-21ksoftirqd/220:51:312
20569993530,3cyclictest33-21ksoftirqd/200:34:172
20569993529,4cyclictest33-21ksoftirqd/223:29:512
20569993529,4cyclictest33-21ksoftirqd/219:53:412
20568993530,3cyclictest25-21ksoftirqd/122:05:011
20568993529,4cyclictest25-21ksoftirqd/121:58:401
20568993529,4cyclictest25-21ksoftirqd/100:31:271
20568993529,4cyclictest25-21ksoftirqd/100:29:551
2056799351,3cyclictest10486-21seq21:01:550
20570993429,3cyclictest41-21ksoftirqd/322:16:593
20570993429,3cyclictest41-21ksoftirqd/319:50:463
20570993429,3cyclictest41-21ksoftirqd/319:13:103
20570993428,4cyclictest41-21ksoftirqd/323:00:353
20570993428,4cyclictest41-21ksoftirqd/320:22:343
20570993428,4cyclictest41-21ksoftirqd/319:17:483
20570993428,4cyclictest41-21ksoftirqd/300:24:163
20570993427,4cyclictest41-21ksoftirqd/300:39:393
20569993429,3cyclictest33-21ksoftirqd/223:18:422
20569993429,3cyclictest33-21ksoftirqd/220:12:262
20569993428,4cyclictest33-21ksoftirqd/221:25:592
20569993428,4cyclictest33-21ksoftirqd/200:05:322
20569993427,5cyclictest33-21ksoftirqd/222:03:012
20568993431,2cyclictest25-21ksoftirqd/121:15:001
20568993430,2cyclictest25-21ksoftirqd/120:10:201
20568993429,3cyclictest25-21ksoftirqd/120:55:001
20568993428,4cyclictest25-21ksoftirqd/122:49:051
20568993428,4cyclictest25-21ksoftirqd/122:43:121
20568993428,4cyclictest25-21ksoftirqd/121:47:281
20568993428,4cyclictest25-21ksoftirqd/120:05:351
20568993428,3cyclictest25-21ksoftirqd/121:04:591
20568993428,3cyclictest25-21ksoftirqd/120:34:591
2056899340,4cyclictest25-21ksoftirqd/123:09:591
2056899340,4cyclictest25-21ksoftirqd/121:45:011
20567993429,3cyclictest9-21ksoftirqd/019:12:590
20567993428,4cyclictest9-21ksoftirqd/020:31:180
20567993428,4cyclictest9-21ksoftirqd/019:58:480
20567993428,4cyclictest9-21ksoftirqd/019:16:080
2056799340,3cyclictest30912-21seq20:39:080
20570993327,4cyclictest41-21ksoftirqd/300:07:223
20570993327,3cyclictest41-21ksoftirqd/322:47:293
20570993326,4cyclictest41-21ksoftirqd/319:41:593
20569993328,3cyclictest33-21ksoftirqd/220:20:222
20569993327,4cyclictest33-21ksoftirqd/223:50:362
20569993321,9cyclictest33-21ksoftirqd/221:00:282
2056899336,3cyclictest25-21ksoftirqd/121:05:281
2056899334,3cyclictest25-21ksoftirqd/119:20:131
20568993330,2cyclictest25-21ksoftirqd/100:20:001
20568993330,2cyclictest25-21ksoftirqd/100:20:001
20568993329,3cyclictest25-21ksoftirqd/123:55:141
20568993329,3cyclictest25-21ksoftirqd/119:50:001
20568993329,2cyclictest25-21ksoftirqd/120:15:291
20568993328,3cyclictest25-21ksoftirqd/123:30:221
20568993328,3cyclictest25-21ksoftirqd/122:39:591
20568993327,4cyclictest25-21ksoftirqd/122:20:181
20568993327,4cyclictest25-21ksoftirqd/119:38:151
2056899331,2cyclictest121rcu_preempt23:45:261
20567993328,3cyclictest9-21ksoftirqd/022:27:510
20567993328,3cyclictest9-21ksoftirqd/021:12:370
20567993328,3cyclictest9-21ksoftirqd/019:37:200
20567993327,4cyclictest9-21ksoftirqd/022:22:460
20567993327,4cyclictest9-21ksoftirqd/021:45:510
20567993327,4cyclictest9-21ksoftirqd/020:41:290
20567993327,4cyclictest9-21ksoftirqd/000:06:390
20570993226,4cyclictest41-21ksoftirqd/322:11:413
20570993226,4cyclictest41-21ksoftirqd/321:50:513
20570993226,4cyclictest41-21ksoftirqd/320:42:163
20570993226,4cyclictest41-21ksoftirqd/319:58:183
20569993227,3cyclictest33-21ksoftirqd/221:31:062
20569993227,3cyclictest33-21ksoftirqd/219:55:132
20569993226,4cyclictest33-21ksoftirqd/222:59:412
20569993226,4cyclictest33-21ksoftirqd/222:46:432
20569993226,4cyclictest33-21ksoftirqd/222:18:102
20569993226,4cyclictest33-21ksoftirqd/220:37:052
20569993226,4cyclictest33-21ksoftirqd/200:21:492
20569993225,5cyclictest33-21ksoftirqd/223:06:042
20569993225,5cyclictest33-21ksoftirqd/221:12:552
20568993229,2cyclictest25-21ksoftirqd/121:50:191
20568993227,3cyclictest25-21ksoftirqd/123:40:141
20568993227,3cyclictest25-21ksoftirqd/122:30:131
20568993227,3cyclictest25-21ksoftirqd/100:10:011
20568993226,4cyclictest25-21ksoftirqd/123:19:581
20568993226,4cyclictest25-21ksoftirqd/100:39:531
20568993225,4cyclictest25-21ksoftirqd/123:20:021
20567993227,3cyclictest9-21ksoftirqd/021:09:490
20567993227,3cyclictest9-21ksoftirqd/020:54:240
20567993227,3cyclictest9-21ksoftirqd/019:48:010
20567993227,3cyclictest9-21ksoftirqd/019:40:460
20567993226,4cyclictest9-21ksoftirqd/022:12:150
20567993226,4cyclictest9-21ksoftirqd/021:53:090
20567993226,4cyclictest9-21ksoftirqd/000:27:290
20567993226,3cyclictest9-21ksoftirqd/022:58:590
2056799321,3cyclictest9154-21seq19:52:310
2056799320,3cyclictest28701-21missed_timers21:40:210
2056799320,3cyclictest23279-21runrttasks22:36:020
2056799320,24cyclictest0-21swapper/000:18:500
2056799320,24cyclictest0-21swapper/000:18:490
264092310,2sleep30-21swapper/319:20:203
20570993126,3cyclictest41-21ksoftirqd/320:08:543
20570993126,3cyclictest41-21ksoftirqd/319:49:543
20570993126,3cyclictest41-21ksoftirqd/319:31:223
20570993125,4cyclictest41-21ksoftirqd/321:41:173
20569993126,3cyclictest33-21ksoftirqd/223:50:002
20569993126,3cyclictest33-21ksoftirqd/222:53:262
20569993126,3cyclictest33-21ksoftirqd/222:29:492
20569993126,3cyclictest33-21ksoftirqd/221:37:332
20569993126,3cyclictest33-21ksoftirqd/219:30:112
20569993126,3cyclictest33-21ksoftirqd/219:17:002
20569993125,4cyclictest33-21ksoftirqd/223:32:242
20569993125,4cyclictest33-21ksoftirqd/222:33:272
20569993125,4cyclictest33-21ksoftirqd/222:05:542
20569993125,4cyclictest33-21ksoftirqd/219:43:022
2056899313,2cyclictest25-21ksoftirqd/122:15:191
20568993127,2cyclictest25-21ksoftirqd/121:00:001
20568993126,3cyclictest25-21ksoftirqd/123:00:161
2056899311,2cyclictest25-21ksoftirqd/119:40:291
20567993126,3cyclictest9-21ksoftirqd/022:45:120
20567993126,3cyclictest9-21ksoftirqd/020:23:250
20567993125,4cyclictest9-21ksoftirqd/023:51:340
20567993125,4cyclictest9-21ksoftirqd/022:18:490
20567993112,16cyclictest8751-21cat22:05:260
2056799310,4cyclictest23418-21hddtemp_smartct21:30:170
2056799310,4cyclictest2192-21sort00:10:010
139391310,0ptp4l401ktimersoftd/321:15:273
20570993025,3cyclictest41-21ksoftirqd/322:20:523
20570993025,3cyclictest41-21ksoftirqd/320:35:143
20570993025,3cyclictest41-21ksoftirqd/319:26:093
20570993024,4cyclictest41-21ksoftirqd/323:23:173
20570993024,4cyclictest41-21ksoftirqd/300:00:373
20569993027,2cyclictest33-21ksoftirqd/200:10:172
20569993026,3cyclictest33-21ksoftirqd/223:35:242
20569993026,3cyclictest33-21ksoftirqd/200:15:132
20569993026,3cyclictest33-21ksoftirqd/200:15:122
20569993026,2cyclictest33-21ksoftirqd/223:43:062
20569993026,2cyclictest33-21ksoftirqd/223:15:012
20569993026,2cyclictest33-21ksoftirqd/200:25:182
20569993025,3cyclictest33-21ksoftirqd/221:59:052
20569993025,3cyclictest33-21ksoftirqd/221:23:312
20569993025,3cyclictest33-21ksoftirqd/221:23:312
20569993025,2cyclictest33-21ksoftirqd/220:40:182
20569993024,4cyclictest33-21ksoftirqd/223:57:342
20569993024,4cyclictest33-21ksoftirqd/220:19:232
20569993024,4cyclictest33-21ksoftirqd/200:36:022
2056899302,2cyclictest121rcu_preempt19:15:231
2056899301,3cyclictest25-21ksoftirqd/120:45:001
2056899300,2cyclictest121rcu_preempt19:30:131
2056799306,20cyclictest23932-21cpuspeed22:40:130
20567993025,3cyclictest9-21ksoftirqd/019:23:580
20567993024,4cyclictest9-21ksoftirqd/020:47:170
20567993024,4cyclictest9-21ksoftirqd/020:07:310
20567993024,3cyclictest9-21ksoftirqd/023:35:460
20567993013,15cyclictest18349-21cat21:20:140
20567993013,15cyclictest18349-21cat21:20:140
139391300,9ptp4l401ktimersoftd/321:35:123
139391300,8ptp4l401ktimersoftd/323:05:063
20570992924,3cyclictest41-21ksoftirqd/321:46:013
20569992924,3cyclictest33-21ksoftirqd/223:20:132
20569992923,4cyclictest33-21ksoftirqd/222:13:492
20569992918,9cyclictest33-21ksoftirqd/221:48:312
2056799296,20cyclictest27738-21df_abs23:55:140
20567992924,3cyclictest9-21ksoftirqd/021:27:100
20567992924,3cyclictest9-21ksoftirqd/019:27:230
20567992924,3cyclictest9-21ksoftirqd/000:39:530
20567992923,4cyclictest9-21ksoftirqd/022:51:490
20567992923,4cyclictest9-21ksoftirqd/021:57:350
20567992923,4cyclictest9-21ksoftirqd/019:33:130
20567992923,3cyclictest9-21ksoftirqd/020:17:210
139391290,0ptp4l401ktimersoftd/323:45:183
139391290,0ptp4l401ktimersoftd/322:38:113
139391290,0ptp4l401ktimersoftd/320:58:083
139391290,0ptp4l401ktimersoftd/320:50:063
139391290,0ptp4l401ktimersoftd/320:26:403
139391290,0ptp4l401ktimersoftd/320:18:413
20570992822,4cyclictest41-21ksoftirqd/319:38:383
20569992823,3cyclictest33-21ksoftirqd/220:30:512
20569992822,4cyclictest33-21ksoftirqd/221:18:332
20569992822,3cyclictest33-21ksoftirqd/219:25:002
20569992818,9cyclictest33-21ksoftirqd/220:05:242
20569992817,9cyclictest33-21ksoftirqd/220:45:242
20569992817,9cyclictest33-21ksoftirqd/200:00:252
2056799286,20cyclictest30240-21tune2fs00:00:150
139391280,1ptp4l401ktimersoftd/323:26:033
20570992722,3cyclictest41-21ksoftirqd/320:30:363
20570992722,3cyclictest41-21ksoftirqd/320:10:503
2056899270,2cyclictest121rcu_preempt23:50:271
2056799270,2cyclictest19034-21/usr/sbin/munin22:30:120
139391260,0ptp4l401ktimersoftd/321:55:133
20570992519,4cyclictest41-21ksoftirqd/322:44:183
20569992520,4cyclictest33-21ksoftirqd/222:40:162
139391250,0ptp4l401ktimersoftd/322:57:213
20569992419,3cyclictest33-21ksoftirqd/219:25:182
20569992418,4cyclictest33-21ksoftirqd/221:05:502
139391230,0ptp4l401ktimersoftd/323:55:273
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional