You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-18 - 12:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot6.osadl.org (updated Thu Dec 18, 2025 00:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1726021510,3sleep22536799cyclictest00:33:222
1068911170,10ptp4l22673-21kworker/3:119:09:283
142332700,3sleep12536299cyclictest21:03:161
298762620,4sleep129880-21ptp4l19:18:221
252552624,9sleep00-21swapper/019:12:560
251792620,4sleep12536299cyclictest21:23:321
251792620,4sleep12536299cyclictest21:23:321
37362530,1sleep30-21swapper/322:58:043
2537199488,6cyclictest41-21ksoftirqd/320:00:143
2537199478,6cyclictest41-21ksoftirqd/323:31:353
2537199478,6cyclictest41-21ksoftirqd/321:46:573
2537199478,6cyclictest41-21ksoftirqd/319:23:053
2537199474,7cyclictest25349-21cyclictest19:33:293
2537199474,7cyclictest25349-21cyclictest19:33:293
2536799477,8cyclictest13146-21irqstats00:23:252
2537199468,6cyclictest41-21ksoftirqd/323:38:543
2537199468,6cyclictest41-21ksoftirqd/322:17:563
2537199468,6cyclictest41-21ksoftirqd/321:00:523
2537199459,6cyclictest41-21ksoftirqd/323:08:273
2537199458,6cyclictest41-21ksoftirqd/320:40:453
2537199458,6cyclictest41-21ksoftirqd/320:10:223
2537199458,6cyclictest41-21ksoftirqd/300:08:043
2537199458,5cyclictest41-21ksoftirqd/300:11:383
2537199457,7cyclictest41-21ksoftirqd/320:55:473
2537199457,6cyclictest41-21ksoftirqd/323:58:413
2537199457,6cyclictest41-21ksoftirqd/319:51:553
2537199456,6cyclictest41-21ksoftirqd/319:16:353
2536799452,12cyclictest32664-21awk20:33:192
2537199447,5cyclictest41-21ksoftirqd/320:05:283
2537199446,7cyclictest41-21ksoftirqd/319:55:013
2537199446,6cyclictest41-21ksoftirqd/321:08:553
2536799442,12cyclictest5124-21chrt21:51:312
2537199436,6cyclictest41-21ksoftirqd/323:25:573
2537199436,6cyclictest41-21ksoftirqd/323:25:573
2537199435,6cyclictest41-21ksoftirqd/321:18:173
2537199424,7cyclictest41-21ksoftirqd/320:33:163
2536799427,8cyclictest9281-21awk23:08:222
282502410,1sleep10-21swapper/123:48:201
2503124119,10sleep10-21swapper/119:10:031
25371994013,6cyclictest41-21ksoftirqd/322:38:223
2535899402,5cyclictest0-21swapper/022:57:570
25358994020,17cyclictest9-21ksoftirqd/019:28:450
25358994016,21cyclictest2943-21grep00:03:220
25358994014,23cyclictest7827-21timerandwakeup23:03:340
2535899392,34cyclictest19462-21cron22:23:040
25358993911,24cyclictest24790-21grep20:18:150
316572380,2sleep20-21swapper/221:38:222
2537199386,7cyclictest41-21ksoftirqd/323:03:253
2537199384,6cyclictest41-21ksoftirqd/319:38:343
25371993810,7cyclictest41-21ksoftirqd/300:33:493
2536799385,7cyclictest0-21swapper/222:48:342
2536799383,12cyclictest29174-21seq20:25:502
2535899382,6cyclictest0-21swapper/021:33:140
2535899382,6cyclictest0-21swapper/021:33:140
25358993811,4cyclictest233-21systemd-journal22:13:030
2535899380,35cyclictest16695-21latency_hist00:33:070
106891380,1ptp4l401ktimersoftd/320:23:203
2537199374,6cyclictest41-21ksoftirqd/300:21:003
2535899372,8cyclictest28657-21apt-get19:18:120
2535899372,5cyclictest15198-21apt-get19:58:120
25358993717,17cyclictest9-21ksoftirqd/023:45:300
25358993711,3cyclictest3927-21if_ens319:33:180
25358993711,3cyclictest3927-21if_ens319:33:180
25358993710,4cyclictest573-21fschecks_time23:58:210
2535899370,6cyclictest0-21swapper/021:13:130
106891370,1ptp4l401ktimersoftd/323:16:163
106891370,1ptp4l401ktimersoftd/322:08:203
2537199365,6cyclictest41-21ksoftirqd/321:29:423
2537199365,6cyclictest41-21ksoftirqd/321:29:423
2537199362,7cyclictest41-21ksoftirqd/322:18:313
2537199362,2cyclictest121rcu_preempt21:23:263
2537199362,2cyclictest121rcu_preempt21:23:263
25371993612,6cyclictest41-21ksoftirqd/322:32:573
25371993611,6cyclictest41-21ksoftirqd/320:30:083
25371993610,6cyclictest41-21ksoftirqd/319:29:263
2536799366,6cyclictest33-21ksoftirqd/200:09:172
2535899369,4cyclictest12947-21timerandwakeup20:58:310
2535899361,6cyclictest0-21swapper/020:48:130
2535899361,5cyclictest0-21swapper/023:23:190
2535899361,5cyclictest0-21swapper/023:23:190
25358993613,20cyclictest20660-21apt-config23:33:060
25358993610,3cyclictest12410-21grep23:13:260
106891360,1ptp4l401ktimersoftd/300:13:293
2536799356,6cyclictest0-21swapper/221:43:242
2536799353,20cyclictest7836-21fschecks_time00:13:222
2536799352,6cyclictest321ktimersoftd/223:28:262
2535899359,4cyclictest21454-21unixbench_singl22:23:340
2535899358,4cyclictest31009-21seq22:43:520
2535899357,5cyclictest27345-21gltestperf22:38:210
2535899357,4cyclictest5433-21grep00:08:250
2535899351,5cyclictest0-21swapper/020:53:140
25358993510,3cyclictest6201-21which19:38:170
25358993510,3cyclictest4759-21tail20:43:180
25358993510,3cyclictest22824-21cut22:28:230
106891350,0ptp4l401ktimersoftd/321:57:313
25371993430,2cyclictest391rcuc/319:18:593
2536799347,6cyclictest33-21ksoftirqd/219:38:232
25367993413,7cyclictest33-21ksoftirqd/222:08:322
2535899347,3cyclictest11501-21grep00:18:360
2535899343,9cyclictest12529-21latency_hist19:53:000
2535899342,6cyclictest23543-21apt-get21:23:140
2535899342,6cyclictest23543-21apt-get21:23:140
2535899342,5cyclictest10308-21apt-get22:03:150
2535899341,8cyclictest16421-21apt-get21:08:150
2535899341,3cyclictest15383-21sshd21:03:270
2535899341,10cyclictest9573-21latency_hist00:18:070
25358993410,3cyclictest13247-21missed_timers00:23:270
242522343,18sleep224338-21phc2sys-jitter19:08:182
106891340,0ptp4l401ktimersoftd/323:21:163
106891340,0ptp4l401ktimersoftd/323:21:163
25371993311,6cyclictest41-21ksoftirqd/321:40:023
2536799337,7cyclictest33-21ksoftirqd/221:20:132
2536799337,6cyclictest33-21ksoftirqd/222:18:512
2536799337,6cyclictest33-21ksoftirqd/219:29:172
2536799336,6cyclictest33-21ksoftirqd/222:39:462
2536799331,6cyclictest0-21swapper/221:03:252
2536799330,13cyclictest16886-21missed_timers23:23:292
2536799330,13cyclictest16886-21missed_timers23:23:292
2535899338,3cyclictest8027-21/usr/sbin/munin19:43:230
2535899338,3cyclictest5928-21fschecks_time21:53:170
2535899338,3cyclictest26273-21irqrtprio19:13:150
2535899337,3cyclictest28266-21fschecks_time23:48:200
2535899337,3cyclictest23401-21cat23:38:210
2535899336,4cyclictest32557-21if_enp1s0.120:33:180
2535899336,4cyclictest18157-21/usr/sbin/munin23:28:330
2535899336,3cyclictest16210-21processes22:13:250
2535899332,8cyclictest22314-21apt-get20:13:110
2535899332,4cyclictest0-21swapper/023:08:170
2535899332,4cyclictest0-21swapper/021:28:150
2535899332,4cyclictest0-21swapper/021:28:150
2535899331,9cyclictest7841-21/usr/sbin/munin21:58:310
2535899331,5cyclictest2973-21cat21:48:030
2535899331,5cyclictest29659-21apt-get20:28:140
25358993310,3cyclictest32494-21ls19:23:280
2535899330,4cyclictest15019-21cat19:58:000
106891330,1ptp4l401ktimersoftd/322:33:343
2536799327,7cyclictest33-21ksoftirqd/221:33:542
2536799327,7cyclictest33-21ksoftirqd/221:33:542
2536799325,6cyclictest33-21ksoftirqd/222:03:562
2536799322,12cyclictest359-21taskset19:24:342
2535899327,3cyclictest832-21unixbench_multi22:48:340
2535899326,3cyclictest30839-21if_enp1s0.123:53:220
2535899325,5cyclictest13807-21fschecks_count23:18:220
2535899325,5cyclictest13807-21fschecks_count23:18:220
2535899324,5cyclictest5250-21latency_hist21:53:030
2535899322,5cyclictest27296-21apt-get20:23:130
2535899321,8cyclictest17586-21apt-get20:03:130
2535899321,6cyclictest4001-21apt-get22:58:170
2537199313,6cyclictest41-21ksoftirqd/322:00:013
2537199312,6cyclictest41-21ksoftirqd/321:48:043
25371993125,4cyclictest41-21ksoftirqd/322:03:233
2537199311,6cyclictest41-21ksoftirqd/320:43:243
2537199311,6cyclictest41-21ksoftirqd/300:42:563
2537199311,6cyclictest41-21ksoftirqd/300:30:173
25371993113,6cyclictest41-21ksoftirqd/323:52:263
25371993112,7cyclictest41-21ksoftirqd/323:45:393
25371993112,6cyclictest41-21ksoftirqd/322:24:543
25371993112,6cyclictest41-21ksoftirqd/300:25:143
2536799317,6cyclictest33-21ksoftirqd/222:53:212
2536799317,6cyclictest33-21ksoftirqd/220:59:272
2536799316,7cyclictest33-21ksoftirqd/221:08:342
2536799316,6cyclictest33-21ksoftirqd/223:56:022
2536799316,6cyclictest33-21ksoftirqd/223:33:342
2536799316,6cyclictest33-21ksoftirqd/223:05:152
2536799316,6cyclictest33-21ksoftirqd/221:15:562
2536799316,6cyclictest33-21ksoftirqd/220:53:482
2536799316,6cyclictest33-21ksoftirqd/220:46:392
2536799316,6cyclictest33-21ksoftirqd/220:05:372
2536799316,6cyclictest33-21ksoftirqd/200:42:142
2536799316,6cyclictest33-21ksoftirqd/200:31:522
2536799316,6cyclictest33-21ksoftirqd/200:02:182
2536799316,5cyclictest33-21ksoftirqd/222:26:562
2536799315,6cyclictest33-21ksoftirqd/223:01:092
2536799315,6cyclictest33-21ksoftirqd/219:43:022
2536799315,5cyclictest33-21ksoftirqd/219:49:522
2536799312,15cyclictest9804-21/usr/sbin/munin00:18:302
2536799311,17cyclictest6899-21snmp_o5powerctl21:53:282
2536799310,5cyclictest0-21swapper/221:23:142
2536799310,5cyclictest0-21swapper/221:23:142
2536799310,4cyclictest0-21swapper/220:19:522
2536799310,4cyclictest0-21swapper/219:18:122
2536799310,12cyclictest23501-21snmp_o5powerctl22:28:312
25362993125,3cyclictest25-21ksoftirqd/121:58:031
2535899317,4cyclictest19287-21/usr/sbin/munin00:38:240
2535899316,3cyclictest26488-21seq22:36:530
25371993026,2cyclictest41-21ksoftirqd/323:03:043
25371993026,2cyclictest391rcuc/320:19:073
25371993025,3cyclictest41-21ksoftirqd/321:18:023
2537199301,5cyclictest41-21ksoftirqd/323:57:083
2537199301,5cyclictest41-21ksoftirqd/323:36:533
25371993012,6cyclictest41-21ksoftirqd/320:52:243
2536799307,5cyclictest33-21ksoftirqd/220:30:592
2536799306,7cyclictest6898-21cstates20:48:152
2536799306,7cyclictest33-21ksoftirqd/223:46:142
2536799306,7cyclictest33-21ksoftirqd/223:21:222
2536799306,7cyclictest33-21ksoftirqd/223:21:222
2536799306,6cyclictest33-21ksoftirqd/222:36:172
2536799306,6cyclictest33-21ksoftirqd/221:32:082
2536799306,6cyclictest33-21ksoftirqd/221:32:082
2536799306,6cyclictest33-21ksoftirqd/220:40:142
2536799306,6cyclictest33-21ksoftirqd/219:16:102
2536799306,6cyclictest33-21ksoftirqd/200:03:512
2536799306,5cyclictest33-21ksoftirqd/222:15:562
2536799300,4cyclictest0-21swapper/219:34:352
2536799300,4cyclictest0-21swapper/219:34:352
2536799300,13cyclictest29364-21grep23:48:332
25362993022,4cyclictest25-21ksoftirqd/120:13:001
2535899302,4cyclictest30860-21apt-get21:38:160
2535899301,6cyclictest21294-21snmp_o5powerctl20:08:280
2535899301,5cyclictest21153-21apt-get21:18:140
25358993010,3cyclictest101ktimersoftd/000:37:520
2537199299,6cyclictest41-21ksoftirqd/319:43:323
25371992924,3cyclictest41-21ksoftirqd/322:43:343
2537199291,6cyclictest41-21ksoftirqd/321:33:323
2537199291,6cyclictest41-21ksoftirqd/321:33:323
2537199290,6cyclictest41-21ksoftirqd/320:15:113
2536799290,4cyclictest0-21swapper/223:16:482
25362992924,3cyclictest25-21ksoftirqd/123:43:051
2535899293,5cyclictest1970-21apt-get20:38:160
25371992823,3cyclictest41-21ksoftirqd/322:53:043
25371992823,3cyclictest41-21ksoftirqd/321:03:163
2536799286,7cyclictest33-21ksoftirqd/219:59:542
25362992822,3cyclictest25-21ksoftirqd/123:03:041
25362992721,3cyclictest25-21ksoftirqd/123:35:571
25362992721,3cyclictest25-21ksoftirqd/100:31:291
2536799266,6cyclictest33-21ksoftirqd/221:58:202
25367992610,11cyclictest0-21swapper/222:43:162
2536799260,14cyclictest23182-21apt-get23:38:192
2536799260,12cyclictest240992sleep220:14:322
25362992620,3cyclictest25-21ksoftirqd/122:06:521
25362992619,4cyclictest25-21ksoftirqd/120:22:341
2536799250,14cyclictest20315-21perl20:08:182
25362992519,3cyclictest25-21ksoftirqd/119:34:511
25362992519,3cyclictest25-21ksoftirqd/119:34:511
25362992519,3cyclictest25-21ksoftirqd/100:02:501
25362992518,4cyclictest25-21ksoftirqd/123:15:441
25362992518,4cyclictest25-21ksoftirqd/122:26:021
25362992518,4cyclictest25-21ksoftirqd/119:44:201
25362992419,3cyclictest25-21ksoftirqd/100:08:581
25362992418,3cyclictest25-21ksoftirqd/123:20:051
25362992418,3cyclictest25-21ksoftirqd/123:20:051
25362992418,3cyclictest25-21ksoftirqd/122:00:201
25362992418,3cyclictest25-21ksoftirqd/121:39:081
25362992418,3cyclictest25-21ksoftirqd/121:20:341
25362992418,3cyclictest25-21ksoftirqd/120:06:171
25362992417,4cyclictest25-21ksoftirqd/121:10:151
25362992417,4cyclictest25-21ksoftirqd/119:51:101
25362992417,4cyclictest25-21ksoftirqd/100:06:151
2536799236,5cyclictest33-21ksoftirqd/219:56:002
25362992318,3cyclictest25-21ksoftirqd/122:20:031
25362992318,3cyclictest25-21ksoftirqd/121:29:461
25362992318,3cyclictest25-21ksoftirqd/121:29:461
25362992318,3cyclictest25-21ksoftirqd/119:43:001
25362992318,3cyclictest25-21ksoftirqd/100:33:231
25362992318,3cyclictest25-21ksoftirqd/100:16:391
25362992317,4cyclictest25-21ksoftirqd/120:35:101
25362992317,3cyclictest25-21ksoftirqd/119:26:481
25362992316,4cyclictest25-21ksoftirqd/121:02:441
25362992316,4cyclictest25-21ksoftirqd/120:13:301
25362992316,4cyclictest25-21ksoftirqd/119:17:381
25362992316,4cyclictest19914-21head23:28:341
25362992216,3cyclictest25-21ksoftirqd/123:55:311
25362992216,3cyclictest25-21ksoftirqd/121:48:251
25362992215,4cyclictest25-21ksoftirqd/122:14:301
25362992116,3cyclictest25-21ksoftirqd/122:36:411
25362992116,3cyclictest25-21ksoftirqd/120:43:021
25362992116,3cyclictest25-21ksoftirqd/100:20:201
25362992115,4cyclictest25-21ksoftirqd/120:26:031
25362992115,3cyclictest25-21ksoftirqd/120:01:401
25362992015,3cyclictest25-21ksoftirqd/123:23:211
25362992015,3cyclictest25-21ksoftirqd/123:23:211
25362992014,3cyclictest896-21/usr/sbin/munin19:28:291
25362992014,3cyclictest25-21ksoftirqd/122:57:391
25362992014,3cyclictest25-21ksoftirqd/120:47:401
25362992013,4cyclictest19722-21tune2fs00:38:241
2536299198,3cyclictest47050irq/101-ens3-Tx23:10:351
25362991914,3cyclictest25-21ksoftirqd/122:30:121
25362991914,3cyclictest18709-21/usr/sbin/munin21:13:181
25362991913,3cyclictest25-21ksoftirqd/122:11:401
25362991913,3cyclictest13945-21phc2sys19:53:221
25362991912,4cyclictest31345-21latency_hist22:48:041
25362991912,4cyclictest26200-21cat23:43:231
25362991912,4cyclictest1881-21grep21:43:231
25362991911,5cyclictest644-21dbus-daemon22:48:281
25362991813,3cyclictest6718-21apt-get20:48:141
25362991813,3cyclictest30872-21ptp4l20:28:241
25362991812,4cyclictest28672-21expr21:33:151
25362991812,4cyclictest28672-21expr21:33:151
25362991812,3cyclictest28017-21phc2sys22:38:261
2536299173,8cyclictest9084-21apt-get20:53:131
25362991712,3cyclictest12253-21cat00:23:171
2536299166,7cyclictest6540-21cpuspeed_turbos23:03:181
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional