You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-26 - 17:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackbslot6.osadl.org (updated Wed Nov 26, 2025 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2854921460,3sleep13263199cyclictest13:35:561
1442221370,4sleep0101ktimersoftd/010:45:040
177391990,4ptp4l401ktimersoftd/308:15:213
29612710,4sleep23263799cyclictest13:45:042
32642996957,6cyclictest41-21ksoftirqd/310:39:583
32642996656,6cyclictest41-21ksoftirqd/313:05:033
177391660,1ptp4l401ktimersoftd/313:35:153
32642996551,6cyclictest41-21ksoftirqd/308:54:583
324942644,10sleep00-21swapper/008:19:200
32642996350,6cyclictest41-21ksoftirqd/313:30:033
96412620,1sleep20-21swapper/213:15:132
177391610,1ptp4l401ktimersoftd/312:00:133
103272610,2sleep10-21swapper/111:20:101
32642995745,6cyclictest41-21ksoftirqd/308:29:583
323092574,10sleep10-21swapper/108:16:551
32642995430,14cyclictest41-21ksoftirqd/313:00:053
32642995243,4cyclictest41-21ksoftirqd/308:49:573
32642995120,9cyclictest41-21ksoftirqd/310:49:473
177391510,2ptp4l23061-21kworker/3:111:20:193
32642994938,5cyclictest41-21ksoftirqd/311:30:013
32642994938,5cyclictest41-21ksoftirqd/308:19:583
177391490,1ptp4l401ktimersoftd/311:05:383
32642994825,7cyclictest41-21ksoftirqd/311:37:273
324972480,2sleep20-21swapper/213:40:352
320082480,2sleep30-21swapper/311:46:013
320082480,2sleep30-21swapper/311:46:013
32642994719,3cyclictest41-21ksoftirqd/312:50:093
177391470,2ptp4l10446-21kworker/3:213:13:393
32642994635,6cyclictest41-21ksoftirqd/312:15:013
32642994621,4cyclictest41-21ksoftirqd/311:56:163
177391460,1ptp4l401ktimersoftd/310:50:243
32642994518,4cyclictest41-21ksoftirqd/311:10:063
32642994424,3cyclictest41-21ksoftirqd/312:25:073
32642994311,5cyclictest41-21ksoftirqd/309:45:063
32642994215,4cyclictest41-21ksoftirqd/312:23:063
32642994215,4cyclictest41-21ksoftirqd/310:20:563
32642994214,4cyclictest41-21ksoftirqd/312:39:283
32637994235,4cyclictest0-21swapper/208:19:442
32642994118,7cyclictest41-21ksoftirqd/313:15:073
32642994116,7cyclictest41-21ksoftirqd/308:44:443
32642994115,4cyclictest41-21ksoftirqd/308:25:153
177391410,2ptp4l23061-21kworker/3:111:54:103
32642994034,3cyclictest41-21ksoftirqd/313:44:513
32642994034,3cyclictest41-21ksoftirqd/310:39:473
32642994014,4cyclictest41-21ksoftirqd/311:42:193
32642994013,4cyclictest41-21ksoftirqd/310:57:433
32642993928,9cyclictest41-21ksoftirqd/312:45:133
32642993925,11cyclictest41-21ksoftirqd/312:55:203
32642993922,8cyclictest41-21ksoftirqd/309:09:593
32642993913,4cyclictest41-21ksoftirqd/313:28:123
3264299386,3cyclictest121rcu_preempt13:20:053
32642993832,3cyclictest41-21ksoftirqd/312:40:183
32642993815,7cyclictest41-21ksoftirqd/308:34:593
32642993814,7cyclictest41-21ksoftirqd/309:30:153
32642993812,4cyclictest41-21ksoftirqd/313:46:153
32642993812,3cyclictest41-21ksoftirqd/310:31:253
177391380,1ptp4l401ktimersoftd/312:06:533
177391380,1ptp4l401ktimersoftd/311:28:583
177391380,1ptp4l401ktimersoftd/311:01:173
3264299373,8cyclictest121rcu_preempt08:44:453
32642993727,3cyclictest41-21ksoftirqd/309:24:593
32642993723,10cyclictest41-21ksoftirqd/309:44:453
32642993722,3cyclictest41-21ksoftirqd/310:05:033
32642993717,3cyclictest41-21ksoftirqd/309:15:053
214882370,4sleep221487-21dpkg13:29:512
177391370,1ptp4l401ktimersoftd/312:14:053
110782370,2sleep00-21swapper/009:45:140
32642993630,3cyclictest41-21ksoftirqd/312:30:113
3264299354,18cyclictest41-21ksoftirqd/309:35:033
32642993530,3cyclictest41-21ksoftirqd/309:04:453
32642993529,3cyclictest41-21ksoftirqd/310:19:463
32642993511,7cyclictest41-21ksoftirqd/309:24:463
3264299343,4cyclictest121rcu_preempt09:50:053
32642993429,3cyclictest41-21ksoftirqd/309:55:033
32642993428,3cyclictest41-21ksoftirqd/310:29:473
3264299340,3cyclictest121rcu_preempt11:15:173
32642993328,3cyclictest41-21ksoftirqd/310:10:133
32642993327,3cyclictest41-21ksoftirqd/310:00:003
32642993327,3cyclictest41-21ksoftirqd/309:05:013
32624993014,4cyclictest9-21ksoftirqd/013:30:070
406822821,3sleep09-21ksoftirqd/010:31:120
32637992822,4cyclictest33-21ksoftirqd/209:05:072
32637992822,3cyclictest33-21ksoftirqd/209:09:552
32637992822,3cyclictest33-21ksoftirqd/208:54:492
32637992821,4cyclictest33-21ksoftirqd/210:11:062
32637992821,4cyclictest33-21ksoftirqd/209:30:512
32631992822,3cyclictest25-21ksoftirqd/112:09:021
32631992821,4cyclictest25-21ksoftirqd/109:09:571
32631992821,4cyclictest25-21ksoftirqd/108:56:301
32631992821,4cyclictest25-21ksoftirqd/108:31:411
32624992821,4cyclictest9-21ksoftirqd/008:52:390
32624992821,4cyclictest9-21ksoftirqd/008:36:210
32637992721,4cyclictest33-21ksoftirqd/212:13:472
32637992721,4cyclictest33-21ksoftirqd/208:47:392
32637992721,3cyclictest33-21ksoftirqd/210:31:362
32637992721,3cyclictest33-21ksoftirqd/208:29:192
32637992720,4cyclictest33-21ksoftirqd/209:47:452
32637992720,4cyclictest33-21ksoftirqd/208:52:132
32624992721,4cyclictest9-21ksoftirqd/010:18:460
32624992721,3cyclictest9-21ksoftirqd/013:44:530
32624992721,3cyclictest9-21ksoftirqd/011:36:450
32624992720,4cyclictest9-21ksoftirqd/012:22:040
3263799265,3cyclictest121rcu_preempt11:45:172
3263799265,3cyclictest121rcu_preempt11:45:172
3263799264,3cyclictest121rcu_preempt12:50:212
32637992620,4cyclictest33-21ksoftirqd/208:21:222
32637992619,4cyclictest33-21ksoftirqd/210:18:402
32637992618,6cyclictest33-21ksoftirqd/213:05:152
32631992620,4cyclictest25-21ksoftirqd/112:59:421
32631992620,3cyclictest25-21ksoftirqd/112:31:541
32624992621,3cyclictest9-21ksoftirqd/013:06:130
32624992621,3cyclictest9-21ksoftirqd/008:34:440
32624992620,4cyclictest9-21ksoftirqd/012:12:160
32624992620,4cyclictest9-21ksoftirqd/009:08:250
32624992620,4cyclictest9-21ksoftirqd/008:40:190
32624992620,3cyclictest9-21ksoftirqd/009:54:220
32624992620,3cyclictest9-21ksoftirqd/008:59:300
32624992619,4cyclictest9-21ksoftirqd/011:43:340
317632260,1sleep00-21swapper/011:45:260
317632260,1sleep00-21swapper/011:45:260
3263799252,13cyclictest21370-21ssh11:35:012
32637992520,3cyclictest33-21ksoftirqd/208:34:322
32637992519,4cyclictest33-21ksoftirqd/209:26:132
32637992519,3cyclictest33-21ksoftirqd/210:00:202
32637992519,3cyclictest33-21ksoftirqd/209:15:292
32637992518,4cyclictest33-21ksoftirqd/209:36:132
32637992518,4cyclictest33-21ksoftirqd/208:37:082
32637992512,3cyclictest1760-21runrttasks09:42:532
32631992519,4cyclictest25-21ksoftirqd/110:25:221
32631992519,3cyclictest25-21ksoftirqd/110:50:281
32631992519,3cyclictest25-21ksoftirqd/110:19:061
32631992518,4cyclictest25-21ksoftirqd/110:07:111
32631992518,4cyclictest25-21ksoftirqd/109:53:221
32631992518,4cyclictest25-21ksoftirqd/109:03:561
32631992518,4cyclictest25-21ksoftirqd/108:27:071
32624992519,3cyclictest9-21ksoftirqd/012:51:390
32624992519,3cyclictest9-21ksoftirqd/010:49:590
32624992519,3cyclictest9-21ksoftirqd/010:20:290
32624992519,3cyclictest9-21ksoftirqd/010:13:210
32624992519,3cyclictest9-21ksoftirqd/009:41:130
32624992519,3cyclictest9-21ksoftirqd/009:13:230
32624992519,3cyclictest9-21ksoftirqd/008:23:560
32624992518,4cyclictest9-21ksoftirqd/011:00:500
32637992418,3cyclictest33-21ksoftirqd/212:26:132
32637992418,3cyclictest33-21ksoftirqd/211:05:482
3263799241,20cyclictest18706-21snmp_o5powerctl11:30:362
32637992411,10cyclictest28669-21irqrtprio13:00:102
32631992418,4cyclictest25-21ksoftirqd/112:27:151
32631992418,4cyclictest25-21ksoftirqd/109:40:541
32631992418,3cyclictest25-21ksoftirqd/109:24:411
32631992417,4cyclictest25-21ksoftirqd/113:43:311
32631992417,4cyclictest25-21ksoftirqd/109:49:011
32631992417,4cyclictest25-21ksoftirqd/108:37:071
32631992417,4cyclictest13869-21sed08:45:011
32624992418,4cyclictest9-21ksoftirqd/012:03:530
32624992418,3cyclictest9-21ksoftirqd/013:16:250
32624992418,3cyclictest9-21ksoftirqd/011:27:360
32624992418,3cyclictest9-21ksoftirqd/009:23:250
32624992418,3cyclictest9-21ksoftirqd/009:16:350
32624992416,5cyclictest6610-21grep11:55:050
32637992317,4cyclictest33-21ksoftirqd/213:20:042
32637992317,4cyclictest33-21ksoftirqd/209:22:562
32637992317,3cyclictest33-21ksoftirqd/212:44:022
32637992317,3cyclictest33-21ksoftirqd/211:44:382
32637992317,3cyclictest33-21ksoftirqd/211:14:572
32631992318,3cyclictest25-21ksoftirqd/112:20:051
32631992317,3cyclictest25-21ksoftirqd/111:09:481
32631992317,3cyclictest25-21ksoftirqd/110:13:571
32631992316,4cyclictest25-21ksoftirqd/112:35:181
32631992316,4cyclictest25-21ksoftirqd/109:55:311
32631992316,4cyclictest25-21ksoftirqd/109:08:181
32631992316,4cyclictest25-21ksoftirqd/108:51:121
32631992315,6cyclictest25-21ksoftirqd/113:25:321
32624992318,3cyclictest9-21ksoftirqd/010:59:150
32624992318,3cyclictest9-21ksoftirqd/008:44:560
32624992316,4cyclictest9-21ksoftirqd/009:31:010
3262499230,5cyclictest21899-21snmp_o5powerctl09:00:250
3263799223,4cyclictest9208-21ssh12:35:302
32637992217,3cyclictest33-21ksoftirqd/210:20:452
32637992216,4cyclictest33-21ksoftirqd/210:59:272
32637992216,4cyclictest33-21ksoftirqd/209:53:392
32637992216,3cyclictest33-21ksoftirqd/212:33:452
32637992215,4cyclictest18682-21munin-run12:09:492
32637992214,5cyclictest27725-21latency_hist12:59:512
32637992214,5cyclictest26211-21irqrtprio11:00:072
3263799221,18cyclictest24519-21ssh13:31:352
32631992217,3cyclictest25-21ksoftirqd/111:40:371
32631992216,3cyclictest3594-21unixbench-2d11:50:201
32631992215,4cyclictest25-21ksoftirqd/112:46:051
32631992215,4cyclictest14198-21gzip13:20:141
32631992214,5cyclictest46950irq/101-ens3-Tx10:30:181
32631992213,6cyclictest3274-21gltestperf13:45:071
32624992217,3cyclictest9-21ksoftirqd/013:38:160
32624992217,3cyclictest9-21ksoftirqd/012:34:020
32624992216,4cyclictest9-21ksoftirqd/012:28:540
32624992216,3cyclictest9-21ksoftirqd/011:20:170
32624992215,4cyclictest9-21ksoftirqd/013:01:140
325862220,2sleep00-21swapper/009:24:590
286992220,5sleep125-21ksoftirqd/111:03:481
32637992116,3cyclictest33-21ksoftirqd/210:07:162
32637992116,3cyclictest33-21ksoftirqd/209:55:342
32637992115,3cyclictest33-21ksoftirqd/210:28:302
32637992115,3cyclictest19064-21snmp_o5powerctl10:50:152
3263799211,17cyclictest0-21swapper/210:45:012
3263799211,17cyclictest0-21swapper/210:41:012
32631992116,3cyclictest25-21ksoftirqd/109:19:261
32631992115,4cyclictest839-21sh11:48:501
32631992115,4cyclictest839-21sh11:48:501
32631992115,4cyclictest25-21ksoftirqd/113:10:471
32631992115,3cyclictest25-21ksoftirqd/111:39:421
32631992115,3cyclictest25-21ksoftirqd/109:32:211
3263199211,4cyclictest14696-21ssh11:25:161
32631992114,4cyclictest26144-21apt-config10:19:471
32631992114,4cyclictest19473-21gltestperf12:10:051
3263199211,17cyclictest15307-21snmp_o5powerctl10:45:161
3263199210,18cyclictest9446-21apt-get10:39:511
3262499217,4cyclictest9-21ksoftirqd/011:18:360
32624992115,3cyclictest9-21ksoftirqd/009:54:560
32624992115,3cyclictest17157-21/usr/sbin/munin13:25:110
3263799209,9cyclictest19474-21turbostat12:49:502
32637992014,3cyclictest5767-21users13:10:202
32637992014,3cyclictest4637-21sh11:14:052
32637992014,3cyclictest21873-21snmp_o5powerctl09:00:092
3263799201,3cyclictest6027-21ssh11:54:552
32637992013,4cyclictest5942-21cat10:35:042
32637992013,4cyclictest15881-21sh11:27:272
32637992013,4cyclictest13980-21sh12:03:562
3263799201,17cyclictest0-21swapper/212:21:052
3263199202,16cyclictest24742-21kworker/1:212:03:391
3263199202,15cyclictest21825-21cpuspeed_turbos10:55:031
32631992014,4cyclictest12962-21kworker/1:011:57:551
32631992014,3cyclictest11221-21tune2fs08:40:011
32631992013,4cyclictest25-21ksoftirqd/108:23:541
32631992013,4cyclictest25042-21sh13:32:471
32631992013,4cyclictest12849-21grep12:40:171
32631992012,5cyclictest46950irq/101-ens3-Tx11:15:121
32624992014,4cyclictest9-21ksoftirqd/008:26:220
32624992013,4cyclictest30777-21sh10:25:030
32624992013,4cyclictest25050-21latency12:55:100
32637991913,3cyclictest1661-21apt-config11:49:492
32637991912,4cyclictest9372-21expr11:20:032
3263799191,16cyclictest0-21swapper/212:15:012
3263799191,15cyclictest27496-21memory13:35:112
3263199195,8cyclictest1230-21ssh11:10:001
3263199192,15cyclictest24742-21kworker/1:213:16:231
3263199192,15cyclictest24742-21kworker/1:212:54:481
3263199192,15cyclictest12962-21kworker/1:013:06:401
3263199191,4cyclictest20057-21chrt11:32:471
32631991913,3cyclictest5793-21/usr/sbin/munin10:35:101
32631991913,3cyclictest32497-21grep09:24:591
3263199191,16cyclictest24742-21kworker/1:213:00:061
3263199191,15cyclictest6080-21snmp_o5powerctl09:35:121
32624991913,4cyclictest17231-21/usr/sbin/munin11:30:080
32624991913,3cyclictest9-21ksoftirqd/012:39:320
32624991913,3cyclictest24116-21irqstats12:15:070
32624991912,4cyclictest9-21ksoftirqd/010:06:300
32624991912,4cyclictest6028-21expr10:35:040
32624991912,4cyclictest31908-21which13:40:130
32624991912,4cyclictest19475-21latency_hist12:49:510
32624991912,4cyclictest1760-21runrttasks13:11:040
32624991912,4cyclictest1760-21runrttasks12:41:110
32624991911,5cyclictest25773-21diskmemload11:09:190
32637991812,3cyclictest12396-21cat08:40:132
32631991811,4cyclictest1760-21runrttasks10:03:461
3263199180,15cyclictest25612-21ssh12:16:381
32624991812,3cyclictest3046-21open_files11:50:120
32624991812,3cyclictest25773-21diskmemload10:39:510
32624991812,3cyclictest1217-21apt-get11:09:590
32624991811,4cyclictest4912-21seq09:34:590
32624991811,4cyclictest17946-21switchtime10:00:130
32624991811,4cyclictest15319-21if_enp1s012:05:060
32624991810,6cyclictest9-21ksoftirqd/013:20:220
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional