You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-04 - 12:53
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot6.osadl.org (updated Thu Dec 04, 2025 00:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1773911050,4ptp4l401ktimersoftd/320:19:593
279592620,7sleep2311rcuc/201:34:142
24554996151,5cyclictest41-21ksoftirqd/320:34:063
24554996149,6cyclictest41-21ksoftirqd/301:44:133
24541996017,10cyclictest25-21ksoftirqd/100:44:141
24541995926,4cyclictest25-21ksoftirqd/120:32:031
24541995926,4cyclictest25-21ksoftirqd/120:32:031
24554995824,9cyclictest41-21ksoftirqd/300:54:323
177391580,1ptp4l401ktimersoftd/323:11:423
177391580,1ptp4l401ktimersoftd/321:34:133
24541995748,4cyclictest25-21ksoftirqd/121:54:091
24541995728,4cyclictest25-21ksoftirqd/120:43:371
24554995645,5cyclictest41-21ksoftirqd/301:49:163
24554995623,3cyclictest41-21ksoftirqd/300:44:213
177391560,1ptp4l401ktimersoftd/322:14:213
24554995544,6cyclictest41-21ksoftirqd/321:09:083
24554995526,7cyclictest41-21ksoftirqd/320:54:103
24541995546,4cyclictest25-21ksoftirqd/123:19:121
24554995429,6cyclictest41-21ksoftirqd/321:04:113
24541995219,8cyclictest25-21ksoftirqd/100:59:161
273452510,2sleep30-21swapper/320:28:563
273452510,2sleep30-21swapper/320:28:563
24541995120,4cyclictest25-21ksoftirqd/123:03:061
242042514,37sleep00-21swapper/020:20:530
24541994925,6cyclictest25-21ksoftirqd/123:41:131
2453499493,15cyclictest5893-21ssh01:09:120
2454199486,9cyclictest25-21ksoftirqd/120:38:381
24541994836,3cyclictest25-21ksoftirqd/122:34:181
24541994834,3cyclictest25-21ksoftirqd/100:24:151
24541994824,4cyclictest25-21ksoftirqd/100:21:151
24541994822,5cyclictest25-21ksoftirqd/101:19:321
24541994818,4cyclictest25-21ksoftirqd/123:48:581
24541994817,5cyclictest25-21ksoftirqd/122:29:151
24541994817,4cyclictest25-21ksoftirqd/100:14:181
24541994817,4cyclictest25-21ksoftirqd/100:14:181
24541994816,5cyclictest25-21ksoftirqd/123:18:581
24541994734,6cyclictest25-21ksoftirqd/122:42:241
24541994732,3cyclictest25-21ksoftirqd/123:34:211
24541994725,7cyclictest25-21ksoftirqd/100:04:491
24541994723,4cyclictest25-21ksoftirqd/123:31:211
24541994722,4cyclictest25-21ksoftirqd/122:56:061
24541994722,4cyclictest25-21ksoftirqd/122:14:111
24541994718,9cyclictest25-21ksoftirqd/101:39:251
24541994718,4cyclictest25-21ksoftirqd/123:04:201
2454199470,8cyclictest24527-21cyclictest20:23:531
177391470,1ptp4l401ktimersoftd/323:18:033
24541994624,9cyclictest25-21ksoftirqd/122:49:201
24541994623,4cyclictest25-21ksoftirqd/123:25:331
24541994622,4cyclictest25-21ksoftirqd/101:30:021
24541994621,4cyclictest25-21ksoftirqd/122:44:511
24541994621,4cyclictest25-21ksoftirqd/101:24:211
24541994621,4cyclictest25-21ksoftirqd/100:09:191
24541994621,4cyclictest25-21ksoftirqd/100:09:191
24541994618,11cyclictest25-21ksoftirqd/123:48:581
24554994539,3cyclictest401ktimersoftd/322:28:563
24554994539,3cyclictest401ktimersoftd/322:28:563
2455499453,7cyclictest121rcu_preempt23:28:583
24541994531,3cyclictest25-21ksoftirqd/100:54:231
24541994522,7cyclictest25-21ksoftirqd/123:09:121
24541994521,4cyclictest25-21ksoftirqd/121:59:231
24541994521,4cyclictest25-21ksoftirqd/120:24:211
24541994521,4cyclictest25-21ksoftirqd/120:24:211
24541994520,5cyclictest25-21ksoftirqd/121:49:151
24541994520,4cyclictest25-21ksoftirqd/101:38:531
24541994519,4cyclictest25-21ksoftirqd/121:14:141
24541994516,4cyclictest25-21ksoftirqd/101:44:161
24541994515,5cyclictest25-21ksoftirqd/101:04:161
24554994417,4cyclictest41-21ksoftirqd/322:49:183
24541994421,7cyclictest25-21ksoftirqd/100:03:581
24541994420,4cyclictest25-21ksoftirqd/121:39:091
24541994420,4cyclictest25-21ksoftirqd/121:33:561
24541994420,4cyclictest25-21ksoftirqd/121:04:151
2454199441,8cyclictest25-21ksoftirqd/123:54:201
24541994418,4cyclictest25-21ksoftirqd/100:49:301
24541994416,5cyclictest25-21ksoftirqd/101:14:181
24545994322,12cyclictest47050irq/102-ens3-Tx22:39:092
2454199437,7cyclictest18465-21kworker/u8:222:28:041
2454199437,7cyclictest18465-21kworker/u8:222:28:041
24541994321,4cyclictest25-21ksoftirqd/122:19:201
24541994320,7cyclictest25-21ksoftirqd/101:09:211
2454199431,8cyclictest11672-21systemctl01:54:001
24554994228,11cyclictest41-21ksoftirqd/300:29:183
24554994217,7cyclictest41-21ksoftirqd/300:09:353
24554994217,7cyclictest41-21ksoftirqd/300:09:353
24554994215,4cyclictest41-21ksoftirqd/323:56:193
24554994215,4cyclictest41-21ksoftirqd/323:44:343
24554994215,4cyclictest41-21ksoftirqd/323:02:253
24554994215,4cyclictest41-21ksoftirqd/301:35:043
24554994215,4cyclictest41-21ksoftirqd/300:05:183
24554994214,4cyclictest41-21ksoftirqd/322:42:053
24554994214,4cyclictest41-21ksoftirqd/301:28:503
24554994210,5cyclictest41-21ksoftirqd/323:39:283
24545994210,24cyclictest13168-21apt-get22:14:082
2454199422,3cyclictest25-21ksoftirqd/100:29:181
24541994220,7cyclictest25-21ksoftirqd/121:44:221
24541994219,7cyclictest25-21ksoftirqd/121:38:561
24541994217,8cyclictest25-21ksoftirqd/120:49:131
24541994217,8cyclictest25-21ksoftirqd/100:34:201
24541994215,9cyclictest25-21ksoftirqd/121:28:551
2454199421,3cyclictest121rcu_preempt20:44:241
2455499414,7cyclictest121rcu_preempt22:34:143
24554994133,4cyclictest41-21ksoftirqd/300:34:043
2455499411,8cyclictest41-21ksoftirqd/323:49:153
24554994114,4cyclictest41-21ksoftirqd/323:29:413
24554994113,5cyclictest41-21ksoftirqd/301:18:123
24541994118,7cyclictest25-21ksoftirqd/122:13:561
24541994117,4cyclictest25-21ksoftirqd/121:09:231
24541994115,10cyclictest25-21ksoftirqd/120:54:221
177391410,1ptp4l401ktimersoftd/300:24:123
24554994034,3cyclictest41-21ksoftirqd/322:04:093
24554994016,4cyclictest41-21ksoftirqd/321:19:193
24554994014,4cyclictest41-21ksoftirqd/322:44:563
24554994014,4cyclictest41-21ksoftirqd/301:43:293
24554994013,4cyclictest41-21ksoftirqd/300:15:433
24554994013,4cyclictest41-21ksoftirqd/300:15:433
2454599402,33cyclictest8204-21head23:24:172
2454599401,36cyclictest14516-21ssh00:42:232
24541994029,3cyclictest25-21ksoftirqd/120:59:101
24541994015,9cyclictest25-21ksoftirqd/100:39:171
24554993928,6cyclictest41-21ksoftirqd/320:44:073
24554993917,7cyclictest41-21ksoftirqd/322:30:413
24554993915,4cyclictest41-21ksoftirqd/301:19:303
24554993912,5cyclictest41-21ksoftirqd/300:50:303
24554993912,4cyclictest41-21ksoftirqd/300:20:253
2454199395,2cyclictest121rcu_preempt22:04:171
2455499386,9cyclictest41-21ksoftirqd/323:34:203
24554993816,6cyclictest41-21ksoftirqd/322:19:183
24554993814,7cyclictest41-21ksoftirqd/301:29:213
24554993813,4cyclictest41-21ksoftirqd/300:39:503
2454599383,5cyclictest22492-21apt-get22:29:092
2454599380,35cyclictest0-21swapper/200:47:212
177391380,1ptp4l401ktimersoftd/323:06:323
177391380,1ptp4l401ktimersoftd/321:29:103
177391380,1ptp4l401ktimersoftd/300:00:273
2455499373,9cyclictest41-21ksoftirqd/321:54:343
24554993725,3cyclictest41-21ksoftirqd/323:19:223
24554993724,10cyclictest41-21ksoftirqd/321:59:113
24554993715,7cyclictest41-21ksoftirqd/322:09:183
24554993714,7cyclictest41-21ksoftirqd/321:49:253
24554993710,5cyclictest41-21ksoftirqd/320:24:153
24554993710,5cyclictest41-21ksoftirqd/320:24:153
2455499370,9cyclictest41-21ksoftirqd/321:28:393
2454599373,5cyclictest0-21swapper/201:19:162
24545993721,13cyclictest33-21ksoftirqd/221:11:222
177391370,1ptp4l401ktimersoftd/322:54:073
177391370,1ptp4l401ktimersoftd/321:44:183
24554993631,3cyclictest41-21ksoftirqd/301:09:233
24554993622,3cyclictest41-21ksoftirqd/320:39:213
2454599363,11cyclictest21774-21apt-get23:04:102
2454599362,4cyclictest0-21swapper/222:59:112
24545993613,20cyclictest16944-21sed22:19:242
24545993612,21cyclictest5701-21cut20:49:132
2454599361,11cyclictest0-21swapper/220:24:062
2454599361,11cyclictest0-21swapper/220:24:062
2454199367,3cyclictest121rcu_preempt21:19:201
177391360,1ptp4l401ktimersoftd/301:07:513
177391360,1ptp4l401ktimersoftd/301:03:493
24554993510,8cyclictest41-21ksoftirqd/321:14:133
2454599352,4cyclictest0-21swapper/200:34:132
24545993512,19cyclictest24030-21cut21:28:552
24545993512,19cyclictest19788-21tune2fs21:19:132
2455499348,4cyclictest41-21ksoftirqd/320:59:223
2454599344,26cyclictest0-21swapper/221:04:062
2454599342,7cyclictest2034-21apt-get00:29:122
2454599342,5cyclictest0-21swapper/201:24:142
2454599342,4cyclictest0-21swapper/222:54:092
2454599341,4cyclictest724-21hddtemp_smartct20:39:092
24545993413,18cyclictest24007-21sh00:16:532
24545993413,18cyclictest24007-21sh00:16:532
24545993413,18cyclictest22901-21sh00:51:022
24545993413,18cyclictest11246-21sh22:51:512
24545993411,4cyclictest16065-21idleruntime-cro00:08:582
24545993411,17cyclictest0-21swapper/223:09:092
24554993326,4cyclictest41-21ksoftirqd/321:43:563
2454599337,3cyclictest17278-21ls21:14:092
2454599333,8cyclictest8414-21apt-get22:04:092
24545993326,4cyclictest33-21ksoftirqd/223:49:022
2454599332,5cyclictest0-21swapper/201:14:142
2454599331,4cyclictest19415-21snmp_o5powerctl22:24:202
2454599331,4cyclictest19415-21snmp_o5powerctl22:24:202
24545993313,17cyclictest20580-21sh23:38:192
24545993311,4cyclictest31206-21sed21:43:562
24545993311,3cyclictest85582sleep201:11:102
24554993227,3cyclictest41-21ksoftirqd/320:53:543
2454599329,4cyclictest32475-21snmp_o5powerctl23:14:212
2454599328,4cyclictest47050irq/102-ens3-Tx23:46:192
2454599328,3cyclictest26801-21cat21:34:122
2454599327,3cyclictest23987-21df01:29:172
2454599322,27cyclictest3078-21grep23:54:112
2454599321,6cyclictest29931-21apt-get00:24:112
24545993213,17cyclictest0-21swapper/201:05:392
24545993211,3cyclictest7649-21sh01:48:262
24545993211,3cyclictest6427-21sh22:46:152
24545993211,3cyclictest25098-21sh23:43:182
24545993211,3cyclictest10304-21sh00:01:262
24545993211,18cyclictest19666-21sh00:12:162
24545993211,18cyclictest19666-21sh00:12:162
24545993210,3cyclictest9978-21expr20:59:072
2454599319,4cyclictest27200-21tr22:34:112
2454599318,3cyclictest11408-21cat22:09:152
2454599316,4cyclictest29900-21iwlist00:59:162
2454599312,5cyclictest30277-21apt-get20:34:062
2454599311,5cyclictest0-21swapper/221:29:062
2454599311,27cyclictest2677-21apt-get20:44:082
24545993111,3cyclictest16541-21cut23:33:582
2454599308,3cyclictest0-21swapper/200:21:552
2454599302,7cyclictest8272-21apt-get01:49:162
2454599302,4cyclictest5025-21snmp_o5powerctl21:54:222
2454599302,4cyclictest0-21swapper/221:49:082
2454599295,4cyclictest31998-21irqrtprio21:44:142
2454599292,4cyclictest27050-21snmp_o5powerctl20:28:542
2454599292,4cyclictest27050-21snmp_o5powerctl20:28:542
2454599290,8cyclictest4327-21cut23:19:212
2454599290,4cyclictest25537-21ssh00:54:212
2453499292,15cyclictest16765-21sh23:34:100
241442297,10sleep20-21swapper/220:20:062
132172290,9sleep0101ktimersoftd/022:54:130
2454599286,4cyclictest6456-21tail21:59:112
2454599280,9cyclictest3282-21ssh01:43:102
24534992822,3cyclictest9-21ksoftirqd/020:55:300
24534992821,4cyclictest9-21ksoftirqd/022:31:530
24534992821,4cyclictest9-21ksoftirqd/022:22:020
24534992720,4cyclictest9-21ksoftirqd/021:52:070
24534992720,4cyclictest9-21ksoftirqd/021:27:420
24534992715,5cyclictest0-21swapper/001:39:150
2453499264,11cyclictest12004-21ssh00:04:100
24534992620,3cyclictest9-21ksoftirqd/023:30:470
24534992620,3cyclictest9-21ksoftirqd/022:02:090
24534992620,3cyclictest9-21ksoftirqd/021:43:590
24534992620,3cyclictest9-21ksoftirqd/001:32:490
24534992620,3cyclictest9-21ksoftirqd/001:02:560
24534992619,4cyclictest9-21ksoftirqd/021:37:090
24534992619,4cyclictest9-21ksoftirqd/001:24:570
24534992619,4cyclictest9-21ksoftirqd/001:19:110
24534992619,4cyclictest14657-21/usr/sbin/munin21:09:180
24534992618,5cyclictest29952-21sh20:33:530
24534992618,5cyclictest29952-21sh20:33:530
70632250,20sleep00-21swapper/023:58:580
24534992520,3cyclictest9-21ksoftirqd/022:15:390
24534992519,3cyclictest9-21ksoftirqd/023:25:250
24534992518,4cyclictest9-21ksoftirqd/022:10:050
24534992518,4cyclictest31741-21sed23:14:150
2453499251,4cyclictest29338-21snmp_o5powerctl01:34:280
24545992417,4cyclictest33-21ksoftirqd/220:54:282
24534992418,3cyclictest9-21ksoftirqd/021:57:210
24534992418,3cyclictest9-21ksoftirqd/021:29:270
24534992417,4cyclictest9-21ksoftirqd/021:17:300
24534992317,3cyclictest9-21ksoftirqd/000:41:040
24534992317,3cyclictest9-21ksoftirqd/000:09:530
24534992317,3cyclictest9-21ksoftirqd/000:09:530
24534992317,3cyclictest9-21ksoftirqd/000:00:280
24534992316,4cyclictest9-21ksoftirqd/000:23:590
2453499231,19cyclictest17535-21df_inode22:59:130
24534992216,3cyclictest9-21ksoftirqd/023:49:100
24534992216,3cyclictest9-21ksoftirqd/021:41:140
24534992216,3cyclictest9-21ksoftirqd/001:07:230
24534992215,4cyclictest9-21ksoftirqd/023:04:090
24534992215,4cyclictest9-21ksoftirqd/021:08:230
24534992215,4cyclictest9-21ksoftirqd/021:03:450
24534992215,4cyclictest32314-2110-uname20:38:370
2453499221,3cyclictest32436-21ssh00:25:490
2453499221,3cyclictest2343-21fschecks_count00:29:150
24534992115,4cyclictest9-21ksoftirqd/023:09:430
24534992115,3cyclictest9-21ksoftirqd/020:25:330
24534992115,3cyclictest9-21ksoftirqd/020:25:330
24534992114,4cyclictest9-21ksoftirqd/022:08:010
24534992114,4cyclictest9-21ksoftirqd/000:55:260
24534992114,4cyclictest21065-21tr00:14:130
24534992114,4cyclictest21065-21tr00:14:130
2453499211,3cyclictest3480-21diskstats23:19:150
24534992110,3cyclictest17602-21diskmemload22:53:500
2453499203,14cyclictest0-21swapper/023:39:120
24534992013,4cyclictest9-21ksoftirqd/020:48:040
24534992013,4cyclictest29578-21sh22:35:470
24534992013,4cyclictest26830-21sed23:44:170
24534992013,4cyclictest22003-21unixbench_multi00:49:320
24534992013,4cyclictest12213-21uptime01:14:310
2453499201,2cyclictest0-21swapper/022:25:540
2453499201,2cyclictest0-21swapper/022:25:540
2453499201,17cyclictest0-21swapper/022:44:140
2453499201,17cyclictest0-21swapper/022:39:240
2453499201,16cyclictest0-21swapper/000:34:010
2453499200,17cyclictest15786-21cpu00:44:110
24534991915,2cyclictest0-21swapper/021:20:590
24534991913,3cyclictest4285-21expr01:44:150
24534991912,4cyclictest8213-21cat01:49:150
2453499191,16cyclictest0-21swapper/020:39:040
24534991814,2cyclictest0-21swapper/020:49:180
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional