You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-29 - 00:44
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot6.osadl.org (updated Fri Nov 28, 2025 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1238022340,2sleep00-21swapper/008:16:240
3080221760,4sleep31293699cyclictest10:01:163
2350421680,3sleep31293699cyclictest09:46:143
110021560,5sleep31293699cyclictest10:06:213
1773911030,4ptp4l401ktimersoftd/308:16:193
213122640,4sleep0101ktimersoftd/010:36:540
57972620,4sleep11292099cyclictest10:59:151
113062580,1sleep20-21swapper/211:45:492
4632560,2sleep00-21swapper/012:11:160
1293699551,18cyclictest31580-21chrt12:10:273
327112540,3sleep30-21swapper/312:51:183
12927995315,20cyclictest2871-21taskset11:35:122
12936994713,5cyclictest41-21ksoftirqd/311:21:283
12936994410,6cyclictest41-21ksoftirqd/309:01:213
12920994436,4cyclictest25-21ksoftirqd/113:01:101
1293699437,5cyclictest41-21ksoftirqd/310:42:593
12936994315,7cyclictest41-21ksoftirqd/310:32:023
12920994337,3cyclictest25-21ksoftirqd/112:56:121
12920994337,3cyclictest25-21ksoftirqd/112:31:081
12936994219,10cyclictest41-21ksoftirqd/310:30:543
12936994216,10cyclictest41-21ksoftirqd/312:57:463
1292799424,29cyclictest32419-21ssh13:31:102
118062423,24sleep210687-21/usr/sbin/munin08:16:152
1293699408,5cyclictest41-21ksoftirqd/313:13:273
1293699408,5cyclictest41-21ksoftirqd/311:50:083
1293699407,6cyclictest41-21ksoftirqd/311:56:393
1293699407,5cyclictest41-21ksoftirqd/310:37:523
12936994012,4cyclictest41-21ksoftirqd/312:14:163
1292799402,31cyclictest15869-21apt-get11:51:062
313932390,4sleep1241ktimersoftd/111:30:541
1293699399,5cyclictest41-21ksoftirqd/312:42:423
1293699397,5cyclictest41-21ksoftirqd/313:38:563
1293699397,5cyclictest41-21ksoftirqd/312:33:143
1293699397,5cyclictest41-21ksoftirqd/311:06:223
1293699397,5cyclictest41-21ksoftirqd/311:01:313
1293699396,5cyclictest41-21ksoftirqd/312:04:303
1293699396,5cyclictest41-21ksoftirqd/311:45:073
1293699395,5cyclictest41-21ksoftirqd/311:10:573
1293699395,5cyclictest41-21ksoftirqd/310:21:463
12936993914,9cyclictest41-21ksoftirqd/309:56:113
12936993914,9cyclictest41-21ksoftirqd/309:56:113
12936993911,7cyclictest41-21ksoftirqd/313:17:063
1293699390,7cyclictest41-21ksoftirqd/312:25:393
1292799393,29cyclictest28304-21apt-get13:26:082
177391380,1ptp4l401ktimersoftd/313:33:243
177391380,1ptp4l401ktimersoftd/313:27:273
177391380,1ptp4l401ktimersoftd/312:37:183
177391380,1ptp4l401ktimersoftd/312:16:443
177391380,1ptp4l401ktimersoftd/311:37:203
177391380,1ptp4l401ktimersoftd/311:37:203
177391380,1ptp4l401ktimersoftd/311:35:263
1293699387,5cyclictest41-21ksoftirqd/311:51:053
1293699387,5cyclictest41-21ksoftirqd/310:46:053
1293699386,5cyclictest41-21ksoftirqd/313:41:103
1292799383,29cyclictest0-21swapper/213:46:132
1292799383,27cyclictest14965-21apt-get11:11:062
1292799382,31cyclictest0-21swapper/212:21:082
1292799382,29cyclictest23929-21apt-get12:01:092
177391370,1ptp4l401ktimersoftd/313:48:533
177391370,1ptp4l401ktimersoftd/313:23:023
177391370,1ptp4l401ktimersoftd/312:46:163
177391370,1ptp4l401ktimersoftd/311:16:553
177391370,1ptp4l401ktimersoftd/310:59:473
177391370,1ptp4l401ktimersoftd/308:47:283
177391370,1ptp4l401ktimersoftd/308:45:053
177391370,1ptp4l401ktimersoftd/308:28:593
177391370,0ptp4l401ktimersoftd/313:02:233
177391370,0ptp4l401ktimersoftd/312:29:323
1293699377,5cyclictest41-21ksoftirqd/310:52:103
1293699377,4cyclictest41-21ksoftirqd/311:30:233
12920993719,3cyclictest25-21ksoftirqd/111:46:041
1293699365,4cyclictest41-21ksoftirqd/313:07:343
1292799363,27cyclictest0-21swapper/210:36:042
1292799362,28cyclictest0-21swapper/213:41:132
1292799362,27cyclictest19802-21apt-get09:41:032
12927993615,17cyclictest29443-21sh10:47:072
12927993610,23cyclictest16091-21cut10:31:132
1292799360,5cyclictest7592-21gltestperf13:01:132
1292799360,3cyclictest26119-21grep08:46:072
1292799360,3cyclictest15691-21date11:50:562
12920993630,3cyclictest25-21ksoftirqd/112:50:561
12920993629,4cyclictest25-21ksoftirqd/110:26:141
1292799359,22cyclictest12574-21grep12:26:152
1292799353,26cyclictest24555-21apt-get09:51:052
1292799353,26cyclictest24555-21apt-get09:51:052
1292799352,27cyclictest0-21swapper/211:16:062
1292799350,6cyclictest20472-21/usr/sbin/munin12:36:252
1292799350,4cyclictest23613-21grep12:41:132
1292799350,3cyclictest3176-21grep10:56:102
1292799350,3cyclictest0-21swapper/211:26:072
12920993529,4cyclictest25-21ksoftirqd/108:50:511
12920993529,3cyclictest25-21ksoftirqd/112:20:561
1292099351,3cyclictest0-21swapper/110:20:531
12915993529,4cyclictest29188-21cron10:00:520
12915993529,4cyclictest29188-21cron10:00:520
1292799349,22cyclictest20518-21uname13:16:182
1292799348,23cyclictest3975-21fschecks_time11:36:122
1292799348,23cyclictest3975-21fschecks_time11:36:122
1292799348,23cyclictest23861-21gltestperf11:21:122
1292799343,25cyclictest0-21swapper/209:06:022
12927993415,16cyclictest21134-21ls08:36:042
12927993414,17cyclictest17846-21sh13:12:532
1292799340,4cyclictest11553-21rt-features09:21:122
1292799340,3cyclictest4043-21latency_hist10:15:532
1292799340,3cyclictest25761-21sh13:21:462
1292799340,3cyclictest17209-21ssh12:32:212
12920993428,3cyclictest25-21ksoftirqd/112:26:091
1292799337,22cyclictest19448-21cut08:31:102
12927993317,13cyclictest33-21ksoftirqd/209:01:012
12927993315,15cyclictest2031-21sh12:53:442
12927993315,15cyclictest14517-21sh10:30:512
12927993314,16cyclictest17906-21sed09:36:082
12927993313,17cyclictest7860-21/usr/sbin/munin09:16:132
1292799331,2cyclictest0-21swapper/213:06:082
12927993311,19cyclictest4453-21fschecks_time13:36:122
12927993310,20cyclictest6309-21diskmemload12:46:492
1292799330,5cyclictest5227-21ssh12:57:132
1292799330,4cyclictest493-21open_files10:06:132
1292799330,4cyclictest30561-21sed10:01:132
1292799330,3cyclictest29202-21latency_hist10:00:532
1292799330,3cyclictest11701-21cut11:06:152
1293699326,5cyclictest41-21ksoftirqd/310:20:063
1293699325,5cyclictest41-21ksoftirqd/309:19:363
12927993212,17cyclictest23080-21sh11:59:392
12927993210,19cyclictest47050irq/102-ens3-Tx12:11:252
1292799320,5cyclictest5273-21uname10:16:152
1292799320,4cyclictest15371-21cat08:25:512
1292799320,3cyclictest0-21swapper/210:44:342
1292799320,3cyclictest0-21swapper/208:41:152
12920993227,3cyclictest25-21ksoftirqd/112:06:131
12920993227,3cyclictest25-21ksoftirqd/111:41:151
12920993227,3cyclictest25-21ksoftirqd/110:36:111
12920993227,3cyclictest25-21ksoftirqd/109:30:511
12920993226,4cyclictest25-21ksoftirqd/111:31:061
12920993226,4cyclictest25-21ksoftirqd/110:11:071
12920993226,3cyclictest25-21ksoftirqd/113:25:581
12920993226,3cyclictest25-21ksoftirqd/112:00:551
12920993226,3cyclictest25-21ksoftirqd/110:01:061
12920993226,3cyclictest25-21ksoftirqd/109:55:531
12920993226,3cyclictest25-21ksoftirqd/109:55:531
12920993226,3cyclictest25-21ksoftirqd/109:21:031
12920993226,3cyclictest25-21ksoftirqd/108:30:511
12936993115,8cyclictest41-21ksoftirqd/308:37:033
1292799317,21cyclictest30429-21basename08:56:032
1292799317,21cyclictest12871-21expr09:26:052
1292799316,21cyclictest27838-21irqrtprio09:56:112
1292799315,22cyclictest7186-21gltestperf10:21:072
12927993114,14cyclictest16182-21phc2sys09:31:152
1292799311,27cyclictest29543-21snmp_o5powerctl12:06:212
1292799310,4cyclictest5323-21snmp_o5powerctl12:16:202
1292799310,4cyclictest302-21snmp_o5powerctl10:51:182
1292799310,4cyclictest17327-21cut08:26:112
12920993126,3cyclictest25-21ksoftirqd/112:25:561
12920993126,3cyclictest25-21ksoftirqd/111:15:551
12920993126,3cyclictest25-21ksoftirqd/111:10:541
12920993125,3cyclictest25-21ksoftirqd/110:00:521
12920993125,3cyclictest25-21ksoftirqd/110:00:521
12920993124,4cyclictest25-21ksoftirqd/110:10:531
12920993119,9cyclictest25-21ksoftirqd/109:41:071
124702316,11sleep10-21swapper/108:16:261
1293699304,4cyclictest41-21ksoftirqd/309:12:463
1292799308,19cyclictest6652-21sh11:00:562
12927993010,17cyclictest6187-21if_err_ens309:11:092
1292799300,4cyclictest23512-21snmp_o5powerctl09:46:172
12920993025,3cyclictest25-21ksoftirqd/113:40:581
12920993025,3cyclictest25-21ksoftirqd/111:55:551
12920993024,3cyclictest25-21ksoftirqd/112:41:151
12920993024,3cyclictest25-21ksoftirqd/109:40:521
12920993023,3cyclictest25-21ksoftirqd/113:41:121
12920993022,4cyclictest25-21ksoftirqd/112:36:101
1292799290,25cyclictest27997-21taskset08:50:572
12920992924,3cyclictest25-21ksoftirqd/111:24:441
12920992924,3cyclictest25-21ksoftirqd/108:36:031
12920992923,3cyclictest25-21ksoftirqd/110:46:141
12920992923,3cyclictest25-21ksoftirqd/109:10:521
12915992923,3cyclictest9-21ksoftirqd/013:46:150
12915992922,4cyclictest9-21ksoftirqd/009:32:100
1293699289,6cyclictest41-21ksoftirqd/309:31:163
1293699285,5cyclictest41-21ksoftirqd/308:25:413
12936992812,6cyclictest41-21ksoftirqd/309:52:433
12936992812,6cyclictest41-21ksoftirqd/309:52:433
12920992823,3cyclictest25-21ksoftirqd/113:31:211
12920992823,3cyclictest25-21ksoftirqd/113:26:121
12920992823,3cyclictest25-21ksoftirqd/112:51:111
12920992823,3cyclictest25-21ksoftirqd/111:36:131
12920992823,3cyclictest25-21ksoftirqd/111:36:131
12920992823,3cyclictest25-21ksoftirqd/110:31:091
12920992823,3cyclictest25-21ksoftirqd/110:25:531
12915992822,4cyclictest9-21ksoftirqd/012:26:070
12915992821,4cyclictest9-21ksoftirqd/011:43:140
177391270,0ptp4l401ktimersoftd/309:06:393
12920992722,3cyclictest25-21ksoftirqd/113:10:571
12920992722,3cyclictest25-21ksoftirqd/112:11:211
12920992722,3cyclictest25-21ksoftirqd/111:01:131
12920992722,3cyclictest25-21ksoftirqd/109:31:071
12920992722,3cyclictest25-21ksoftirqd/109:11:101
12920992722,3cyclictest25-21ksoftirqd/108:35:511
12920992721,4cyclictest25-21ksoftirqd/109:50:181
12920992721,3cyclictest25-21ksoftirqd/112:05:561
12920992721,3cyclictest25-21ksoftirqd/110:51:051
12920992721,3cyclictest25-21ksoftirqd/109:05:521
12920992717,5cyclictest25-21ksoftirqd/113:16:121
12915992721,3cyclictest9-21ksoftirqd/010:15:380
12915992721,3cyclictest9-21ksoftirqd/009:44:590
12915992720,4cyclictest9-21ksoftirqd/010:53:480
1293699269,5cyclictest41-21ksoftirqd/308:51:493
1293699265,8cyclictest41-21ksoftirqd/309:42:463
1293699265,14cyclictest41-21ksoftirqd/309:26:143
12936992610,6cyclictest41-21ksoftirqd/309:23:093
12920992621,3cyclictest25-21ksoftirqd/111:16:241
12920992621,3cyclictest25-21ksoftirqd/110:41:071
12920992621,3cyclictest25-21ksoftirqd/109:00:521
12920992621,3cyclictest25-21ksoftirqd/108:41:101
12920992621,3cyclictest25-21ksoftirqd/108:25:511
12920992619,4cyclictest25-21ksoftirqd/108:54:451
12915992622,3cyclictest9-21ksoftirqd/013:10:570
12915992621,3cyclictest9-21ksoftirqd/013:25:570
12915992621,3cyclictest9-21ksoftirqd/012:31:140
12915992621,3cyclictest9-21ksoftirqd/008:46:270
12915992620,3cyclictest9-21ksoftirqd/013:42:180
12915992620,3cyclictest9-21ksoftirqd/012:09:560
12915992620,3cyclictest9-21ksoftirqd/011:11:080
12915992620,3cyclictest9-21ksoftirqd/009:23:170
12915992619,4cyclictest9-21ksoftirqd/012:56:130
1291599261,19cyclictest64-21kswapd012:16:080
1293699258,5cyclictest41-21ksoftirqd/308:32:583
12936992520,3cyclictest41-21ksoftirqd/308:57:443
12920992520,3cyclictest25-21ksoftirqd/113:06:121
12920992518,4cyclictest25-21ksoftirqd/109:18:261
12915992520,3cyclictest9-21ksoftirqd/011:36:120
12915992520,3cyclictest9-21ksoftirqd/011:36:120
12915992520,3cyclictest9-21ksoftirqd/009:16:100
12915992520,3cyclictest9-21ksoftirqd/008:54:480
12915992519,3cyclictest9-21ksoftirqd/011:33:340
12915992519,3cyclictest9-21ksoftirqd/010:20:110
12915992519,3cyclictest9-21ksoftirqd/009:29:570
12915992519,3cyclictest9-21ksoftirqd/009:13:210
12915992519,3cyclictest9-21ksoftirqd/009:03:560
12915992518,4cyclictest9-21ksoftirqd/009:53:020
12915992518,4cyclictest9-21ksoftirqd/009:53:020
177391240,0ptp4l401ktimersoftd/309:37:533
1293699245,3cyclictest41-21ksoftirqd/310:14:353
1291599243,17cyclictest0-21swapper/013:36:070
12915992418,3cyclictest9-21ksoftirqd/013:19:000
12915992418,3cyclictest9-21ksoftirqd/012:00:240
12915992418,3cyclictest9-21ksoftirqd/009:49:420
12915992418,3cyclictest9-21ksoftirqd/009:00:060
1291599241,2cyclictest121rcu_preempt13:29:060
12920992318,3cyclictest25-21ksoftirqd/113:46:151
12915992318,3cyclictest9-21ksoftirqd/008:21:070
12915992317,3cyclictest9-21ksoftirqd/012:41:390
12915992316,4cyclictest32576-21grep13:31:110
133002220,16sleep00-21swapper/011:07:580
12915992217,3cyclictest9-21ksoftirqd/013:03:350
12915992217,3cyclictest9-21ksoftirqd/010:06:080
12915992217,3cyclictest9-21ksoftirqd/009:10:160
12915992216,3cyclictest9-21ksoftirqd/010:41:590
12915992216,3cyclictest9-21ksoftirqd/008:27:300
12915992215,4cyclictest9-21ksoftirqd/011:50:200
12915992214,5cyclictest6309-21diskmemload11:01:150
12915992116,3cyclictest9-21ksoftirqd/012:04:100
12915992116,3cyclictest9-21ksoftirqd/010:31:130
12915992116,3cyclictest9-21ksoftirqd/009:36:050
12915992115,4cyclictest9-21ksoftirqd/008:38:060
12915992115,4cyclictest9-21ksoftirqd/008:35:500
12915992115,3cyclictest9-21ksoftirqd/012:48:140
12915992115,3cyclictest9-21ksoftirqd/010:01:320
12915992114,4cyclictest9-21ksoftirqd/008:42:000
1291599204,6cyclictest1760-21runrttasks12:54:190
12915992015,3cyclictest9-21ksoftirqd/010:56:150
12915992015,3cyclictest18628-1kworker/u9:012:37:060
12915992013,4cyclictest9-21ksoftirqd/011:29:250
12915992013,4cyclictest6602-21/usr/sbin/munin10:21:040
1291599193,10cyclictest27332-21apt-get10:46:070
12915991913,3cyclictest9-21ksoftirqd/013:13:100
12915991913,3cyclictest20436-21phc2sys11:16:170
1291599191,15cyclictest11171-21grep10:26:110
12915991812,3cyclictest6309-21diskmemload11:53:250
12915991811,4cyclictest8807-21sed12:21:150
12915991811,4cyclictest24434-21missed_timers11:21:160
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional