You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-19 - 08:03
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot6.osadl.org (updated Wed Nov 19, 2025 00:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1606921640,4sleep02072499cyclictest22:52:590
1616221410,3sleep12072899cyclictest00:40:391
177391940,4ptp4l401ktimersoftd/320:15:103
190012770,6sleep119006-21gltestperf20:10:541
177391710,10ptp4l401ktimersoftd/322:25:263
177391700,1ptp4l401ktimersoftd/300:02:293
164032650,1sleep20-21swapper/201:16:012
129512650,3sleep32074099cyclictest01:11:133
216472630,5sleep321651-21irqrtprio20:15:533
166282610,4sleep32074099cyclictest23:29:273
177391590,2ptp4l401ktimersoftd/323:43:563
20734995745,6cyclictest33-21ksoftirqd/223:20:522
20724995728,4cyclictest9-21ksoftirqd/021:20:360
2072899566,9cyclictest25-21ksoftirqd/100:00:401
20724995525,4cyclictest9-21ksoftirqd/022:21:090
20724995427,4cyclictest9-21ksoftirqd/000:35:400
20724995416,7cyclictest9-21ksoftirqd/020:37:120
176942540,2sleep10-21swapper/122:19:431
20728995327,4cyclictest25-21ksoftirqd/100:30:561
20728995319,9cyclictest25-21ksoftirqd/123:25:521
20728995313,6cyclictest25-21ksoftirqd/123:44:541
2072499534,10cyclictest9-21ksoftirqd/022:25:520
20724995325,5cyclictest9-21ksoftirqd/000:00:570
20724995323,3cyclictest9-21ksoftirqd/000:25:560
308672520,2sleep00-21swapper/000:56:000
252082520,4sleep3391rcuc/301:26:023
2072899525,10cyclictest25-21ksoftirqd/120:50:551
20728995220,7cyclictest25-21ksoftirqd/101:14:191
20724995226,3cyclictest9-21ksoftirqd/023:31:000
20724995226,3cyclictest9-21ksoftirqd/023:10:380
20724995225,4cyclictest9-21ksoftirqd/022:36:040
20724995224,4cyclictest9-21ksoftirqd/023:20:520
20724995224,4cyclictest9-21ksoftirqd/020:35:350
20724995214,7cyclictest9-21ksoftirqd/022:08:410
20724995214,4cyclictest9-21ksoftirqd/020:27:410
2072899516,11cyclictest25-21ksoftirqd/122:21:021
2072899515,12cyclictest25-21ksoftirqd/100:41:071
2072899515,10cyclictest25-21ksoftirqd/121:15:531
20728995126,3cyclictest25-21ksoftirqd/122:26:001
20728995126,3cyclictest25-21ksoftirqd/101:01:011
20728995125,4cyclictest25-21ksoftirqd/123:00:531
20728995121,10cyclictest25-21ksoftirqd/123:55:401
20728995119,5cyclictest25-21ksoftirqd/120:41:221
2072899510,10cyclictest25-21ksoftirqd/101:36:071
20724995125,4cyclictest9-21ksoftirqd/021:00:570
20724995125,4cyclictest9-21ksoftirqd/020:16:020
20724995125,3cyclictest9-21ksoftirqd/023:56:040
20724995122,8cyclictest9-21ksoftirqd/000:41:030
20724995114,4cyclictest9-21ksoftirqd/023:45:210
20734995039,6cyclictest33-21ksoftirqd/223:05:542
2072899504,10cyclictest25-21ksoftirqd/120:31:051
20728995025,4cyclictest25-21ksoftirqd/101:16:501
20728995024,4cyclictest25-21ksoftirqd/122:51:071
20728995024,4cyclictest25-21ksoftirqd/101:20:471
2072899501,8cyclictest25-21ksoftirqd/122:55:571
20724995024,3cyclictest9-21ksoftirqd/001:33:130
20724995023,4cyclictest9-21ksoftirqd/000:50:580
20724995023,3cyclictest9-21ksoftirqd/022:20:370
20724995020,7cyclictest9-21ksoftirqd/000:09:320
20724995018,7cyclictest9-21ksoftirqd/023:02:000
2072899494,9cyclictest25-21ksoftirqd/123:11:021
2072899494,10cyclictest25-21ksoftirqd/122:06:071
2072899493,10cyclictest25-21ksoftirqd/122:00:521
20728994924,4cyclictest25-21ksoftirqd/122:46:141
20728994924,4cyclictest25-21ksoftirqd/120:55:511
20728994923,4cyclictest25-21ksoftirqd/122:34:431
20728994923,4cyclictest25-21ksoftirqd/101:07:221
20728994923,4cyclictest25-21ksoftirqd/100:26:021
20728994923,3cyclictest25-21ksoftirqd/123:30:511
20728994923,3cyclictest25-21ksoftirqd/100:01:041
20728994922,3cyclictest25-21ksoftirqd/123:47:321
2072499498,9cyclictest9-21ksoftirqd/021:20:590
2072499493,7cyclictest9-21ksoftirqd/000:21:010
20724994937,3cyclictest9-21ksoftirqd/020:50:550
20724994936,3cyclictest9-21ksoftirqd/023:35:580
20724994923,4cyclictest9-21ksoftirqd/022:57:080
20724994923,4cyclictest9-21ksoftirqd/021:35:540
20724994922,4cyclictest9-21ksoftirqd/023:46:020
20724994921,4cyclictest9-21ksoftirqd/021:05:540
20724994921,12cyclictest9-21ksoftirqd/021:51:070
20724994917,7cyclictest9-21ksoftirqd/023:54:170
20724994917,7cyclictest9-21ksoftirqd/001:28:290
2072899487,10cyclictest25-21ksoftirqd/120:36:001
2072899485,9cyclictest25-21ksoftirqd/122:11:031
20728994824,3cyclictest25-21ksoftirqd/122:37:571
20728994823,4cyclictest25-21ksoftirqd/100:51:231
20728994822,4cyclictest25-21ksoftirqd/121:40:521
20728994821,4cyclictest25-21ksoftirqd/100:11:001
20728994820,10cyclictest25-21ksoftirqd/123:20:571
20724994824,3cyclictest9-21ksoftirqd/023:20:390
20724994824,3cyclictest9-21ksoftirqd/023:20:390
20724994822,4cyclictest9-21ksoftirqd/021:15:360
20724994817,7cyclictest9-21ksoftirqd/022:42:350
20724994817,7cyclictest9-21ksoftirqd/000:14:120
20724994816,7cyclictest9-21ksoftirqd/001:12:330
20734994736,6cyclictest33-21ksoftirqd/223:30:522
20728994721,3cyclictest25-21ksoftirqd/100:25:071
20724994735,3cyclictest9-21ksoftirqd/022:30:580
20724994735,3cyclictest9-21ksoftirqd/022:11:070
20724994723,3cyclictest9-21ksoftirqd/020:55:510
20724994723,3cyclictest9-21ksoftirqd/001:21:060
20724994717,7cyclictest9-21ksoftirqd/001:02:090
20724994716,7cyclictest9-21ksoftirqd/023:30:140
2074099460,3cyclictest1760-21runrttasks01:02:133
20728994622,3cyclictest25-21ksoftirqd/100:16:571
2072899460,8cyclictest25-21ksoftirqd/121:00:531
2072499465,7cyclictest9-21ksoftirqd/000:20:410
20724994616,7cyclictest9-21ksoftirqd/000:37:500
20724994615,7cyclictest9-21ksoftirqd/001:09:300
2072899456,9cyclictest25-21ksoftirqd/101:25:541
2072899454,9cyclictest23221-21munin-node20:20:351
2072499455,9cyclictest9-21ksoftirqd/021:40:590
20724994522,3cyclictest9-21ksoftirqd/001:17:060
20734994435,5cyclictest33-21ksoftirqd/220:15:462
2072899443,7cyclictest0-21swapper/100:46:171
2072899443,6cyclictest25-21ksoftirqd/101:31:121
2072899443,3cyclictest121rcu_preempt21:20:591
20728994430,4cyclictest25-21ksoftirqd/121:25:491
20728994430,4cyclictest25-21ksoftirqd/121:25:491
20728994423,11cyclictest25-21ksoftirqd/100:05:561
2072899440,7cyclictest4240-21ssh22:40:521
2072499444,7cyclictest9-21ksoftirqd/020:43:070
2072499443,8cyclictest9-21ksoftirqd/020:15:350
20724994427,3cyclictest9-21ksoftirqd/001:42:030
2072499441,3cyclictest9-21ksoftirqd/001:36:010
20734994332,6cyclictest33-21ksoftirqd/223:25:532
20734994331,7cyclictest33-21ksoftirqd/221:30:492
2072899433,8cyclictest25-21ksoftirqd/120:50:361
20728994331,3cyclictest25-21ksoftirqd/100:59:401
20728994327,3cyclictest25-21ksoftirqd/121:50:371
20728994320,10cyclictest25-21ksoftirqd/121:55:571
2072899430,12cyclictest25-21ksoftirqd/123:05:541
2072499434,3cyclictest9-21ksoftirqd/022:45:520
2072499433,9cyclictest9-21ksoftirqd/021:56:020
2072499433,8cyclictest9-21ksoftirqd/021:46:050
20724994333,3cyclictest9-21ksoftirqd/022:01:070
20724994332,3cyclictest9-21ksoftirqd/023:13:460
20724994325,10cyclictest9-21ksoftirqd/020:45:510
20724994318,4cyclictest9-21ksoftirqd/021:26:410
20724994318,4cyclictest9-21ksoftirqd/021:26:410
2072899423,3cyclictest121rcu_preempt01:41:011
20728994220,9cyclictest25-21ksoftirqd/123:38:101
20728994210,10cyclictest25-21ksoftirqd/123:16:571
20728994210,10cyclictest25-21ksoftirqd/123:16:571
2072499422,7cyclictest9-21ksoftirqd/020:20:570
20724994227,3cyclictest9-21ksoftirqd/000:46:550
177391420,1ptp4l401ktimersoftd/323:06:083
2072899414,9cyclictest25-21ksoftirqd/121:06:021
2072899410,7cyclictest25-21ksoftirqd/121:35:371
2072899403,9cyclictest25-21ksoftirqd/120:25:501
20724994027,3cyclictest9-21ksoftirqd/021:30:580
20740993914,22cyclictest7901-21/usr/sbin/munin23:56:013
2072899392,10cyclictest25-21ksoftirqd/121:51:071
20728993911,3cyclictest121rcu_preempt21:35:551
177391390,1ptp4l401ktimersoftd/323:35:503
177391390,1ptp4l401ktimersoftd/323:13:003
177391390,1ptp4l401ktimersoftd/322:19:483
177391390,1ptp4l401ktimersoftd/300:43:513
177391390,1ptp4l401ktimersoftd/300:26:173
20740993814,21cyclictest17361-21sh00:05:593
20734993833,3cyclictest33-21ksoftirqd/200:45:402
20734993827,8cyclictest33-21ksoftirqd/223:45:392
2072899384,3cyclictest121rcu_preempt21:10:481
177391380,1ptp4l401ktimersoftd/323:35:113
177391380,1ptp4l401ktimersoftd/322:58:203
177391380,1ptp4l401ktimersoftd/322:40:183
177391380,1ptp4l401ktimersoftd/322:31:453
177391380,1ptp4l401ktimersoftd/301:41:533
177391380,1ptp4l401ktimersoftd/301:32:133
177391380,1ptp4l401ktimersoftd/300:40:183
177391380,1ptp4l401ktimersoftd/300:34:353
177391380,0ptp4l401ktimersoftd/323:16:303
177391380,0ptp4l401ktimersoftd/323:16:303
177391380,0ptp4l401ktimersoftd/300:57:213
2074099372,5cyclictest0-21swapper/320:25:493
2072899371,2cyclictest121rcu_preempt20:21:001
177391370,1ptp4l401ktimersoftd/322:27:353
177391370,1ptp4l401ktimersoftd/320:20:563
177391370,1ptp4l401ktimersoftd/301:08:073
177391370,1ptp4l401ktimersoftd/300:50:003
177391370,1ptp4l401ktimersoftd/300:15:233
20740993613,20cyclictest15493-21sh22:51:533
20740993613,20cyclictest13161-21expr21:05:543
20734993626,6cyclictest33-21ksoftirqd/222:15:512
177391360,1ptp4l401ktimersoftd/323:23:423
177391360,1ptp4l401ktimersoftd/300:53:193
177391360,0ptp4l401ktimersoftd/323:51:503
177391360,0ptp4l401ktimersoftd/300:22:283
177391360,0ptp4l401ktimersoftd/300:19:483
20734993529,3cyclictest33-21ksoftirqd/222:25:572
20734993529,3cyclictest33-21ksoftirqd/200:05:402
20734993526,4cyclictest33-21ksoftirqd/222:20:512
20734993524,9cyclictest33-21ksoftirqd/220:51:072
2074099341,10cyclictest9216-21apt-get22:05:503
20734993429,3cyclictest33-21ksoftirqd/201:26:002
20734993429,3cyclictest33-21ksoftirqd/201:06:012
20734993423,9cyclictest33-21ksoftirqd/223:55:562
177391340,0ptp4l401ktimersoftd/323:48:033
2074099332,4cyclictest0-21swapper/321:20:523
2074099331,4cyclictest0-21swapper/321:45:533
20740993311,4cyclictest6802-21cat20:50:583
20740993311,3cyclictest25160-21cut21:30:503
20740993310,4cyclictest18237-21if_enp1s0.121:15:573
20734993328,3cyclictest33-21ksoftirqd/223:10:592
20734993328,3cyclictest33-21ksoftirqd/200:25:552
20734993327,3cyclictest33-21ksoftirqd/200:25:402
20734993322,9cyclictest33-21ksoftirqd/200:15:402
2074099329,4cyclictest17561-21latency_hist21:15:363
2074099329,3cyclictest30195-21gltestperf21:40:553
2074099329,3cyclictest10774-21expr21:00:503
2074099328,3cyclictest30762-21seq20:34:483
2074099326,4cyclictest4227-21apt-get22:40:523
2074099321,5cyclictest20192-21ssh01:20:573
2074099321,5cyclictest0-21swapper/322:10:523
20734993227,3cyclictest33-21ksoftirqd/223:00:382
20734993227,3cyclictest33-21ksoftirqd/201:35:552
20734993223,5cyclictest33-21ksoftirqd/201:30:562
20734993221,9cyclictest33-21ksoftirqd/222:40:582
2073499320,3cyclictest121rcu_preempt01:10:502
2074099310,3cyclictest9006-21latency_hist22:05:373
2074099310,11cyclictest22752-21grep21:25:513
2074099310,11cyclictest22752-21grep21:25:513
20734993126,3cyclictest33-21ksoftirqd/220:55:542
20734993126,3cyclictest33-21ksoftirqd/200:06:022
20734993125,3cyclictest33-21ksoftirqd/222:15:372
20734993125,3cyclictest33-21ksoftirqd/221:35:562
20734993124,3cyclictest33-21ksoftirqd/220:25:532
20734993121,5cyclictest33-21ksoftirqd/201:00:562
2074099309,3cyclictest22978-21grep23:00:553
2074099307,4cyclictest19016-21sh01:19:023
2074099307,3cyclictest5932-21timerandwakeup21:56:083
2074099307,3cyclictest32509-21expr20:36:063
2074099306,4cyclictest8847-21irqrtprio20:55:563
20740993010,3cyclictest12710-21sh22:50:183
2073499305,3cyclictest121rcu_preempt20:25:352
20734993026,2cyclictest33-21ksoftirqd/201:41:092
20734993025,3cyclictest33-21ksoftirqd/223:46:012
20734993025,3cyclictest33-21ksoftirqd/223:36:012
20734993025,3cyclictest33-21ksoftirqd/222:30:592
20734993025,3cyclictest33-21ksoftirqd/221:45:372
20734993025,3cyclictest33-21ksoftirqd/221:25:512
20734993025,3cyclictest33-21ksoftirqd/221:25:512
20734993024,3cyclictest33-21ksoftirqd/200:50:582
20734993018,5cyclictest33-21ksoftirqd/223:51:022
2074099292,7cyclictest32701-21apt-get01:35:553
2073499293,3cyclictest121rcu_preempt20:36:062
20734992924,3cyclictest33-21ksoftirqd/223:00:522
20734992924,3cyclictest33-21ksoftirqd/222:46:022
20734992924,3cyclictest33-21ksoftirqd/201:21:032
20734992923,3cyclictest33-21ksoftirqd/221:10:362
20734992923,3cyclictest33-21ksoftirqd/221:05:352
20734992923,3cyclictest33-21ksoftirqd/200:46:002
20734992923,3cyclictest33-21ksoftirqd/200:16:102
187452295,11sleep20-21swapper/220:10:522
20734992822,3cyclictest33-21ksoftirqd/222:08:002
20734992822,3cyclictest33-21ksoftirqd/221:20:592
20734992822,3cyclictest33-21ksoftirqd/220:47:172
20734992722,3cyclictest33-21ksoftirqd/221:50:522
20734992722,3cyclictest33-21ksoftirqd/221:10:532
20734992722,3cyclictest33-21ksoftirqd/201:00:412
20734992721,4cyclictest33-21ksoftirqd/221:45:402
20734992721,3cyclictest33-21ksoftirqd/222:35:542
20734992720,4cyclictest33-21ksoftirqd/200:33:262
20740992619,4cyclictest41-21ksoftirqd/321:52:203
2074099261,4cyclictest0-21swapper/321:35:573
20734992621,3cyclictest33-21ksoftirqd/222:50:522
20734992621,3cyclictest33-21ksoftirqd/222:00:502
20734992621,3cyclictest33-21ksoftirqd/222:00:372
20734992621,3cyclictest33-21ksoftirqd/220:40:532
20734992621,3cyclictest33-21ksoftirqd/220:33:472
177391260,0ptp4l401ktimersoftd/320:40:553
2074099251,3cyclictest5266-21sshd20:47:183
20734992520,3cyclictest33-21ksoftirqd/200:40:402
20734992519,3cyclictest33-21ksoftirqd/221:15:592
20734992517,5cyclictest3923-21tr23:15:542
20734992517,5cyclictest3923-21tr23:15:542
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional