You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-07 - 21:52
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot6.osadl.org (updated Mon Jul 07, 2025 12:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1508721570,5sleep11765499cyclictest14:44:541
1518911030,34ptp4l401ktimersoftd/310:01:183
266472750,2sleep10-21swapper/113:00:391
174532644,9sleep00-21swapper/010:01:290
49532580,1sleep10-21swapper/115:08:101
49532580,1sleep10-21swapper/115:08:101
321572580,2sleep00-21swapper/013:48:000
288852540,1sleep10-21swapper/113:03:041
17667995321,9cyclictest41-21ksoftirqd/312:18:323
17667995220,9cyclictest41-21ksoftirqd/314:37:323
145132520,1sleep20-21swapper/213:25:412
174452505,33sleep20-21swapper/210:01:232
38912490,1sleep20-21swapper/213:13:012
17667994824,9cyclictest41-21ksoftirqd/313:12:593
1766799472,7cyclictest401ktimersoftd/312:43:023
17667994725,9cyclictest41-21ksoftirqd/311:23:023
17647994740,4cyclictest9-21ksoftirqd/014:03:020
1766799468,6cyclictest41-21ksoftirqd/312:02:423
1766799467,6cyclictest41-21ksoftirqd/315:07:473
1766799467,6cyclictest41-21ksoftirqd/315:07:473
1766799464,7cyclictest22998-21apt-get14:17:473
1766799463,6cyclictest41-21ksoftirqd/314:47:073
17667994623,9cyclictest41-21ksoftirqd/310:48:023
17667994623,10cyclictest41-21ksoftirqd/310:03:093
17667994522,9cyclictest41-21ksoftirqd/314:28:013
17667994522,8cyclictest41-21ksoftirqd/313:53:053
17647994540,3cyclictest9-21ksoftirqd/015:07:510
17647994540,3cyclictest9-21ksoftirqd/015:07:510
17647994539,3cyclictest9-21ksoftirqd/012:12:560
1766799446,8cyclictest41-21ksoftirqd/313:59:083
1766799444,7cyclictest41-21ksoftirqd/313:32:243
1766799444,7cyclictest41-21ksoftirqd/313:32:243
17667994419,9cyclictest41-21ksoftirqd/312:33:533
1766799435,9cyclictest41-21ksoftirqd/311:03:113
1766799434,7cyclictest41-21ksoftirqd/314:58:243
1766799434,6cyclictest41-21ksoftirqd/312:39:003
17647994336,4cyclictest9-21ksoftirqd/010:12:510
1766799425,8cyclictest41-21ksoftirqd/312:02:553
1766799424,8cyclictest41-21ksoftirqd/313:41:073
1766799424,7cyclictest41-21ksoftirqd/315:14:003
1766799424,6cyclictest41-21ksoftirqd/314:54:533
1766799424,6cyclictest41-21ksoftirqd/313:06:193
1766799423,7cyclictest41-21ksoftirqd/314:03:103
17667994217,8cyclictest41-21ksoftirqd/314:47:473
17647994237,3cyclictest9-21ksoftirqd/010:47:520
17647994236,3cyclictest9-21ksoftirqd/010:22:520
151891420,1ptp4l401ktimersoftd/311:27:593
1766799416,7cyclictest41-21ksoftirqd/313:43:073
1766799414,8cyclictest41-21ksoftirqd/313:23:513
1766799413,7cyclictest41-21ksoftirqd/313:52:423
1766799412,5cyclictest41-21ksoftirqd/315:05:483
1766799412,5cyclictest41-21ksoftirqd/315:05:483
17667994118,8cyclictest41-21ksoftirqd/314:08:093
17667994117,9cyclictest41-21ksoftirqd/312:58:033
17647994135,3cyclictest9-21ksoftirqd/011:32:540
17647994134,4cyclictest9-21ksoftirqd/010:17:510
17647994132,4cyclictest9-21ksoftirqd/012:52:590
17647994122,5cyclictest9-21ksoftirqd/015:32:470
1766799407,6cyclictest41-21ksoftirqd/315:29:413
1766799407,3cyclictest41-21ksoftirqd/311:52:593
1766799406,9cyclictest41-21ksoftirqd/310:28:023
1766799403,7cyclictest41-21ksoftirqd/312:31:223
1766799403,6cyclictest41-21ksoftirqd/313:18:243
1766799402,6cyclictest41-21ksoftirqd/312:23:043
17667994017,9cyclictest41-21ksoftirqd/310:52:583
1766799396,8cyclictest41-21ksoftirqd/315:24:373
1766799396,8cyclictest41-21ksoftirqd/312:13:103
1766799396,7cyclictest41-21ksoftirqd/311:43:033
17667993917,8cyclictest41-21ksoftirqd/310:12:523
17647993934,3cyclictest9-21ksoftirqd/015:02:580
17647993934,3cyclictest9-21ksoftirqd/015:02:580
1766799386,7cyclictest41-21ksoftirqd/313:36:153
1766799386,7cyclictest41-21ksoftirqd/311:18:003
1766799386,4cyclictest41-21ksoftirqd/311:15:583
1766799383,8cyclictest41-21ksoftirqd/314:23:003
1766799383,7cyclictest41-21ksoftirqd/315:18:163
1766799383,6cyclictest41-21ksoftirqd/311:00:163
1766799382,7cyclictest41-21ksoftirqd/312:53:343
17667993815,7cyclictest41-21ksoftirqd/312:08:073
156742387,15sleep10-21swapper/109:57:551
1766799376,8cyclictest41-21ksoftirqd/314:13:073
1766799374,7cyclictest41-21ksoftirqd/311:08:043
1766799374,7cyclictest41-21ksoftirqd/310:22:583
1766799374,6cyclictest41-21ksoftirqd/310:18:013
1766799373,7cyclictest41-21ksoftirqd/311:32:533
1766799373,7cyclictest41-21ksoftirqd/310:08:013
1766799373,5cyclictest41-21ksoftirqd/314:40:413
17667993731,3cyclictest41-21ksoftirqd/310:37:403
17647993732,3cyclictest9-21ksoftirqd/011:27:560
17647993731,3cyclictest9-21ksoftirqd/012:58:130
17647993730,4cyclictest9-21ksoftirqd/011:17:560
1766799364,8cyclictest17899-21ssh12:49:083
1766799363,6cyclictest41-21ksoftirqd/310:40:053
17647993630,3cyclictest9-21ksoftirqd/011:02:540
17647993629,4cyclictest9-21ksoftirqd/011:42:420
17647993629,4cyclictest9-21ksoftirqd/011:42:420
1766799354,7cyclictest41-21ksoftirqd/313:11:273
1766799353,6cyclictest41-21ksoftirqd/310:43:003
17647993530,3cyclictest9-21ksoftirqd/015:12:590
17647993529,3cyclictest9-21ksoftirqd/013:27:440
17647993522,3cyclictest9-21ksoftirqd/014:47:460
17654993428,3cyclictest25-21ksoftirqd/114:32:461
17647993429,3cyclictest9-21ksoftirqd/013:02:570
17647993428,3cyclictest9-21ksoftirqd/014:48:150
17647993428,3cyclictest9-21ksoftirqd/014:18:140
17647993428,3cyclictest9-21ksoftirqd/014:17:450
17647993428,3cyclictest9-21ksoftirqd/012:32:430
262032330,2sleep00-21swapper/014:57:580
17667993328,3cyclictest41-21ksoftirqd/311:42:413
17667993328,3cyclictest41-21ksoftirqd/311:42:413
17654993327,3cyclictest25-21ksoftirqd/113:18:051
1764799336,3cyclictest121rcu_preempt13:39:470
17647993327,3cyclictest9-21ksoftirqd/015:27:470
17647993327,3cyclictest9-21ksoftirqd/015:18:030
17647993327,3cyclictest9-21ksoftirqd/014:08:230
17647993326,4cyclictest9-21ksoftirqd/012:52:440
17654993226,3cyclictest25-21ksoftirqd/110:57:411
17647993227,3cyclictest9-21ksoftirqd/013:43:150
17647993226,4cyclictest9-21ksoftirqd/010:53:000
17647993226,3cyclictest9-21ksoftirqd/014:28:200
17647993226,3cyclictest9-21ksoftirqd/014:22:580
17647993226,3cyclictest9-21ksoftirqd/013:18:050
17647993226,3cyclictest9-21ksoftirqd/012:47:430
17647993226,3cyclictest9-21ksoftirqd/011:23:110
17647993226,3cyclictest9-21ksoftirqd/010:07:400
17667993127,2cyclictest391rcuc/311:48:043
17667993127,2cyclictest391rcuc/311:48:043
17658993126,3cyclictest33-21ksoftirqd/215:27:472
17658993126,3cyclictest33-21ksoftirqd/211:12:402
1765899311,22cyclictest0-21swapper/213:47:582
17654993126,3cyclictest25-21ksoftirqd/115:07:461
17654993126,3cyclictest25-21ksoftirqd/115:07:461
17654993126,3cyclictest25-21ksoftirqd/114:18:031
17654993126,3cyclictest25-21ksoftirqd/113:32:441
17654993126,3cyclictest25-21ksoftirqd/113:32:441
17654993126,3cyclictest25-21ksoftirqd/110:22:531
17654993125,3cyclictest25-21ksoftirqd/114:27:461
17647993126,3cyclictest9-21ksoftirqd/013:10:370
17647993125,3cyclictest9-21ksoftirqd/014:33:200
17647993125,3cyclictest9-21ksoftirqd/013:53:150
17647993125,3cyclictest9-21ksoftirqd/012:12:420
17647993125,3cyclictest9-21ksoftirqd/011:57:420
17658993024,3cyclictest18839-1kworker/u9:014:28:002
17654993025,3cyclictest25-21ksoftirqd/113:13:041
17654993024,4cyclictest25-21ksoftirqd/111:03:101
17654993024,3cyclictest25-21ksoftirqd/113:58:151
17654993024,3cyclictest25-21ksoftirqd/113:23:001
17654993024,3cyclictest25-21ksoftirqd/112:52:441
17654993024,3cyclictest25-21ksoftirqd/111:23:001
17647993025,3cyclictest9-21ksoftirqd/012:32:560
17647993025,3cyclictest9-21ksoftirqd/011:02:410
17647993024,4cyclictest9-21ksoftirqd/013:32:590
17647993024,4cyclictest9-21ksoftirqd/012:38:170
17647993024,4cyclictest9-21ksoftirqd/011:17:410
17647993024,3cyclictest9-21ksoftirqd/014:53:060
17647993024,3cyclictest9-21ksoftirqd/013:32:440
17647993024,3cyclictest9-21ksoftirqd/013:32:440
17647993024,3cyclictest9-21ksoftirqd/012:22:430
17647993024,3cyclictest9-21ksoftirqd/012:07:430
17647993024,3cyclictest9-21ksoftirqd/010:12:400
1764799301,3cyclictest121rcu_preempt10:37:590
17658992923,3cyclictest33-21ksoftirqd/214:34:172
17654992924,3cyclictest25-21ksoftirqd/115:23:031
17654992924,3cyclictest25-21ksoftirqd/114:38:051
17654992924,3cyclictest25-21ksoftirqd/114:03:021
17654992924,3cyclictest25-21ksoftirqd/110:37:591
17654992923,3cyclictest25-21ksoftirqd/110:17:581
17647992924,3cyclictest9-21ksoftirqd/012:23:050
17647992923,3cyclictest9-21ksoftirqd/014:38:030
17647992923,3cyclictest9-21ksoftirqd/014:02:450
17647992923,3cyclictest9-21ksoftirqd/010:32:400
17647992919,3cyclictest9-21ksoftirqd/011:57:590
17658992821,4cyclictest33-21ksoftirqd/210:07:172
17654992823,3cyclictest25-21ksoftirqd/115:27:481
17654992823,3cyclictest25-21ksoftirqd/114:33:181
17654992823,3cyclictest25-21ksoftirqd/113:38:161
17654992822,3cyclictest25-21ksoftirqd/115:18:031
17654992822,3cyclictest25-21ksoftirqd/113:56:291
17654992822,3cyclictest25-21ksoftirqd/112:43:031
17654992822,3cyclictest25-21ksoftirqd/112:28:021
17654992822,3cyclictest25-21ksoftirqd/111:12:571
1764799282,4cyclictest9-21ksoftirqd/010:42:540
17647992824,3cyclictest9-21ksoftirqd/010:37:410
17647992823,3cyclictest9-21ksoftirqd/011:42:430
17647992822,3cyclictest9-21ksoftirqd/011:48:020
17647992822,3cyclictest9-21ksoftirqd/011:48:020
17647992822,3cyclictest9-21ksoftirqd/011:07:540
3196822720,3sleep233-21ksoftirqd/215:03:072
3196822720,3sleep233-21ksoftirqd/215:03:072
17658992722,3cyclictest33-21ksoftirqd/214:08:052
17658992721,3cyclictest33-21ksoftirqd/215:18:192
17658992720,4cyclictest33-21ksoftirqd/211:32:242
17658992720,4cyclictest33-21ksoftirqd/211:18:592
17658992720,4cyclictest33-21ksoftirqd/210:19:292
17654992723,3cyclictest25-21ksoftirqd/112:12:431
17654992722,3cyclictest25-21ksoftirqd/114:08:231
17654992722,3cyclictest25-21ksoftirqd/112:13:021
17654992722,3cyclictest25-21ksoftirqd/111:33:001
17654992722,3cyclictest25-21ksoftirqd/110:47:581
17654992721,3cyclictest25-21ksoftirqd/111:59:101
17654992721,3cyclictest25-21ksoftirqd/110:07:401
17654992720,4cyclictest25-21ksoftirqd/110:37:021
17654992720,4cyclictest25-21ksoftirqd/110:15:311
17654992720,4cyclictest20506-21head13:33:021
17647992722,3cyclictest9-21ksoftirqd/013:12:560
17658992621,3cyclictest33-21ksoftirqd/211:42:422
17658992620,3cyclictest33-21ksoftirqd/212:48:582
17658992620,3cyclictest33-21ksoftirqd/212:37:442
17658992620,3cyclictest33-21ksoftirqd/210:14:352
17658992619,4cyclictest33-21ksoftirqd/211:58:572
17658992619,4cyclictest33-21ksoftirqd/211:57:172
17658992619,4cyclictest33-21ksoftirqd/211:40:152
17658992619,4cyclictest33-21ksoftirqd/211:40:152
17658992619,4cyclictest33-21ksoftirqd/210:28:242
1765899261,22cyclictest28816-21ssh13:43:072
17654992621,3cyclictest25-21ksoftirqd/114:53:551
17654992620,3cyclictest25-21ksoftirqd/114:47:461
17654992620,3cyclictest25-21ksoftirqd/113:48:051
17654992620,3cyclictest25-21ksoftirqd/112:22:571
17654992620,3cyclictest25-21ksoftirqd/111:02:161
17654992619,4cyclictest25-21ksoftirqd/112:37:511
17654992619,4cyclictest25-21ksoftirqd/110:07:521
1765899255,3cyclictest47550irq/101-ens3-Tx13:20:132
1765899252,20cyclictest0-21swapper/214:52:452
1765899252,16cyclictest10984-21diskmemload13:32:582
17658992519,3cyclictest33-21ksoftirqd/213:57:482
17658992519,3cyclictest33-21ksoftirqd/210:37:272
17658992518,4cyclictest33-21ksoftirqd/211:24:052
17658992518,4cyclictest33-21ksoftirqd/210:54:382
17658992518,4cyclictest33-21ksoftirqd/210:44:062
1765899251,5cyclictest23994-21irqstats15:28:052
1765899251,4cyclictest31608-21apt-get12:27:552
1765899251,21cyclictest15953-21snmp_o5powerctl11:03:062
17654992520,3cyclictest25-21ksoftirqd/111:37:561
17654992520,3cyclictest25-21ksoftirqd/111:37:561
17654992519,3cyclictest25-21ksoftirqd/113:43:011
17654992519,3cyclictest25-21ksoftirqd/113:07:591
17654992519,3cyclictest25-21ksoftirqd/111:08:111
17658992418,3cyclictest33-21ksoftirqd/214:03:112
17658992418,3cyclictest33-21ksoftirqd/211:00:582
17658992417,4cyclictest33-21ksoftirqd/211:49:022
17658992417,4cyclictest33-21ksoftirqd/211:49:022
17658992417,4cyclictest29240-21rm15:00:192
1765899241,4cyclictest20765-21/usr/sbin/munin11:13:112
1765899241,20cyclictest9889-21snmp_o5powerctl15:13:122
1765899241,20cyclictest24106-21cut13:37:592
1765899240,22cyclictest0-21swapper/210:08:002
17654992419,3cyclictest25-21ksoftirqd/114:58:051
17654992419,3cyclictest25-21ksoftirqd/114:17:461
17654992419,3cyclictest25-21ksoftirqd/111:57:421
17654992417,4cyclictest8861-21grep15:13:031
17658992318,3cyclictest33-21ksoftirqd/214:53:002
17658992317,3cyclictest33-21ksoftirqd/214:17:322
17658992317,3cyclictest33-21ksoftirqd/213:12:072
17658992316,4cyclictest33-21ksoftirqd/214:24:512
17658992316,4cyclictest33-21ksoftirqd/212:23:142
1765899231,19cyclictest29756-21hddtemp_smartct11:32:582
1765899231,19cyclictest29397-21snmp_o5powerctl10:23:042
1765899230,20cyclictest26932-21sh12:21:372
17654992318,3cyclictest25-21ksoftirqd/111:27:541
17654992318,3cyclictest25-21ksoftirqd/110:42:561
17654992317,5cyclictest25-21ksoftirqd/112:33:031
17654992317,3cyclictest25-21ksoftirqd/112:18:021
17654992317,3cyclictest25-21ksoftirqd/112:03:011
17654992316,4cyclictest25-21ksoftirqd/111:46:161
17658992216,3cyclictest33-21ksoftirqd/212:03:032
17658992216,3cyclictest33-21ksoftirqd/210:48:542
17658992216,3cyclictest16044-21sh12:08:022
1765899221,4cyclictest8171-21cstates14:38:012
17658992214,3cyclictest0-21swapper/213:02:562
1765899221,3cyclictest5067-21snmp_o5powerctl15:08:132
1765899221,3cyclictest5067-21snmp_o5powerctl15:08:132
17658992211,8cyclictest21256-21ssh12:53:132
17654992217,3cyclictest25-21ksoftirqd/112:53:051
17658992115,4cyclictest33-21ksoftirqd/213:54:162
17658992115,3cyclictest33-21ksoftirqd/213:00:122
17658992115,3cyclictest33-21ksoftirqd/212:47:372
17658992114,4cyclictest15299-21sh14:45:202
1765899211,3cyclictest1505-21runrttasks14:19:112
17658992113,4cyclictest19634-21cpu12:12:562
17658992113,4cyclictest17058-21processes13:28:062
17658992113,4cyclictest17058-21processes13:28:062
17654992115,4cyclictest25-21ksoftirqd/110:28:351
17658992013,4cyclictest7819-21cat12:38:002
17654992015,3cyclictest25-21ksoftirqd/111:22:411
17654992014,3cyclictest4097-21/usr/sbin/munin11:48:011
17654992014,3cyclictest4097-21/usr/sbin/munin11:48:011
1765899183,10cyclictest2760-21apt-get10:37:532
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional