You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-27 - 21:23
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Thu Nov 27, 2025 12:45:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
293932216168,21sleep20-21swapper/207:06:452
296032207172,24sleep30-21swapper/307:09:263
275112206173,22sleep00-21swapper/007:05:050
295952204171,22sleep10-21swapper/107:09:201
152472760,3sleep30-21swapper/311:05:263
142752650,2sleep20-21swapper/211:05:172
18092590,2sleep30-21swapper/308:25:123
136591540,1ptp4l391rcuc/312:23:573
2994399523,20cyclictest0-21swapper/311:22:153
2994399521,21cyclictest26373-21seq10:23:353
29943994817,28cyclictest28249-21df09:20:163
2994399475,20cyclictest7149-21seq11:59:193
2994399466,21cyclictest25032-21taskset11:27:093
2994399436,26cyclictest1784-21taskset07:16:343
2994399431,2cyclictest0-21swapper/310:25:373
29940994237,3cyclictest22951-21cron09:10:010
136591420,0ptp4l401ktimersoftd/311:51:253
136591420,0ptp4l401ktimersoftd/307:45:253
136591410,0ptp4l401ktimersoftd/312:32:123
136591410,0ptp4l401ktimersoftd/308:20:163
136591410,0ptp4l401ktimersoftd/308:00:163
51698380,4rtkit-daemon7171-21iostat_ios10:50:170
2994399381,3cyclictest226-21systemd-journal09:33:173
2994099382,7cyclictest121rcu_preempt12:10:190
51698370,3rtkit-daemon10611-21fschecks_count07:35:140
2994399371,3cyclictest14727-21idleruntime-cro07:45:003
29942993714,19cyclictest33-21ksoftirqd/211:25:152
29942993528,5cyclictest33-21ksoftirqd/210:54:382
29943993428,4cyclictest41-21ksoftirqd/312:08:093
2994399341,31cyclictest12069-21perf09:55:003
2994399341,2cyclictest0-21swapper/308:16:193
2994399340,3cyclictest20382chrt11:45:543
29942993428,3cyclictest33-21ksoftirqd/212:05:182
29940993428,4cyclictest9-21ksoftirqd/010:44:250
29940993427,5cyclictest9-21ksoftirqd/008:46:030
136591340,0ptp4l401ktimersoftd/310:41:533
29943993327,4cyclictest41-21ksoftirqd/312:26:543
29943993327,4cyclictest41-21ksoftirqd/309:43:593
29943993327,4cyclictest41-21ksoftirqd/307:39:343
29942993328,3cyclictest33-21ksoftirqd/209:40:142
29942993327,4cyclictest33-21ksoftirqd/210:04:242
29942993327,4cyclictest33-21ksoftirqd/208:39:132
29942993327,4cyclictest33-21ksoftirqd/208:15:122
29942993326,5cyclictest33-21ksoftirqd/210:35:452
29940993327,4cyclictest9-21ksoftirqd/008:13:460
29940993327,4cyclictest9-21ksoftirqd/008:05:040
29940993326,5cyclictest9-21ksoftirqd/010:18:100
29943993226,4cyclictest41-21ksoftirqd/312:02:553
29943993213,16cyclictest11850-21tune2fs08:45:193
29943993213,16cyclictest11270-21/usr/sbin/munin11:00:173
2994399321,29cyclictest16780-21tr12:20:003
29942993227,3cyclictest33-21ksoftirqd/208:20:172
29942993226,4cyclictest33-21ksoftirqd/212:23:492
29942993226,4cyclictest33-21ksoftirqd/211:30:052
29942993226,4cyclictest33-21ksoftirqd/210:48:532
29942993226,4cyclictest33-21ksoftirqd/210:13:582
29942993226,3cyclictest33-21ksoftirqd/212:30:142
29942993225,5cyclictest33-21ksoftirqd/208:14:562
29941993227,3cyclictest25-21ksoftirqd/112:05:111
29941993226,4cyclictest25-21ksoftirqd/109:12:591
29940993226,4cyclictest9-21ksoftirqd/012:09:180
29940993226,4cyclictest9-21ksoftirqd/011:03:590
29940993226,4cyclictest9-21ksoftirqd/010:13:200
29940993226,4cyclictest9-21ksoftirqd/010:06:030
29940993226,4cyclictest9-21ksoftirqd/009:59:120
2994399315,22cyclictest7974-21mailstats08:35:213
29943993126,3cyclictest41-21ksoftirqd/308:58:103
29943993126,3cyclictest41-21ksoftirqd/307:12:463
29943993125,4cyclictest41-21ksoftirqd/310:15:573
29943993125,4cyclictest41-21ksoftirqd/308:30:093
29943993125,4cyclictest41-21ksoftirqd/307:59:013
29943993125,4cyclictest41-21ksoftirqd/307:51:353
29943993113,15cyclictest4123-21awk07:20:283
2994399310,3cyclictest14099-21taskset09:56:173
2994399310,2cyclictest58782sleep310:47:423
2994399310,2cyclictest17525-21wc11:10:253
2994399310,2cyclictest0-21swapper/309:10:213
29942993127,3cyclictest33-21ksoftirqd/208:00:112
29942993126,3cyclictest33-21ksoftirqd/211:50:182
29942993125,4cyclictest33-21ksoftirqd/211:59:132
29942993125,4cyclictest33-21ksoftirqd/209:49:112
29942993125,4cyclictest33-21ksoftirqd/209:08:482
29942993125,4cyclictest33-21ksoftirqd/209:04:222
29942993125,4cyclictest33-21ksoftirqd/208:44:292
29942993125,3cyclictest33-21ksoftirqd/211:15:192
29942993124,4cyclictest33-21ksoftirqd/209:55:332
29941993126,3cyclictest25-21ksoftirqd/109:22:031
29941993125,4cyclictest25-21ksoftirqd/112:13:231
29941993125,4cyclictest25-21ksoftirqd/111:37:541
29941993125,4cyclictest25-21ksoftirqd/111:14:351
29941993124,4cyclictest25-21ksoftirqd/110:05:111
29940993126,3cyclictest9-21ksoftirqd/011:43:470
29940993125,4cyclictest9-21ksoftirqd/009:48:130
29940993125,4cyclictest9-21ksoftirqd/009:42:590
29940993125,4cyclictest9-21ksoftirqd/009:16:320
29940993125,4cyclictest9-21ksoftirqd/009:14:040
29940993125,4cyclictest9-21ksoftirqd/008:54:290
29940993125,4cyclictest9-21ksoftirqd/007:29:120
29943993025,3cyclictest41-21ksoftirqd/309:37:033
29943993025,3cyclictest41-21ksoftirqd/309:16:393
29943993024,4cyclictest41-21ksoftirqd/311:41:453
29943993024,4cyclictest41-21ksoftirqd/310:51:553
29943993024,4cyclictest41-21ksoftirqd/309:25:053
29943993010,17cyclictest21763-21uname09:05:163
2994399300,3cyclictest9165-21expr10:55:133
2994399300,3cyclictest18257-21cat10:05:213
2994399300,2cyclictest0-21swapper/308:40:533
29942993025,3cyclictest33-21ksoftirqd/207:59:332
29942993025,3cyclictest33-21ksoftirqd/207:35:002
29942993024,4cyclictest33-21ksoftirqd/211:23:592
29942993024,4cyclictest33-21ksoftirqd/210:07:212
29942993024,4cyclictest33-21ksoftirqd/207:41:192
29942993024,3cyclictest33-21ksoftirqd/208:45:222
29942993023,5cyclictest33-21ksoftirqd/210:28:152
29942993019,10cyclictest33-21ksoftirqd/210:40:242
29941993025,3cyclictest25-21ksoftirqd/110:46:301
29941993025,3cyclictest25-21ksoftirqd/110:32:221
29941993024,4cyclictest25-21ksoftirqd/110:20:311
29941993024,4cyclictest25-21ksoftirqd/109:46:171
29941993024,4cyclictest25-21ksoftirqd/109:38:231
29941993024,4cyclictest25-21ksoftirqd/109:00:561
29941993024,4cyclictest25-21ksoftirqd/107:39:041
29941993024,4cyclictest25-21ksoftirqd/107:24:011
29940993025,3cyclictest9-21ksoftirqd/011:24:570
29940993025,3cyclictest9-21ksoftirqd/008:41:130
29940993025,3cyclictest9-21ksoftirqd/008:15:420
29940993024,4cyclictest9-21ksoftirqd/012:22:140
29940993024,4cyclictest9-21ksoftirqd/011:46:560
29940993024,4cyclictest9-21ksoftirqd/009:30:400
29940993024,4cyclictest9-21ksoftirqd/008:57:540
29940993024,4cyclictest9-21ksoftirqd/008:29:060
29940993024,4cyclictest9-21ksoftirqd/007:19:140
29940993023,4cyclictest9-21ksoftirqd/007:30:040
51698290,2rtkit-daemon0-21swapper/112:20:171
2994399297,19cyclictest226-21systemd-journal12:13:483
2994399297,19cyclictest19373-21irqrtprio09:00:173
2994399296,20cyclictest26769-21latency_hist08:10:003
2994399294,21cyclictest27874-21apt-get11:35:123
29943992924,3cyclictest41-21ksoftirqd/312:37:173
29943992924,3cyclictest41-21ksoftirqd/310:03:563
2994399292,21cyclictest27010-21apt-get08:10:123
2994399291,21cyclictest7534-21apt-get09:45:123
2994399290,2cyclictest4978-21apt-get07:25:023
2994399290,2cyclictest19429-21sed11:15:223
29942992925,3cyclictest33-21ksoftirqd/209:20:192
29942992923,4cyclictest33-21ksoftirqd/212:13:052
29942992923,4cyclictest33-21ksoftirqd/210:22:172
29942992923,4cyclictest33-21ksoftirqd/207:46:442
29942992922,5cyclictest33-21ksoftirqd/207:54:542
29942992917,10cyclictest33-21ksoftirqd/212:00:102
29941992924,3cyclictest25-21ksoftirqd/111:50:531
29941992924,3cyclictest25-21ksoftirqd/110:54:441
29941992924,3cyclictest25-21ksoftirqd/109:55:471
29941992924,3cyclictest25-21ksoftirqd/109:08:541
29941992924,3cyclictest25-21ksoftirqd/108:39:431
29941992923,4cyclictest25-21ksoftirqd/108:59:001
29941992923,4cyclictest25-21ksoftirqd/107:41:131
29941992923,4cyclictest25-21ksoftirqd/107:12:121
29941992922,5cyclictest25-21ksoftirqd/110:28:141
29941992922,4cyclictest25-21ksoftirqd/112:38:591
29940992924,3cyclictest9-21ksoftirqd/011:38:490
29940992924,3cyclictest9-21ksoftirqd/011:27:100
29940992924,3cyclictest9-21ksoftirqd/007:54:360
29940992923,4cyclictest9-21ksoftirqd/012:00:240
29940992923,4cyclictest9-21ksoftirqd/011:52:050
29940992923,4cyclictest9-21ksoftirqd/011:05:080
29940992923,4cyclictest9-21ksoftirqd/010:48:390
29940992923,4cyclictest9-21ksoftirqd/010:02:010
29940992923,4cyclictest9-21ksoftirqd/008:37:200
29940992923,4cyclictest9-21ksoftirqd/008:34:510
29940992923,4cyclictest9-21ksoftirqd/008:20:470
29940992923,4cyclictest9-21ksoftirqd/007:58:330
29940992923,4cyclictest9-21ksoftirqd/007:22:220
29940992923,4cyclictest9-21ksoftirqd/007:11:560
136591290,0ptp4l401ktimersoftd/307:30:053
51698280,2rtkit-daemon0-21swapper/112:03:391
2994399289,16cyclictest21741-21latency_hist10:15:003
2994399280,3cyclictest15796-21seq08:54:383
29942992823,3cyclictest33-21ksoftirqd/212:15:142
29942992823,3cyclictest33-21ksoftirqd/209:10:202
29942992822,4cyclictest33-21ksoftirqd/211:42:522
29942992822,4cyclictest33-21ksoftirqd/209:26:282
29942992822,4cyclictest33-21ksoftirqd/207:22:322
29942992822,4cyclictest33-21ksoftirqd/207:19:162
29941992823,3cyclictest25-21ksoftirqd/111:43:021
29941992823,3cyclictest25-21ksoftirqd/108:18:301
29941992822,4cyclictest25-21ksoftirqd/111:57:161
29941992822,4cyclictest25-21ksoftirqd/111:15:121
29941992822,4cyclictest25-21ksoftirqd/110:15:381
29940992823,3cyclictest9-21ksoftirqd/012:34:130
29940992823,3cyclictest9-21ksoftirqd/012:16:120
29940992822,4cyclictest9-21ksoftirqd/011:30:110
29940992822,4cyclictest9-21ksoftirqd/010:35:360
29940992822,4cyclictest9-21ksoftirqd/010:22:070
2994399277,17cyclictest29766-21irqrtprio10:30:183
2994399272,20cyclictest25507-21apt-get11:30:133
29942992723,3cyclictest33-21ksoftirqd/210:55:182
29942992722,3cyclictest33-21ksoftirqd/207:25:082
29942992721,4cyclictest33-21ksoftirqd/211:38:472
29942992721,3cyclictest33-21ksoftirqd/208:55:132
29942992721,3cyclictest33-21ksoftirqd/208:30:122
29942992721,3cyclictest33-21ksoftirqd/207:35:192
29942992721,3cyclictest1307-21runrttasks10:32:392
29942992720,4cyclictest33-21ksoftirqd/207:14:352
29941992723,2cyclictest25-21ksoftirqd/111:50:001
29941992722,3cyclictest25-21ksoftirqd/111:27:591
29941992722,3cyclictest25-21ksoftirqd/110:00:051
29941992722,3cyclictest25-21ksoftirqd/108:10:431
29941992722,3cyclictest25-21ksoftirqd/107:28:151
29941992722,3cyclictest25-21ksoftirqd/107:17:531
29941992721,4cyclictest25-21ksoftirqd/110:41:501
29941992721,4cyclictest25-21ksoftirqd/110:11:451
29941992721,4cyclictest25-21ksoftirqd/108:01:591
29940992722,3cyclictest9-21ksoftirqd/011:57:230
29940992721,4cyclictest9-21ksoftirqd/009:21:410
29943992621,3cyclictest41-21ksoftirqd/310:36:363
29942992621,3cyclictest33-21ksoftirqd/212:40:002
29942992621,3cyclictest33-21ksoftirqd/212:26:202
29942992621,3cyclictest33-21ksoftirqd/210:15:212
29942992621,3cyclictest33-21ksoftirqd/209:15:002
29942992621,3cyclictest33-21ksoftirqd/208:50:202
29942992620,4cyclictest33-21ksoftirqd/209:51:482
29941992621,3cyclictest25-21ksoftirqd/107:55:011
29941992621,3cyclictest25-21ksoftirqd/107:49:151
29941992620,4cyclictest25-21ksoftirqd/107:55:421
29940992621,3cyclictest9-21ksoftirqd/012:38:350
29940992621,3cyclictest9-21ksoftirqd/010:57:010
29940992621,3cyclictest9-21ksoftirqd/010:25:110
29940992620,4cyclictest9-21ksoftirqd/011:13:420
29940992620,4cyclictest9-21ksoftirqd/009:37:270
29940992620,4cyclictest9-21ksoftirqd/009:00:550
29942992520,3cyclictest33-21ksoftirqd/211:49:132
29942992519,4cyclictest33-21ksoftirqd/211:12:482
29941992520,3cyclictest25-21ksoftirqd/111:32:511
29941992520,3cyclictest25-21ksoftirqd/111:20:131
29941992520,3cyclictest25-21ksoftirqd/110:40:001
29941992520,3cyclictest25-21ksoftirqd/107:32:141
29941992519,4cyclictest25-21ksoftirqd/109:53:281
29940992520,3cyclictest9-21ksoftirqd/009:53:340
29941992419,3cyclictest25-21ksoftirqd/112:30:171
29941992419,3cyclictest25-21ksoftirqd/112:17:341
29941992419,3cyclictest25-21ksoftirqd/111:05:111
29941992419,3cyclictest25-21ksoftirqd/108:32:531
29941992418,4cyclictest25-21ksoftirqd/111:04:441
29941992418,4cyclictest25-21ksoftirqd/108:28:311
2994299237,14cyclictest26778-21ls08:10:002
29942992318,3cyclictest33-21ksoftirqd/211:00:122
29942992318,3cyclictest33-21ksoftirqd/209:35:112
29941992318,3cyclictest25-21ksoftirqd/108:53:031
29941992317,4cyclictest25-21ksoftirqd/112:27:371
29940992318,3cyclictest9-21ksoftirqd/011:17:520
29940992317,4cyclictest9-21ksoftirqd/007:46:220
29942992218,3cyclictest33-21ksoftirqd/208:25:172
29941992218,2cyclictest25-21ksoftirqd/108:05:371
29941992216,4cyclictest25-21ksoftirqd/109:27:451
29940992216,4cyclictest9-21ksoftirqd/012:29:240
29942992116,3cyclictest33-21ksoftirqd/209:32:112
29941992117,2cyclictest25-21ksoftirqd/109:15:181
29941992116,3cyclictest25-21ksoftirqd/108:47:531
29941992116,3cyclictest25-21ksoftirqd/108:44:321
29941992116,3cyclictest25-21ksoftirqd/108:20:091
29941992015,3cyclictest25-21ksoftirqd/109:41:511
29940992014,4cyclictest9-21ksoftirqd/007:43:050
29941991915,2cyclictest25-21ksoftirqd/109:30:581
29941991913,4cyclictest25-21ksoftirqd/110:57:021
29940991914,3cyclictest9-21ksoftirqd/009:28:470
29940991914,3cyclictest29196-21cpuspeed_turbos10:30:130
29940991812,4cyclictest23816-21cat08:00:230
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional