You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-08-30 - 15:43
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Sat Aug 30, 2025 12:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
109442204170,22sleep30-21swapper/307:09:593
87562203169,23sleep10-21swapper/107:05:051
87532202168,23sleep00-21swapper/007:05:050
87502198164,23sleep20-21swapper/207:05:022
126832690,2sleep00-21swapper/007:10:260
1124299609,12cyclictest21026-21chrt11:57:322
1124299599,10cyclictest13948-21df_abs07:15:172
1124299597,11cyclictest8626-21date09:20:012
86462580,7sleep21124299cyclictest11:30:282
256792580,1sleep30-21swapper/307:40:143
1124299579,9cyclictest18131-21/usr/sbin/munin10:45:192
1124299578,11cyclictest30027-21irqstats08:55:222
1124299569,9cyclictest6137-21cat11:25:292
1124299567,18cyclictest27799-21latency_hist07:45:012
11242995511,8cyclictest23185-21cstates09:50:152
1124299548,17cyclictest17253-21latency_hist10:45:002
1124299548,16cyclictest12126-21/usr/sbin/munin09:25:212
1124299539,17cyclictest14956-21/usr/sbin/munin11:45:182
285252520,2sleep30-21swapper/307:45:193
136991510,1ptp4l401ktimersoftd/311:15:233
1124299517,16cyclictest20519-21taskset07:29:552
1124299507,8cyclictest8361-21ps10:25:192
1124299507,17cyclictest3358-21taskset09:06:222
136991490,1ptp4l391rcuc/310:42:023
1124299487,9cyclictest9049-21diskstats09:20:152
1124299477,7cyclictest31505-21perl12:20:202
1124299477,17cyclictest32681-21/usr/sbin/munin10:10:292
1124299477,11cyclictest17339-21ls09:35:272
1124299466,8cyclictest21255-21ps09:45:192
1124299457,15cyclictest3552-21if_err_enp4s010:15:192
1124299457,10cyclictest26243-21dpkg12:10:162
1124299456,14cyclictest1297-21runrttasks08:48:312
11241994439,3cyclictest17961-21cron09:40:011
1124299436,7cyclictest7515-21users12:35:282
11241994338,3cyclictest1297-21runrttasks12:05:441
136991420,0ptp4l401ktimersoftd/309:03:433
136991420,0ptp4l401ktimersoftd/308:20:263
136991410,0ptp4l401ktimersoftd/311:35:363
1371914032,3phc2sys0-21swapper/307:10:013
136991400,0ptp4l401ktimersoftd/312:13:553
11242994010,18cyclictest2692-21/usr/sbin/munin08:00:182
11240994036,3cyclictest9-21ksoftirqd/010:05:000
59298390,2rtkit-daemon0-21swapper/112:10:171
11242993932,4cyclictest33-21ksoftirqd/207:50:142
11241993933,4cyclictest23614-21cron12:05:001
136991380,1ptp4l391rcuc/307:55:213
1124299387,13cyclictest1285-21snmpd08:37:542
59298370,5rtkit-daemon24353-21/usr/sbin/munin08:45:161
11243993732,3cyclictest41-21ksoftirqd/312:40:003
11243993731,4cyclictest41-21ksoftirqd/311:40:403
11243993731,4cyclictest41-21ksoftirqd/310:05:043
11243993731,3cyclictest41-21ksoftirqd/312:20:233
11243993726,9cyclictest41-21ksoftirqd/308:05:223
11242993730,5cyclictest33-21ksoftirqd/211:08:102
11242993730,4cyclictest33-21ksoftirqd/212:06:112
11242993712,11cyclictest6791-21grep10:20:272
11240993732,3cyclictest9-21ksoftirqd/011:50:010
11240993721,5cyclictest9-21ksoftirqd/008:55:290
59298360,2rtkit-daemon0-21swapper/010:35:190
59298360,2rtkit-daemon0-21swapper/010:35:190
136991360,0ptp4l401ktimersoftd/308:05:003
11243993632,3cyclictest41-21ksoftirqd/310:35:003
11243993631,3cyclictest41-21ksoftirqd/310:40:013
11243993631,3cyclictest41-21ksoftirqd/310:40:003
11243993631,3cyclictest41-21ksoftirqd/308:20:003
11243993630,3cyclictest41-21ksoftirqd/312:03:353
11243993629,5cyclictest41-21ksoftirqd/311:31:543
11243993625,9cyclictest41-21ksoftirqd/310:10:163
1124299369,18cyclictest1622-21systemctl07:55:252
11242993630,4cyclictest33-21ksoftirqd/212:31:022
11241993630,4cyclictest25-21ksoftirqd/110:05:341
11240993633,2cyclictest9-21ksoftirqd/007:55:010
11240993632,2cyclictest9-21ksoftirqd/012:40:000
11243993529,4cyclictest41-21ksoftirqd/311:51:123
11243993529,4cyclictest41-21ksoftirqd/308:27:403
11243993529,4cyclictest41-21ksoftirqd/307:30:523
11243993528,5cyclictest41-21ksoftirqd/310:20:533
1124299353,30cyclictest18956-21kworker/2:211:20:162
11242993530,3cyclictest33-21ksoftirqd/208:11:492
11242993529,4cyclictest33-21ksoftirqd/210:50:582
11242993528,4cyclictest33-21ksoftirqd/207:23:492
11241993529,4cyclictest25-21ksoftirqd/112:28:291
11241993528,4cyclictest25-21ksoftirqd/110:44:111
11241993527,5cyclictest25-21ksoftirqd/110:17:541
11240993530,3cyclictest9-21ksoftirqd/011:30:200
11240993530,3cyclictest9-21ksoftirqd/009:35:000
11240993530,2cyclictest9-21ksoftirqd/011:40:000
11240993530,2cyclictest9-21ksoftirqd/008:30:000
11240993529,3cyclictest9-21ksoftirqd/009:15:000
11240993528,4cyclictest9-21ksoftirqd/012:00:000
136991340,0ptp4l401ktimersoftd/309:34:233
11243993430,3cyclictest41-21ksoftirqd/311:00:233
11243993429,3cyclictest41-21ksoftirqd/309:55:243
11243993429,3cyclictest41-21ksoftirqd/308:50:193
11243993429,3cyclictest41-21ksoftirqd/307:50:143
11243993429,3cyclictest41-21ksoftirqd/307:29:593
11243993428,4cyclictest41-21ksoftirqd/307:18:433
1124299349,10cyclictest28260-21df_abs07:45:172
1124299347,16cyclictest0-21swapper/211:38:312
1124299346,15cyclictest19876-21ls09:40:282
1124299344,28cyclictest18956-21kworker/2:209:55:192
11242993428,4cyclictest33-21ksoftirqd/211:18:182
11242993428,4cyclictest33-21ksoftirqd/210:36:292
11242993428,4cyclictest33-21ksoftirqd/210:36:292
11242993428,4cyclictest33-21ksoftirqd/208:41:392
1124299340,32cyclictest18956-21kworker/2:211:00:232
11241993429,3cyclictest25-21ksoftirqd/112:35:001
11241993428,4cyclictest25-21ksoftirqd/110:53:451
11241993428,4cyclictest25-21ksoftirqd/110:34:151
11241993428,4cyclictest25-21ksoftirqd/109:17:481
11241993428,4cyclictest25-21ksoftirqd/108:41:301
11241993427,5cyclictest25-21ksoftirqd/111:41:591
11241993427,5cyclictest25-21ksoftirqd/109:57:091
11241993427,4cyclictest25-21ksoftirqd/109:51:301
11240993430,3cyclictest9-21ksoftirqd/010:05:280
11240993429,3cyclictest9-21ksoftirqd/012:25:000
136991330,0ptp4l401ktimersoftd/311:59:533
11243993328,3cyclictest41-21ksoftirqd/311:45:193
11243993328,3cyclictest41-21ksoftirqd/309:46:433
11243993327,4cyclictest41-21ksoftirqd/311:13:003
11243993327,4cyclictest41-21ksoftirqd/311:10:003
11243993327,4cyclictest41-21ksoftirqd/310:19:173
11243993327,4cyclictest41-21ksoftirqd/309:22:443
1124299339,21cyclictest12309-21date10:35:012
11242993327,4cyclictest33-21ksoftirqd/208:16:192
11242993326,4cyclictest33-21ksoftirqd/209:12:202
11242993326,4cyclictest33-21ksoftirqd/208:34:502
11241993327,4cyclictest25-21ksoftirqd/111:30:561
11241993327,4cyclictest25-21ksoftirqd/110:28:451
11241993327,4cyclictest25-21ksoftirqd/110:02:261
11241993327,4cyclictest25-21ksoftirqd/108:56:301
11241993327,4cyclictest25-21ksoftirqd/107:12:321
11241993326,4cyclictest25-21ksoftirqd/111:15:111
11241993326,4cyclictest25-21ksoftirqd/108:02:311
11240993329,3cyclictest9-21ksoftirqd/009:25:010
11240993329,3cyclictest9-21ksoftirqd/008:04:590
11240993329,2cyclictest9-21ksoftirqd/007:45:000
11240993328,3cyclictest9-21ksoftirqd/010:50:010
11240993328,3cyclictest9-21ksoftirqd/010:30:200
11240993328,3cyclictest9-21ksoftirqd/009:40:000
11240993328,3cyclictest9-21ksoftirqd/007:25:190
11240993327,4cyclictest9-21ksoftirqd/011:51:050
11240993327,4cyclictest9-21ksoftirqd/010:24:110
11240993326,4cyclictest9-21ksoftirqd/009:51:210
11243993227,3cyclictest41-21ksoftirqd/310:26:593
11243993226,4cyclictest41-21ksoftirqd/311:26:003
11243993226,4cyclictest41-21ksoftirqd/310:56:403
11243993226,4cyclictest41-21ksoftirqd/309:15:463
11243993226,4cyclictest41-21ksoftirqd/308:12:483
11243993226,3cyclictest41-21ksoftirqd/312:30:233
11243993226,3cyclictest41-21ksoftirqd/308:34:593
1124299329,21cyclictest478-21dbus-daemon12:20:012
1124299327,13cyclictest33-21ksoftirqd/212:03:352
1124299326,13cyclictest1285-21snmpd12:25:542
11242993227,3cyclictest33-21ksoftirqd/208:50:472
11242993226,4cyclictest33-21ksoftirqd/210:00:462
11242993226,4cyclictest33-21ksoftirqd/208:24:342
1124299322,28cyclictest11361-21kworker/2:207:30:192
11241993227,3cyclictest25-21ksoftirqd/110:13:151
11241993226,4cyclictest25-21ksoftirqd/111:47:121
11241993226,4cyclictest25-21ksoftirqd/111:20:331
11241993226,4cyclictest25-21ksoftirqd/110:48:471
11241993226,4cyclictest25-21ksoftirqd/108:24:261
11241993226,4cyclictest25-21ksoftirqd/107:58:021
11241993225,4cyclictest25-21ksoftirqd/111:10:151
11240993227,3cyclictest9-21ksoftirqd/012:13:390
11240993227,3cyclictest9-21ksoftirqd/011:25:300
11240993227,3cyclictest9-21ksoftirqd/011:20:000
11240993227,3cyclictest9-21ksoftirqd/011:00:000
11240993227,3cyclictest9-21ksoftirqd/010:00:000
11240993227,3cyclictest9-21ksoftirqd/008:35:470
11240993227,3cyclictest9-21ksoftirqd/008:34:590
11240993227,3cyclictest9-21ksoftirqd/008:15:210
11240993227,3cyclictest9-21ksoftirqd/007:15:160
11240993226,4cyclictest9-21ksoftirqd/010:29:330
11240993226,4cyclictest9-21ksoftirqd/007:30:040
11240993226,3cyclictest9-21ksoftirqd/010:50:180
11240993226,3cyclictest9-21ksoftirqd/009:29:390
11240993225,5cyclictest9-21ksoftirqd/009:18:480
1124099321,3cyclictest121rcu_preempt09:50:010
136991310,0ptp4l401ktimersoftd/310:02:493
11243993127,3cyclictest41-21ksoftirqd/309:10:193
11243993126,3cyclictest41-21ksoftirqd/309:26:343
11243993126,3cyclictest41-21ksoftirqd/308:41:223
11243993125,4cyclictest41-21ksoftirqd/312:07:243
11243993125,4cyclictest41-21ksoftirqd/308:56:363
11243993124,5cyclictest41-21ksoftirqd/312:28:363
1124299319,19cyclictest7449-21latency_hist08:10:012
1124299318,10cyclictest0-21swapper/211:50:192
11242993125,4cyclictest33-21ksoftirqd/211:42:362
1124299311,28cyclictest7175-21kworker/2:008:25:192
11241993126,3cyclictest25-21ksoftirqd/109:12:071
11241993125,4cyclictest25-21ksoftirqd/112:35:071
11241993125,4cyclictest25-21ksoftirqd/110:22:491
11241993125,4cyclictest25-21ksoftirqd/109:06:581
11241993125,4cyclictest25-21ksoftirqd/108:53:451
11241993125,4cyclictest25-21ksoftirqd/107:38:521
11241993125,4cyclictest25-21ksoftirqd/107:30:101
11241993125,4cyclictest25-21ksoftirqd/107:20:061
11240993128,2cyclictest9-21ksoftirqd/007:55:200
11240993126,3cyclictest9-21ksoftirqd/009:05:430
11240993126,3cyclictest9-21ksoftirqd/007:40:000
11240993126,3cyclictest9-21ksoftirqd/007:25:000
11240993125,4cyclictest9-21ksoftirqd/012:25:390
1124099310,2cyclictest121rcu_preempt09:02:090
11243993025,3cyclictest41-21ksoftirqd/311:20:203
11243993025,3cyclictest41-21ksoftirqd/310:47:343
11243993025,3cyclictest41-21ksoftirqd/309:35:213
11243993025,3cyclictest41-21ksoftirqd/308:49:323
11243993024,4cyclictest41-21ksoftirqd/308:36:583
11243993024,4cyclictest41-21ksoftirqd/307:38:513
11243993024,3cyclictest41-21ksoftirqd/309:50:153
11242993025,3cyclictest33-21ksoftirqd/210:59:522
11242993024,4cyclictest33-21ksoftirqd/209:34:142
11241993025,3cyclictest25-21ksoftirqd/107:25:581
11241993024,4cyclictest25-21ksoftirqd/110:40:001
11241993024,4cyclictest25-21ksoftirqd/110:40:001
11241993024,4cyclictest25-21ksoftirqd/108:31:591
11241993024,4cyclictest25-21ksoftirqd/108:29:071
11241993024,4cyclictest25-21ksoftirqd/108:13:541
11241993024,4cyclictest25-21ksoftirqd/107:52:071
11241993024,4cyclictest25-21ksoftirqd/107:16:141
11240993026,2cyclictest9-21ksoftirqd/008:45:000
11240993025,3cyclictest9-21ksoftirqd/012:10:000
11240993025,3cyclictest9-21ksoftirqd/011:45:000
11240993025,3cyclictest9-21ksoftirqd/011:10:170
11240993024,4cyclictest9-21ksoftirqd/012:15:520
11240993024,4cyclictest9-21ksoftirqd/011:24:300
11240993024,4cyclictest9-21ksoftirqd/011:00:230
11240993024,4cyclictest9-21ksoftirqd/010:44:330
11240993024,4cyclictest9-21ksoftirqd/009:40:200
11240993024,4cyclictest9-21ksoftirqd/008:51:200
136991290,8ptp4l401ktimersoftd/309:44:243
11243992924,3cyclictest41-21ksoftirqd/312:15:233
11243992924,3cyclictest41-21ksoftirqd/307:21:373
11242992924,3cyclictest33-21ksoftirqd/207:37:422
11241992924,3cyclictest25-21ksoftirqd/111:56:231
11241992924,3cyclictest25-21ksoftirqd/109:48:581
11241992924,3cyclictest25-21ksoftirqd/109:25:121
11241992924,3cyclictest25-21ksoftirqd/108:16:171
11241992923,4cyclictest25-21ksoftirqd/108:37:241
11240992925,3cyclictest9-21ksoftirqd/012:00:200
11240992925,3cyclictest9-21ksoftirqd/007:50:010
11240992924,3cyclictest9-21ksoftirqd/011:05:210
11240992924,3cyclictest9-21ksoftirqd/010:20:000
11240992924,3cyclictest9-21ksoftirqd/008:14:340
11243992823,3cyclictest41-21ksoftirqd/310:50:223
11242992812,13cyclictest31630-21sshd10:05:292
11241992823,3cyclictest25-21ksoftirqd/109:40:561
11241992823,3cyclictest25-21ksoftirqd/109:20:041
11241992823,3cyclictest25-21ksoftirqd/108:07:081
11241992822,4cyclictest25-21ksoftirqd/112:24:151
11241992822,4cyclictest25-21ksoftirqd/107:48:501
11241992822,4cyclictest25-21ksoftirqd/107:42:001
11241992822,3cyclictest25-21ksoftirqd/110:59:031
11240992824,3cyclictest9-21ksoftirqd/008:50:000
11240992823,3cyclictest9-21ksoftirqd/008:05:230
11243992723,3cyclictest41-21ksoftirqd/309:05:203
11241992722,3cyclictest25-21ksoftirqd/111:05:001
11241992722,3cyclictest25-21ksoftirqd/109:33:421
11241992720,4cyclictest25-21ksoftirqd/109:00:031
11240992722,3cyclictest9-21ksoftirqd/012:32:330
1124299268,15cyclictest1416-21cat09:05:002
11242992610,13cyclictest31053-21unixbench_singl11:10:312
11241992621,3cyclictest29103-21cron11:10:001
11241992621,3cyclictest25-21ksoftirqd/111:35:311
11241992620,4cyclictest25-21ksoftirqd/112:18:181
11241992620,4cyclictest25-21ksoftirqd/111:50:051
11240992620,4cyclictest9-21ksoftirqd/010:10:160
11242992514,9cyclictest11930-21ps07:10:202
11240992520,3cyclictest9-21ksoftirqd/008:20:490
11241992318,3cyclictest25-21ksoftirqd/111:25:341
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional