You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-03 - 10:56
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Mon Nov 03, 2025 00:45:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
84322237176,50sleep20-21swapper/219:06:272
86912234168,23sleep00-21swapper/019:09:420
85152206173,22sleep10-21swapper/119:07:271
85492205171,23sleep30-21swapper/319:07:533
157632700,6sleep3900899cyclictest20:30:243
290082620,5sleep125-21ksoftirqd/123:15:011
9005995116,5cyclictest9-21ksoftirqd/000:00:120
900599506,5cyclictest9-21ksoftirqd/023:45:300
37942500,1sleep00-21swapper/023:30:000
900599496,6cyclictest9-21ksoftirqd/023:15:260
900599495,5cyclictest9-21ksoftirqd/021:35:010
900599495,5cyclictest9-21ksoftirqd/021:35:010
22072490,2sleep10-21swapper/122:15:281
900599485,7cyclictest9-21ksoftirqd/023:00:250
900599483,5cyclictest9-21ksoftirqd/019:45:160
900599482,5cyclictest9-21ksoftirqd/000:25:170
900599482,4cyclictest9-21ksoftirqd/020:45:270
9005994816,5cyclictest9-21ksoftirqd/000:05:120
900599475,7cyclictest9-21ksoftirqd/019:35:230
900599475,5cyclictest9-21ksoftirqd/019:15:190
900599474,5cyclictest9-21ksoftirqd/022:30:000
900599465,5cyclictest9-21ksoftirqd/021:50:260
900599464,7cyclictest9-21ksoftirqd/000:20:140
900599463,6cyclictest9-21ksoftirqd/020:00:190
900599462,6cyclictest9-21ksoftirqd/021:00:270
900599462,6cyclictest9-21ksoftirqd/000:10:240
900599462,6cyclictest9-21ksoftirqd/000:10:240
900599462,5cyclictest9-21ksoftirqd/023:30:290
900599456,5cyclictest9-21ksoftirqd/023:10:220
900599455,7cyclictest9-21ksoftirqd/021:40:230
900599455,7cyclictest9-21ksoftirqd/021:20:210
900599452,6cyclictest9-21ksoftirqd/023:40:240
9006994438,4cyclictest1294-21cron23:25:001
900599446,7cyclictest9-21ksoftirqd/019:30:200
900599445,7cyclictest9-21ksoftirqd/023:50:150
900599444,5cyclictest9-21ksoftirqd/023:05:320
900599443,5cyclictest9-21ksoftirqd/020:35:230
900599442,5cyclictest9-21ksoftirqd/021:05:260
900599435,7cyclictest9-21ksoftirqd/022:15:220
900599433,6cyclictest9-21ksoftirqd/022:05:330
900599430,7cyclictest9-21ksoftirqd/022:00:250
900599430,40cyclictest26343-21turbostat20:55:000
900599426,9cyclictest9-21ksoftirqd/023:20:220
900599424,5cyclictest9-21ksoftirqd/023:55:130
900599424,5cyclictest9-21ksoftirqd/019:40:140
900599423,7cyclictest9-21ksoftirqd/021:30:160
900599423,7cyclictest9-21ksoftirqd/021:13:390
900599422,5cyclictest9-21ksoftirqd/021:55:260
900599422,5cyclictest0-21swapper/020:30:220
900599421,5cyclictest9-21ksoftirqd/021:25:260
900599415,7cyclictest9-21ksoftirqd/020:05:140
900599415,6cyclictest9-21ksoftirqd/023:35:160
900599413,5cyclictest9-21ksoftirqd/022:50:260
900599413,5cyclictest9-21ksoftirqd/022:45:160
900599412,7cyclictest9-21ksoftirqd/020:40:170
900599412,5cyclictest9-21ksoftirqd/000:33:450
900599411,5cyclictest9-21ksoftirqd/019:53:080
900599411,3cyclictest9-21ksoftirqd/000:15:200
65452410,1sleep10-21swapper/120:10:241
136591410,0ptp4l401ktimersoftd/323:25:303
136591410,0ptp4l401ktimersoftd/319:17:363
900599404,8cyclictest9-21ksoftirqd/022:34:580
900599402,7cyclictest9-21ksoftirqd/020:25:250
900599402,5cyclictest9-21ksoftirqd/019:21:080
255562400,1sleep225558-21sh22:00:002
136591400,33ptp4l0-21swapper/319:10:013
900599393,6cyclictest9-21ksoftirqd/022:35:010
900599392,7cyclictest9-21ksoftirqd/022:10:150
900599392,5cyclictest9-21ksoftirqd/020:55:030
900599392,5cyclictest9-21ksoftirqd/019:55:160
900599392,4cyclictest9-21ksoftirqd/021:15:240
900599391,5cyclictest9-21ksoftirqd/020:22:330
9005993912,5cyclictest9-21ksoftirqd/020:20:000
136591390,0ptp4l401ktimersoftd/321:22:103
9006993832,3cyclictest226-21systemd-journal20:49:411
900599382,8cyclictest9-21ksoftirqd/021:46:130
900599381,6cyclictest9-21ksoftirqd/019:10:160
9008993732,3cyclictest41-21ksoftirqd/320:15:013
9008993730,4cyclictest41-21ksoftirqd/322:42:593
9007993729,5cyclictest33-21ksoftirqd/219:30:002
9007993729,5cyclictest33-21ksoftirqd/219:30:002
900599373,6cyclictest9-21ksoftirqd/022:20:230
900599370,7cyclictest9-21ksoftirqd/019:25:290
900599370,7cyclictest9-21ksoftirqd/019:25:290
9008993630,4cyclictest41-21ksoftirqd/323:53:183
9007993630,4cyclictest33-21ksoftirqd/222:41:592
9007993630,4cyclictest33-21ksoftirqd/200:24:142
9007993629,4cyclictest33-21ksoftirqd/223:00:002
9007993629,4cyclictest33-21ksoftirqd/221:18:322
9006993629,4cyclictest25-21ksoftirqd/123:45:011
9006993629,4cyclictest25-21ksoftirqd/123:03:371
9008993529,4cyclictest41-21ksoftirqd/320:08:213
9008993529,4cyclictest41-21ksoftirqd/319:40:573
9008993529,4cyclictest41-21ksoftirqd/300:26:243
9008993528,5cyclictest41-21ksoftirqd/319:32:233
9008993528,4cyclictest41-21ksoftirqd/323:20:533
9008993527,5cyclictest41-21ksoftirqd/321:08:023
900899350,2cyclictest121rcu_preempt00:03:523
9007993529,4cyclictest33-21ksoftirqd/220:44:032
9007993529,4cyclictest33-21ksoftirqd/200:37:592
9006993529,4cyclictest25-21ksoftirqd/123:46:101
9006993529,4cyclictest25-21ksoftirqd/122:45:111
9006993529,4cyclictest25-21ksoftirqd/121:11:251
900699351,31cyclictest28731-21ls21:00:001
900599352,6cyclictest9-21ksoftirqd/020:10:140
9008993428,4cyclictest41-21ksoftirqd/323:44:593
9008993428,4cyclictest41-21ksoftirqd/322:46:353
9008993428,4cyclictest41-21ksoftirqd/321:58:373
9008993428,4cyclictest41-21ksoftirqd/321:31:293
9008993428,4cyclictest41-21ksoftirqd/321:29:213
9008993428,4cyclictest41-21ksoftirqd/320:57:073
9008993411,20cyclictest7684-21ls20:15:143
900899340,31cyclictest18189-21latency_hist00:00:003
9007993429,3cyclictest33-21ksoftirqd/221:03:392
9007993429,3cyclictest33-21ksoftirqd/200:06:182
9007993428,4cyclictest33-21ksoftirqd/221:07:052
9007993428,4cyclictest33-21ksoftirqd/219:31:462
9007993428,4cyclictest33-21ksoftirqd/200:19:532
9007993427,4cyclictest33-21ksoftirqd/223:00:142
900699348,22cyclictest21209-21cpuspeed_turbos21:50:131
9006993428,4cyclictest25-21ksoftirqd/123:28:251
9006993428,4cyclictest25-21ksoftirqd/121:38:451
9006993428,4cyclictest25-21ksoftirqd/121:38:451
9006993428,4cyclictest25-21ksoftirqd/120:30:101
9006993428,4cyclictest25-21ksoftirqd/120:22:231
9006993427,4cyclictest25-21ksoftirqd/123:55:411
9006993427,4cyclictest25-21ksoftirqd/121:18:311
900699341,27cyclictest226-21systemd-journal23:35:121
900699340,4cyclictest28605-21fschecks_count22:05:211
9005993426,5cyclictest9-21ksoftirqd/023:00:000
900599341,6cyclictest9-21ksoftirqd/000:40:010
9008993327,4cyclictest41-21ksoftirqd/323:31:473
9008993327,4cyclictest41-21ksoftirqd/323:02:063
9008993327,4cyclictest41-21ksoftirqd/322:17:503
9008993327,4cyclictest41-21ksoftirqd/322:14:213
9008993327,4cyclictest41-21ksoftirqd/321:19:063
9008993327,3cyclictest41-21ksoftirqd/300:15:123
9007993328,3cyclictest33-21ksoftirqd/222:00:122
9007993328,3cyclictest33-21ksoftirqd/221:53:232
9007993327,4cyclictest33-21ksoftirqd/223:36:522
9007993327,4cyclictest33-21ksoftirqd/223:29:102
9007993327,4cyclictest33-21ksoftirqd/221:44:402
9007993327,4cyclictest33-21ksoftirqd/220:53:292
9007993327,4cyclictest33-21ksoftirqd/220:16:472
9007993327,4cyclictest33-21ksoftirqd/219:37:402
9007993327,4cyclictest33-21ksoftirqd/200:32:402
900699336,24cyclictest13238-21sshd21:32:121
9006993327,4cyclictest25-21ksoftirqd/121:09:411
9006993327,4cyclictest25-21ksoftirqd/120:41:441
9006993327,4cyclictest25-21ksoftirqd/120:02:121
9006993327,4cyclictest25-21ksoftirqd/119:55:561
9006993326,4cyclictest25-21ksoftirqd/120:17:351
9006993326,4cyclictest21732-21cron23:00:001
9006993325,5cyclictest25-21ksoftirqd/100:40:001
9006993313,16cyclictest5519-21cut22:25:171
900699330,4cyclictest28930-21if_enp1s000:20:181
9008993227,3cyclictest41-21ksoftirqd/322:27:243
9008993227,3cyclictest41-21ksoftirqd/319:37:313
9008993226,4cyclictest41-21ksoftirqd/323:48:533
9008993226,4cyclictest41-21ksoftirqd/322:30:063
9008993226,4cyclictest41-21ksoftirqd/322:09:173
9008993226,4cyclictest41-21ksoftirqd/320:44:123
9008993226,4cyclictest41-21ksoftirqd/320:21:213
9008993226,3cyclictest41-21ksoftirqd/321:12:593
900899321,3cyclictest121rcu_preempt20:00:183
9008993212,17cyclictest15917-21latency_hist19:25:003
9008993212,17cyclictest14193-21expr21:35:153
9008993212,17cyclictest14193-21expr21:35:143
9008993211,18cyclictest31338-21sed19:55:233
900899320,30cyclictest21803-21sendmail-msp23:00:003
9007993227,3cyclictest33-21ksoftirqd/223:19:032
9007993227,3cyclictest33-21ksoftirqd/222:50:352
9007993227,3cyclictest33-21ksoftirqd/222:15:122
9007993227,3cyclictest33-21ksoftirqd/222:11:132
9007993227,3cyclictest33-21ksoftirqd/221:31:442
9007993227,3cyclictest33-21ksoftirqd/200:29:032
9007993226,4cyclictest33-21ksoftirqd/222:33:302
9007993226,4cyclictest33-21ksoftirqd/220:49:202
9007993226,4cyclictest33-21ksoftirqd/220:29:262
9007993226,4cyclictest33-21ksoftirqd/219:18:502
9007993226,3cyclictest33-21ksoftirqd/219:48:462
9006993226,4cyclictest25-21ksoftirqd/122:00:361
9006993226,4cyclictest25-21ksoftirqd/119:44:571
9006993226,4cyclictest25-21ksoftirqd/100:26:221
9006993226,4cyclictest25-21ksoftirqd/100:17:261
9006993226,4cyclictest25-21ksoftirqd/100:09:451
9006993225,4cyclictest25-21ksoftirqd/119:45:011
900699321,28cyclictest12869-21grep19:15:261
900699320,3cyclictest30064-21irqrtprio23:15:211
9005993226,4cyclictest9-21ksoftirqd/022:40:060
9008993126,3cyclictest41-21ksoftirqd/323:15:013
9008993126,3cyclictest41-21ksoftirqd/320:46:163
9008993125,4cyclictest41-21ksoftirqd/323:07:563
9008993125,4cyclictest41-21ksoftirqd/320:29:313
9008993125,4cyclictest41-21ksoftirqd/300:38:113
9008993125,4cyclictest41-21ksoftirqd/300:09:463
9008993124,4cyclictest41-21ksoftirqd/319:54:373
9008993110,18cyclictest5252-21latency_hist22:25:003
9008993110,18cyclictest19082-21seq20:38:273
9008993110,18cyclictest18245-21seq21:42:373
900899310,3cyclictest21198-21grep21:50:133
9007993126,3cyclictest33-21ksoftirqd/220:05:302
9007993126,3cyclictest33-21ksoftirqd/219:22:082
9007993125,4cyclictest33-21ksoftirqd/222:23:422
9007993125,4cyclictest33-21ksoftirqd/221:49:292
9007993125,4cyclictest33-21ksoftirqd/220:24:562
9007993125,4cyclictest33-21ksoftirqd/219:41:472
9007993125,3cyclictest33-21ksoftirqd/222:09:252
9007993124,5cyclictest33-21ksoftirqd/222:49:512
9007993124,4cyclictest33-21ksoftirqd/223:43:592
9007993124,4cyclictest33-21ksoftirqd/220:04:592
900699313,4cyclictest158992chrt19:24:511
9006993125,4cyclictest25-21ksoftirqd/122:42:071
9006993125,4cyclictest25-21ksoftirqd/122:11:591
9006993125,4cyclictest25-21ksoftirqd/120:39:361
9006993125,4cyclictest25-21ksoftirqd/100:13:331
9006993125,4cyclictest25-21ksoftirqd/100:13:331
9006993125,3cyclictest25-21ksoftirqd/122:32:141
9006993111,17cyclictest25911-21sed23:05:301
900699310,3cyclictest29470-21/usr/sbin/munin19:50:251
9008993024,4cyclictest41-21ksoftirqd/321:03:173
9008993024,4cyclictest41-21ksoftirqd/300:24:073
9007993025,3cyclictest33-21ksoftirqd/223:54:272
9007993025,3cyclictest33-21ksoftirqd/223:24:232
9007993024,4cyclictest33-21ksoftirqd/221:13:512
9007993024,4cyclictest33-21ksoftirqd/220:56:502
9007993024,4cyclictest33-21ksoftirqd/220:35:122
9006993025,3cyclictest25-21ksoftirqd/123:54:041
9006993025,3cyclictest25-21ksoftirqd/122:50:321
9006993025,3cyclictest25-21ksoftirqd/122:37:581
9006993025,3cyclictest25-21ksoftirqd/121:30:001
9006993025,3cyclictest25-21ksoftirqd/119:38:221
9006993014,13cyclictest25064-21unixbench_multi21:55:281
9006993013,14cyclictest7118-21hddtemp_smartct21:20:201
900699300,4cyclictest18992-21idleruntime00:00:181
900899294,23cyclictest1083-21fschecks_count00:30:183
9008992924,3cyclictest41-21ksoftirqd/323:36:133
9008992924,3cyclictest41-21ksoftirqd/322:04:033
9008992924,3cyclictest41-21ksoftirqd/320:55:003
9008992924,3cyclictest41-21ksoftirqd/319:45:003
9008992923,4cyclictest41-21ksoftirqd/322:52:413
9008992923,4cyclictest41-21ksoftirqd/322:36:163
9007992924,3cyclictest33-21ksoftirqd/223:09:182
9007992924,3cyclictest33-21ksoftirqd/220:32:352
9007992924,3cyclictest33-21ksoftirqd/219:55:092
9007992923,4cyclictest33-21ksoftirqd/223:32:512
9007992923,4cyclictest33-21ksoftirqd/200:01:512
900699298,18cyclictest9851-21irqrtprio19:10:181
9006992924,3cyclictest25-21ksoftirqd/123:31:451
9006992924,3cyclictest25-21ksoftirqd/100:33:021
9006992923,4cyclictest25-21ksoftirqd/120:51:121
9006992923,4cyclictest25-21ksoftirqd/120:26:451
9008992823,3cyclictest41-21ksoftirqd/321:47:423
9008992823,3cyclictest41-21ksoftirqd/319:25:043
9008992823,3cyclictest41-21ksoftirqd/319:25:043
9007992823,3cyclictest33-21ksoftirqd/219:13:082
9007992822,4cyclictest33-21ksoftirqd/223:45:062
9007992822,4cyclictest33-21ksoftirqd/219:50:352
900699287,18cyclictest29266-21df_abs21:00:151
900699286,19cyclictest17942-21cat21:40:271
900699282,6cyclictest0-21swapper/122:20:141
900699281,6cyclictest0-21swapper/119:35:001
900699280,3cyclictest3360-21hddtemp_smartct20:05:171
900899277,3cyclictest29719-21if_enp1s023:15:203
900899271,3cyclictest24729-21grep00:10:283
900899271,3cyclictest24729-21grep00:10:283
9007992722,3cyclictest33-21ksoftirqd/222:37:052
900699270,3cyclictest16551-21diskstats19:25:171
900699270,3cyclictest16551-21diskstats19:25:171
9007992621,3cyclictest33-21ksoftirqd/222:28:282
900699264,3cyclictest19759-21cat21:45:231
9007992521,3cyclictest33-21ksoftirqd/223:58:292
9007992520,3cyclictest33-21ksoftirqd/200:11:552
9007992520,3cyclictest33-21ksoftirqd/200:11:552
9007992519,4cyclictest33-21ksoftirqd/221:36:222
9007992519,4cyclictest33-21ksoftirqd/221:36:222
9007992217,4cyclictest33-21ksoftirqd/221:25:262
9007992217,3cyclictest33-21ksoftirqd/221:25:002
9007992116,3cyclictest33-21ksoftirqd/220:12:572
9007991712,3cyclictest27229-21tune2fs23:10:192
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional