You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-13 - 04:15
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Tue May 13, 2025 00:45:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
113232208175,22sleep10-21swapper/119:06:241
115472207173,23sleep20-21swapper/219:09:182
137391206173,22phc2sys0-21swapper/319:08:253
114102206173,22sleep00-21swapper/019:07:310
2978921520,7sleep31189799cyclictest20:55:133
2623321490,4sleep11189599cyclictest21:55:171
492121390,6sleep11189599cyclictest21:10:161
11603210965,35sleep00-21swapper/019:10:000
11895996330,4cyclictest25-21ksoftirqd/119:50:011
11895996056,2cyclictest25-21ksoftirqd/123:50:001
11895996031,4cyclictest25-21ksoftirqd/119:30:201
11895995829,4cyclictest25-21ksoftirqd/121:30:191
11895995627,4cyclictest25-21ksoftirqd/119:10:171
211502550,3sleep0101ktimersoftd/020:35:240
11895995515,7cyclictest25-21ksoftirqd/100:35:001
11895995427,3cyclictest25-21ksoftirqd/122:30:231
11895995427,3cyclictest25-21ksoftirqd/100:25:311
11895995420,5cyclictest25-21ksoftirqd/123:50:121
11895995326,6cyclictest25-21ksoftirqd/120:09:591
11895995323,4cyclictest25-21ksoftirqd/119:55:131
11895995320,4cyclictest25-21ksoftirqd/123:10:221
11895995223,4cyclictest25-21ksoftirqd/120:30:271
11895995222,4cyclictest25-21ksoftirqd/122:05:161
11895995124,7cyclictest25-21ksoftirqd/121:40:241
11895995123,4cyclictest25-21ksoftirqd/120:35:301
11895995122,4cyclictest25-21ksoftirqd/100:05:221
11895995117,4cyclictest25-21ksoftirqd/120:20:261
11895995116,3cyclictest25-21ksoftirqd/122:55:241
11895995022,7cyclictest25-21ksoftirqd/120:50:161
11895995015,4cyclictest25-21ksoftirqd/119:45:001
11895995014,8cyclictest25-21ksoftirqd/121:50:181
11895995014,6cyclictest25-21ksoftirqd/121:45:161
11895994921,4cyclictest25-21ksoftirqd/100:14:561
11895994920,3cyclictest25-21ksoftirqd/122:25:221
11895994919,7cyclictest25-21ksoftirqd/121:05:281
11895994918,3cyclictest25-21ksoftirqd/123:25:201
11895994915,7cyclictest25-21ksoftirqd/123:15:171
11895994915,3cyclictest25-21ksoftirqd/123:55:291
11895994914,8cyclictest25-21ksoftirqd/120:55:151
11895994913,6cyclictest25-21ksoftirqd/123:30:171
11895994911,7cyclictest25-21ksoftirqd/119:20:231
11894994943,4cyclictest17196-21ls22:45:000
1189599489,8cyclictest25-21ksoftirqd/122:50:261
1189599489,8cyclictest25-21ksoftirqd/122:50:251
11895994820,4cyclictest25-21ksoftirqd/121:04:241
11895994818,8cyclictest25-21ksoftirqd/120:40:011
11895994817,6cyclictest25-21ksoftirqd/122:40:171
11895994816,8cyclictest25-21ksoftirqd/119:15:221
11895994816,7cyclictest25-21ksoftirqd/100:35:291
11895994816,4cyclictest25-21ksoftirqd/120:45:171
11895994813,10cyclictest25-21ksoftirqd/119:50:261
106422480,2sleep10-21swapper/121:20:271
11896994740,4cyclictest29341-21perf20:55:012
11895994741,3cyclictest21140-21sh19:30:001
11895994720,6cyclictest25-21ksoftirqd/122:20:271
11895994717,7cyclictest25-21ksoftirqd/122:10:251
11895994715,7cyclictest25-21ksoftirqd/120:15:101
11895994715,3cyclictest25-21ksoftirqd/120:10:201
11895994714,7cyclictest25-21ksoftirqd/123:40:171
11895994714,3cyclictest25-21ksoftirqd/123:35:211
11895994713,7cyclictest25-21ksoftirqd/122:45:191
11895994620,6cyclictest25-21ksoftirqd/100:15:201
11895994617,3cyclictest25-21ksoftirqd/121:15:311
11895994616,3cyclictest25-21ksoftirqd/122:37:341
11895994614,7cyclictest25-21ksoftirqd/120:00:151
11895994612,8cyclictest25-21ksoftirqd/100:20:281
132591450,7getstats1189799cyclictest21:25:393
11895994516,4cyclictest25-21ksoftirqd/121:25:211
11895994516,3cyclictest25-21ksoftirqd/119:38:081
1189599451,2cyclictest25-21ksoftirqd/120:25:281
11895994511,4cyclictest25-21ksoftirqd/100:00:211
132591440,5getstats1189799cyclictest21:05:403
11895994420,7cyclictest25-21ksoftirqd/122:00:141
11895994411,7cyclictest25-21ksoftirqd/123:20:211
137291430,0ptp4l401ktimersoftd/322:45:253
1189599435,4cyclictest25-21ksoftirqd/123:00:251
1189599434,3cyclictest121rcu_preempt23:05:291
11895994314,6cyclictest25-21ksoftirqd/122:15:191
1189499431,39cyclictest7613-21cat00:40:000
1373914232,4phc2sys0-21swapper/319:10:013
137291420,0ptp4l401ktimersoftd/323:28:403
137291420,0ptp4l401ktimersoftd/322:24:123
11895994136,3cyclictest25-21ksoftirqd/121:39:591
11894994036,3cyclictest9-21ksoftirqd/022:20:000
42098390,5rtkit-daemon0-21swapper/022:21:460
11897993932,5cyclictest41-21ksoftirqd/319:50:013
11896993934,3cyclictest1285-21runrttasks19:34:072
11896993925,12cyclictest33-21ksoftirqd/221:50:002
137291380,0ptp4l401ktimersoftd/300:15:313
11894993832,3cyclictest9-21ksoftirqd/020:50:220
11897993713,3cyclictest28458-21/usr/sbin/munin22:00:243
11896993730,4cyclictest33-21ksoftirqd/221:45:002
11894993732,3cyclictest9-21ksoftirqd/021:20:000
11894993732,3cyclictest25842-21cron21:55:000
42098360,2rtkit-daemon0-21swapper/023:46:320
11897993630,4cyclictest41-21ksoftirqd/320:25:373
11897993629,5cyclictest41-21ksoftirqd/300:33:043
11897993612,3cyclictest5579-21cat21:10:223
1189799360,34cyclictest0-21swapper/319:20:283
11894993632,3cyclictest9-21ksoftirqd/023:20:000
11894993631,3cyclictest9-21ksoftirqd/020:30:210
11894993630,4cyclictest9-21ksoftirqd/022:32:030
11894993630,4cyclictest9-21ksoftirqd/021:39:150
42098350,24rtkit-daemon9-21ksoftirqd/022:50:170
42098350,24rtkit-daemon9-21ksoftirqd/022:50:170
11897993530,3cyclictest41-21ksoftirqd/322:25:133
11897993529,4cyclictest41-21ksoftirqd/320:38:403
11897993529,4cyclictest41-21ksoftirqd/319:39:403
11897993529,4cyclictest41-21ksoftirqd/300:39:103
11897993512,3cyclictest29396-21cat20:55:003
11896993529,4cyclictest33-21ksoftirqd/221:00:412
11894993531,3cyclictest9-21ksoftirqd/023:00:000
11894993529,4cyclictest9-21ksoftirqd/023:38:410
11894993528,5cyclictest9-21ksoftirqd/021:21:450
11897993428,4cyclictest41-21ksoftirqd/321:37:213
11897993428,4cyclictest41-21ksoftirqd/319:32:053
11897993428,4cyclictest41-21ksoftirqd/300:12:583
11897993427,5cyclictest41-21ksoftirqd/319:17:163
11897993416,17cyclictest0-21swapper/323:39:493
11896993429,3cyclictest33-21ksoftirqd/220:15:002
11896993428,4cyclictest33-21ksoftirqd/223:33:142
11896993428,4cyclictest33-21ksoftirqd/223:09:112
11896993428,4cyclictest33-21ksoftirqd/200:13:012
11896993427,4cyclictest33-21ksoftirqd/220:35:022
11894993430,3cyclictest9-21ksoftirqd/021:45:010
11894993430,2cyclictest9-21ksoftirqd/022:35:210
11894993429,3cyclictest9-21ksoftirqd/019:44:590
11894993429,3cyclictest9-21ksoftirqd/000:05:410
11894993428,4cyclictest9-21ksoftirqd/023:34:480
11894993428,4cyclictest9-21ksoftirqd/023:01:480
11894993428,4cyclictest9-21ksoftirqd/021:47:250
11894993428,4cyclictest9-21ksoftirqd/020:43:380
11894993428,4cyclictest9-21ksoftirqd/019:34:070
11894993428,4cyclictest9-21ksoftirqd/019:21:070
11894993428,4cyclictest9-21ksoftirqd/000:25:430
11894993428,4cyclictest9-21ksoftirqd/000:22:500
11894993428,3cyclictest9-21ksoftirqd/020:00:010
11897993327,4cyclictest41-21ksoftirqd/323:56:503
11897993327,4cyclictest41-21ksoftirqd/322:58:333
11897993327,4cyclictest41-21ksoftirqd/322:14:403
11897993327,4cyclictest41-21ksoftirqd/320:01:573
11896993327,4cyclictest33-21ksoftirqd/220:01:172
11896993327,4cyclictest33-21ksoftirqd/200:21:122
11896993326,4cyclictest33-21ksoftirqd/219:43:512
11894993330,2cyclictest9-21ksoftirqd/020:15:000
11894993329,3cyclictest9-21ksoftirqd/019:45:190
11894993329,2cyclictest9-21ksoftirqd/000:15:000
11894993328,3cyclictest9-21ksoftirqd/023:55:100
11894993328,3cyclictest9-21ksoftirqd/000:20:000
11894993327,4cyclictest9-21ksoftirqd/022:10:400
11894993327,4cyclictest9-21ksoftirqd/021:14:110
11894993327,4cyclictest9-21ksoftirqd/020:25:330
11894993327,4cyclictest9-21ksoftirqd/019:52:350
11894993327,4cyclictest9-21ksoftirqd/019:28:090
11897993226,4cyclictest41-21ksoftirqd/323:06:073
11897993226,4cyclictest41-21ksoftirqd/321:34:563
11896993227,3cyclictest33-21ksoftirqd/221:05:132
11896993226,4cyclictest33-21ksoftirqd/223:36:592
11896993226,4cyclictest33-21ksoftirqd/223:25:072
11896993226,4cyclictest33-21ksoftirqd/222:46:122
11896993226,4cyclictest33-21ksoftirqd/222:37:092
11896993226,4cyclictest33-21ksoftirqd/222:07:012
11896993226,4cyclictest33-21ksoftirqd/221:51:322
11896993226,4cyclictest33-21ksoftirqd/220:49:512
11896993226,4cyclictest33-21ksoftirqd/220:28:122
11896993226,4cyclictest33-21ksoftirqd/219:21:132
11896993226,4cyclictest33-21ksoftirqd/200:01:462
11894993228,2cyclictest9-21ksoftirqd/023:25:220
11894993227,3cyclictest9-21ksoftirqd/023:55:010
11894993227,3cyclictest9-21ksoftirqd/021:30:000
11894993227,3cyclictest9-21ksoftirqd/021:00:010
11894993227,3cyclictest9-21ksoftirqd/020:45:150
11894993226,4cyclictest9-21ksoftirqd/022:27:140
11894993226,4cyclictest9-21ksoftirqd/021:00:480
11894993226,4cyclictest9-21ksoftirqd/020:22:280
11894993226,4cyclictest9-21ksoftirqd/020:20:000
11894993226,4cyclictest9-21ksoftirqd/000:30:330
137291310,0ptp4l401ktimersoftd/320:13:213
11897993126,3cyclictest41-21ksoftirqd/300:23:243
11897993125,4cyclictest41-21ksoftirqd/323:22:253
11897993125,4cyclictest41-21ksoftirqd/323:10:443
11897993125,4cyclictest41-21ksoftirqd/322:09:103
11897993125,4cyclictest41-21ksoftirqd/321:44:073
11897993125,4cyclictest41-21ksoftirqd/320:47:143
11897993125,4cyclictest41-21ksoftirqd/320:41:213
11897993125,4cyclictest41-21ksoftirqd/320:20:113
11897993125,4cyclictest41-21ksoftirqd/300:25:543
11897993125,4cyclictest41-21ksoftirqd/300:00:513
11897993124,5cyclictest41-21ksoftirqd/323:03:323
11896993126,3cyclictest33-21ksoftirqd/219:39:022
11896993125,4cyclictest33-21ksoftirqd/221:38:372
11896993125,4cyclictest33-21ksoftirqd/221:23:082
11896993125,4cyclictest33-21ksoftirqd/221:12:212
11896993125,4cyclictest33-21ksoftirqd/220:55:452
11896993125,4cyclictest33-21ksoftirqd/220:30:122
11896993125,4cyclictest33-21ksoftirqd/220:20:092
11896993125,4cyclictest33-21ksoftirqd/219:17:402
11896993125,3cyclictest33-21ksoftirqd/223:16:192
11894993127,2cyclictest9-21ksoftirqd/021:09:590
11894993125,4cyclictest9-21ksoftirqd/023:40:060
11894993125,4cyclictest9-21ksoftirqd/020:08:530
137291300,9ptp4l401ktimersoftd/319:50:433
137291300,0ptp4l401ktimersoftd/323:41:293
137291300,0ptp4l401ktimersoftd/320:15:243
11897993025,3cyclictest41-21ksoftirqd/322:16:323
11897993025,3cyclictest41-21ksoftirqd/320:08:003
11897993025,3cyclictest41-21ksoftirqd/300:07:393
11897993024,4cyclictest41-21ksoftirqd/323:15:463
11896993025,3cyclictest33-21ksoftirqd/221:27:272
11896993024,4cyclictest33-21ksoftirqd/222:03:152
11894993026,3cyclictest9-21ksoftirqd/022:00:000
11894993026,3cyclictest9-21ksoftirqd/000:00:300
11894993025,3cyclictest9-21ksoftirqd/023:23:010
11894993025,3cyclictest9-21ksoftirqd/022:00:370
11894993025,3cyclictest9-21ksoftirqd/020:00:470
11894993024,4cyclictest9-21ksoftirqd/019:38:350
11897992924,3cyclictest41-21ksoftirqd/322:53:303
11897992924,3cyclictest41-21ksoftirqd/322:53:293
11897992924,3cyclictest41-21ksoftirqd/321:48:443
11897992923,4cyclictest41-21ksoftirqd/323:52:163
11896992924,3cyclictest33-21ksoftirqd/221:16:222
11896992923,4cyclictest33-21ksoftirqd/223:57:212
11896992923,4cyclictest33-21ksoftirqd/219:59:242
11894992924,3cyclictest9-21ksoftirqd/023:05:050
11894992924,3cyclictest9-21ksoftirqd/021:30:130
11894992924,3cyclictest9-21ksoftirqd/019:16:140
137291280,0ptp4l401ktimersoftd/321:53:323
11897992823,3cyclictest41-21ksoftirqd/323:47:543
11897992823,3cyclictest41-21ksoftirqd/323:31:353
11897992822,4cyclictest41-21ksoftirqd/322:36:583
11897992822,4cyclictest41-21ksoftirqd/319:28:593
11896992823,3cyclictest33-21ksoftirqd/200:18:232
11896992822,4cyclictest33-21ksoftirqd/223:48:472
11896992822,4cyclictest33-21ksoftirqd/219:50:422
11896992822,4cyclictest33-21ksoftirqd/219:49:522
11896992822,4cyclictest33-21ksoftirqd/219:14:272
11896992822,4cyclictest33-21ksoftirqd/200:25:382
11896992821,5cyclictest33-21ksoftirqd/220:42:492
11896992821,4cyclictest33-21ksoftirqd/222:43:582
11897992722,3cyclictest41-21ksoftirqd/321:55:463
11897992721,4cyclictest41-21ksoftirqd/319:40:483
11896992722,3cyclictest33-21ksoftirqd/221:59:402
11896992721,4cyclictest33-21ksoftirqd/200:38:252
11897992621,3cyclictest41-21ksoftirqd/322:45:003
11896992621,3cyclictest33-21ksoftirqd/223:24:462
11896992621,3cyclictest33-21ksoftirqd/221:31:042
11896992620,4cyclictest33-21ksoftirqd/223:52:282
11896992620,4cyclictest33-21ksoftirqd/220:08:152
11894992620,4cyclictest9-21ksoftirqd/023:13:100
11897992519,4cyclictest41-21ksoftirqd/322:32:533
11896992520,3cyclictest33-21ksoftirqd/222:50:242
11896992520,3cyclictest33-21ksoftirqd/222:50:242
11896992520,3cyclictest33-21ksoftirqd/222:34:562
11896992520,3cyclictest33-21ksoftirqd/222:10:292
11896992520,3cyclictest33-21ksoftirqd/200:05:442
11894992521,3cyclictest9-21ksoftirqd/022:50:000
11894992520,3cyclictest9-21ksoftirqd/022:07:490
137291240,0ptp4l401ktimersoftd/321:15:213
137291240,0ptp4l401ktimersoftd/321:00:253
137291240,0ptp4l401ktimersoftd/320:30:163
137291240,0ptp4l401ktimersoftd/319:55:333
1189699244,17cyclictest21142-21latency_hist19:30:012
11896992419,3cyclictest33-21ksoftirqd/223:41:582
11896992419,3cyclictest33-21ksoftirqd/222:23:082
11896992419,3cyclictest33-21ksoftirqd/222:18:522
137291230,0ptp4l401ktimersoftd/321:20:283
11896992318,3cyclictest33-21ksoftirqd/220:19:222
11896992317,4cyclictest33-21ksoftirqd/222:56:592
11896992317,4cyclictest33-21ksoftirqd/222:25:352
11896992117,3cyclictest33-21ksoftirqd/223:02:392
1189699191,3cyclictest31449-21latency_hist23:15:002
11896991913,4cyclictest33-21ksoftirqd/200:34:242
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional