You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-27 - 11:59
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Thu Nov 27, 2025 00:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
137191205171,22phc2sys0-21swapper/319:08:143
137191205171,22phc2sys0-21swapper/319:08:133
325892203169,23sleep20-21swapper/219:08:142
325892203169,23sleep20-21swapper/219:08:142
305882201168,22sleep00-21swapper/019:05:030
305882201168,22sleep00-21swapper/019:05:030
324352198165,22sleep10-21swapper/119:06:151
324352198165,22sleep10-21swapper/119:06:151
584996311,11cyclictest6190-21awk23:55:222
584996211,12cyclictest29626-21vmstat23:35:262
58499618,12cyclictest19862-21threads23:15:242
58499618,11cyclictest28513-21awk20:05:232
583995928,4cyclictest25-21ksoftirqd/120:50:251
583995927,7cyclictest25-21ksoftirqd/122:30:171
584995811,12cyclictest4235-21awk19:15:202
583995823,4cyclictest25-21ksoftirqd/119:35:171
583995727,8cyclictest25-21ksoftirqd/119:34:591
583995725,8cyclictest25-21ksoftirqd/123:25:011
583995723,8cyclictest25-21ksoftirqd/119:40:191
583995723,8cyclictest25-21ksoftirqd/100:10:191
136991570,1ptp4l391rcuc/323:55:243
58499568,11cyclictest19341-21chrt22:07:582
58499568,11cyclictest19341-21chrt22:07:572
58499566,11cyclictest12994-21if_enp4s021:55:152
584995612,17cyclictest31469-21vmstat20:10:292
583995627,9cyclictest25-21ksoftirqd/120:10:171
58499559,19cyclictest26133-21needreboot21:15:212
58499558,12cyclictest1140-21awk21:30:212
58499557,11cyclictest24367-21chrt19:58:362
583995526,9cyclictest25-21ksoftirqd/121:25:161
583995526,7cyclictest25-21ksoftirqd/121:05:011
583995525,8cyclictest25-21ksoftirqd/100:25:201
583995524,8cyclictest25-21ksoftirqd/122:25:271
583995524,7cyclictest25-21ksoftirqd/100:35:021
583995524,4cyclictest25-21ksoftirqd/123:30:011
583995523,7cyclictest25-21ksoftirqd/123:30:261
583995520,8cyclictest25-21ksoftirqd/122:15:251
583995426,7cyclictest25-21ksoftirqd/120:05:231
583995424,8cyclictest25-21ksoftirqd/123:35:191
583995424,7cyclictest25-21ksoftirqd/120:35:011
583995423,7cyclictest25-21ksoftirqd/121:35:011
583995421,6cyclictest25-21ksoftirqd/121:15:251
58499538,11cyclictest173992sleep220:56:492
583995325,8cyclictest25-21ksoftirqd/123:15:141
583995322,8cyclictest25-21ksoftirqd/122:50:141
583995322,7cyclictest25-21ksoftirqd/122:20:371
583995321,8cyclictest25-21ksoftirqd/120:15:271
583995321,7cyclictest25-21ksoftirqd/122:45:221
583995320,8cyclictest25-21ksoftirqd/119:45:261
585995220,8cyclictest41-21ksoftirqd/319:50:123
58499527,11cyclictest9552-21taskset00:04:192
58499527,11cyclictest4669-21cat22:45:192
584995211,39cyclictest7741-21kworker/2:121:40:282
583995226,7cyclictest25-21ksoftirqd/100:20:171
583995224,8cyclictest25-21ksoftirqd/122:00:151
583995224,7cyclictest25-21ksoftirqd/122:10:141
583995223,8cyclictest25-21ksoftirqd/122:55:151
583995222,8cyclictest25-21ksoftirqd/123:45:011
583995222,6cyclictest25-21ksoftirqd/120:20:241
583995220,8cyclictest25-21ksoftirqd/123:55:131
583995219,7cyclictest25-21ksoftirqd/121:50:001
58399520,12cyclictest25-21ksoftirqd/119:20:261
585995116,9cyclictest41-21ksoftirqd/319:13:353
585995116,7cyclictest41-21ksoftirqd/319:36:103
585995115,9cyclictest41-21ksoftirqd/320:27:333
585995115,8cyclictest41-21ksoftirqd/300:11:213
58499517,11cyclictest12371-21needreboot23:00:212
58499517,10cyclictest10760-21chrt20:45:022
58499516,12cyclictest98082sleep219:27:192
58499515,12cyclictest16276-21taskset19:40:192
58499515,11cyclictest24911-21cut20:00:152
583995124,8cyclictest25-21ksoftirqd/100:15:181
583995122,7cyclictest25-21ksoftirqd/121:10:141
583995120,4cyclictest25-21ksoftirqd/121:10:011
583995118,7cyclictest25-21ksoftirqd/121:40:161
583995118,6cyclictest25-21ksoftirqd/123:11:581
58599506,6cyclictest41-21ksoftirqd/319:16:483
58599506,6cyclictest41-21ksoftirqd/300:30:013
58499506,10cyclictest123642sleep200:09:412
58399506,7cyclictest25-21ksoftirqd/100:05:001
58399505,8cyclictest25-21ksoftirqd/121:40:011
58399505,7cyclictest25-21ksoftirqd/121:55:101
585994914,9cyclictest41-21ksoftirqd/323:03:103
58499496,11cyclictest15166-21chrt20:53:362
58499495,10cyclictest2605-21irqstats22:40:182
58499493,9cyclictest7372-21runrttasks20:33:482
58399496,7cyclictest25-21ksoftirqd/121:54:591
58399495,7cyclictest25-21ksoftirqd/100:35:191
58399494,8cyclictest25-21ksoftirqd/122:10:011
58399494,8cyclictest25-21ksoftirqd/122:10:001
583994921,8cyclictest25-21ksoftirqd/122:35:161
583994921,7cyclictest25-21ksoftirqd/120:45:231
583994919,3cyclictest25-21ksoftirqd/123:45:191
583994917,8cyclictest25-21ksoftirqd/120:40:131
58599486,6cyclictest41-21ksoftirqd/323:05:173
58499489,16cyclictest21544-21grep00:25:262
58499487,11cyclictest14622-21taskset19:38:152
58499485,11cyclictest78022chrt20:36:222
58499483,9cyclictest18317-21interrupts00:20:182
58399485,7cyclictest25-21ksoftirqd/119:25:271
58399482,7cyclictest5274-21sendmail-msp19:20:011
583994818,8cyclictest25-21ksoftirqd/119:55:011
583994817,6cyclictest25-21ksoftirqd/120:39:281
58599475,5cyclictest41-21ksoftirqd/321:44:183
58499477,11cyclictest17904-21seq23:12:182
58399476,7cyclictest25-21ksoftirqd/121:25:001
58399476,7cyclictest25-21ksoftirqd/100:05:271
58399474,7cyclictest25-21ksoftirqd/123:05:161
58599465,6cyclictest41-21ksoftirqd/322:20:143
58599465,6cyclictest41-21ksoftirqd/300:33:053
58599465,5cyclictest41-21ksoftirqd/322:42:033
58599465,5cyclictest41-21ksoftirqd/322:27:043
58599465,5cyclictest41-21ksoftirqd/322:15:443
58599465,5cyclictest41-21ksoftirqd/320:21:583
58599465,5cyclictest41-21ksoftirqd/319:20:293
58599464,6cyclictest41-21ksoftirqd/323:29:543
58599464,5cyclictest41-21ksoftirqd/323:24:253
58599464,5cyclictest41-21ksoftirqd/321:09:333
58599463,5cyclictest41-21ksoftirqd/321:26:583
58499466,10cyclictest15618-21taskset23:08:242
58399466,7cyclictest25-21ksoftirqd/122:45:001
58399464,8cyclictest25-21ksoftirqd/119:10:261
58399462,6cyclictest25-21ksoftirqd/120:55:131
58599456,5cyclictest41-21ksoftirqd/320:49:143
58599455,6cyclictest41-21ksoftirqd/322:00:153
58599455,5cyclictest41-21ksoftirqd/320:50:223
58599454,5cyclictest41-21ksoftirqd/321:47:433
58599454,5cyclictest41-21ksoftirqd/320:36:483
58599454,5cyclictest41-21ksoftirqd/320:15:243
58599454,5cyclictest41-21ksoftirqd/320:03:383
58599454,5cyclictest41-21ksoftirqd/319:31:233
58599451,7cyclictest41-21ksoftirqd/300:38:013
585994515,4cyclictest41-21ksoftirqd/321:55:433
585994512,3cyclictest41-21ksoftirqd/323:42:253
58399455,7cyclictest25-21ksoftirqd/123:50:171
58399455,7cyclictest25-21ksoftirqd/120:00:191
58399454,7cyclictest25-21ksoftirqd/119:55:231
58399453,8cyclictest25-21ksoftirqd/120:30:011
583994527,9cyclictest25-21ksoftirqd/123:00:171
58599447,5cyclictest41-21ksoftirqd/320:40:563
58599444,5cyclictest41-21ksoftirqd/321:32:083
585994415,6cyclictest41-21ksoftirqd/321:50:233
58499448,19cyclictest30419-21awk22:30:252
58499445,10cyclictest217972sleep222:14:042
136991440,0ptp4l401ktimersoftd/319:43:033
58599436,5cyclictest41-21ksoftirqd/322:34:533
58599435,5cyclictest41-21ksoftirqd/322:35:233
584994322,19cyclictest33-21ksoftirqd/222:16:292
136991430,0ptp4l401ktimersoftd/319:59:383
58599425,5cyclictest41-21ksoftirqd/321:00:103
58599423,6cyclictest41-21ksoftirqd/321:15:163
58499426,17cyclictest10757-21taskset22:57:112
58499426,11cyclictest12072-21taskset21:53:592
136991420,0ptp4l401ktimersoftd/320:59:563
58599413,6cyclictest41-21ksoftirqd/321:20:113
58499416,8cyclictest27388-21sshd23:32:012
58599409,6cyclictest41-21ksoftirqd/323:16:233
58599392,5cyclictest41-21ksoftirqd/320:30:503
58599391,5cyclictest41-21ksoftirqd/300:06:293
585993915,4cyclictest41-21ksoftirqd/300:22:413
58599390,7cyclictest41-21ksoftirqd/319:25:123
58499398,16cyclictest4260-21sort23:50:292
584993911,11cyclictest32590-21grep22:35:202
58599386,5cyclictest41-21ksoftirqd/323:50:273
585993835,2cyclictest391rcuc/323:30:153
58499387,30cyclictest30450-21kworker/2:020:22:192
58499384,10cyclictest0-21swapper/221:25:242
582993832,3cyclictest9-21ksoftirqd/000:05:010
585993734,2cyclictest391rcuc/322:52:213
58599372,5cyclictest41-21ksoftirqd/320:06:313
58499379,15cyclictest29074-21awk21:20:242
58499375,12cyclictest5911-21fschecks_count19:20:182
58499371,34cyclictest30450-21kworker/2:020:26:112
584993711,10cyclictest23663-21ps00:30:232
582993732,3cyclictest29786-21apt21:25:010
58599363,8cyclictest41-21ksoftirqd/322:55:223
585993633,2cyclictest391rcuc/320:10:553
585993631,3cyclictest41-21ksoftirqd/323:10:243
58499367,17cyclictest3803-21awk21:35:212
58499366,8cyclictest0-21swapper/223:46:072
58499365,19cyclictest16501-21awk22:00:282
58499365,11cyclictest0-21swapper/220:15:262
584993630,3cyclictest33-21ksoftirqd/221:08:582
584993611,10cyclictest13791-21netstat00:10:212
582993632,3cyclictest9-21ksoftirqd/020:25:010
582993631,3cyclictest9-21ksoftirqd/023:20:000
136991360,0ptp4l401ktimersoftd/322:05:173
136991360,0ptp4l401ktimersoftd/322:05:163
585993530,3cyclictest41-21ksoftirqd/323:50:013
585993529,4cyclictest41-21ksoftirqd/319:45:123
58599352,5cyclictest41-21ksoftirqd/323:36:473
58499358,10cyclictest10263-21chrt20:41:332
58499353,31cyclictest25092-21kworker/2:223:21:192
584993529,4cyclictest33-21ksoftirqd/223:43:412
582993530,3cyclictest9-21ksoftirqd/023:00:010
585993429,3cyclictest41-21ksoftirqd/322:45:253
58499347,10cyclictest15653-21if_err_enp4s000:15:192
58499346,11cyclictest26363-21taskset22:21:332
58499344,28cyclictest25092-21kworker/2:222:53:482
58499343,30cyclictest8162-21kworker/2:019:31:072
584993429,3cyclictest33-21ksoftirqd/200:38:072
582993429,3cyclictest9-21ksoftirqd/023:40:000
582993429,3cyclictest9-21ksoftirqd/022:10:000
582993429,3cyclictest9-21ksoftirqd/022:10:000
582993428,4cyclictest9-21ksoftirqd/022:41:220
585993330,2cyclictest41-21ksoftirqd/300:05:003
585993329,2cyclictest391rcuc/321:35:143
58499337,10cyclictest19684-21taskset21:00:292
58499334,27cyclictest7741-21kworker/2:121:49:482
58499330,32cyclictest7741-21kworker/2:121:12:402
582993329,2cyclictest9-21ksoftirqd/019:20:010
582993327,4cyclictest9-21ksoftirqd/021:34:290
582993327,3cyclictest9-21ksoftirqd/023:00:130
582993327,3cyclictest9-21ksoftirqd/022:20:010
582993327,3cyclictest9-21ksoftirqd/021:40:000
582993326,4cyclictest9-21ksoftirqd/020:56:270
58599324,4cyclictest41-21ksoftirqd/321:10:183
585993228,3cyclictest41-21ksoftirqd/300:15:253
584993226,4cyclictest33-21ksoftirqd/219:11:102
58499322,29cyclictest8162-21kworker/2:019:51:072
58499322,29cyclictest8162-21kworker/2:019:46:582
58499321,30cyclictest25092-21kworker/2:223:26:472
582993228,2cyclictest9-21ksoftirqd/023:30:000
582993227,3cyclictest9-21ksoftirqd/023:54:510
582993227,3cyclictest9-21ksoftirqd/022:36:580
582993227,3cyclictest9-21ksoftirqd/022:04:460
582993227,3cyclictest9-21ksoftirqd/021:48:550
582993227,3cyclictest9-21ksoftirqd/020:45:120
582993227,3cyclictest9-21ksoftirqd/000:09:030
582993226,4cyclictest9-21ksoftirqd/022:31:340
582993226,4cyclictest9-21ksoftirqd/020:10:570
582993226,4cyclictest9-21ksoftirqd/000:32:580
582993226,3cyclictest9-21ksoftirqd/021:07:130
582993225,4cyclictest9-21ksoftirqd/020:06:330
582993225,4cyclictest9-21ksoftirqd/019:25:450
585993128,2cyclictest41-21ksoftirqd/322:10:153
582993127,3cyclictest9-21ksoftirqd/021:30:010
582993126,3cyclictest9-21ksoftirqd/023:47:260
582993126,3cyclictest9-21ksoftirqd/019:30:370
582993126,3cyclictest9-21ksoftirqd/019:12:010
582993125,4cyclictest9-21ksoftirqd/021:18:220
582993125,4cyclictest9-21ksoftirqd/020:54:510
582993125,4cyclictest9-21ksoftirqd/019:49:150
58499301,27cyclictest25092-21kworker/2:222:26:392
582993025,3cyclictest9-21ksoftirqd/022:45:590
582993025,3cyclictest9-21ksoftirqd/021:50:110
582993025,3cyclictest9-21ksoftirqd/020:29:220
582993025,3cyclictest9-21ksoftirqd/020:00:010
582993025,3cyclictest9-21ksoftirqd/019:37:400
582993025,3cyclictest22123-21grep19:55:010
582993025,2cyclictest9-21ksoftirqd/021:05:000
582993024,4cyclictest9-21ksoftirqd/022:24:120
582993024,4cyclictest9-21ksoftirqd/021:11:430
582993024,4cyclictest9-21ksoftirqd/020:02:270
582992925,3cyclictest9-21ksoftirqd/019:44:590
582992924,3cyclictest9-21ksoftirqd/023:33:320
582992924,3cyclictest9-21ksoftirqd/023:21:410
582992924,3cyclictest9-21ksoftirqd/023:13:300
582992924,3cyclictest9-21ksoftirqd/000:20:200
582992923,4cyclictest9-21ksoftirqd/022:52:410
582992823,3cyclictest9-21ksoftirqd/022:26:330
582992823,3cyclictest9-21ksoftirqd/020:35:520
582992823,3cyclictest9-21ksoftirqd/000:38:230
582992823,3cyclictest9-21ksoftirqd/000:17:440
582992822,4cyclictest9-21ksoftirqd/020:41:550
582992723,2cyclictest9-21ksoftirqd/023:40:170
582992721,3cyclictest9-21ksoftirqd/023:10:000
582992621,3cyclictest9-21ksoftirqd/000:25:130
582992621,3cyclictest9-21ksoftirqd/000:13:150
582992619,4cyclictest9-21ksoftirqd/020:30:470
59298250,2rtkit-daemon0-21swapper/020:15:260
582992521,3cyclictest9-21ksoftirqd/019:25:000
582992520,3cyclictest9-21ksoftirqd/021:55:180
582992520,3cyclictest9-21ksoftirqd/000:00:010
582992218,3cyclictest9-21ksoftirqd/021:35:170
582992116,3cyclictest9-21ksoftirqd/022:14:260
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional