You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-04 - 08:16
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Tue Nov 04, 2025 00:45:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
156882229169,49sleep10-21swapper/119:05:421
157872214169,33sleep20-21swapper/219:06:592
136691208175,23phc2sys0-21swapper/319:09:533
157842205172,22sleep00-21swapper/019:06:570
1632299641,61cyclictest14683-21kworker/2:122:28:252
16323996228,8cyclictest41-21ksoftirqd/320:15:153
16322996110,49cyclictest28083-21kworker/2:222:17:342
62362600,2sleep30-21swapper/323:15:283
16323996029,8cyclictest41-21ksoftirqd/321:35:283
16323996022,4cyclictest41-21ksoftirqd/322:30:193
16323995927,4cyclictest41-21ksoftirqd/319:20:273
16323995924,8cyclictest41-21ksoftirqd/320:20:183
16323995923,8cyclictest41-21ksoftirqd/300:20:153
16323995923,10cyclictest41-21ksoftirqd/321:20:223
16323995828,7cyclictest41-21ksoftirqd/322:27:443
16323995827,7cyclictest41-21ksoftirqd/323:45:183
16323995824,8cyclictest41-21ksoftirqd/323:10:143
16323995818,7cyclictest41-21ksoftirqd/321:10:593
16323995818,7cyclictest41-21ksoftirqd/321:10:593
16323995727,9cyclictest41-21ksoftirqd/322:35:243
16323995727,8cyclictest41-21ksoftirqd/300:25:253
16323995630,4cyclictest41-21ksoftirqd/322:10:193
16323995629,7cyclictest41-21ksoftirqd/320:45:163
16323995627,9cyclictest41-21ksoftirqd/323:40:133
16323995627,8cyclictest41-21ksoftirqd/319:55:013
16323995626,9cyclictest41-21ksoftirqd/320:50:173
16323995626,7cyclictest41-21ksoftirqd/319:30:183
16323995625,4cyclictest41-21ksoftirqd/323:20:223
16323995623,7cyclictest41-21ksoftirqd/319:25:233
16323995623,7cyclictest41-21ksoftirqd/319:25:233
16323995619,7cyclictest41-21ksoftirqd/300:00:303
16323995523,4cyclictest41-21ksoftirqd/320:40:243
16323995523,4cyclictest41-21ksoftirqd/320:40:243
16323995521,7cyclictest41-21ksoftirqd/320:10:193
16323995521,12cyclictest41-21ksoftirqd/322:24:223
16323995519,3cyclictest41-21ksoftirqd/322:05:153
16323995518,10cyclictest41-21ksoftirqd/323:35:173
1632399545,7cyclictest41-21ksoftirqd/320:40:003
16323995424,7cyclictest41-21ksoftirqd/321:50:013
16323995423,9cyclictest41-21ksoftirqd/322:45:143
16323995421,8cyclictest41-21ksoftirqd/322:15:213
16323995419,7cyclictest41-21ksoftirqd/323:50:173
16323995326,9cyclictest41-21ksoftirqd/321:45:003
16323995324,7cyclictest41-21ksoftirqd/322:50:253
16323995323,9cyclictest41-21ksoftirqd/320:30:273
16323995321,8cyclictest41-21ksoftirqd/323:05:153
16323995321,7cyclictest41-21ksoftirqd/321:50:183
16323995319,3cyclictest41-21ksoftirqd/300:16:473
16323995248,2cyclictest401ktimersoftd/323:58:043
1632399524,7cyclictest41-21ksoftirqd/321:15:303
1632399523,6cyclictest41-21ksoftirqd/300:35:003
16323995224,7cyclictest41-21ksoftirqd/321:30:233
16323995224,4cyclictest41-21ksoftirqd/322:00:273
16323995223,9cyclictest41-21ksoftirqd/300:05:253
16322995213,19cyclictest8344-21/usr/sbin/munin00:30:122
1632399515,7cyclictest41-21ksoftirqd/322:55:223
16323995115,7cyclictest41-21ksoftirqd/319:48:143
202862500,3sleep10-21swapper/123:45:271
16323995019,7cyclictest41-21ksoftirqd/319:35:143
16323994920,9cyclictest41-21ksoftirqd/319:10:243
16323994919,4cyclictest41-21ksoftirqd/320:25:023
16323994916,7cyclictest41-21ksoftirqd/300:35:003
1632299495,42cyclictest22987-21kworker/2:119:45:252
169452480,2sleep00-21swapper/023:40:160
1632399486,8cyclictest41-21ksoftirqd/321:10:003
1632399484,7cyclictest41-21ksoftirqd/321:25:153
16323994820,7cyclictest41-21ksoftirqd/319:55:183
16323994819,6cyclictest41-21ksoftirqd/322:43:153
1632399481,7cyclictest41-21ksoftirqd/321:00:003
1632399477,3cyclictest41-21ksoftirqd/319:40:263
1632399477,2cyclictest41-21ksoftirqd/320:05:133
1632399476,7cyclictest41-21ksoftirqd/321:55:253
1632399473,8cyclictest41-21ksoftirqd/323:30:163
1632399472,10cyclictest41-21ksoftirqd/321:00:233
1632299473,11cyclictest24823-21kworker/2:223:05:352
1632399464,8cyclictest41-21ksoftirqd/319:15:283
1632399462,2cyclictest121rcu_preempt20:00:253
16320994626,3cyclictest9-21ksoftirqd/000:36:010
1632399455,7cyclictest41-21ksoftirqd/300:10:243
1632399455,6cyclictest41-21ksoftirqd/323:05:003
1632399452,4cyclictest41-21ksoftirqd/323:25:133
16320994439,3cyclictest5541-21awk00:25:010
1632299424,36cyclictest24823-21kworker/2:200:36:292
1632299413,36cyclictest22987-21kworker/2:119:39:452
1632299404,35cyclictest22987-21kworker/2:119:18:452
1632299397,30cyclictest22987-21kworker/2:119:25:372
1632299397,30cyclictest22987-21kworker/2:119:25:372
1632299394,34cyclictest24823-21kworker/2:223:36:252
1632299394,34cyclictest22987-21kworker/2:119:32:492
1632299384,33cyclictest24823-21kworker/2:223:58:122
1632299383,34cyclictest22987-21kworker/2:120:00:332
1632299383,27cyclictest22987-21kworker/2:121:19:042
1632299381,35cyclictest22987-21kworker/2:119:42:412
1632299380,3cyclictest6083-21cat21:00:252
1632299380,35cyclictest7748-21cron20:00:002
16321993833,3cyclictest7749-21cron20:00:001
16321993833,3cyclictest19646-21cron20:25:011
1632299378,27cyclictest22987-21kworker/2:120:32:132
1632299377,29cyclictest22987-21kworker/2:120:49:452
16322993731,4cyclictest33-21ksoftirqd/222:46:232
16322993731,4cyclictest33-21ksoftirqd/222:13:402
16322993730,4cyclictest33-21ksoftirqd/219:50:482
1632299372,34cyclictest22987-21kworker/2:120:53:212
1632299372,33cyclictest22987-21kworker/2:120:41:492
1632299372,33cyclictest22987-21kworker/2:120:41:492
16321993730,4cyclictest25-21ksoftirqd/121:38:581
16321993730,4cyclictest25-21ksoftirqd/119:50:121
1632299365,30cyclictest22987-21kworker/2:119:22:092
1632299365,30cyclictest22987-21kworker/2:119:10:372
1632299364,31cyclictest22987-21kworker/2:120:35:412
1632299363,32cyclictest24823-21kworker/2:200:11:242
1632299363,31cyclictest24823-21kworker/2:200:15:202
16322993630,4cyclictest33-21ksoftirqd/221:11:422
16322993630,4cyclictest33-21ksoftirqd/221:11:422
16322993629,4cyclictest33-21ksoftirqd/222:50:592
1632299362,33cyclictest22987-21kworker/2:120:09:562
16321993630,4cyclictest25-21ksoftirqd/123:28:301
16321993630,4cyclictest25-21ksoftirqd/121:41:261
16321993630,4cyclictest25-21ksoftirqd/100:37:051
16321993629,5cyclictest25-21ksoftirqd/122:06:061
16320993630,4cyclictest9-21ksoftirqd/020:32:540
51698350,2rtkit-daemon0-21swapper/122:25:181
1632299354,30cyclictest24823-21kworker/2:200:27:532
1632299353,31cyclictest24823-21kworker/2:200:06:122
1632299353,31cyclictest17235-21kworker/2:022:41:012
1632299353,22cyclictest24823-21kworker/2:223:29:492
1632299353,21cyclictest22987-21kworker/2:121:40:052
1632299352,32cyclictest24823-21kworker/2:200:22:092
1632299352,30cyclictest22987-21kworker/2:120:20:412
16321993529,4cyclictest25-21ksoftirqd/123:19:511
16321993529,4cyclictest25-21ksoftirqd/123:12:251
16321993529,4cyclictest25-21ksoftirqd/121:27:231
16321993529,4cyclictest25-21ksoftirqd/119:31:491
16321993529,4cyclictest25-21ksoftirqd/100:15:431
16320993529,4cyclictest9-21ksoftirqd/021:12:300
16320993529,4cyclictest9-21ksoftirqd/021:12:290
16320993529,4cyclictest9-21ksoftirqd/020:50:110
16320993529,4cyclictest9-21ksoftirqd/020:26:480
1632299344,28cyclictest24823-21kworker/2:223:40:052
1632299342,31cyclictest22987-21kworker/2:120:16:172
1632299342,21cyclictest24823-21kworker/2:223:50:242
1632299341,32cyclictest22987-21kworker/2:120:28:372
1632299341,32cyclictest22987-21kworker/2:120:11:572
1632299341,31cyclictest24823-21kworker/2:223:32:532
1632299341,31cyclictest24823-21kworker/2:200:00:162
1632299341,31cyclictest22987-21kworker/2:120:55:052
16321993429,3cyclictest25-21ksoftirqd/121:09:551
16321993428,4cyclictest25-21ksoftirqd/123:57:341
16321993428,4cyclictest25-21ksoftirqd/123:22:321
16321993428,4cyclictest25-21ksoftirqd/100:10:461
16320993429,3cyclictest9-21ksoftirqd/020:50:010
16320993429,3cyclictest9-21ksoftirqd/019:10:130
1632299334,28cyclictest22987-21kworker/2:121:26:452
1632299333,28cyclictest28083-21kworker/2:221:48:412
1632299333,28cyclictest22987-21kworker/2:121:35:412
16322993327,4cyclictest33-21ksoftirqd/223:15:302
1632299332,29cyclictest22987-21kworker/2:121:32:172
1632299332,22cyclictest22987-21kworker/2:121:06:172
16321993328,3cyclictest25-21ksoftirqd/120:00:421
16321993327,4cyclictest25-21ksoftirqd/122:34:411
16321993327,4cyclictest25-21ksoftirqd/122:24:071
16321993327,4cyclictest25-21ksoftirqd/121:17:281
16320993328,3cyclictest9-21ksoftirqd/022:32:410
16320993328,3cyclictest9-21ksoftirqd/021:33:030
16320993328,3cyclictest9-21ksoftirqd/020:23:110
16320993328,3cyclictest31989-21sh23:05:000
16320993327,4cyclictest9-21ksoftirqd/022:09:250
16320993327,4cyclictest9-21ksoftirqd/021:58:230
16320993327,4cyclictest9-21ksoftirqd/021:51:530
16320993327,4cyclictest9-21ksoftirqd/020:43:210
16320993327,4cyclictest9-21ksoftirqd/020:43:210
1632299325,26cyclictest24823-21kworker/2:223:46:202
16322993226,4cyclictest33-21ksoftirqd/222:04:012
1632299322,28cyclictest22987-21kworker/2:121:20:082
16322993210,19cyclictest2406-21grep23:10:132
16321993227,3cyclictest25-21ksoftirqd/122:41:451
16321993226,4cyclictest25-21ksoftirqd/122:16:211
16321993226,4cyclictest25-21ksoftirqd/121:46:321
16321993226,4cyclictest25-21ksoftirqd/120:54:201
16321993226,4cyclictest25-21ksoftirqd/120:46:021
16321993226,4cyclictest25-21ksoftirqd/120:31:311
16321993226,4cyclictest25-21ksoftirqd/120:14:501
16321993226,4cyclictest25-21ksoftirqd/100:34:561
16321993226,3cyclictest25-21ksoftirqd/122:50:001
16320993227,3cyclictest9-21ksoftirqd/022:25:060
16320993227,3cyclictest9-21ksoftirqd/020:11:030
16320993226,4cyclictest9-21ksoftirqd/022:15:430
16320993226,4cyclictest9-21ksoftirqd/020:38:120
16320993226,4cyclictest9-21ksoftirqd/019:48:050
16320993226,4cyclictest9-21ksoftirqd/019:24:350
16322993125,4cyclictest33-21ksoftirqd/223:03:362
16322993125,3cyclictest33-21ksoftirqd/221:50:042
16321993126,3cyclictest25-21ksoftirqd/122:04:141
16321993126,3cyclictest25-21ksoftirqd/119:30:001
16321993126,3cyclictest25-21ksoftirqd/119:30:001
16321993125,4cyclictest25-21ksoftirqd/121:02:321
16321993125,4cyclictest25-21ksoftirqd/120:07:561
16320993126,3cyclictest9-21ksoftirqd/023:13:560
16320993126,3cyclictest9-21ksoftirqd/021:22:560
16320993126,3cyclictest9-21ksoftirqd/000:01:570
16320993125,4cyclictest9-21ksoftirqd/022:36:020
16320993125,4cyclictest9-21ksoftirqd/020:00:530
16320993125,4cyclictest9-21ksoftirqd/019:33:210
16320993125,4cyclictest9-21ksoftirqd/019:27:110
16320993125,4cyclictest9-21ksoftirqd/019:27:110
16322993025,3cyclictest33-21ksoftirqd/221:58:332
16322993024,4cyclictest33-21ksoftirqd/222:09:312
16321993025,3cyclictest25-21ksoftirqd/122:58:431
16321993025,3cyclictest25-21ksoftirqd/122:53:161
16321993025,3cyclictest25-21ksoftirqd/120:41:071
16321993025,3cyclictest25-21ksoftirqd/120:41:061
16321993024,4cyclictest25-21ksoftirqd/123:53:211
16321993024,4cyclictest25-21ksoftirqd/123:34:101
16321993024,4cyclictest25-21ksoftirqd/121:31:001
16321993024,4cyclictest25-21ksoftirqd/120:15:061
16321993023,5cyclictest25-21ksoftirqd/119:15:331
16321993023,5cyclictest25-21ksoftirqd/100:25:001
16321993022,6cyclictest25-21ksoftirqd/100:00:391
16320993025,3cyclictest9-21ksoftirqd/023:20:110
16320993025,3cyclictest9-21ksoftirqd/019:51:320
16320993025,3cyclictest9-21ksoftirqd/000:30:120
16320993025,3cyclictest9-21ksoftirqd/000:26:580
16320993024,4cyclictest9-21ksoftirqd/023:50:580
16320993024,4cyclictest9-21ksoftirqd/023:17:410
16320993024,4cyclictest9-21ksoftirqd/022:57:360
16320993024,4cyclictest9-21ksoftirqd/022:41:470
16320993024,4cyclictest9-21ksoftirqd/022:11:180
16320993024,4cyclictest9-21ksoftirqd/021:38:530
16320993024,4cyclictest9-21ksoftirqd/021:26:500
16320993024,4cyclictest9-21ksoftirqd/021:15:460
16320993024,4cyclictest9-21ksoftirqd/021:01:220
16320993024,4cyclictest9-21ksoftirqd/019:56:160
1632299291,10cyclictest27459-21/usr/sbin/munin22:55:202
16321992924,3cyclictest25-21ksoftirqd/121:21:401
16321992923,4cyclictest25-21ksoftirqd/123:06:431
16321992923,4cyclictest25-21ksoftirqd/120:35:521
16320992924,3cyclictest9-21ksoftirqd/023:09:300
16320992923,4cyclictest9-21ksoftirqd/023:46:060
1632299283,6cyclictest10561-21apt-get22:20:152
16322992823,3cyclictest33-21ksoftirqd/223:24:452
16322992822,4cyclictest33-21ksoftirqd/222:33:032
16321992823,3cyclictest25-21ksoftirqd/121:10:101
16321992823,3cyclictest25-21ksoftirqd/121:10:101
16321992823,3cyclictest25-21ksoftirqd/119:20:491
16320992823,3cyclictest9-21ksoftirqd/021:05:060
16320992823,3cyclictest9-21ksoftirqd/020:20:010
16320992822,4cyclictest9-21ksoftirqd/021:43:220
16320992822,4cyclictest9-21ksoftirqd/019:18:450
16322992721,4cyclictest33-21ksoftirqd/222:35:562
16321992722,3cyclictest25-21ksoftirqd/123:39:311
16321992722,3cyclictest25-21ksoftirqd/121:55:121
16321992722,3cyclictest25-21ksoftirqd/119:41:051
16321992721,4cyclictest25-21ksoftirqd/123:03:191
16321992721,4cyclictest25-21ksoftirqd/122:38:381
16321992721,4cyclictest25-21ksoftirqd/122:10:141
16321992721,4cyclictest25-21ksoftirqd/119:10:111
16321992721,3cyclictest25-21ksoftirqd/120:25:141
16320992721,4cyclictest9-21ksoftirqd/000:15:250
16321992621,3cyclictest25-21ksoftirqd/119:47:021
16321992621,3cyclictest25-21ksoftirqd/100:05:121
16321992520,3cyclictest25-21ksoftirqd/120:55:521
16320992519,4cyclictest9-21ksoftirqd/023:27:040
16320992519,4cyclictest9-21ksoftirqd/022:02:550
16321992419,3cyclictest25-21ksoftirqd/123:40:181
16321992419,3cyclictest25-21ksoftirqd/121:55:001
16321992419,3cyclictest25-21ksoftirqd/119:39:321
16321992419,3cyclictest25-21ksoftirqd/100:27:341
16320992419,3cyclictest9-21ksoftirqd/022:48:430
16320992419,3cyclictest9-21ksoftirqd/020:07:430
16320992419,3cyclictest9-21ksoftirqd/000:08:210
16320992418,4cyclictest9-21ksoftirqd/023:57:560
16320992418,4cyclictest9-21ksoftirqd/022:21:090
16320992318,3cyclictest9-21ksoftirqd/022:52:020
16320992317,4cyclictest9-21ksoftirqd/019:37:530
16320992217,3cyclictest9-21ksoftirqd/021:49:580
16320992216,4cyclictest9-21ksoftirqd/023:37:430
16320992216,4cyclictest9-21ksoftirqd/019:44:200
16320992215,4cyclictest31373-21df_inode00:10:170
16320992014,4cyclictest2371-21cpuspeed_turbos20:55:140
16320991813,3cyclictest13444-21awk23:30:270
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional