You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-14 - 13:24
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Fri Nov 14, 2025 00:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
317402240172,22sleep30-21swapper/319:07:313
316532225157,23sleep00-21swapper/019:06:320
318572201167,23sleep10-21swapper/119:09:021
317392201168,22sleep20-21swapper/219:07:302
181962670,6sleep23222799cyclictest00:05:162
32225996411,6cyclictest9-21ksoftirqd/021:40:000
3222699619,11cyclictest9382-21vmstat22:40:291
3222699609,11cyclictest31861-21taskset21:18:101
3222699569,11cyclictest9328-21awk23:45:241
32225995652,2cyclictest111rcuc/021:05:010
3222599562,9cyclictest9-21ksoftirqd/019:15:130
3222699549,11cyclictest12242-21seq19:34:071
3222699547,11cyclictest1280-21runrttasks22:04:271
3222699539,11cyclictest9257-21seq19:25:291
3222699538,11cyclictest12312-21taskset22:48:221
3222699537,9cyclictest4450-21chrt19:18:001
3222699537,11cyclictest25657-21/usr/sbin/munin20:00:171
3222699527,11cyclictest31019-21cstates00:30:151
3222799514,2cyclictest121rcu_preempt23:20:002
3222699519,10cyclictest1280-21runrttasks22:38:331
3222699518,16cyclictest29377-21chrt20:06:501
3222699508,11cyclictest29922-21seq23:24:191
3222699508,10cyclictest16810-21seq20:45:361
3222699505,9cyclictest1237-21df_abs00:35:161
3222699496,11cyclictest13669-21sed22:50:211
3222699494,9cyclictest24915-21latency_hist20:00:011
32226994943,4cyclictest17284-21sh21:55:001
3222599499,5cyclictest9-21ksoftirqd/021:10:170
101072490,2sleep30-21swapper/319:30:123
32227994834,12cyclictest33-21ksoftirqd/222:30:002
3222599486,5cyclictest9-21ksoftirqd/000:10:010
3222599485,5cyclictest9-21ksoftirqd/021:25:260
3222599482,6cyclictest9-21ksoftirqd/020:45:140
260932480,1sleep20-21swapper/222:10:232
3222799477,7cyclictest33-21ksoftirqd/219:25:242
32227994717,7cyclictest33-21ksoftirqd/200:35:012
32227994715,7cyclictest33-21ksoftirqd/223:54:592
32227994713,4cyclictest33-21ksoftirqd/223:00:002
32227994713,4cyclictest33-21ksoftirqd/223:00:002
32227994710,6cyclictest33-21ksoftirqd/200:15:262
3222699478,12cyclictest10943-21df_abs23:50:171
3222599475,5cyclictest9-21ksoftirqd/020:10:360
3222599474,7cyclictest9-21ksoftirqd/020:03:560
3222599473,6cyclictest9-21ksoftirqd/023:13:430
3222599473,6cyclictest9-21ksoftirqd/020:50:290
3222599473,6cyclictest9-21ksoftirqd/020:50:290
32225994730,9cyclictest9-21ksoftirqd/020:30:240
427291460,1ptp4l401ktimersoftd/319:55:063
36998460,2rtkit-daemon368-21rtkit-daemon21:22:582
36998460,2rtkit-daemon368-21rtkit-daemon21:22:582
3222799461,6cyclictest33-21ksoftirqd/220:05:282
3222699469,11cyclictest31577-21sort23:25:251
3222699468,11cyclictest4913-21chrt23:35:391
3222599464,5cyclictest9-21ksoftirqd/021:20:550
3222599464,5cyclictest9-21ksoftirqd/021:20:550
3222599464,5cyclictest9-21ksoftirqd/019:20:200
3222599463,7cyclictest9-21ksoftirqd/019:25:250
32225994629,5cyclictest9-21ksoftirqd/023:00:230
3222599462,6cyclictest9-21ksoftirqd/019:50:180
32225994617,4cyclictest9-21ksoftirqd/023:28:420
32225994616,4cyclictest9-21ksoftirqd/020:21:210
32227994541,3cyclictest33-21ksoftirqd/219:15:292
3222799452,2cyclictest121rcu_preempt20:00:242
3222699458,11cyclictest24357-21chrt21:02:101
3222699458,11cyclictest20000-21chrt00:07:491
3222699457,9cyclictest19860-21chrt20:55:041
3222699457,18cyclictest578-21grep23:30:161
3222599450,43cyclictest101ktimersoftd/020:35:210
3222799446,7cyclictest33-21ksoftirqd/221:00:152
32227994411,10cyclictest33-21ksoftirqd/222:20:272
3222699449,11cyclictest27165-21chrt22:14:561
3222699447,14cyclictest29302-21chrt22:15:481
3222699446,8cyclictest27547-21chrt00:21:441
3222599446,5cyclictest9-21ksoftirqd/023:35:000
3222599444,8cyclictest9-21ksoftirqd/019:45:560
32225994426,10cyclictest9-21ksoftirqd/000:35:240
3222599442,5cyclictest9-21ksoftirqd/022:05:230
3222799437,3cyclictest33-21ksoftirqd/220:15:272
3222799435,6cyclictest33-21ksoftirqd/222:35:152
32227994339,3cyclictest33-21ksoftirqd/223:40:002
32227994337,3cyclictest33-21ksoftirqd/223:10:002
32227994333,8cyclictest33-21ksoftirqd/222:45:202
32227994313,4cyclictest33-21ksoftirqd/220:25:212
32227994312,8cyclictest33-21ksoftirqd/221:40:292
3222699438,11cyclictest26893-21chrt21:07:481
3222699438,10cyclictest20619-21chrt00:10:141
3222699435,11cyclictest0-21swapper/120:30:201
3222699433,11cyclictest0-21swapper/121:35:041
3222599437,5cyclictest9-21ksoftirqd/020:40:230
3222599435,6cyclictest9-21ksoftirqd/022:45:280
3222599434,5cyclictest9-21ksoftirqd/019:40:190
3222599431,6cyclictest9-21ksoftirqd/023:55:140
427291420,0ptp4l401ktimersoftd/322:35:173
427291420,0ptp4l401ktimersoftd/321:07:433
427291420,0ptp4l401ktimersoftd/320:50:233
427291420,0ptp4l401ktimersoftd/320:50:223
32227994237,3cyclictest33-21ksoftirqd/220:25:002
32227994236,3cyclictest33-21ksoftirqd/223:05:002
32227994236,3cyclictest33-21ksoftirqd/221:35:012
32227994232,6cyclictest33-21ksoftirqd/220:55:132
32227994229,10cyclictest33-21ksoftirqd/219:30:292
3222799421,2cyclictest121rcu_preempt20:40:002
32227994211,7cyclictest33-21ksoftirqd/221:50:172
3222699427,18cyclictest7288-21cat20:30:011
3222599423,6cyclictest9-21ksoftirqd/022:53:300
3222599423,6cyclictest9-21ksoftirqd/020:29:200
3222599422,7cyclictest9-21ksoftirqd/000:25:200
3222599422,5cyclictest9-21ksoftirqd/022:17:020
32228994135,4cyclictest41-21ksoftirqd/323:15:003
32228994135,4cyclictest41-21ksoftirqd/322:23:403
3222799418,4cyclictest33-21ksoftirqd/221:35:142
3222799417,6cyclictest33-21ksoftirqd/220:30:292
3222799416,6cyclictest33-21ksoftirqd/219:50:272
3222799416,3cyclictest33-21ksoftirqd/221:15:252
3222799416,3cyclictest33-21ksoftirqd/220:10:322
3222799415,9cyclictest33-21ksoftirqd/223:20:242
3222799413,2cyclictest33-21ksoftirqd/220:50:242
3222799413,2cyclictest33-21ksoftirqd/220:50:242
32227994113,7cyclictest33-21ksoftirqd/222:40:242
32227994111,4cyclictest33-21ksoftirqd/200:25:182
3222699415,8cyclictest14526-21taskset20:42:511
3222599414,5cyclictest9-21ksoftirqd/022:29:180
3193224132,4sleep30-21swapper/319:10:003
32228994034,4cyclictest41-21ksoftirqd/323:45:403
32228994034,4cyclictest41-21ksoftirqd/322:28:183
32228994034,4cyclictest41-21ksoftirqd/321:42:243
32228994034,4cyclictest41-21ksoftirqd/319:26:043
3222799405,6cyclictest33-21ksoftirqd/219:35:142
3222799405,5cyclictest33-21ksoftirqd/222:15:122
3222799405,3cyclictest33-21ksoftirqd/219:40:262
3222799404,2cyclictest33-21ksoftirqd/200:35:272
3222799403,6cyclictest33-21ksoftirqd/221:10:182
3222799403,6cyclictest33-21ksoftirqd/219:20:222
32227994035,3cyclictest33-21ksoftirqd/219:14:592
32227994034,3cyclictest33-21ksoftirqd/221:25:252
3222799401,7cyclictest33-21ksoftirqd/223:25:252
3222799401,6cyclictest33-21ksoftirqd/223:45:272
32227994011,7cyclictest33-21ksoftirqd/221:05:272
32227994011,3cyclictest33-21ksoftirqd/223:10:252
32227994010,7cyclictest33-21ksoftirqd/223:40:192
3222699409,11cyclictest25120-21taskset00:17:331
3222699407,18cyclictest19560-21sshd21:57:411
3222699406,10cyclictest29901-21/usr/sbin/munin22:20:181
3222699405,10cyclictest16874-21timerwakeupswit22:55:281
3222699405,10cyclictest16874-21timerwakeupswit22:55:271
3222599407,6cyclictest9-21ksoftirqd/000:00:260
3222599404,5cyclictest9-21ksoftirqd/000:05:250
32225994036,2cyclictest111rcuc/021:15:140
3222599403,5cyclictest9-21ksoftirqd/000:32:510
32225994035,3cyclictest9-21ksoftirqd/022:05:010
32225994034,3cyclictest9-21ksoftirqd/022:40:010
3222599402,6cyclictest9-21ksoftirqd/022:20:340
3222599402,5cyclictest9-21ksoftirqd/021:53:310
427291390,17ptp4l401ktimersoftd/320:35:013
32228993933,4cyclictest41-21ksoftirqd/323:51:583
32228993933,4cyclictest41-21ksoftirqd/323:02:523
32228993933,4cyclictest41-21ksoftirqd/321:48:303
32228993933,4cyclictest41-21ksoftirqd/320:43:273
32228993933,4cyclictest41-21ksoftirqd/320:22:253
32228993933,4cyclictest41-21ksoftirqd/319:52:483
32228993933,4cyclictest41-21ksoftirqd/300:37:473
3222799399,4cyclictest33-21ksoftirqd/223:35:002
3222799396,6cyclictest33-21ksoftirqd/200:00:182
3222799396,5cyclictest33-21ksoftirqd/222:00:152
3222799395,3cyclictest33-21ksoftirqd/221:45:182
3222799394,9cyclictest33-21ksoftirqd/200:20:292
3222799393,6cyclictest33-21ksoftirqd/222:05:262
3222799393,6cyclictest33-21ksoftirqd/219:55:232
32227993935,3cyclictest33-21ksoftirqd/222:35:012
32227993933,3cyclictest14919-21ls22:55:002
3222799393,2cyclictest33-21ksoftirqd/200:10:282
3222799392,6cyclictest33-21ksoftirqd/220:45:312
32227993913,7cyclictest33-21ksoftirqd/223:55:152
32226993932,4cyclictest25-21ksoftirqd/100:01:591
3222599397,4cyclictest9-21ksoftirqd/022:30:120
32225993936,2cyclictest111rcuc/020:06:280
32225993932,4cyclictest9-21ksoftirqd/023:07:330
3222599392,5cyclictest9-21ksoftirqd/019:39:240
32228993832,4cyclictest41-21ksoftirqd/322:32:303
32228993832,4cyclictest41-21ksoftirqd/320:59:153
32228993831,5cyclictest41-21ksoftirqd/321:39:153
32228993831,4cyclictest41-21ksoftirqd/320:12:293
3222799386,6cyclictest33-21ksoftirqd/219:45:172
3222799384,5cyclictest33-21ksoftirqd/221:55:142
3222699388,10cyclictest19371-21taskset20:51:481
3222699388,10cyclictest19371-21taskset20:51:471
3222699386,12cyclictest15133-21cpuspeed19:40:141
32226993810,11cyclictest3706-21cut21:25:231
3222699380,19cyclictest29184-21chrt21:10:411
3222599383,5cyclictest9-21ksoftirqd/020:57:560
32225993835,2cyclictest111rcuc/020:17:510
32225993834,3cyclictest9-21ksoftirqd/021:40:290
32225993833,3cyclictest9-21ksoftirqd/000:20:300
3222599382,6cyclictest9-21ksoftirqd/019:11:370
3222599382,5cyclictest9-21ksoftirqd/022:57:500
3222599382,5cyclictest9-21ksoftirqd/022:57:490
32228993732,3cyclictest41-21ksoftirqd/300:26:553
32228993731,4cyclictest41-21ksoftirqd/319:22:473
32228993710,26cyclictest0-21swapper/300:11:383
3222799372,7cyclictest33-21ksoftirqd/220:40:162
3222699378,10cyclictest12201-21taskset20:39:581
32226993731,4cyclictest25-21ksoftirqd/122:05:481
32226993731,4cyclictest25-21ksoftirqd/120:15:521
32226993731,3cyclictest25-21ksoftirqd/123:45:011
3222599375,6cyclictest9-21ksoftirqd/021:05:220
32225993733,3cyclictest9-21ksoftirqd/023:35:250
32225993732,3cyclictest9-21ksoftirqd/023:40:280
32225993731,3cyclictest9-21ksoftirqd/019:30:020
3222599372,5cyclictest9-21ksoftirqd/023:23:410
32228993631,3cyclictest41-21ksoftirqd/320:15:193
32228993631,3cyclictest41-21ksoftirqd/300:24:583
32228993630,4cyclictest41-21ksoftirqd/323:43:243
32228993630,4cyclictest41-21ksoftirqd/322:53:323
32228993630,4cyclictest41-21ksoftirqd/321:58:443
32228993630,4cyclictest41-21ksoftirqd/321:11:273
32228993630,4cyclictest41-21ksoftirqd/320:03:233
32228993630,4cyclictest41-21ksoftirqd/319:15:373
32228993630,4cyclictest41-21ksoftirqd/300:31:533
32228993630,4cyclictest41-21ksoftirqd/300:03:013
3222699367,9cyclictest0-21swapper/119:52:201
3222699365,11cyclictest28040-21taskset00:25:031
3222699365,10cyclictest0-21swapper/121:20:171
3222699365,10cyclictest0-21swapper/121:20:171
32226993630,4cyclictest25-21ksoftirqd/122:29:401
32226993629,5cyclictest25-21ksoftirqd/119:24:301
32226993629,4cyclictest25-21ksoftirqd/123:05:061
3222599364,3cyclictest9-21ksoftirqd/023:15:140
32225993632,3cyclictest9-21ksoftirqd/021:30:220
32225993631,3cyclictest9-21ksoftirqd/022:40:210
32225993631,3cyclictest9-21ksoftirqd/021:50:000
32225993630,4cyclictest9-21ksoftirqd/023:50:250
32228993530,3cyclictest41-21ksoftirqd/322:14:053
32228993529,4cyclictest41-21ksoftirqd/323:31:163
32228993529,4cyclictest41-21ksoftirqd/323:18:273
3222699357,12cyclictest15120-21chrt23:58:421
3222699357,10cyclictest4637-21chrt22:33:451
3222699355,11cyclictest2042-21taskset19:13:541
32226993529,4cyclictest25-21ksoftirqd/121:43:411
32226993529,4cyclictest25-21ksoftirqd/120:24:391
32226993528,4cyclictest25-21ksoftirqd/121:46:511
32225993531,3cyclictest9-21ksoftirqd/022:10:270
32225993531,2cyclictest111rcuc/023:45:210
32225993529,3cyclictest9-21ksoftirqd/019:55:100
427291340,0ptp4l401ktimersoftd/323:27:203
32228993429,3cyclictest41-21ksoftirqd/322:17:093
32228993428,4cyclictest41-21ksoftirqd/321:54:523
32228993428,4cyclictest41-21ksoftirqd/321:25:313
32228993428,4cyclictest41-21ksoftirqd/320:35:453
32228993428,4cyclictest41-21ksoftirqd/320:26:023
3222699346,16cyclictest18338-21entropy23:00:151
32226993429,3cyclictest25-21ksoftirqd/119:35:311
32225993429,3cyclictest9-21ksoftirqd/021:55:140
32228993328,3cyclictest41-21ksoftirqd/321:32:343
32228993327,4cyclictest41-21ksoftirqd/321:01:333
3222699338,11cyclictest4856-21chrt21:30:021
3222699337,9cyclictest30624-21iostat20:10:241
3222699337,8cyclictest23397-21hddtemp_smartct23:10:181
3222699337,16cyclictest0-21swapper/119:45:261
32225993327,4cyclictest9-21ksoftirqd/000:17:220
427291320,0ptp4l401ktimersoftd/323:55:193
32228993227,3cyclictest41-21ksoftirqd/323:08:583
32228993227,3cyclictest41-21ksoftirqd/322:41:243
32228993226,4cyclictest41-21ksoftirqd/323:22:423
32228993226,4cyclictest41-21ksoftirqd/322:58:553
32228993226,4cyclictest41-21ksoftirqd/322:58:553
32228993226,4cyclictest41-21ksoftirqd/322:06:423
32228993226,4cyclictest41-21ksoftirqd/320:05:403
32228993226,4cyclictest41-21ksoftirqd/300:09:153
32228993126,3cyclictest41-21ksoftirqd/323:38:023
32228993126,3cyclictest41-21ksoftirqd/319:40:053
32228993126,3cyclictest41-21ksoftirqd/300:15:563
32228993125,4cyclictest41-21ksoftirqd/319:36:593
32228993025,3cyclictest41-21ksoftirqd/322:02:073
3222699307,10cyclictest27209-21runrttasks23:16:361
32228992924,3cyclictest41-21ksoftirqd/322:46:403
32228992923,4cyclictest41-21ksoftirqd/319:45:423
32228992722,3cyclictest41-21ksoftirqd/321:20:493
32228992722,3cyclictest41-21ksoftirqd/321:20:493
32228992620,4cyclictest41-21ksoftirqd/321:19:363
427291230,0ptp4l401ktimersoftd/320:46:343
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional