You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-15 - 01:11
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Fri Nov 14, 2025 12:45:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
136691233166,23phc2sys0-21swapper/307:05:563
18252208163,33sleep20-21swapper/207:06:202
18792207162,35sleep10-21swapper/107:06:591
20922204171,22sleep00-21swapper/007:09:350
168972570,4sleep0246699cyclictest09:55:030
2469995628,8cyclictest41-21ksoftirqd/307:20:243
2466995626,10cyclictest9-21ksoftirqd/007:20:190
2466995619,5cyclictest9-21ksoftirqd/012:00:280
2469995519,8cyclictest41-21ksoftirqd/308:19:053
2466995525,10cyclictest9-21ksoftirqd/007:35:160
2466995523,7cyclictest9-21ksoftirqd/009:25:250
2466995523,6cyclictest9-21ksoftirqd/011:40:010
268722540,1sleep00-21swapper/011:20:280
2469995424,9cyclictest41-21ksoftirqd/308:40:013
2469995421,4cyclictest41-21ksoftirqd/307:40:163
2466995425,6cyclictest9-21ksoftirqd/008:30:230
2466995424,8cyclictest9-21ksoftirqd/007:50:140
2466995423,6cyclictest9-21ksoftirqd/012:30:140
2469995323,9cyclictest41-21ksoftirqd/310:05:153
2469995322,8cyclictest41-21ksoftirqd/310:00:263
2469995322,7cyclictest41-21ksoftirqd/311:05:153
2469995320,9cyclictest41-21ksoftirqd/308:45:203
2469995320,7cyclictest41-21ksoftirqd/308:10:133
2469995319,10cyclictest41-21ksoftirqd/310:50:153
2469995221,7cyclictest41-21ksoftirqd/310:25:283
2469995221,10cyclictest41-21ksoftirqd/309:15:323
2466995225,8cyclictest9-21ksoftirqd/007:45:140
2466995225,8cyclictest9-21ksoftirqd/007:45:140
2466995224,4cyclictest9-21ksoftirqd/012:25:270
2466995223,10cyclictest9-21ksoftirqd/008:00:010
246999515,8cyclictest41-21ksoftirqd/307:45:163
246999515,8cyclictest41-21ksoftirqd/307:45:163
2469995120,9cyclictest41-21ksoftirqd/308:50:143
2469995119,8cyclictest41-21ksoftirqd/309:40:213
2469995119,7cyclictest41-21ksoftirqd/309:55:293
246799510,11cyclictest18746-21/usr/sbin/munin07:40:271
2469995020,7cyclictest41-21ksoftirqd/309:30:183
2469995019,4cyclictest41-21ksoftirqd/308:10:003
2469995018,9cyclictest41-21ksoftirqd/310:15:163
2469995017,7cyclictest41-21ksoftirqd/309:35:143
246799506,5cyclictest23341-21sed10:05:251
246799506,5cyclictest22612-21cut08:59:591
246799505,6cyclictest30367-21grep12:35:281
246799504,6cyclictest1752-21fschecks_time08:15:171
246799502,5cyclictest241ktimersoftd/111:45:231
246799500,10cyclictest27693-21sendmail_mailqu12:30:231
2466995018,10cyclictest9-21ksoftirqd/010:20:150
246999496,7cyclictest41-21ksoftirqd/311:45:213
246799494,6cyclictest4555-21irqrtprio08:20:191
246799490,10cyclictest32510-21/usr/sbin/munin09:20:141
246699492,9cyclictest9-21ksoftirqd/011:15:240
2466994926,8cyclictest9-21ksoftirqd/008:50:180
2466994922,8cyclictest9-21ksoftirqd/010:10:440
2469994822,8cyclictest41-21ksoftirqd/308:25:003
2469994822,7cyclictest41-21ksoftirqd/311:40:253
2469994822,7cyclictest41-21ksoftirqd/311:40:253
2469994821,4cyclictest41-21ksoftirqd/310:30:203
2469994818,7cyclictest41-21ksoftirqd/307:30:443
246799486,6cyclictest25595-21date07:55:251
246799486,5cyclictest30468-21sed11:30:201
246799486,5cyclictest23059-21sed09:00:151
246799486,5cyclictest23059-21sed09:00:151
246799485,6cyclictest17735-21awk08:50:001
246799482,10cyclictest9735-21cat07:25:141
246799481,11cyclictest2368-21grep10:30:201
2466994817,10cyclictest9-21ksoftirqd/011:30:180
246999475,8cyclictest41-21ksoftirqd/308:55:193
2469994723,8cyclictest41-21ksoftirqd/310:40:213
2469994716,7cyclictest41-21ksoftirqd/311:16:223
246799476,5cyclictest20220-21sed07:45:191
246799476,5cyclictest20220-21sed07:45:191
246799475,7cyclictest27326-21cut08:00:221
246799475,5cyclictest22104-21sed07:50:161
246799474,6cyclictest11134-21cpuspeed_turbos10:50:161
246799470,19cyclictest24652-21chrt11:16:261
246699475,7cyclictest9-21ksoftirqd/010:52:580
246699472,9cyclictest9-21ksoftirqd/009:05:210
246699471,7cyclictest9-21ksoftirqd/010:45:140
2466994717,9cyclictest9-21ksoftirqd/007:25:270
2466994714,8cyclictest9-21ksoftirqd/010:05:200
246699470,7cyclictest9-21ksoftirqd/012:35:240
246999465,10cyclictest41-21ksoftirqd/309:05:133
246999464,7cyclictest41-21ksoftirqd/311:25:253
246999463,8cyclictest41-21ksoftirqd/312:25:563
2469994618,7cyclictest41-21ksoftirqd/307:38:163
2469994616,7cyclictest41-21ksoftirqd/311:50:103
2469994613,7cyclictest41-21ksoftirqd/307:15:033
246999460,5cyclictest41-21ksoftirqd/309:50:163
246799465,7cyclictest9123-21cut08:30:191
246799465,7cyclictest20328-21uname12:15:211
246799462,5cyclictest241ktimersoftd/112:00:271
246699465,9cyclictest9-21ksoftirqd/009:15:240
246699465,8cyclictest9-21ksoftirqd/007:40:220
246699464,11cyclictest9-21ksoftirqd/007:15:200
2466994640,4cyclictest101ktimersoftd/010:33:540
246699463,9cyclictest9-21ksoftirqd/009:45:190
246699462,9cyclictest9-21ksoftirqd/010:55:280
246699462,9cyclictest9-21ksoftirqd/009:50:160
2466994621,10cyclictest9-21ksoftirqd/009:30:170
246699461,9cyclictest9-21ksoftirqd/009:00:000
246699461,6cyclictest9-21ksoftirqd/010:00:250
246699460,7cyclictest9-21ksoftirqd/008:10:000
246999455,9cyclictest41-21ksoftirqd/311:55:213
246999455,8cyclictest41-21ksoftirqd/312:35:193
246999455,8cyclictest41-21ksoftirqd/308:45:013
246999454,7cyclictest41-21ksoftirqd/308:00:293
2469994519,4cyclictest41-21ksoftirqd/308:30:173
2469994517,8cyclictest41-21ksoftirqd/312:25:003
2469994517,6cyclictest41-21ksoftirqd/311:11:303
246799457,3cyclictest25-21ksoftirqd/109:55:161
246799456,6cyclictest31184-21/usr/sbin/munin09:15:231
246799456,5cyclictest3946-21ls09:25:261
246799450,10cyclictest31212-21chrt08:10:041
246699457,3cyclictest9-21ksoftirqd/008:00:160
246699456,9cyclictest9-21ksoftirqd/009:20:180
246699454,9cyclictest9-21ksoftirqd/010:40:260
246699454,8cyclictest5804-21ls11:45:210
246699454,8cyclictest11647-21sh11:59:590
246699453,9cyclictest9-21ksoftirqd/008:20:280
2466994534,3cyclictest9-21ksoftirqd/010:15:180
246699450,7cyclictest9-21ksoftirqd/011:00:200
246699450,10cyclictest9-21ksoftirqd/009:40:260
246999446,8cyclictest41-21ksoftirqd/307:25:143
246999446,7cyclictest41-21ksoftirqd/311:35:193
246999445,7cyclictest41-21ksoftirqd/309:00:273
246999445,7cyclictest41-21ksoftirqd/309:00:273
246999445,6cyclictest41-21ksoftirqd/312:30:213
246999445,4cyclictest41-21ksoftirqd/311:00:313
246999444,8cyclictest41-21ksoftirqd/311:30:283
246999441,6cyclictest41-21ksoftirqd/309:45:193
246799446,5cyclictest9977-21mailstats10:45:251
246799446,5cyclictest24530-21basename12:25:171
246799444,7cyclictest6506-21unixbench_multi09:30:281
246799443,6cyclictest21374-21irqstats11:10:221
246799441,7cyclictest10550-21cut09:40:191
246799441,18cyclictest3665-21/usr/sbin/munin07:10:211
246699444,9cyclictest9-21ksoftirqd/011:25:170
246699444,10cyclictest9-21ksoftirqd/010:25:300
246699443,9cyclictest9-21ksoftirqd/009:10:230
246699442,8cyclictest9-21ksoftirqd/009:40:010
246699442,5cyclictest9-21ksoftirqd/007:31:360
246699442,10cyclictest9-21ksoftirqd/008:40:180
246699441,9cyclictest9-21ksoftirqd/011:10:170
246699441,8cyclictest9-21ksoftirqd/008:40:000
2466994417,6cyclictest9-21ksoftirqd/012:05:260
2466994415,5cyclictest9-21ksoftirqd/011:50:130
246699440,9cyclictest9-21ksoftirqd/012:15:140
51698430,1rtkit-daemon0-21swapper/209:40:372
246999435,7cyclictest41-21ksoftirqd/310:10:173
246999434,7cyclictest41-21ksoftirqd/309:10:133
246999434,7cyclictest41-21ksoftirqd/307:50:133
246999434,6cyclictest41-21ksoftirqd/308:25:183
246999433,6cyclictest41-21ksoftirqd/309:25:173
246999433,4cyclictest41-21ksoftirqd/307:55:173
246999431,5cyclictest41-21ksoftirqd/312:00:203
246999430,6cyclictest41-21ksoftirqd/310:40:003
246799434,7cyclictest27918-21cstates09:10:141
246799432,5cyclictest241ktimersoftd/107:30:231
246799431,6cyclictest241ktimersoftd/110:15:261
246799431,6cyclictest0-21swapper/108:25:231
246799431,4cyclictest241ktimersoftd/109:45:181
246699436,4cyclictest9-21ksoftirqd/008:25:190
246699432,3cyclictest121rcu_preempt11:05:270
246699431,6cyclictest9-21ksoftirqd/007:15:000
246699431,11cyclictest9-21ksoftirqd/011:40:270
246699431,11cyclictest9-21ksoftirqd/011:40:270
246999425,7cyclictest41-21ksoftirqd/310:50:013
246999425,6cyclictest41-21ksoftirqd/312:05:153
246999424,9cyclictest41-21ksoftirqd/309:21:333
246999424,6cyclictest41-21ksoftirqd/310:55:183
246999424,6cyclictest41-21ksoftirqd/307:10:233
246799425,3cyclictest25-21ksoftirqd/111:40:251
246799425,3cyclictest25-21ksoftirqd/111:40:251
246799424,6cyclictest1298-21sshd11:25:051
246799424,5cyclictest30316-21sed08:05:261
246799423,6cyclictest26556-21timedrift09:05:261
246799422,6cyclictest0-21swapper/107:15:221
246799422,5cyclictest241ktimersoftd/110:20:161
246799421,5cyclictest0-21swapper/112:25:001
246799420,5cyclictest0-21swapper/110:00:161
246799420,11cyclictest11901-21taskset08:35:231
246699423,8cyclictest9-21ksoftirqd/010:35:220
246699422,8cyclictest9-21ksoftirqd/012:10:170
246699422,8cyclictest9-21ksoftirqd/012:10:170
246699422,11cyclictest9-21ksoftirqd/008:15:280
246699421,9cyclictest9-21ksoftirqd/012:20:150
246999415,7cyclictest41-21ksoftirqd/310:20:173
246999413,7cyclictest41-21ksoftirqd/312:10:233
246999413,7cyclictest41-21ksoftirqd/312:10:233
246799415,5cyclictest17097-21mailstats11:00:301
246699416,8cyclictest9-21ksoftirqd/008:45:140
246699416,6cyclictest9-21ksoftirqd/009:02:300
246699416,6cyclictest9-21ksoftirqd/009:02:300
246999404,6cyclictest41-21ksoftirqd/311:20:183
2469994014,6cyclictest41-21ksoftirqd/312:15:133
246799405,5cyclictest15691-21phc2sys12:05:231
246799404,5cyclictest14557-21mailstats08:40:261
246799403,5cyclictest8847-21timerwakeupswit09:35:271
246799400,6cyclictest241ktimersoftd/111:05:221
246799400,11cyclictest32509-21/usr/sbin/munin11:35:141
246699402,10cyclictest9-21ksoftirqd/008:10:270
246799391,6cyclictest0-21swapper/107:20:141
246799390,5cyclictest0-21swapper/112:15:011
246899381,14cyclictest6543-21df_abs10:40:162
246799385,6cyclictest25539-21ls10:10:261
246799385,6cyclictest25-21ksoftirqd/112:13:031
246799385,6cyclictest14605-21/usr/sbin/munin07:35:161
246799385,5cyclictest18652-21irqrtprio08:50:191
246799384,6cyclictest241ktimersoftd/110:37:461
246799380,9cyclictest9034-21chrt11:52:021
246799370,35cyclictest3367-21kworker/1:211:20:341
2468993630,4cyclictest33-21ksoftirqd/212:15:132
246799365,6cyclictest32172-21cat10:25:211
246799364,6cyclictest15077-21runrttasks10:55:331
2468993519,14cyclictest33-21ksoftirqd/208:50:132
246799355,5cyclictest25-21ksoftirqd/109:50:451
246799352,5cyclictest0-21swapper/111:55:291
2468993327,4cyclictest33-21ksoftirqd/212:23:282
2468993327,4cyclictest33-21ksoftirqd/211:53:142
2468993327,4cyclictest33-21ksoftirqd/211:07:412
2468993327,4cyclictest33-21ksoftirqd/210:32:082
2468993327,4cyclictest33-21ksoftirqd/207:36:322
2468993327,4cyclictest26165-21cron10:15:012
2468993326,4cyclictest33-21ksoftirqd/207:12:212
246799332,5cyclictest25-21ksoftirqd/110:41:031
2468993227,3cyclictest33-21ksoftirqd/209:20:232
2468993227,3cyclictest33-21ksoftirqd/207:58:352
2468993226,4cyclictest33-21ksoftirqd/211:48:332
2468993226,4cyclictest33-21ksoftirqd/211:43:392
2468993226,4cyclictest33-21ksoftirqd/211:43:392
2468993226,4cyclictest33-21ksoftirqd/210:51:242
2468993226,4cyclictest33-21ksoftirqd/210:19:482
2468993226,4cyclictest33-21ksoftirqd/209:17:052
2468993226,4cyclictest33-21ksoftirqd/208:37:542
2468993226,4cyclictest33-21ksoftirqd/208:13:192
2468993226,4cyclictest33-21ksoftirqd/207:52:132
2468993226,4cyclictest33-21ksoftirqd/207:19:432
2468993225,4cyclictest33-21ksoftirqd/209:03:102
2468993225,4cyclictest33-21ksoftirqd/209:03:102
2468993126,3cyclictest33-21ksoftirqd/212:00:492
2468993126,3cyclictest33-21ksoftirqd/211:25:012
2468993126,3cyclictest33-21ksoftirqd/210:04:162
2468993125,4cyclictest33-21ksoftirqd/212:30:542
2468993125,4cyclictest33-21ksoftirqd/209:47:342
2468993125,4cyclictest33-21ksoftirqd/208:20:372
2468993025,3cyclictest33-21ksoftirqd/210:20:562
2468993025,3cyclictest33-21ksoftirqd/208:18:362
2468993024,4cyclictest33-21ksoftirqd/211:00:512
2468993024,4cyclictest33-21ksoftirqd/210:36:452
2468993024,4cyclictest33-21ksoftirqd/209:37:442
2468993024,4cyclictest33-21ksoftirqd/208:33:002
246899301,27cyclictest0-21swapper/211:30:352
2468992924,3cyclictest33-21ksoftirqd/211:16:022
2468992923,4cyclictest33-21ksoftirqd/208:41:152
2468992922,5cyclictest33-21ksoftirqd/212:12:362
2468992922,5cyclictest33-21ksoftirqd/212:12:362
2468992823,3cyclictest33-21ksoftirqd/211:35:022
2468992823,3cyclictest33-21ksoftirqd/210:27:202
2468992823,3cyclictest33-21ksoftirqd/209:27:082
2468992822,4cyclictest33-21ksoftirqd/211:58:042
2468992822,4cyclictest33-21ksoftirqd/211:28:442
2468992822,4cyclictest33-21ksoftirqd/211:12:512
2468992822,4cyclictest33-21ksoftirqd/209:53:362
2468992822,4cyclictest33-21ksoftirqd/209:32:182
2468992822,4cyclictest33-21ksoftirqd/208:02:402
2468992822,4cyclictest33-21ksoftirqd/207:26:252
2468992722,3cyclictest33-21ksoftirqd/210:07:472
2468992722,3cyclictest33-21ksoftirqd/208:57:332
2468992721,4cyclictest33-21ksoftirqd/212:37:312
2468992721,4cyclictest33-21ksoftirqd/209:57:082
2468992721,4cyclictest33-21ksoftirqd/207:49:082
2468992721,4cyclictest33-21ksoftirqd/207:49:072
2468992721,4cyclictest33-21ksoftirqd/207:44:142
2468992621,3cyclictest33-21ksoftirqd/212:29:192
2468992621,3cyclictest33-21ksoftirqd/210:45:512
2468992621,3cyclictest33-21ksoftirqd/209:09:332
2468992621,3cyclictest33-21ksoftirqd/208:49:562
2468992621,3cyclictest33-21ksoftirqd/208:07:102
2468992621,3cyclictest33-21ksoftirqd/207:30:432
2468992620,4cyclictest33-21ksoftirqd/207:21:282
2468992520,3cyclictest33-21ksoftirqd/208:27:192
2468992418,4cyclictest33-21ksoftirqd/210:57:222
2468992216,4cyclictest33-21ksoftirqd/209:13:282
2468991813,3cyclictest14481-21/usr/sbin/munin12:05:192
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional