You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-29 - 19:30
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot3.osadl.org (updated Mon Dec 29, 2025 12:45:58)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
139491205171,23phc2sys0-21swapper/307:07:473
115282204169,24sleep00-21swapper/007:09:340
112412202168,23sleep20-21swapper/207:05:502
113272199166,22sleep10-21swapper/107:06:561
235421360,7sleep21186499cyclictest12:25:212
1941221180,3sleep31186599cyclictest11:55:133
11862997134,6cyclictest9-21ksoftirqd/011:20:000
11862996935,5cyclictest9-21ksoftirqd/012:40:000
11862996833,5cyclictest9-21ksoftirqd/007:40:000
11862996831,6cyclictest9-21ksoftirqd/010:30:000
11865996524,10cyclictest41-21ksoftirqd/308:50:003
11862996532,5cyclictest9-21ksoftirqd/012:00:000
11862996531,4cyclictest9-21ksoftirqd/008:09:590
11865996428,7cyclictest41-21ksoftirqd/310:10:003
11865996427,7cyclictest41-21ksoftirqd/308:55:183
11865996427,7cyclictest41-21ksoftirqd/308:55:173
11864996423,4cyclictest33-21ksoftirqd/207:15:222
11865996331,7cyclictest41-21ksoftirqd/307:25:203
11865996331,3cyclictest41-21ksoftirqd/311:05:123
11862996328,6cyclictest9-21ksoftirqd/009:54:590
11862996326,7cyclictest9-21ksoftirqd/011:45:230
11865996222,3cyclictest41-21ksoftirqd/312:35:013
11865996221,9cyclictest41-21ksoftirqd/310:40:263
11864996228,6cyclictest33-21ksoftirqd/212:10:142
11862996230,7cyclictest9-21ksoftirqd/007:15:140
11862996230,6cyclictest9-21ksoftirqd/010:55:210
11862996229,6cyclictest9-21ksoftirqd/012:00:160
11862996229,4cyclictest9-21ksoftirqd/008:00:180
11865996132,7cyclictest41-21ksoftirqd/309:05:163
11865996129,6cyclictest41-21ksoftirqd/309:10:183
11864996131,5cyclictest33-21ksoftirqd/207:45:002
11864996130,7cyclictest33-21ksoftirqd/211:30:152
11864996129,7cyclictest33-21ksoftirqd/208:25:232
11862996129,6cyclictest9-21ksoftirqd/011:30:270
11862996127,8cyclictest9-21ksoftirqd/010:35:220
11862996127,6cyclictest9-21ksoftirqd/008:50:140
11862996127,6cyclictest9-21ksoftirqd/008:50:130
11862996126,9cyclictest9-21ksoftirqd/007:10:270
11862996124,8cyclictest9-21ksoftirqd/010:45:010
11865996030,7cyclictest41-21ksoftirqd/308:10:233
11865996028,6cyclictest41-21ksoftirqd/311:51:223
11865996028,6cyclictest41-21ksoftirqd/309:35:143
11865996026,7cyclictest41-21ksoftirqd/311:26:063
11865996026,7cyclictest41-21ksoftirqd/308:05:253
11865996021,10cyclictest41-21ksoftirqd/307:15:193
11865996014,9cyclictest41-21ksoftirqd/312:25:123
11865996014,9cyclictest41-21ksoftirqd/309:40:153
11864996028,4cyclictest33-21ksoftirqd/211:55:132
1186399607,7cyclictest9414-21latency_hist09:20:011
1186399604,54cyclictest0-21swapper/111:17:131
11862996029,6cyclictest9-21ksoftirqd/008:40:300
11862996028,6cyclictest9-21ksoftirqd/007:55:190
11862996028,5cyclictest9-21ksoftirqd/012:15:210
11862996028,5cyclictest9-21ksoftirqd/011:25:200
11862996028,5cyclictest9-21ksoftirqd/010:45:220
11862996028,5cyclictest9-21ksoftirqd/008:15:210
11862996027,6cyclictest9-21ksoftirqd/010:10:190
11862996027,6cyclictest9-21ksoftirqd/009:40:170
11862996027,6cyclictest9-21ksoftirqd/009:15:160
11862996027,4cyclictest9-21ksoftirqd/008:55:240
11862996027,4cyclictest9-21ksoftirqd/008:55:240
11862996026,6cyclictest9-21ksoftirqd/011:40:190
11862996025,6cyclictest9-21ksoftirqd/008:10:230
11862996024,7cyclictest9-21ksoftirqd/009:10:180
11862996023,5cyclictest9-21ksoftirqd/009:39:440
11865995928,4cyclictest41-21ksoftirqd/311:50:003
11865995925,6cyclictest41-21ksoftirqd/311:20:003
11865995925,6cyclictest41-21ksoftirqd/309:45:263
11865995924,6cyclictest41-21ksoftirqd/309:20:213
11865995922,6cyclictest41-21ksoftirqd/310:45:173
11864995929,3cyclictest33-21ksoftirqd/209:30:162
11864995928,3cyclictest33-21ksoftirqd/212:20:222
11864995928,3cyclictest33-21ksoftirqd/212:20:222
11864995927,10cyclictest33-21ksoftirqd/209:30:012
11864995926,7cyclictest33-21ksoftirqd/211:15:172
11864995923,8cyclictest33-21ksoftirqd/210:05:162
1186399591,18cyclictest1036-21cut10:10:001
1186399591,12cyclictest27255-21cat08:50:001
11862995928,5cyclictest9-21ksoftirqd/009:55:160
11862995927,8cyclictest9-21ksoftirqd/007:40:190
11862995927,7cyclictest9-21ksoftirqd/012:25:120
11862995927,5cyclictest9-21ksoftirqd/010:15:180
11862995927,5cyclictest9-21ksoftirqd/008:35:240
11862995927,3cyclictest9-21ksoftirqd/007:50:220
11862995927,3cyclictest9-21ksoftirqd/007:50:210
11862995926,6cyclictest9-21ksoftirqd/008:30:160
11862995925,7cyclictest9-21ksoftirqd/010:20:220
11862995925,7cyclictest9-21ksoftirqd/010:20:210
11862995925,5cyclictest9-21ksoftirqd/008:25:160
11862995924,6cyclictest9-21ksoftirqd/009:49:590
11865995828,4cyclictest41-21ksoftirqd/307:20:213
11865995825,7cyclictest41-21ksoftirqd/312:10:243
11865995823,10cyclictest41-21ksoftirqd/310:50:183
11865995821,7cyclictest41-21ksoftirqd/309:15:153
11865995820,7cyclictest41-21ksoftirqd/310:35:243
11865995813,8cyclictest41-21ksoftirqd/312:20:153
11865995813,8cyclictest41-21ksoftirqd/312:20:153
11864995828,9cyclictest33-21ksoftirqd/207:20:182
11864995827,8cyclictest33-21ksoftirqd/208:10:142
11864995826,4cyclictest33-21ksoftirqd/209:55:002
11864995819,10cyclictest33-21ksoftirqd/210:35:012
11862995833,7cyclictest9-21ksoftirqd/008:25:000
11862995828,5cyclictest9-21ksoftirqd/007:45:150
11862995828,3cyclictest9-21ksoftirqd/012:20:200
11862995828,3cyclictest9-21ksoftirqd/012:20:200
11862995826,7cyclictest9-21ksoftirqd/009:00:140
11862995826,6cyclictest9-21ksoftirqd/007:25:210
11862995826,4cyclictest9-21ksoftirqd/011:35:190
11862995825,4cyclictest9-21ksoftirqd/012:32:320
11862995824,5cyclictest9-21ksoftirqd/011:20:130
11864995730,5cyclictest33-21ksoftirqd/212:20:002
11864995729,6cyclictest33-21ksoftirqd/208:30:292
11864995727,4cyclictest33-21ksoftirqd/211:20:142
11864995726,3cyclictest33-21ksoftirqd/210:10:232
11862995729,4cyclictest9-21ksoftirqd/009:25:160
11862995727,8cyclictest9-21ksoftirqd/010:05:230
11862995726,6cyclictest9-21ksoftirqd/012:05:150
11862995726,6cyclictest9-21ksoftirqd/007:30:190
11862995725,6cyclictest9-21ksoftirqd/007:20:130
11862995724,5cyclictest9-21ksoftirqd/011:50:160
11862995723,7cyclictest9-21ksoftirqd/011:10:150
11862995719,9cyclictest9-21ksoftirqd/008:45:220
11865995637,3cyclictest41-21ksoftirqd/311:40:163
11865995623,7cyclictest41-21ksoftirqd/307:40:193
11865995620,6cyclictest41-21ksoftirqd/310:30:263
11865995619,6cyclictest41-21ksoftirqd/312:00:263
11864995634,2cyclictest33-21ksoftirqd/209:05:132
11864995631,9cyclictest33-21ksoftirqd/209:15:002
11864995628,3cyclictest33-21ksoftirqd/208:25:012
11864995622,2cyclictest33-21ksoftirqd/210:45:172
1186399560,16cyclictest0-21swapper/108:40:281
11862995626,5cyclictest9-21ksoftirqd/010:00:140
11862995625,6cyclictest9-21ksoftirqd/010:30:200
11862995624,6cyclictest9-21ksoftirqd/009:20:160
11862995623,6cyclictest9-21ksoftirqd/009:05:210
11865995527,4cyclictest41-21ksoftirqd/310:20:213
11865995527,4cyclictest41-21ksoftirqd/310:20:213
11865995523,6cyclictest41-21ksoftirqd/311:20:213
11865995520,8cyclictest41-21ksoftirqd/311:35:133
11865995520,5cyclictest41-21ksoftirqd/309:00:263
11865995520,3cyclictest41-21ksoftirqd/310:25:163
11865995520,3cyclictest41-21ksoftirqd/307:10:153
1186499557,8cyclictest33-21ksoftirqd/208:50:142
1186499557,8cyclictest33-21ksoftirqd/208:50:132
11864995530,5cyclictest33-21ksoftirqd/210:50:142
11864995527,8cyclictest33-21ksoftirqd/210:15:222
11864995527,3cyclictest33-21ksoftirqd/207:25:242
11864995527,2cyclictest33-21ksoftirqd/211:10:162
1186399554,7cyclictest0-21swapper/111:05:011
1186399554,11cyclictest13408-21mailstats09:25:231
11863995521,6cyclictest25-21ksoftirqd/111:06:391
11862995535,5cyclictest9-21ksoftirqd/012:15:000
11862995528,5cyclictest9-21ksoftirqd/010:50:120
11862995528,4cyclictest9-21ksoftirqd/011:05:180
11862995525,4cyclictest9-21ksoftirqd/009:30:240
11862995524,6cyclictest9-21ksoftirqd/011:00:160
11865995424,7cyclictest41-21ksoftirqd/308:30:213
11865995420,4cyclictest41-21ksoftirqd/308:00:133
11865995419,6cyclictest41-21ksoftirqd/311:30:173
11864995428,5cyclictest33-21ksoftirqd/209:35:212
11864995428,3cyclictest33-21ksoftirqd/209:45:152
11864995427,3cyclictest33-21ksoftirqd/211:35:232
11864995425,6cyclictest33-21ksoftirqd/212:05:252
11864995425,3cyclictest33-21ksoftirqd/207:30:242
11864995424,7cyclictest33-21ksoftirqd/210:20:122
11864995424,7cyclictest33-21ksoftirqd/210:20:112
11864995423,6cyclictest33-21ksoftirqd/208:40:002
1186399548,7cyclictest11256-21tr10:30:171
1186399546,6cyclictest22153-21ls10:50:251
11865995331,3cyclictest41-21ksoftirqd/307:35:113
11865995329,3cyclictest41-21ksoftirqd/310:10:253
11865995327,4cyclictest41-21ksoftirqd/308:40:283
11865995324,7cyclictest41-21ksoftirqd/311:10:233
11865995324,5cyclictest41-21ksoftirqd/309:59:593
11865995324,4cyclictest41-21ksoftirqd/308:20:183
11865995319,7cyclictest41-21ksoftirqd/310:00:143
11865995316,9cyclictest41-21ksoftirqd/309:25:163
11864995317,8cyclictest33-21ksoftirqd/207:55:142
1186399536,6cyclictest16950-21df_abs07:20:151
1186399530,16cyclictest28450-21kernelversion08:50:201
1186399530,16cyclictest28450-21kernelversion08:50:191
1186399530,11cyclictest6890-21sed12:35:191
1186399530,11cyclictest5691-21cut11:25:201
1186599526,7cyclictest41-21ksoftirqd/308:00:003
11865995232,10cyclictest41-21ksoftirqd/308:30:003
11865995225,3cyclictest41-21ksoftirqd/309:30:243
11865995225,3cyclictest41-21ksoftirqd/307:30:173
11865995218,8cyclictest41-21ksoftirqd/310:15:163
11865995217,8cyclictest41-21ksoftirqd/310:55:253
11864995231,6cyclictest33-21ksoftirqd/208:55:302
11864995231,6cyclictest33-21ksoftirqd/208:55:292
11864995227,3cyclictest33-21ksoftirqd/212:35:012
11864995226,3cyclictest33-21ksoftirqd/212:00:212
11864995226,3cyclictest33-21ksoftirqd/208:40:292
11864995222,2cyclictest33-21ksoftirqd/212:35:272
11864995219,8cyclictest33-21ksoftirqd/210:25:192
1186399527,6cyclictest28710-21cat12:15:151
1186399527,6cyclictest21737-21/usr/sbin/munin09:45:211
1186399526,7cyclictest2070-21cut07:55:231
1186399526,7cyclictest14985-21cut07:15:191
1186399526,6cyclictest3383-21cut09:05:181
1186399520,18cyclictest16366-21chrt11:48:091
11865995127,3cyclictest41-21ksoftirqd/309:50:193
11865995126,4cyclictest41-21ksoftirqd/308:35:243
11864995131,3cyclictest33-21ksoftirqd/208:00:222
11864995128,3cyclictest33-21ksoftirqd/211:00:002
11864995128,2cyclictest33-21ksoftirqd/211:45:182
11864995125,3cyclictest33-21ksoftirqd/208:15:242
11864995122,2cyclictest33-21ksoftirqd/211:40:252
1186399517,7cyclictest15154-21dpkg08:25:001
1186399516,6cyclictest27218-21cat12:10:201
1186399516,6cyclictest25018-21cut09:50:191
1186399515,7cyclictest20981-21cut08:35:201
1186399515,6cyclictest5464-21latency_hist08:05:011
1186399515,6cyclictest28885-21latency_hist10:00:001
1186399514,11cyclictest13276-21mailstats07:10:241
134391500,3getstats0-21swapper/312:05:133
11865995033,7cyclictest41-21ksoftirqd/308:50:133
11865995033,7cyclictest41-21ksoftirqd/308:50:133
11865995026,4cyclictest41-21ksoftirqd/307:50:173
11865995026,4cyclictest41-21ksoftirqd/307:50:163
11865995018,3cyclictest41-21ksoftirqd/312:19:093
11864995029,5cyclictest33-21ksoftirqd/208:05:272
11864995025,3cyclictest33-21ksoftirqd/211:25:172
11864995022,11cyclictest33-21ksoftirqd/210:42:012
11864995017,4cyclictest33-21ksoftirqd/211:05:162
1186399508,6cyclictest865-21irqrtprio09:00:181
1186399507,7cyclictest4824-21awk12:30:221
1186399507,7cyclictest18989-21http09:40:001
1186399506,7cyclictest19623-21tune2fs11:55:151
1186399506,6cyclictest20095-21sed07:25:221
1186399506,5cyclictest2396-21phc2sys12:25:211
1186399504,7cyclictest5152-21cut10:15:221
1186399504,6cyclictest12798-21latency_hist08:20:001
11864994926,10cyclictest33-21ksoftirqd/211:00:252
11864994921,2cyclictest33-21ksoftirqd/209:15:192
1186399497,8cyclictest18091-21sed11:50:251
1186399497,7cyclictest31455-21tr08:55:281
1186399497,7cyclictest31455-21tr08:55:271
1186399496,7cyclictest6014-21df_abs08:05:151
1186399495,7cyclictest15895-21cpuspeed10:40:151
1186399491,12cyclictest23180-21cstates10:55:171
1186399490,16cyclictest19694-21ls10:45:241
11865994831,7cyclictest41-21ksoftirqd/308:15:163
11865994825,5cyclictest41-21ksoftirqd/312:35:143
1186499483,6cyclictest14003-21sshd07:14:592
11864994828,10cyclictest33-21ksoftirqd/207:45:132
11864994822,3cyclictest33-21ksoftirqd/210:00:202
11864994821,5cyclictest33-21ksoftirqd/207:50:212
11864994821,5cyclictest33-21ksoftirqd/207:50:212
11864994813,3cyclictest33-21ksoftirqd/209:00:162
1186399487,8cyclictest22559-21/usr/sbin/munin07:30:231
1186399487,5cyclictest24533-21sed07:35:171
1186399486,7cyclictest31130-21dpkg12:20:011
1186399486,7cyclictest31130-21dpkg12:20:011
1186399486,6cyclictest30169-21awk07:45:271
1186399485,6cyclictest15787-21df_abs08:25:151
1186399482,6cyclictest0-21swapper/108:10:271
11865994724,5cyclictest41-21ksoftirqd/311:00:293
11865994721,6cyclictest41-21ksoftirqd/307:50:013
11864994718,4cyclictest33-21ksoftirqd/209:40:172
1186399477,7cyclictest21715-21sed09:45:021
1186399476,7cyclictest31262-21cut11:10:221
1186399476,6cyclictest21737-21expr12:00:161
1186399471,9cyclictest17996-21cstates08:30:161
11864994632,4cyclictest33-21ksoftirqd/208:45:132
11864994626,8cyclictest33-21ksoftirqd/210:35:132
11864994616,7cyclictest33-21ksoftirqd/209:20:132
1186399466,5cyclictest10438-21awk10:25:291
1186399463,6cyclictest7486-21expr11:30:141
1186399461,19cyclictest30419-21grep10:00:251
1186399461,15cyclictest10019-21diskstats11:35:151
11864994528,5cyclictest33-21ksoftirqd/211:53:332
11864994528,3cyclictest33-21ksoftirqd/209:55:162
1186399452,9cyclictest15452-21/usr/sbin/munin09:30:221
11864994426,3cyclictest33-21ksoftirqd/207:37:482
1186399444,6cyclictest27125-21latency07:40:211
1186399443,6cyclictest6404-21cpuspeed10:20:111
1186399443,6cyclictest6404-21cpuspeed10:20:111
1186399442,5cyclictest0-21swapper/110:35:261
1186399432,14cyclictest30860-21chrt07:50:091
1186399432,14cyclictest30860-21chrt07:50:081
1186399431,10cyclictest6021-21uname09:10:221
1186399422,5cyclictest0-21swapper/111:42:581
1186399362,5cyclictest0-21swapper/110:10:311
11863993330,2cyclictest241ktimersoftd/109:20:221
11863993327,4cyclictest25-21ksoftirqd/112:07:551
11863992823,3cyclictest25-21ksoftirqd/111:20:291
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional