You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-16 - 16:35
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackfslot7.osadl.org (updated Tue Dec 16, 2025 12:46:09)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
882921999011,60cyclictest1036954-21/usr/sbin/munin11:40:224
88292199823,59cyclictest899956-21munin-run07:40:014
882921997335,19cyclictest912518-21cat08:00:174
882921997335,19cyclictest1019042-21users11:05:264
882921997133,38cyclictest0-21swapper/411:29:134
882921997132,39cyclictest0-21swapper/410:14:574
882921997031,39cyclictest0-21swapper/412:05:064
882921996930,39cyclictest0-21swapper/410:26:334
882921996930,39cyclictest0-21swapper/409:02:334
882921996830,19cyclictest1016919-21sed11:05:014
882921996829,39cyclictest0-21swapper/409:24:134
882921996828,39cyclictest1014116-21sed11:00:024
882921996828,39cyclictest0-21swapper/411:13:294
882921996728,39cyclictest0-21swapper/410:47:064
882921996728,39cyclictest0-21swapper/410:41:014
882921996728,39cyclictest0-21swapper/409:46:294
882921996728,39cyclictest0-21swapper/408:43:384
882921996628,19cyclictest0-21swapper/410:05:174
88292199634,0cyclictest0-21swapper/409:57:074
88292199601,19cyclictest0-21swapper/411:54:554
88292199600,59cyclictest0-21swapper/407:33:524
88292199580,58cyclictest0-21swapper/410:02:484
882922995717,39cyclictest927036-21chrt08:25:185
88292199570,18cyclictest0-21swapper/410:37:554
88292199570,17cyclictest0-21swapper/409:05:484
88292199560,17cyclictest0-21swapper/411:32:084
882921995517,19cyclictest876-21mta-sts-daemon07:57:344
882921995517,19cyclictest601ktimers/408:10:214
882921995517,19cyclictest1040481-21hddtemp_smartct11:45:154
882921995516,39cyclictest0-21swapper/407:20:184
88292199550,55cyclictest0-21swapper/411:59:164
88292199550,55cyclictest0-21swapper/410:19:164
88292199550,55cyclictest0-21swapper/410:19:154
88292199550,55cyclictest0-21swapper/407:54:364
88292199550,55cyclictest0-21swapper/407:49:034
882921995419,35cyclictest0-21swapper/412:20:304
882921995415,39cyclictest878683-21kworker/u32:1+flush-8:007:19:294
882922995315,19cyclictest0-21swapper/509:25:185
882921995319,34cyclictest0-21swapper/412:25:254
882921995319,34cyclictest0-21swapper/409:15:544
882921995313,39cyclictest975194-21/usr/sbin/munin09:50:144
882921995233,19cyclictest0-21swapper/412:15:334
882921995233,19cyclictest0-21swapper/412:10:254
882921995233,19cyclictest0-21swapper/410:20:104
882921995233,19cyclictest0-21swapper/409:25:184
882921995233,19cyclictest0-21swapper/408:34:264
882921995233,19cyclictest0-21swapper/408:28:574
882921995233,19cyclictest0-21swapper/408:06:344
882917995213,19cyclictest0-21swapper/009:10:170
882922995113,19cyclictest0-21swapper/512:35:135
882921995132,19cyclictest0-21swapper/410:50:094
882921995132,19cyclictest0-21swapper/409:31:534
882921995132,19cyclictest0-21swapper/409:13:494
882921995132,19cyclictest0-21swapper/408:24:144
882921995132,19cyclictest0-21swapper/407:40:254
882921995132,0cyclictest0-21swapper/411:20:414
882921995111,1cyclictest0-21swapper/407:10:034
882918995113,19cyclictest0-21swapper/108:55:171
882921995032,18cyclictest0-21swapper/407:26:014
882921995031,19cyclictest0-21swapper/411:17:184
882921995031,19cyclictest0-21swapper/410:33:104
882917995012,19cyclictest0-21swapper/011:15:170
882917995012,19cyclictest0-21swapper/009:25:170
882921994930,19cyclictest0-21swapper/412:36:254
882921994930,19cyclictest0-21swapper/412:33:544
882921994930,19cyclictest0-21swapper/408:58:224
882919994949,0cyclictest0-21swapper/209:05:172
882921994829,19cyclictest0-21swapper/412:03:054
882921994829,19cyclictest0-21swapper/411:35:094
882921994829,19cyclictest0-21swapper/408:48:014
882921994829,0cyclictest0-21swapper/409:38:594
88291799489,38cyclictest0-21swapper/007:55:170
882921994728,19cyclictest0-21swapper/408:52:334
882921994728,19cyclictest0-21swapper/408:39:054
882921994728,19cyclictest0-21swapper/408:18:504
882922994645,1cyclictest0-21swapper/509:55:165
882921994526,19cyclictest0-21swapper/409:41:464
88291799457,19cyclictest0-21swapper/011:00:150
882918994122,19cyclictest321rcuc/112:00:161
882922993920,19cyclictest0-21swapper/510:50:175
88292299391,38cyclictest0-21swapper/510:55:175
88292199390,19cyclictest0-21swapper/407:10:024
88292199390,19cyclictest0-21swapper/407:10:014
88291799390,38cyclictest0-21swapper/009:20:240
88291799390,20cyclictest0-21swapper/010:55:180
88291799380,37cyclictest0-21swapper/012:25:160
88291799380,19cyclictest0-21swapper/008:50:160
88291799380,19cyclictest0-21swapper/007:35:180
882922993719,18cyclictest0-21swapper/508:30:165
882922993718,19cyclictest691ktimers/511:35:185
882917993717,19cyclictest171ktimers/010:05:180
88292399350,15cyclictest0-21swapper/612:25:176
88292399350,15cyclictest0-21swapper/612:10:176
88292299350,15cyclictest0-21swapper/512:30:165
88291899350,15cyclictest0-21swapper/112:20:141
882917993514,20cyclictest0-21swapper/011:40:190
88291799350,16cyclictest0-21swapper/008:10:160
88291799350,15cyclictest0-21swapper/008:55:180
88291799350,15cyclictest0-21swapper/007:25:160
88292499340,34cyclictest0-21swapper/709:50:177
882923993414,19cyclictest0-21swapper/608:10:166
882923993413,20cyclictest0-21swapper/611:35:176
88292399340,14cyclictest0-21swapper/610:55:176
882922993415,19cyclictest0-21swapper/511:25:185
882922993415,19cyclictest0-21swapper/507:55:165
88292299340,15cyclictest0-21swapper/509:15:175
88291899340,15cyclictest0-21swapper/108:30:171
88291899340,15cyclictest0-21swapper/107:50:171
882917993434,0cyclictest1052294-21kworker/0:2+events12:31:530
882917993414,19cyclictest0-21swapper/009:05:170
882924993314,19cyclictest0-21swapper/712:15:177
882924993314,19cyclictest0-21swapper/709:30:187
882924993314,19cyclictest0-21swapper/708:15:187
882923993314,19cyclictest0-21swapper/611:20:186
882923993314,19cyclictest0-21swapper/610:15:186
882923993314,19cyclictest0-21swapper/610:15:176
882923993314,19cyclictest0-21swapper/609:35:166
882923993314,19cyclictest0-21swapper/609:10:186
882923993314,19cyclictest0-21swapper/607:20:166
882923993314,19cyclictest0-21swapper/607:15:186
882923993313,19cyclictest0-21swapper/610:40:166
882923993313,19cyclictest0-21swapper/609:05:176
882922993314,19cyclictest0-21swapper/512:25:165
882922993314,19cyclictest0-21swapper/512:20:145
882922993314,19cyclictest0-21swapper/512:10:155
882922993314,19cyclictest0-21swapper/511:15:185
882922993314,19cyclictest0-21swapper/510:30:165
882922993314,19cyclictest0-21swapper/510:25:185
882922993314,19cyclictest0-21swapper/510:20:175
882922993314,19cyclictest0-21swapper/510:10:165
882922993314,19cyclictest0-21swapper/509:50:225
882922993314,19cyclictest0-21swapper/509:40:175
882922993314,19cyclictest0-21swapper/509:30:175
882922993314,19cyclictest0-21swapper/509:20:175
882922993314,19cyclictest0-21swapper/508:40:175
882922993314,19cyclictest0-21swapper/508:35:165
882919993314,19cyclictest0-21swapper/212:00:172
882919993314,19cyclictest0-21swapper/211:55:172
882919993314,19cyclictest0-21swapper/211:45:172
882919993314,19cyclictest0-21swapper/209:45:172
882918993314,19cyclictest0-21swapper/112:35:131
882918993314,19cyclictest0-21swapper/110:35:171
882918993314,19cyclictest0-21swapper/110:00:171
882918993314,19cyclictest0-21swapper/109:25:191
882918993314,19cyclictest0-21swapper/108:50:171
882918993314,19cyclictest0-21swapper/108:45:161
882918993314,19cyclictest0-21swapper/108:40:171
882918993314,19cyclictest0-21swapper/107:55:161
882917993314,19cyclictest0-21swapper/011:25:180
882917993314,19cyclictest0-21swapper/010:20:170
882917993314,19cyclictest0-21swapper/009:35:160
882917993314,19cyclictest0-21swapper/008:15:180
882917993314,19cyclictest0-21swapper/007:20:160
882917993312,20cyclictest0-21swapper/007:40:150
882924993213,19cyclictest0-21swapper/710:45:177
882923993213,19cyclictest0-21swapper/608:05:156
882923993213,19cyclictest0-21swapper/608:00:176
882923993213,19cyclictest0-21swapper/607:40:156
882923993213,19cyclictest0-21swapper/607:30:176
882923993212,19cyclictest0-21swapper/610:25:196
882923993212,19cyclictest0-21swapper/607:50:166
882922993213,19cyclictest0-21swapper/510:45:165
882922993212,19cyclictest0-21swapper/507:15:185
882919993213,19cyclictest0-21swapper/208:32:042
882918993213,19cyclictest0-21swapper/110:30:161
882918993213,19cyclictest0-21swapper/110:05:171
882917993213,19cyclictest0-21swapper/010:35:180
882917993213,19cyclictest0-21swapper/009:40:180
882917993212,19cyclictest0-21swapper/010:25:180
882923993131,0cyclictest0-21swapper/611:40:186
882923993112,19cyclictest0-21swapper/612:05:166
882923993112,19cyclictest0-21swapper/607:35:186
882923993112,19cyclictest0-21swapper/607:25:176
882923993111,19cyclictest0-21swapper/611:55:176
882923993111,19cyclictest0-21swapper/608:30:226
882922993113,18cyclictest0-21swapper/511:05:165
882922993112,19cyclictest0-21swapper/509:00:175
882922993112,19cyclictest0-21swapper/507:50:175
882918993112,19cyclictest0-21swapper/109:05:181
882918993112,19cyclictest0-21swapper/108:25:171
882917993112,19cyclictest0-21swapper/009:45:160
882917993111,19cyclictest0-21swapper/010:50:160
882917993111,19cyclictest0-21swapper/009:00:160
882917993110,20cyclictest0-21swapper/008:35:150
882923993011,19cyclictest0-21swapper/611:10:176
882923993011,19cyclictest0-21swapper/608:55:176
882923993011,19cyclictest0-21swapper/607:45:176
882922993011,19cyclictest0-21swapper/509:10:175
882922993011,19cyclictest0-21swapper/508:45:165
882922993010,20cyclictest0-21swapper/512:00:175
882920993010,19cyclictest0-21swapper/309:15:233
882919993011,19cyclictest0-21swapper/211:20:172
882919993011,19cyclictest0-21swapper/207:15:182
882918993011,19cyclictest0-21swapper/111:05:171
882917993012,0cyclictest0-21swapper/008:25:170
882917993011,19cyclictest0-21swapper/011:30:170
882917993011,19cyclictest0-21swapper/009:30:180
882917993010,19cyclictest0-21swapper/011:50:170
882917993010,19cyclictest0-21swapper/010:40:160
882923992910,19cyclictest0-21swapper/611:30:176
882923992910,19cyclictest0-21swapper/610:10:156
882923992910,19cyclictest0-21swapper/609:45:166
882920992929,0cyclictest0-21swapper/310:15:173
882920992929,0cyclictest0-21swapper/310:15:173
882920992910,19cyclictest0-21swapper/311:55:183
882920992910,19cyclictest0-21swapper/311:50:173
882920992910,19cyclictest0-21swapper/311:45:173
882920992910,19cyclictest0-21swapper/310:05:183
882920992910,19cyclictest0-21swapper/309:50:163
882920992910,19cyclictest0-21swapper/309:00:163
882920992910,19cyclictest0-21swapper/308:50:163
882920992910,19cyclictest0-21swapper/308:05:153
882920992910,19cyclictest0-21swapper/307:45:183
882919992911,0cyclictest0-21swapper/210:45:162
882918992910,19cyclictest0-21swapper/109:10:171
88292399288,19cyclictest0-21swapper/612:15:236
88292399287,19cyclictest0-21swapper/607:10:186
88292299289,19cyclictest0-21swapper/507:45:165
88292099289,19cyclictest0-21swapper/312:20:153
88292099289,19cyclictest0-21swapper/311:25:173
88292099289,19cyclictest0-21swapper/311:00:163
88292099289,19cyclictest0-21swapper/310:00:163
88292099289,19cyclictest0-21swapper/309:40:183
88292099289,19cyclictest0-21swapper/308:45:173
88292099289,19cyclictest0-21swapper/308:20:173
88292099288,19cyclictest0-21swapper/309:25:173
88291899289,0cyclictest0-21swapper/108:35:151
88292499278,19cyclictest0-21swapper/712:20:157
88292299277,19cyclictest0-21swapper/509:35:235
88292099278,19cyclictest0-21swapper/312:35:143
88292099278,19cyclictest0-21swapper/311:40:183
88292099278,19cyclictest0-21swapper/311:05:163
88292099278,19cyclictest0-21swapper/310:50:163
88292099278,19cyclictest0-21swapper/310:10:213
88292099278,19cyclictest0-21swapper/308:00:173
88292099278,19cyclictest0-21swapper/307:40:153
88292099277,19cyclictest0-21swapper/308:15:183
88291999278,19cyclictest0-21swapper/211:50:182
88291999278,19cyclictest0-21swapper/209:55:172
88291899278,19cyclictest0-21swapper/111:57:411
88291799278,19cyclictest0-21swapper/012:35:140
88291799278,19cyclictest0-21swapper/012:05:160
88292099268,18cyclictest0-21swapper/312:00:163
88292099267,19cyclictest0-21swapper/312:10:173
88292099267,19cyclictest0-21swapper/312:05:163
88292099267,19cyclictest0-21swapper/307:55:173
88291899267,19cyclictest0-21swapper/109:35:161
882917992626,0cyclictest988948-21kworker/0:1+events10:33:370
882917992626,0cyclictest951182-21kworker/0:0+events09:18:530
88292399256,19cyclictest0-21swapper/608:35:166
88292299256,19cyclictest0-21swapper/508:50:175
88292099257,18cyclictest0-21swapper/309:20:183
88292099256,19cyclictest0-21swapper/310:40:163
88292099256,19cyclictest0-21swapper/307:30:173
88291999256,19cyclictest0-21swapper/207:20:222
88291799256,19cyclictest0-21swapper/011:55:180
882917992525,0cyclictest988948-21kworker/0:1+events11:08:530
88292399244,19cyclictest0-21swapper/610:45:176
88292299245,19cyclictest0-21swapper/508:20:165
88292099245,19cyclictest0-21swapper/311:30:173
88292099245,19cyclictest0-21swapper/307:10:183
88291799245,19cyclictest0-21swapper/010:45:230
88291799245,19cyclictest0-21swapper/008:40:220
88292399233,19cyclictest0-21swapper/610:05:266
88292299234,19cyclictest0-21swapper/511:30:165
88292099235,18cyclictest0-21swapper/310:20:173
88292099235,18cyclictest0-21swapper/307:25:163
88292099234,19cyclictest0-21swapper/310:35:183
88292099234,19cyclictest0-21swapper/308:58:453
88291899230,23cyclictest0-21swapper/111:35:131
882917992320,3cyclictest962735-21kworker/0:2+events09:56:310
882917992319,4cyclictest1052294-21kworker/0:2+events12:15:020
88291799231,15cyclictest1087-21snmpd07:46:030
882924992215,7cyclictest30750irq/60-ahci[0000:00:07.0]07:20:277
88292299223,19cyclictest0-21swapper/508:10:155
88292099223,19cyclictest0-21swapper/311:10:553
88292099223,19cyclictest0-21swapper/309:46:483
88291899223,19cyclictest0-21swapper/110:40:171
88291899220,22cyclictest0-21swapper/111:17:261
88291899220,22cyclictest0-21swapper/107:26:451
88291799223,19cyclictest0-21swapper/011:20:180
882917992222,0cyclictest988948-21kworker/0:1+events10:17:220
882917992222,0cyclictest988948-21kworker/0:1+events10:17:210
882917992220,2cyclictest931249-21kworker/0:1+events08:45:020
882917992220,2cyclictest891128-21kworker/0:0+events08:05:140
882917992220,2cyclictest891128-21kworker/0:0+events07:35:010
882917992220,1cyclictest891128-21kworker/0:0+events08:00:130
882917992218,4cyclictest916429-21kworker/0:2+events08:25:020
882924992120,1cyclictest1040626-21ethtool11:45:167
882924992119,1cyclictest947223-21mii-tool09:00:167
88292399212,19cyclictest0-21swapper/609:00:176
882923992119,1cyclictest1087-21snmpd12:04:296
882923992117,3cyclictest0-21swapper/610:35:186
88292099212,19cyclictest0-21swapper/310:34:513
882920992120,0cyclictest1087-21snmpd12:33:503
882920992119,1cyclictest1006662-21ethtool10:45:173
88291899210,21cyclictest0-21swapper/111:29:501
88291899210,21cyclictest0-21swapper/111:23:251
88291899210,21cyclictest0-21swapper/109:59:291
88291899210,21cyclictest0-21swapper/109:24:291
88291899210,21cyclictest0-21swapper/109:16:421
88291899210,21cyclictest0-21swapper/107:20:101
88291899210,20cyclictest0-21swapper/107:14:211
88291899210,0cyclictest0-21swapper/111:30:191
88291899210,0cyclictest0-21swapper/110:47:211
88291899210,0cyclictest0-21swapper/107:15:091
882917992120,0cyclictest876475-21kworker/0:2+events07:10:040
882917992119,2cyclictest988948-21kworker/0:1+events11:15:010
882917992119,2cyclictest979912-21kworker/0:0+events10:10:470
882917992119,2cyclictest1052294-21kworker/0:2+events12:25:020
882917992119,2cyclictest1052294-21kworker/0:2+events12:20:010
882917992118,3cyclictest1036365-21kworker/0:0+events12:01:310
882917992117,4cyclictest1036365-21kworker/0:0+events11:45:170
882924992020,0cyclictest984212-21mii-tool10:05:187
882924992020,0cyclictest962208-21sensors09:25:247
882924992020,0cyclictest958716-21mii-tool09:20:177
882924992020,0cyclictest956586-21sensors09:15:247
882924992020,0cyclictest915269-21mii-tool08:05:167
882924992020,0cyclictest1046218-21mii-tool11:55:187
882924992020,0cyclictest1043433-21mii-tool11:50:177
882924992020,0cyclictest1029408-21mii-tool11:25:187
882924992020,0cyclictest1001039-21ethtool10:35:187
882924992019,1cyclictest989813-21mii-tool10:15:187
882924992019,1cyclictest989813-21mii-tool10:15:177
882924992019,1cyclictest923977-21mii-tool08:20:177
88292499200,20cyclictest0-21swapper/710:53:527
88292499200,20cyclictest0-21swapper/708:25:177
88292499200,20cyclictest0-21swapper/707:10:597
882923992020,0cyclictest1043414-21mii-tool11:50:176
882923992019,1cyclictest1087-21snmpd08:18:066
882923992018,1cyclictest1087-21snmpd12:35:096
88292399200,20cyclictest0-21swapper/610:51:016
882922992020,0cyclictest950007-21mii-tool09:05:175
88292299201,19cyclictest0-21swapper/508:00:185
88292299200,20cyclictest0-21swapper/511:01:415
882920992019,1cyclictest964558-21ethtool09:30:183
882920992019,1cyclictest1087-21snmpd08:40:223
88292099201,19cyclictest52-21ksoftirqd/307:52:393
88292099201,19cyclictest0-21swapper/308:34:423
88292099200,19cyclictest0-21swapper/312:15:173
882919992020,0cyclictest1051851-21ethtool12:05:162
882919992019,1cyclictest938520-21cat08:45:162
882919992019,1cyclictest1087-21snmpd10:28:022
882919992019,1cyclictest1087-21snmpd08:50:262
88291999200,20cyclictest0-21swapper/208:05:572
88291999200,20cyclictest0-21swapper/207:48:572
88291899205,15cyclictest894328-21kworker/3:207:45:011
882918992020,0cyclictest1087-21snmpd07:36:111
882918992019,1cyclictest1009464-21ethtool10:50:161
88291899201,19cyclictest0-21swapper/109:50:171
88291899200,20cyclictest0-21swapper/112:29:291
88291899200,20cyclictest0-21swapper/111:11:371
88291899200,20cyclictest0-21swapper/109:48:451
88291899200,20cyclictest0-21swapper/109:01:011
88291899200,20cyclictest0-21swapper/108:15:101
88291899200,20cyclictest0-21swapper/107:31:501
88291899200,0cyclictest0-21swapper/112:18:341
88291899200,0cyclictest0-21swapper/111:40:501
882917992020,0cyclictest979912-21kworker/0:0+events10:00:590
882917992020,0cyclictest962735-21kworker/0:2+events09:50:220
882917992020,0cyclictest876475-21kworker/0:2+events07:19:110
882917992018,2cyclictest988948-21kworker/0:1+events11:35:170
88291799200,20cyclictest0-21swapper/007:50:030
882924991919,0cyclictest981409-21mii-tool10:00:167
882924991919,0cyclictest970207-21mii-tool09:40:187
882924991919,0cyclictest941569-21mii-tool08:50:167
882924991919,0cyclictest938508-21mii-tool08:45:167
882924991919,0cyclictest903803-21mii-tool07:45:167
882924991919,0cyclictest1051855-21mii-tool12:05:177
882924991918,1cyclictest987029-21mii-tool10:10:157
882924991918,1cyclictest1087-21snmpd08:14:577
882924991918,1cyclictest1068681-21ethtool12:35:137
882924991918,1cyclictest1049053-21ethtool12:00:167
882924991918,1cyclictest1015108-21ethtool11:00:167
88292499190,19cyclictest0-21swapper/711:22:117
88292499190,19cyclictest0-21swapper/711:17:357
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional