You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-07 - 12:54
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackfslot7.osadl.org (updated Tue Apr 07, 2026 00:46:15)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1060865998123,58cyclictest1229704-21/usr/sbin/munin00:15:136
1060865997315,39cyclictest1078910-21sed19:40:206
1060865997233,39cyclictest0-21swapper/623:28:206
1060865997233,19cyclictest1060858-21cyclictest19:27:046
1060865997233,19cyclictest1060858-21cyclictest19:27:036
1060865997233,19cyclictest0-21swapper/621:11:446
1060865997132,39cyclictest7850ktimers/622:23:286
1060865997132,39cyclictest0-21swapper/623:32:406
1060865997111,59cyclictest1177573-21kworker/u32:4+events_unbound23:42:026
1060865997031,19cyclictest0-21swapper/622:56:226
1060865997031,19cyclictest0-21swapper/622:27:406
1060865997010,59cyclictest1127433-21kworker/u32:1+events_unbound21:15:046
1060865996911,39cyclictest744688-21kworker/u32:0+events_unbound19:34:166
1060863996910,39cyclictest1097690-21taskset20:15:154
1060865996829,39cyclictest0-21swapper/621:29:386
1060865996829,19cyclictest0-21swapper/620:09:286
1060865996811,38cyclictest1138602-21kworker/u32:2+events_unbound22:51:406
106086599679,39cyclictest1177573-21kworker/u32:4+events_unbound22:43:136
1060865996728,19cyclictest0-21swapper/622:08:206
106086599656,39cyclictest236199-21snmpd00:32:066
106086599656,19cyclictest0-21swapper/621:23:346
1060865996526,21cyclictest0-21swapper/623:35:066
1060865996526,21cyclictest0-21swapper/623:35:066
1060865996324,19cyclictest0-21swapper/620:43:226
1060865996324,19cyclictest0-21swapper/619:58:386
1060865996042,18cyclictest0-21swapper/622:15:226
1060865996021,39cyclictest0-21swapper/623:04:266
106086599590,40cyclictest1220079-21ld23:55:206
1060865995738,19cyclictest781ktimers/623:24:146
106085999570,38cyclictest1120033-21taskset20:55:150
1060865995655,1cyclictest781ktimers/621:00:416
1060865995637,19cyclictest1074862-21/usr/sbin/munin19:35:126
1060865995436,18cyclictest105-21kcompactd022:00:106
1060865995419,35cyclictest0-21swapper/621:36:506
1060865995419,35cyclictest0-21swapper/620:04:356
1060865995416,19cyclictest1106562-21cat20:30:166
1060865995415,39cyclictest0-21swapper/600:10:206
1060865995414,19cyclictest0-21swapper/619:54:366
1060865995319,34cyclictest0-21swapper/619:24:166
1060865995319,34cyclictest0-21swapper/619:24:166
1060865995319,15cyclictest0-21swapper/622:34:516
1060865995319,15cyclictest0-21swapper/619:14:206
1060865995319,15cyclictest0-21swapper/619:14:196
1060865995314,39cyclictest0-21swapper/623:47:386
1060865995314,39cyclictest0-21swapper/621:54:406
1060865995314,39cyclictest0-21swapper/621:32:266
1060865995314,19cyclictest0-21swapper/622:36:186
1060865995314,19cyclictest0-21swapper/621:09:546
1060865995314,19cyclictest0-21swapper/600:23:386
1060865995314,19cyclictest0-21swapper/600:09:496
1060865995313,19cyclictest0-21swapper/620:25:006
1060865995313,19cyclictest0-21swapper/620:19:486
1060861995314,19cyclictest0-21swapper/219:55:152
1060865995233,19cyclictest1192709-21ntpq23:05:206
1060865995233,19cyclictest0-21swapper/622:14:426
1060865995233,19cyclictest0-21swapper/621:49:516
1060865995233,19cyclictest0-21swapper/621:43:366
1060865995233,19cyclictest0-21swapper/620:25:246
1060865995214,38cyclictest1174125-21kworker/u32:1+events_unbound23:16:496
1060865995213,39cyclictest771rcuc/621:55:206
1060865995213,19cyclictest0-21swapper/619:18:386
1060864995214,19cyclictest0-21swapper/521:40:165
1060865995133,18cyclictest0-21swapper/620:46:226
1060865995132,19cyclictest0-21swapper/623:54:286
1060865995132,19cyclictest0-21swapper/622:47:066
1060865995132,19cyclictest0-21swapper/620:38:246
1060865995132,19cyclictest0-21swapper/620:14:346
1060865995132,19cyclictest0-21swapper/619:48:066
1060865995132,19cyclictest0-21swapper/600:29:166
1060865995112,39cyclictest1177573-21kworker/u32:4+events_unbound00:03:026
1060865995112,39cyclictest0-21swapper/623:11:226
1060864995113,19cyclictest70-21ksoftirqd/520:50:145
1060863995133,0cyclictest0-21swapper/422:55:154
1060865995031,19cyclictest0-21swapper/620:56:346
1060865995031,19cyclictest0-21swapper/620:54:126
1060865995011,19cyclictest0-21swapper/600:35:226
1060859994911,19cyclictest0-21swapper/019:15:150
1060859994911,19cyclictest0-21swapper/000:05:160
1060861994728,19cyclictest0-21swapper/222:05:172
106086399452,19cyclictest0-21swapper/400:05:164
106086199446,19cyclictest0-21swapper/222:30:162
106086199446,19cyclictest0-21swapper/220:00:162
106086099446,19cyclictest0-21swapper/122:05:171
106086399434,38cyclictest0-21swapper/420:55:154
106086199431,19cyclictest0-21swapper/220:45:162
106086499423,39cyclictest0-21swapper/500:15:155
106085999424,19cyclictest0-21swapper/020:50:150
106086399413,19cyclictest0-21swapper/423:40:154
1060859994122,19cyclictest0-21swapper/021:05:170
106086399402,19cyclictest0-21swapper/400:25:154
106086199402,19cyclictest0-21swapper/222:55:152
106086099402,19cyclictest0-21swapper/120:00:161
1060859994022,18cyclictest0-21swapper/022:00:160
106086099391,19cyclictest0-21swapper/119:50:161
106085999390,20cyclictest16-21ksoftirqd/022:30:160
1060866993838,0cyclictest0-21swapper/721:20:597
106086399380,19cyclictest0-21swapper/420:35:154
106086399380,19cyclictest0-21swapper/400:20:154
106086499370,18cyclictest0-21swapper/521:45:145
1060864993616,19cyclictest0-21swapper/520:25:155
106086399360,1cyclictest0-21swapper/422:15:134
106086399360,17cyclictest0-21swapper/423:25:164
106086199360,17cyclictest0-21swapper/219:20:162
106086199360,17cyclictest0-21swapper/219:20:152
1060864993534,1cyclictest1072884-21awk19:30:165
1060864993516,19cyclictest0-21swapper/522:45:155
1060863993515,20cyclictest0-21swapper/420:10:154
106086199350,35cyclictest0-21swapper/220:35:152
106086099350,35cyclictest0-21swapper/119:44:411
106086099350,15cyclictest0-21swapper/119:55:151
1060862993416,18cyclictest1091468-21kworker/u32:4+events_unbound20:20:053
106086299340,34cyclictest0-21swapper/319:45:153
106086299340,34cyclictest0-21swapper/319:10:153
106086299340,34cyclictest0-21swapper/319:10:143
1060861993415,19cyclictest0-21swapper/221:45:142
1060861993414,20cyclictest0-21swapper/219:40:152
1060861993414,19cyclictest0-21swapper/200:15:152
106086199340,34cyclictest0-21swapper/221:35:122
106086199340,15cyclictest0-21swapper/223:40:152
106086199340,15cyclictest0-21swapper/200:25:152
1060860993415,19cyclictest0-21swapper/123:00:161
106086099340,14cyclictest0-21swapper/121:55:171
106085999340,34cyclictest0-21swapper/021:50:160
106085999340,15cyclictest0-21swapper/023:10:150
106085999340,15cyclictest0-21swapper/022:35:160
106085999340,15cyclictest0-21swapper/022:25:160
106085999340,15cyclictest0-21swapper/019:35:160
1060864993315,18cyclictest0-21swapper/520:15:155
1060864993314,19cyclictest0-21swapper/523:15:165
1060864993314,19cyclictest0-21swapper/519:25:165
1060864993314,19cyclictest0-21swapper/519:25:165
1060864993314,19cyclictest0-21swapper/500:00:155
1060863993314,19cyclictest0-21swapper/423:50:144
1060863993314,19cyclictest0-21swapper/422:50:164
1060863993314,19cyclictest0-21swapper/421:30:144
1060863993314,19cyclictest0-21swapper/421:05:174
1060863993314,19cyclictest0-21swapper/420:40:154
1060863993313,19cyclictest0-21swapper/421:00:174
1060861993314,19cyclictest0-21swapper/223:45:152
1060861993314,19cyclictest0-21swapper/223:35:162
1060861993314,19cyclictest0-21swapper/223:35:152
1060861993314,19cyclictest0-21swapper/222:10:172
1060861993314,19cyclictest0-21swapper/221:55:162
1060861993314,19cyclictest0-21swapper/221:25:152
1060861993314,19cyclictest0-21swapper/221:10:152
1060861993314,19cyclictest0-21swapper/220:10:152
1060861993314,19cyclictest0-21swapper/219:35:162
1060861993314,19cyclictest0-21swapper/200:35:152
1060861993313,19cyclictest0-21swapper/223:05:162
1060861993313,19cyclictest0-21swapper/222:25:162
1060860993314,19cyclictest0-21swapper/123:50:151
1060860993314,19cyclictest0-21swapper/122:55:151
1060860993313,19cyclictest0-21swapper/120:44:541
1060859993315,18cyclictest251irq_work/023:55:150
1060859993314,19cyclictest0-21swapper/023:25:150
1060859993314,19cyclictest0-21swapper/021:30:150
1060859993314,19cyclictest0-21swapper/021:15:170
1060859993314,19cyclictest0-21swapper/020:35:150
1060859993314,19cyclictest0-21swapper/000:10:160
1060864993214,0cyclictest0-21swapper/520:20:175
1060864993213,19cyclictest0-21swapper/523:00:165
1060864993213,19cyclictest0-21swapper/522:50:175
1060864993213,19cyclictest0-21swapper/521:55:175
1060864993213,19cyclictest0-21swapper/519:40:145
1060864993213,19cyclictest0-21swapper/500:25:215
1060864993213,19cyclictest0-21swapper/500:20:215
1060863993214,18cyclictest0-21swapper/423:20:144
1060863993214,18cyclictest0-21swapper/419:50:164
1060863993213,19cyclictest0-21swapper/422:25:154
1060863993213,19cyclictest0-21swapper/420:30:144
1060863993212,20cyclictest0-21swapper/423:00:164
1060861993213,19cyclictest0-21swapper/222:40:152
1060861993213,19cyclictest0-21swapper/222:35:222
1060861993213,19cyclictest0-21swapper/220:15:142
1060861993213,19cyclictest0-21swapper/219:30:162
1060861993213,19cyclictest0-21swapper/200:20:152
1060861993213,0cyclictest0-21swapper/200:00:152
1060861993212,19cyclictest0-21swapper/223:55:152
1060861993211,20cyclictest0-21swapper/223:20:142
1060860993213,19cyclictest0-21swapper/122:35:151
1060860993213,19cyclictest0-21swapper/122:20:171
1060860993213,19cyclictest0-21swapper/120:25:151
1060860993213,0cyclictest0-21swapper/122:27:521
1060859993213,19cyclictest0-21swapper/022:55:150
1060859993213,19cyclictest0-21swapper/022:45:160
1060859993213,19cyclictest0-21swapper/021:27:530
1060859993213,19cyclictest0-21swapper/020:30:140
1060859993213,19cyclictest0-21swapper/020:00:160
1060859993213,19cyclictest0-21swapper/000:15:290
1060863993112,19cyclictest0-21swapper/422:30:164
1060861993120,4cyclictest1122777-21mii-tool21:00:172
1060861993112,19cyclictest0-21swapper/223:25:222
1060861993112,19cyclictest0-21swapper/223:15:162
1060861993112,19cyclictest0-21swapper/222:15:142
1060864993011,19cyclictest0-21swapper/522:10:175
1060863993011,19cyclictest0-21swapper/421:25:234
1060863993011,19cyclictest0-21swapper/421:10:154
1060861993011,19cyclictest0-21swapper/222:00:162
1060860993011,19cyclictest0-21swapper/100:20:141
1060859993012,18cyclictest0-21swapper/019:25:160
1060859993012,18cyclictest0-21swapper/019:25:160
1060859993011,19cyclictest0-21swapper/022:40:150
1060864992910,19cyclictest0-21swapper/522:20:175
1060864992910,19cyclictest0-21swapper/519:35:165
1060863992910,19cyclictest0-21swapper/420:45:164
1060863992910,19cyclictest0-21swapper/400:35:154
1060861992919,3cyclictest1238686-21mii-tool00:30:142
1060861992910,19cyclictest0-21swapper/221:50:162
1060861992910,19cyclictest0-21swapper/219:10:152
1060861992910,19cyclictest0-21swapper/219:10:152
1060859992910,19cyclictest0-21swapper/019:45:150
106086699289,19cyclictest0-21swapper/723:45:157
106086699289,19cyclictest0-21swapper/723:05:167
106086699289,19cyclictest0-21swapper/721:50:167
106086699288,19cyclictest0-21swapper/719:15:157
106086399289,19cyclictest0-21swapper/422:40:154
106086199289,19cyclictest0-21swapper/223:30:162
106086199289,19cyclictest0-21swapper/220:40:152
106086199289,19cyclictest0-21swapper/200:05:282
106086199288,19cyclictest0-21swapper/220:05:162
1060860992810,18cyclictest0-21swapper/122:50:171
106085999289,19cyclictest0-21swapper/020:45:160
106085999289,19cyclictest0-21swapper/020:20:230
106086699278,19cyclictest0-21swapper/723:25:167
106086699278,19cyclictest0-21swapper/722:20:177
106086699278,19cyclictest0-21swapper/722:05:167
106086699278,19cyclictest0-21swapper/721:40:177
106086699278,19cyclictest0-21swapper/721:35:137
106086699278,19cyclictest0-21swapper/721:00:177
106086699278,19cyclictest0-21swapper/719:30:167
106086699278,19cyclictest0-21swapper/700:35:147
106086699278,19cyclictest0-21swapper/700:30:147
106086699278,19cyclictest0-21swapper/700:25:157
106086699278,19cyclictest0-21swapper/700:20:157
106086699278,19cyclictest0-21swapper/700:05:167
106086499278,19cyclictest0-21swapper/522:05:175
106086499278,19cyclictest0-21swapper/500:30:145
1060862992727,0cyclictest0-21swapper/323:49:203
106085999278,19cyclictest0-21swapper/022:20:170
106086699267,19cyclictest0-21swapper/723:20:147
106086699267,19cyclictest0-21swapper/720:35:157
106086699267,19cyclictest0-21swapper/719:45:157
106086699267,19cyclictest0-21swapper/719:25:167
106086699267,19cyclictest0-21swapper/719:25:167
106086699267,19cyclictest0-21swapper/719:20:167
106086699267,19cyclictest0-21swapper/719:20:157
106086699266,20cyclictest0-21swapper/723:35:167
106086699266,20cyclictest0-21swapper/723:35:157
106086499268,18cyclictest0-21swapper/521:25:165
106086499267,19cyclictest0-21swapper/523:35:165
106086499267,19cyclictest0-21swapper/523:35:165
106086399267,19cyclictest0-21swapper/419:24:374
106086399267,19cyclictest0-21swapper/419:24:374
106085999267,19cyclictest0-21swapper/023:30:160
106086699257,0cyclictest0-21swapper/723:00:157
106086699256,19cyclictest0-21swapper/723:55:157
106086699256,19cyclictest0-21swapper/722:45:167
106086699256,19cyclictest0-21swapper/700:10:167
106086499256,19cyclictest0-21swapper/520:40:155
106086499256,19cyclictest0-21swapper/519:55:155
106086499256,19cyclictest0-21swapper/519:50:165
106086199256,19cyclictest0-21swapper/200:10:162
106086099256,19cyclictest0-21swapper/119:20:161
106086099256,19cyclictest0-21swapper/119:20:161
106086699245,19cyclictest0-21swapper/723:30:167
106086399245,19cyclictest0-21swapper/420:25:154
106086099245,19cyclictest0-21swapper/123:10:141
106086099245,19cyclictest0-21swapper/122:10:171
106086099245,19cyclictest0-21swapper/119:35:161
106086699234,19cyclictest0-21swapper/720:50:157
106086699234,19cyclictest0-21swapper/720:20:167
106086699234,19cyclictest0-21swapper/700:00:157
1060861992323,0cyclictest1035180-21kworker/2:0+events23:01:382
1060861992320,3cyclictest1035180-21kworker/2:0+events22:50:002
1060861992319,3cyclictest1035180-21kworker/2:0+events23:50:182
1060861992318,4cyclictest1035180-21kworker/2:0+events20:20:162
106086099234,19cyclictest0-21swapper/122:45:161
106086099234,19cyclictest0-21swapper/121:20:241
106086099234,19cyclictest0-21swapper/121:00:171
106086099234,19cyclictest0-21swapper/119:10:151
106086099234,19cyclictest0-21swapper/119:10:141
106085999234,19cyclictest171ktimers/023:50:150
106086699223,19cyclictest0-21swapper/723:50:207
106086699223,19cyclictest0-21swapper/723:40:147
106086699223,19cyclictest0-21swapper/721:45:147
106086699223,19cyclictest0-21swapper/720:55:207
106086699223,19cyclictest0-21swapper/720:05:167
106086699223,19cyclictest0-21swapper/719:40:157
1060861992220,2cyclictest1035180-21kworker/2:0+events23:12:082
1060861992220,1cyclictest1035180-21kworker/2:0+events20:25:142
1060861992219,3cyclictest1035180-21kworker/2:0+events22:20:242
106086099220,22cyclictest0-21swapper/100:15:321
1060862992120,1cyclictest1192264-21ethtool23:05:163
1060862992118,1cyclictest1142124-21mii-tool21:35:133
1060861992118,3cyclictest1035180-21kworker/2:0+events20:55:222
1060861992118,3cyclictest1035180-21kworker/2:0+events20:55:012
1060861992117,3cyclictest1035180-21kworker/2:0+events19:25:142
1060861992117,3cyclictest1035180-21kworker/2:0+events19:25:142
106086099210,21cyclictest0-21swapper/123:05:481
106086099210,21cyclictest0-21swapper/121:48:481
106086099210,21cyclictest0-21swapper/121:15:441
106086099210,21cyclictest0-21swapper/121:14:001
106086099210,21cyclictest0-21swapper/120:38:481
106086099210,21cyclictest0-21swapper/119:16:081
106086099210,21cyclictest0-21swapper/100:27:521
1060866992020,0cyclictest1149622-21kworker/7:2+events22:02:127
1060866992019,1cyclictest236199-21snmpd19:11:207
1060866992019,1cyclictest236199-21snmpd19:11:207
1060866992019,0cyclictest1094988-21ethtool20:10:147
106086699201,19cyclictest0-21swapper/720:30:147
106086699200,0cyclictest0-21swapper/719:35:227
1060864992019,1cyclictest236199-21snmpd21:03:085
1060864992019,1cyclictest236199-21snmpd20:10:455
106086499200,20cyclictest0-21swapper/519:16:595
106086399200,20cyclictest0-21swapper/421:47:044
106086399200,1cyclictest0-21swapper/421:38:334
1060862992020,0cyclictest236199-21snmpd20:39:063
1060862992020,0cyclictest1241410-21mii-tool00:35:143
1060862992020,0cyclictest1235981-21ethtool00:25:143
1060862992020,0cyclictest1158757-21ethtool22:05:173
1060862992020,0cyclictest1150556-21mii-tool21:50:163
1060862992019,1cyclictest236199-21snmpd20:07:153
1060862992019,1cyclictest1238705-21mii-tool00:30:143
1060862992019,1cyclictest1203153-21ethtool23:25:153
1060862992019,1cyclictest1181099-21mii-tool22:45:163
1060862992019,1cyclictest1144868-21ethtool21:40:173
1060862992019,1cyclictest1070160-21ethtool19:25:163
1060862992019,1cyclictest1070160-21ethtool19:25:163
106086299200,20cyclictest0-21swapper/322:32:533
1060861992020,0cyclictest1035180-21kworker/2:0+events22:50:562
1060861992020,0cyclictest1035180-21kworker/2:0+events21:40:142
1060861992020,0cyclictest1035180-21kworker/2:0+events21:30:082
1060861992020,0cyclictest1035180-21kworker/2:0+events21:20:362
1060861992020,0cyclictest1035180-21kworker/2:0+events21:15:042
1060861992020,0cyclictest1035180-21kworker/2:0+events21:05:042
1060861992020,0cyclictest1035180-21kworker/2:0+events20:30:362
1060861992020,0cyclictest1035180-21kworker/2:0+events19:50:212
1060861992020,0cyclictest1035180-21kworker/2:0+events19:45:482
1060861992020,0cyclictest1035180-21kworker/2:0+events19:16:162
1060860992020,0cyclictest1117330-21mii-tool20:50:151
1060860992020,0cyclictest1097712-21mii-tool20:15:151
1060860992019,1cyclictest236199-21snmpd23:56:501
106086099201,19cyclictest0-21swapper/120:20:171
106086099200,20cyclictest0-21swapper/121:07:191
106086099200,20cyclictest0-21swapper/120:55:531
106086099200,20cyclictest0-21swapper/120:31:471
106086099200,20cyclictest0-21swapper/120:09:321
106086099200,20cyclictest0-21swapper/100:08:401
1060859992020,0cyclictest1200453-21mii-tool23:20:140
106085999200,20cyclictest0-21swapper/020:10:470
1060866991919,0cyclictest236199-21snmpd21:33:147
1060866991919,0cyclictest236199-21snmpd00:19:057
1060866991918,1cyclictest236199-21snmpd22:32:447
1060866991918,0cyclictest236199-21snmpd21:26:577
106086699190,19cyclictest0-21swapper/722:12:437
106086699190,19cyclictest0-21swapper/721:55:237
106086699190,19cyclictest0-21swapper/721:19:127
106086699190,19cyclictest0-21swapper/720:45:237
106086699190,19cyclictest0-21swapper/720:25:157
106086699190,0cyclictest0-21swapper/723:15:377
106086699190,0cyclictest0-21swapper/721:14:087
1060864991919,0cyclictest236199-21snmpd23:06:005
1060864991919,0cyclictest236199-21snmpd22:29:055
1060864991919,0cyclictest1186540-21mii-tool22:55:145
1060864991919,0cyclictest1061990-21ethtool19:10:155
1060864991919,0cyclictest1061990-21ethtool19:10:155
1060864991918,1cyclictest1216833-21mii-tool23:50:155
106086499190,19cyclictest0-21swapper/523:47:175
106086499190,19cyclictest0-21swapper/523:27:535
106086499190,19cyclictest0-21swapper/521:20:185
106086499190,19cyclictest0-21swapper/500:08:025
1060863991919,0cyclictest236199-21snmpd22:14:554
1060863991919,0cyclictest1194963-21ethtool23:10:144
1060863991919,0cyclictest1175637-21mii-tool22:35:164
1060863991919,0cyclictest1167447-21ethtool22:20:174
1060863991919,0cyclictest1130957-21mii-tool21:15:174
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional