You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-20 - 20:19
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack3slot3.osadl.org (updated Thu Nov 20, 2025 12:46:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
27746210590sleep110-21swapper/1107:06:513
27658210493sleep20-21swapper/207:05:434
12250980irq/42-ahci0-21swapper/107:09:091
3066350960irq/52-eth0-rx-0-21swapper/807:09:3610
2792629382sleep40-21swapper/407:08:336
2795729079sleep70-21swapper/707:09:019
12250800irq/42-ahci0-21swapper/307:05:195
2769426454sleep90-21swapper/907:06:1311
2765326454sleep100-21swapper/1007:05:382
2769026253sleep60-21swapper/607:06:108
2769825955sleep00-21swapper/007:06:170
2764725753sleep50-21swapper/507:05:337
28155994021cyclictest0-21swapper/009:15:150
28155993217cyclictest20415-21munin-node09:10:290
2815599310cyclictest0-21swapper/007:17:120
2818399290cyclictest0-21swapper/1110:24:413
12250280irq/42-ahci0-21swapper/1007:17:232
2818399191cyclictest0-21swapper/1109:08:153
2818299192cyclictest12250irq/42-ahci11:40:182
2818199192cyclictest0-21swapper/909:50:1611
2818199192cyclictest0-21swapper/909:50:1511
2815599190cyclictest0-21swapper/008:20:070
2815599190cyclictest0-21swapper/008:19:550
2818299181cyclictest3066450irq/53-eth0-tx-09:55:242
2818299181cyclictest3066350irq/52-eth0-rx-08:14:542
2818299181cyclictest12250irq/42-ahci09:00:182
2818299181cyclictest12250irq/42-ahci08:08:542
2818199181cyclictest761ksoftirqd/911:44:4411
2818199181cyclictest4412-1kworker/9:2H11:24:1811
2818199181cyclictest0-21swapper/910:10:1411
2818199181cyclictest0-21swapper/908:15:3211
28180991816cyclictest9456-21snmp_rack3slot908:10:1210
28180991816cyclictest8303-21ntp_states09:35:2010
28180991816cyclictest8303-21ntp_states09:35:1910
28180991816cyclictest8197-21snmp_rack3slot912:35:1310
28180991816cyclictest8161-21snmp_rack3slot908:06:3610
28180991816cyclictest7113-21hddtemp_smartct08:50:1710
28180991816cyclictest5625-21snmp_rack3slot907:20:1110
28180991816cyclictest5505-21perl12:30:1510
28180991816cyclictest30617-21iostat_ios11:35:1710
28180991816cyclictest29372-21snmp_rack3slot907:10:1410
28180991816cyclictest28291-21iostat_ios07:50:1710
28180991816cyclictest2762-21snmp_rack3slot910:56:3610
28180991816cyclictest27574-21snmp_rack3slot912:15:2510
28180991816cyclictest26562-21iostat_ios10:45:1710
28180991816cyclictest23615-21snmp_rack3slot907:45:1410
28180991816cyclictest22053-21snmp_easybox.os08:25:2010
28180991816cyclictest20837-21snmp_easybox.os09:55:1110
28180991816cyclictest20760-21snmp_rack3slot907:40:1710
28180991816cyclictest20645-21snmp_easybox.os12:05:2310
28180991816cyclictest16152-21snmp_easybox.os10:30:2310
28180991816cyclictest12698-21snmp_easybox.os08:15:1410
28180991816cyclictest1173-21snmp_easybox.os07:15:1610
28180991816cyclictest11535-21irqstats09:40:2210
28180991816cyclictest10451-21snmp_rack3slot911:51:3710
28171991816cyclictest8323-21qemu-kvm08:30:448
28167991816cyclictest2406-21snmpd09:07:114
28155991816cyclictest29322-21chrt09:20:200
28155991816cyclictest25032chrt10:14:020
2818399170cyclictest23213-21chrt09:10:423
2818399170cyclictest0-21swapper/1109:15:113
2818299170cyclictest97092sleep1010:22:232
2818299170cyclictest75832sleep1011:50:092
2818299170cyclictest7062sleep1007:56:072
2818299170cyclictest69562sleep1011:48:342
2818299170cyclictest65972sleep1011:03:282
2818299170cyclictest59542sleep1010:15:482
2818299170cyclictest35862sleep1012:26:512
2818299170cyclictest318582sleep1011:36:082
2818299170cyclictest314542sleep1007:10:512
2818299170cyclictest308402sleep1010:50:262
2818299170cyclictest3066450irq/53-eth0-tx-12:30:112
2818299170cyclictest3066450irq/53-eth0-tx-09:15:122
2818299170cyclictest3066350irq/52-eth0-rx-12:35:222
2818299170cyclictest3066350irq/52-eth0-rx-12:10:182
2818299170cyclictest3066350irq/52-eth0-rx-11:05:192
2818299170cyclictest3066350irq/52-eth0-rx-10:10:322
2818299170cyclictest3066350irq/52-eth0-rx-09:35:112
2818299170cyclictest3066350irq/52-eth0-rx-09:35:102
2818299170cyclictest3066350irq/52-eth0-rx-09:30:412
2818299170cyclictest3066350irq/52-eth0-rx-09:10:182
2818299170cyclictest3066350irq/52-eth0-rx-09:05:272
2818299170cyclictest3066350irq/52-eth0-rx-08:50:382
2818299170cyclictest3066350irq/52-eth0-rx-08:40:172
2818299170cyclictest3066350irq/52-eth0-rx-08:25:302
2818299170cyclictest305562sleep1009:21:172
2818299170cyclictest303392chrt12:20:142
2818299170cyclictest300392sleep1008:36:122
2818299170cyclictest295622sleep1007:51:312
2818299170cyclictest287382sleep1012:17:492
2818299170cyclictest282072sleep1011:30:572
2818299170cyclictest275432sleep1010:03:582
2818299170cyclictest275432sleep1010:03:572
2818299170cyclictest264182sleep1008:31:362
2818299170cyclictest258402sleep1007:45:422
2818299170cyclictest249552sleep1010:45:022
2818299170cyclictest244252sleep1010:44:522
2818299170cyclictest213822sleep1012:06:482
2818299170cyclictest210342sleep1011:22:182
2818299170cyclictest208732sleep1007:40:172
2818299170cyclictest205062sleep1010:35:492
2818299170cyclictest20452sleep1010:55:282
2818299170cyclictest200102sleep1009:50:582
2818299170cyclictest200102sleep1009:50:572
2818299170cyclictest186942sleep1007:37:292
2818299170cyclictest174052sleep1011:17:182
2818299170cyclictest17002sleep1009:25:302
2818299170cyclictest169612chrt10:32:022
2818299170cyclictest165082sleep1009:47:442
2818299170cyclictest15432sleep1008:00:092
2818299170cyclictest150162sleep1007:31:532
2818299170cyclictest142612sleep1011:59:112
2818299170cyclictest136342sleep1011:10:302
2818299170cyclictest122122sleep1008:55:512
2818299170cyclictest12250irq/42-ahci12:00:222
2818299170cyclictest12250irq/42-ahci11:25:502
2818299170cyclictest12250irq/42-ahci10:08:512
2818299170cyclictest12250irq/42-ahci09:40:522
2818299170cyclictest12250irq/42-ahci08:45:202
2818299170cyclictest12250irq/42-ahci08:20:022
2818299170cyclictest12250irq/42-ahci08:17:212
2818299170cyclictest12250irq/42-ahci07:20:002
2818299170cyclictest113482sleep1007:26:292
2818299170cyclictest111112sleep1010:25:132
28181991715cyclictest1877-21taskset09:27:5311
2818199170cyclictest761ksoftirqd/910:55:2711
2818199170cyclictest741rcuc/912:10:1111
28180991715cyclictest8566-21hddtemp_smartct11:05:1510
28180991715cyclictest7235-21snmp_rack3slot910:20:1110
28180991715cyclictest4149-21ntp_states08:45:2310
28180991715cyclictest4006-21snmp_rack3slot910:15:1510
28180991715cyclictest3502-21snmp_rack3slot909:30:1310
28180991715cyclictest32089-21perl08:40:1110
28180991715cyclictest31928-21iostat_ios07:55:1610
28180991715cyclictest31608-21snmp_rack3slot909:25:1210
28180991715cyclictest30958-21snmp_rack3slot910:05:4710
28180991715cyclictest30211-21iostat10:50:1910
28180991715cyclictest29325-21irqstats09:20:2010
28180991715cyclictest2861-21perl08:00:1510
28180991715cyclictest26641-21snmp_rack3slot910:00:2410
28180991715cyclictest26641-21snmp_rack3slot910:00:2410
28180991715cyclictest25036-21snmp_rack3slot912:12:0110
28180991715cyclictest21274-21diskstats09:10:1310
28180991715cyclictest19981-21yum09:50:3210
28180991715cyclictest19981-21yum09:50:3210
28180991715cyclictest17819-21perl09:05:1210
28180991715cyclictest15264-21df11:15:1210
28180991715cyclictest15210-21snmp_rack3slot909:00:2310
28180991715cyclictest14898-21users07:30:3010
28180991715cyclictest14408-21diskstats09:45:1710
28180991715cyclictest13721-21snmp_rack3slot911:11:3510
28180991715cyclictest12442-21perl11:55:1410
28180991715cyclictest11279-21df_inode10:25:1310
28180991715cyclictest10643-21snmp_easybox.os07:25:2410
2817199176cyclictest0-21swapper/609:05:018
2817099171cyclictest31185-21qemu-kvm10:08:397
2817099170cyclictest0-21swapper/511:00:277
28167991715cyclictest2406-21snmpd11:56:594
2816799171cyclictest0-21swapper/208:35:254
2816099171cyclictest0-21swapper/110:15:221
2815599172cyclictest0-21swapper/010:24:370
28183991615cyclictest19372sleep1109:28:423
2818399160cyclictest0-21swapper/1107:24:373
28181991615cyclictest0-21swapper/909:30:2511
28181991615cyclictest0-21swapper/909:15:0111
28181991614cyclictest11023-21chrt12:39:1511
28180991614cyclictest31214-21memory12:20:2110
28180991614cyclictest23886-21snmp_easybox.os11:25:2710
28180991614cyclictest20986-21snmp_rack3slot911:21:3710
28180991614cyclictest1408-21perl11:40:1510
28170991615cyclictest7451-21latency_hist12:35:017
2817099161cyclictest19742-21qemu-kvm09:10:137
2817099160cyclictest27890-21qemu-kvm07:42:517
2817099160cyclictest27887-21qemu-kvm07:10:197
2817099160cyclictest19743-21qemu-kvm09:47:287
2817099160cyclictest0-21swapper/511:54:327
2817099160cyclictest0-21swapper/509:40:277
2817099160cyclictest0-21swapper/509:05:147
2817099160cyclictest0-21swapper/508:20:537
28169991614cyclictest25752-21sensors08:30:236
2816899163cyclictest0-21swapper/312:15:225
2816899160cyclictest0-21swapper/308:38:415
28167991614cyclictest2406-21snmpd11:12:424
28167991614cyclictest2406-21snmpd10:44:424
2816099163cyclictest0-21swapper/108:40:001
2816099162cyclictest0-21swapper/111:05:171
28160991615cyclictest3066350irq/52-eth0-rx-07:45:201
28160991610cyclictest23544-21python10:40:271
2818399153cyclictest0-21swapper/1108:50:013
28183991514cyclictest22704-21chrt08:25:373
2818399150cyclictest0-21swapper/1112:25:133
2818199154cyclictest0-21swapper/910:50:0011
2818199154cyclictest0-21swapper/907:15:0111
28181991514cyclictest761ksoftirqd/912:30:1311
28181991514cyclictest761ksoftirqd/911:00:1611
28181991514cyclictest761ksoftirqd/907:55:2111
28181991514cyclictest761ksoftirqd/907:10:3111
28181991514cyclictest741rcuc/912:02:2311
28181991514cyclictest0-21swapper/908:39:5811
28181991513cyclictest28318-21snmp_rack3slot910:05:1211
28180991513cyclictest27250-21snmp_easybox.os08:35:1410
28180991513cyclictest23553-21snmp_easybox.os08:30:1110
28180991513cyclictest17442-21snmp_rack3slot908:20:1710
28171991513cyclictest8324-21qemu-kvm08:47:358
2817199150cyclictest0-21swapper/610:15:168
2817099150cyclictest8324-21qemu-kvm08:10:217
2817099150cyclictest8323-21qemu-kvm08:08:397
2817099150cyclictest31184-21qemu-kvm10:20:347
2817099150cyclictest31184-21qemu-kvm10:15:197
2817099150cyclictest27887-21qemu-kvm07:30:147
2817099150cyclictest27887-21qemu-kvm07:15:197
2817099150cyclictest0-21swapper/512:10:227
2817099150cyclictest0-21swapper/511:56:237
2817099150cyclictest0-21swapper/511:40:117
2817099150cyclictest0-21swapper/511:07:137
2817099150cyclictest0-21swapper/510:40:237
2817099150cyclictest0-21swapper/509:56:197
2817099150cyclictest0-21swapper/509:20:297
2817099150cyclictest0-21swapper/508:45:247
2817099150cyclictest0-21swapper/508:35:327
2817099150cyclictest0-21swapper/508:30:167
2817099150cyclictest0-21swapper/508:29:437
2817099150cyclictest0-21swapper/507:36:587
2816999150cyclictest0-21swapper/408:55:016
2816999150cyclictest0-21swapper/407:35:146
2816899155cyclictest0-21swapper/310:55:495
2816899155cyclictest0-21swapper/307:15:235
2816899153cyclictest0-21swapper/309:49:205
2816899152cyclictest31866-21snmp_easybox.os10:10:155
2816899152cyclictest20937-21snmp_rack3slot911:21:025
2816899152cyclictest0-21swapper/309:30:195
2816899150cyclictest0-21swapper/310:05:235
2816799150cyclictest0-21swapper/211:05:114
2816799150cyclictest0-21swapper/210:30:004
2816799150cyclictest0-21swapper/209:35:144
2816799150cyclictest0-21swapper/209:35:134
2816799150cyclictest0-21swapper/207:20:294
2816099153cyclictest0-21swapper/111:15:161
2816099153cyclictest0-21swapper/110:25:171
2816099150cyclictest0-21swapper/109:00:151
31140ksoftirqd/00-21swapper/007:20:240
2818199144cyclictest0-21swapper/909:15:0211
28181991413cyclictest9782-21latency_hist09:40:0211
28181991413cyclictest761ksoftirqd/911:35:2411
28181991413cyclictest761ksoftirqd/908:30:2211
28181991413cyclictest761ksoftirqd/907:40:0111
28181991413cyclictest4546-21kworker/9:007:45:1611
28181991413cyclictest0-21swapper/909:55:1611
28180991412cyclictest6445-21snmp_rack3slot911:01:2610
28180991412cyclictest32632-21df10:10:1610
28180991412cyclictest2447-21memory12:25:1810
28180991412cyclictest17017-21perl07:35:1410
2817199145cyclictest0-21swapper/608:50:208
28171991412cyclictest8323-21qemu-kvm08:08:388
2817099141cyclictest8323-21qemu-kvm08:15:497
2817099141cyclictest31184-21qemu-kvm10:27:177
2817099140cyclictest31184-21qemu-kvm10:30:157
2817099140cyclictest27889-21qemu-kvm07:21:197
2817099140cyclictest19742-21qemu-kvm09:27:087
2817099140cyclictest19742-21qemu-kvm09:19:267
2817099140cyclictest0-21swapper/512:25:187
2817099140cyclictest0-21swapper/512:20:287
2817099140cyclictest0-21swapper/512:19:027
2817099140cyclictest0-21swapper/512:00:237
2817099140cyclictest0-21swapper/511:46:137
2817099140cyclictest0-21swapper/511:34:117
2817099140cyclictest0-21swapper/511:25:077
2817099140cyclictest0-21swapper/510:58:107
2817099140cyclictest0-21swapper/510:45:227
2817099140cyclictest0-21swapper/510:35:237
2817099140cyclictest0-21swapper/510:10:077
2817099140cyclictest0-21swapper/510:00:217
2817099140cyclictest0-21swapper/510:00:207
2817099140cyclictest0-21swapper/509:50:157
2817099140cyclictest0-21swapper/509:50:147
2817099140cyclictest0-21swapper/509:35:117
2817099140cyclictest0-21swapper/509:35:117
2817099140cyclictest0-21swapper/509:31:487
2817099140cyclictest0-21swapper/509:03:247
2817099140cyclictest0-21swapper/508:55:157
2817099140cyclictest0-21swapper/508:40:217
2817099140cyclictest0-21swapper/508:01:347
2817099140cyclictest0-21swapper/507:45:277
2817099140cyclictest0-21swapper/507:25:147
28169991412cyclictest16682-21sensors11:15:246
2816899144cyclictest0-21swapper/312:11:165
2816899144cyclictest0-21swapper/310:49:315
2816899144cyclictest0-21swapper/310:24:025
2816899144cyclictest0-21swapper/308:51:505
2816899142cyclictest21292-21snmp_rack3slot912:05:355
2816899141cyclictest0-21swapper/311:25:225
2816899140cyclictest0-21swapper/309:10:195
2816799140cyclictest271ksoftirqd/208:25:154
2816099143cyclictest0-21swapper/109:10:171
2816099143cyclictest0-21swapper/107:55:161
2816099141cyclictest0-21swapper/112:30:181
182050140irq/55-eth1-rx-0-21swapper/107:17:131
13450140irq/18-ehci_hcd0-21swapper/007:55:230
12250140irq/42-ahci0-21swapper/407:17:076
2818399137cyclictest0-21swapper/1108:35:213
2818399133cyclictest0-21swapper/1112:00:003
2818399133cyclictest0-21swapper/1111:16:303
2818399133cyclictest0-21swapper/1109:45:023
2818199135cyclictest0-21swapper/911:55:0111
2818199134cyclictest0-21swapper/910:30:0111
2818199133cyclictest0-21swapper/911:25:0011
2818199133cyclictest0-21swapper/909:07:0111
28181991312cyclictest761ksoftirqd/907:35:0211
28181991312cyclictest741rcuc/910:00:1211
28181991312cyclictest741rcuc/910:00:1111
28181991312cyclictest0-21swapper/908:50:1411
2818099133cyclictest0-21swapper/812:05:0010
2817399135cyclictest0-21swapper/710:10:029
2817399133cyclictest0-21swapper/711:38:029
2817399133cyclictest0-21swapper/707:58:119
2817199135cyclictest0-21swapper/607:31:108
2817199133cyclictest0-21swapper/609:24:568
28171991311cyclictest8324-21qemu-kvm08:15:508
28171991311cyclictest31184-21qemu-kvm10:08:398
2817099130cyclictest0-21swapper/512:30:247
2817099130cyclictest0-21swapper/512:06:377
2817099130cyclictest0-21swapper/511:35:287
2817099130cyclictest0-21swapper/511:15:227
2817099130cyclictest0-21swapper/511:10:147
2817099130cyclictest0-21swapper/510:50:237
2817099130cyclictest0-21swapper/508:50:147
2817099130cyclictest0-21swapper/507:55:207
2817099130cyclictest0-21swapper/507:50:187
2816999133cyclictest0-21swapper/409:45:206
2816899139cyclictest0-21swapper/308:33:345
2816899134cyclictest0-21swapper/311:57:275
2816899133cyclictest0-21swapper/308:45:175
2816899133cyclictest0-21swapper/308:15:205
2816899133cyclictest0-21swapper/307:30:205
2816899132cyclictest0-21swapper/312:25:155
2816899132cyclictest0-21swapper/309:15:365
2816899130cyclictest0-21swapper/310:15:205
2816899130cyclictest0-21swapper/310:00:205
2816899130cyclictest0-21swapper/310:00:205
2816899130cyclictest0-21swapper/308:55:195
2816899130cyclictest0-21swapper/308:10:195
2816799133cyclictest0-21swapper/212:15:194
2816799133cyclictest0-21swapper/212:10:014
28167991311cyclictest2406-21snmpd08:32:134
2816099132cyclictest0-21swapper/111:00:191
2815599133cyclictest0-21swapper/012:00:010
28155991311cyclictest0-21swapper/009:47:240
28155991311cyclictest0-21swapper/009:30:240
901120ksoftirqd/110-21swapper/1110:30:153
31120ksoftirqd/00-21swapper/010:30:140
2818399124cyclictest0-21swapper/1109:32:263
2818399123cyclictest0-21swapper/1112:05:003
2818399123cyclictest0-21swapper/1111:00:013
28183991211cyclictest155142chrt08:16:473
2818199124cyclictest0-21swapper/911:30:0111
2818199123cyclictest0-21swapper/907:30:0111
28181991211cyclictest761ksoftirqd/908:10:1211
28181991211cyclictest0-21swapper/911:11:2311
28181991211cyclictest0-21swapper/910:27:2811
28181991211cyclictest0-21swapper/908:40:2311
28181991211cyclictest0-21swapper/908:20:1411
28180991210cyclictest4133-21snmp_rack3slot911:45:1510
2817399122cyclictest0-21swapper/712:38:129
2817399122cyclictest0-21swapper/711:49:579
2817399122cyclictest0-21swapper/711:06:599
2817399122cyclictest0-21swapper/707:14:119
2817199124cyclictest0-21swapper/610:52:278
2817199123cyclictest0-21swapper/608:00:008
2817199120cyclictest8323-21qemu-kvm08:30:018
2817199120cyclictest0-21swapper/611:25:008
2817099120cyclictest0-21swapper/511:20:207
28169991210cyclictest0-21swapper/412:10:116
2816899128cyclictest0-21swapper/312:35:365
2816899128cyclictest0-21swapper/312:30:105
2816899128cyclictest0-21swapper/312:00:065
2816899128cyclictest0-21swapper/311:50:015
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional