You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-25 - 14:47
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack8slot2.osadl.org (updated Thu Jun 25, 2026 12:43:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
351745899165156,7cyclictest381ktimers/211:50:182
3517459991631,127cyclictest0-21swapper/310:15:163
3517459991441,48cyclictest3563406-21irqstats09:10:353
351745999139131,4cyclictest461ktimers/312:36:033
351745999139131,4cyclictest461ktimers/312:36:033
3517456991397,106cyclictest16-21ksoftirqd/008:55:160
3517456991397,106cyclictest16-21ksoftirqd/008:55:160
3517456991336,92cyclictest16-21ksoftirqd/011:55:130
351745899131118,11cyclictest10650irq/205-8000000.ethernet-rx012:00:112
351745899120110,6cyclictest81-21hwrng12:39:452
351745899120110,6cyclictest81-21hwrng12:39:452
351745999115107,5cyclictest10650irq/205-8000000.ethernet-rx009:30:423
351745899115104,7cyclictest81-21hwrng10:50:112
351745899115100,5cyclictest81-21hwrng07:58:092
3517458991131,100cyclictest3699305-21sleep12:24:082
3517458991131,100cyclictest3699305-21sleep12:24:082
35174579910995,5cyclictest81-21hwrng11:45:281
3517459991086,93cyclictest3655502-21ntp_states11:21:093
35174599910775,18cyclictest461ktimers/308:45:583
35174599910580,17cyclictest461ktimers/307:41:203
35174599910494,4cyclictest0-21swapper/310:30:463
35174579910489,11cyclictest81-21hwrng09:30:181
3517459991031,71cyclictest3612582-21perl10:20:393
35174589910293,6cyclictest81-21hwrng10:46:052
3517457991026,69cyclictest3661144-21latency_hist11:29:571
3517457991026,69cyclictest3661144-21latency_hist11:29:571
35174599910192,5cyclictest461ktimers/312:11:053
35174569910092,5cyclictest81-21hwrng10:05:070
35174569910092,5cyclictest81-21hwrng10:05:070
351745799985,53cyclictest352289750kworker/u16:21+xprtiod07:45:071
351745799985,53cyclictest352289750kworker/u16:21+xprtiod07:45:071
351745999965,76cyclictest3570984-21ntpq09:21:193
3517457999546,35cyclictest3506807-21kworker/u16:15+xprtiod08:30:091
351745999945,72cyclictest1116-21rs:main3
351745999945,72cyclictest1116-21rs:main3
351745999944,56cyclictest3685992-21ssh12:05:193
3517458999411,5cyclictest0-21swapper/212:24:582
351745799944,83cyclictest3664983-21ssh11:35:341
3517457999438,34cyclictest3624732-21kworker/u16:6+xprtiod10:45:071
351745799941,57cyclictest3551784-21fschecks_time08:40:381
3517459999364,21cyclictest461ktimers/308:25:513
3517459999360,26cyclictest0-21swapper/308:30:093
3517459999320,11cyclictest3676531-21ntpq11:51:033
3517457999345,32cyclictest3703682-21aten2.4-expect12:30:251
3517458999155,31cyclictest81-21hwrng09:20:042
351745799912,33cyclictest3608504-21sshd-session10:15:061
3517459999081,6cyclictest81-21hwrng11:17:493
351745999901,62cyclictest45-21rcuc/309:45:313
351745899901,59cyclictest77-21kswapd010:25:312
351745899901,59cyclictest77-21kswapd010:25:312
351745799902,26cyclictest3655289-21/usr/sbin/munin11:20:531
351745999897,36cyclictest3602716-21processes10:06:043
351745999897,36cyclictest3602716-21processes10:06:043
3517459998911,72cyclictest3703427-21apt-get12:30:183
3517456998929,47cyclictest0-21swapper/008:20:100
351745999881,70cyclictest3625805-21munin-run10:39:573
3517457998734,42cyclictest3692693-21ssh12:14:571
351745799871,53cyclictest3699249-21ssh12:24:011
351745799871,53cyclictest3699249-21ssh12:24:011
351745699871,45cyclictest16-21ksoftirqd/012:05:150
351745999865,61cyclictest3567393-21ntp_states09:15:593
351745999864,68cyclictest3665785-21awk11:35:543
3517458998659,20cyclictest0-21swapper/210:40:142
3517457998656,18cyclictest0-21swapper/107:40:071
3517457998620,51cyclictest56-21kcompactd012:15:231
3517457998620,51cyclictest56-21kcompactd012:15:231
351745799861,37cyclictest3612998-21/usr/sbin/munin10:20:511
3517456998642,37cyclictest0-21swapper/012:35:490
3517456998642,37cyclictest0-21swapper/012:35:490
3517459998562,19cyclictest461ktimers/311:55:203
3517459998557,18cyclictest461ktimers/308:50:563
351745799851,36cyclictest56-21kcompactd011:40:111
3517458998429,43cyclictest3580295-21/usr/sbin/munin09:35:312
3517458998429,43cyclictest3580295-21/usr/sbin/munin09:35:312
351745799843,19cyclictest56-21kcompactd010:56:331
3517457998427,52cyclictest10350irq/155-8000000.ethernet-tx511:15:241
3517457998415,44cyclictest10350irq/155-8000000.ethernet-tx511:30:271
3517456998459,20cyclictest0-21swapper/007:49:570
3517456998459,20cyclictest0-21swapper/007:49:570
351745699841,64cyclictest3606004-21ssh10:10:490
3517459998363,13cyclictest45-21rcuc/310:56:033
3517457998355,23cyclictest0-21swapper/107:50:301
351745799834,22cyclictest3600620-21ssh10:03:351
3517457998339,36cyclictest3580304-21sh09:35:061
3517457998339,36cyclictest3580304-21sh09:35:061
351745799831,78cyclictest3518436-21ntpq07:10:421
351745799831,41cyclictest3626151-21ssh10:40:151
3517456998369,10cyclictest81-21hwrng08:46:160
3517456998357,21cyclictest0-21swapper/007:59:590
351745699832,35cyclictest16-21ksoftirqd/008:10:160
351745699832,35cyclictest16-21ksoftirqd/008:10:160
3517458998214,51cyclictest0-21swapper/208:55:412
3517458998214,51cyclictest0-21swapper/208:55:412
351745799825,65cyclictest3702274-21ssh12:27:441
351745799825,3cyclictest3641937-21sed11:01:191
351745799825,3cyclictest3641937-21sed11:01:191
351745799823,20cyclictest3523775-21cut07:25:321
351745799822,4cyclictest0-21swapper/111:50:481
351745799821,35cyclictest3528698-21modprobe07:39:561
351745799821,27cyclictest3558809-21latency_hist08:59:581
351745799821,27cyclictest3558809-21latency_hist08:59:581
351745799821,20cyclictest3679327-21fschecks_count11:55:321
3517458998157,21cyclictest0-21swapper/211:00:242
3517458998157,21cyclictest0-21swapper/211:00:242
3517458998129,35cyclictest3519131-21kworker/u16:17+rpciod07:20:112
3517458998129,35cyclictest3519131-21kworker/u16:17+rpciod07:20:112
351745799812,35cyclictest3575100-21ssh09:26:271
351745799812,25cyclictest3584500-21sed09:40:391
351745799812,25cyclictest3584500-21sed09:40:391
3517457998114,45cyclictest10450irq/163-8000000.ethernet-tx610:35:201
351745799811,35cyclictest3646437-21ssh11:08:381
351745799811,24cyclictest3707342-21ssh12:35:461
351745799811,24cyclictest3707342-21ssh12:35:461
3517456998125,33cyclictest0-21swapper/010:54:570
351745699811,60cyclictest3630476-21ls10:45:390
3517459998053,14cyclictest0-21swapper/310:40:153
351745799808,68cyclictest0-21swapper/108:05:251
351745799802,29cyclictest3591860-21ssh09:50:451
3517456998071,6cyclictest10650irq/205-8000000.ethernet-rx011:15:380
3517456998028,31cyclictest0-21swapper/007:20:140
3517456998028,31cyclictest0-21swapper/007:20:140
3517457997941,13cyclictest0-21swapper/110:30:431
3517457997917,53cyclictest0-21swapper/109:19:571
3517456997960,12cyclictest10650irq/205-8000000.ethernet-rx011:35:420
351745699791,21cyclictest3691630-21kworker/u16:19+rpciod12:19:580
351745699791,21cyclictest3691630-21kworker/u16:19+rpciod12:19:580
351745999781,66cyclictest3580401-21ssh09:35:203
351745999781,66cyclictest3580401-21ssh09:35:203
3517458997856,12cyclictest0-21swapper/207:25:072
3517458997854,20cyclictest0-21swapper/211:40:312
3517457997855,19cyclictest0-21swapper/108:29:571
351745799783,64cyclictest3553268-21apt-get08:45:071
3517457997810,58cyclictest0-21swapper/109:20:031
3517456997853,16cyclictest0-21swapper/009:20:070
351745799775,65cyclictest0-21swapper/112:00:181
3517457997725,45cyclictest0-21swapper/108:20:191
351745999761,48cyclictest3635458-21kworker/u16:10+rpciod11:00:113
351745999761,48cyclictest3635458-21kworker/u16:10+rpciod11:00:113
351745999761,40cyclictest0-21swapper/312:26:043
3517457997658,14cyclictest0-21swapper/108:15:311
351745799763,69cyclictest3521868-21tail07:20:371
351745799763,69cyclictest3521868-21tail07:20:371
3517457997632,40cyclictest3648243-21ssh11:10:471
351745799762,17cyclictest3594958-21tail09:55:341
351745799761,68cyclictest3534563-21sshd-session07:55:251
351745799761,34cyclictest3590535-21ssh09:49:471
351745799761,34cyclictest3562678-21/usr/sbin/munin09:10:261
351745799761,29cyclictest3618013-21ssh10:28:041
351745799761,29cyclictest3618013-21ssh10:28:041
351745799761,27cyclictest3633130-21/usr/sbin/munin10:50:521
351745699761,3cyclictest3298629-21kworker/u16:12+kvfree_rcu_reclaim07:19:570
351745699761,3cyclictest3298629-21kworker/u16:12+kvfree_rcu_reclaim07:19:570
3517459997563,8cyclictest81-21hwrng09:00:363
3517458997562,6cyclictest81-21hwrng09:45:402
3517457997523,49cyclictest3541407-21/usr/sbin/munin08:11:041
3517457997523,49cyclictest3541407-21/usr/sbin/munin08:11:041
351745799751,28cyclictest3559344-21gltestperf09:00:371
351745799751,26cyclictest3537059-21/usr/sbin/munin08:00:421
351745799751,26cyclictest3537059-21/usr/sbin/munin08:00:421
351745799751,10cyclictest3686388-21grep12:05:341
3517458997462,4cyclictest81-21hwrng10:10:142
3517458997435,34cyclictest0-21swapper/211:20:392
3517457997428,43cyclictest3561594-21ntpq09:05:501
351745799741,33cyclictest3603603-21ssh10:07:171
351745799741,33cyclictest3603603-21ssh10:07:171
3517456997459,4cyclictest3644725-21ssh11:05:460
3517456997452,11cyclictest0-21swapper/009:55:260
3517456997426,40cyclictest3567195-21ssh09:15:440
3517459997336,34cyclictest0-21swapper/310:45:083
351745999732,57cyclictest3616460-21dropbear10:25:413
351745999732,57cyclictest3616460-21dropbear10:25:413
351745899737,59cyclictest0-21swapper/210:20:172
3517458997356,13cyclictest0-21swapper/211:34:582
3517458997316,41cyclictest3553078-21cat08:44:572
351745799732,56cyclictest3543462-21kworker/u16:7+xprtiod08:50:081
3517458997256,12cyclictest0-21swapper/210:05:542
3517458997256,12cyclictest0-21swapper/210:05:542
3517458997246,20cyclictest0-21swapper/208:45:092
3517458997236,21cyclictest3559637-21sshd-auth09:00:442
351745899721,49cyclictest3693900-21ntpq12:15:492
351745899721,49cyclictest3693900-21ntpq12:15:492
3517457997232,34cyclictest3519861-21grep07:15:301
3517457997232,34cyclictest3519861-21grep07:15:301
351745799722,26cyclictest3606138-21sh10:10:591
3517456997253,15cyclictest0-21swapper/010:55:340
3517456997253,12cyclictest0-21swapper/007:39:560
3517456997236,18cyclictest3519129-21kworker/u16:6+rpciod07:40:110
351745699723,50cyclictest3672953-21ssh11:45:550
351745699722,59cyclictest3563049-21awk09:10:270
351745999717,41cyclictest0-21swapper/309:55:533
351745999711,3cyclictest3606106-21ntpq10:10:573
3517458997157,10cyclictest0-21swapper/209:40:132
3517458997157,10cyclictest0-21swapper/209:40:132
3517458997148,11cyclictest0-21swapper/211:55:342
3517458997132,31cyclictest3686273-21awk12:05:292
3517458997125,33cyclictest3673243-21/usr/sbin/munin11:46:042
3517458997119,36cyclictest3643724-21sshd-auth11:05:062
351745799711,2cyclictest0-21swapper/108:35:301
351745799711,2cyclictest0-21swapper/108:35:301
3517456997153,14cyclictest3641190-21ld11:00:520
3517456997153,14cyclictest3641190-21ld11:00:520
3517459997048,19cyclictest0-21swapper/307:20:113
3517459997048,19cyclictest0-21swapper/307:20:113
351745899706,5cyclictest3664802-21apt-get11:35:092
3517458997036,24cyclictest0-21swapper/208:30:092
3517458997025,5cyclictest10550irq/171-8000000.ethernet-tx712:10:572
351745799707,58cyclictest3525166-21apt-get07:30:071
351745799707,58cyclictest3525166-21apt-get07:30:071
3517456997030,34cyclictest0-21swapper/010:35:580
3517456997023,4cyclictest10350irq/155-8000000.ethernet-tx512:00:390
351745699701,36cyclictest3671545-21latency_hist11:44:580
351745999691,52cyclictest3528796-21latency_hist07:39:583
351745899699,57cyclictest0-21swapper/209:50:332
3517458996942,19cyclictest0-21swapper/212:34:592
3517458996940,25cyclictest0-21swapper/211:10:452
351745899691,34cyclictest3610878-21kworker/u16:12+rpciod10:19:582
3517456996936,29cyclictest0-21swapper/010:00:370
351745999681,52cyclictest3583592-21sendmail-msp09:40:493
351745999681,52cyclictest3583592-21sendmail-msp09:40:493
3517458996861,3cyclictest3636676-21apt-get10:55:242
3517458996836,20cyclictest0-21swapper/210:35:332
3517458996832,27cyclictest3532657-21apt-get07:50:102
3517456996847,16cyclictest0-21swapper/009:40:330
3517456996847,16cyclictest0-21swapper/009:40:330
3517456996821,43cyclictest0-21swapper/010:40:300
3517459996748,15cyclictest3692892-21acpi12:15:073
3517459996748,15cyclictest3692892-21acpi12:15:073
3517458996746,10cyclictest0-21swapper/209:25:272
3517458996741,18cyclictest0-21swapper/207:40:142
3517458996737,24cyclictest3619126-21ssh10:30:172
3517458996737,21cyclictest0-21swapper/208:36:052
3517458996737,21cyclictest0-21swapper/208:36:052
3517458996721,43cyclictest10350irq/155-8000000.ethernet-tx508:15:322
3517456996760,5cyclictest171ktimers/008:00:120
3517456996760,5cyclictest171ktimers/008:00:120
3517456996749,13cyclictest0-21swapper/009:35:310
3517456996749,13cyclictest0-21swapper/009:35:310
3517456996736,21cyclictest3535974-21kworker/u16:3+nfsiod08:30:090
3517459996644,15cyclictest0-21swapper/307:45:253
3517459996644,15cyclictest0-21swapper/307:45:253
3517459996633,26cyclictest0-21swapper/310:50:273
3517458996640,10cyclictest0-21swapper/207:49:582
3517458996631,27cyclictest3541017-21ntpq08:10:552
3517458996631,27cyclictest3541017-21ntpq08:10:552
351745899661,57cyclictest3565815-21909:14:372
3517456996640,22cyclictest0-21swapper/010:20:390
351745699662,44cyclictest3704331-21sleep12:30:400
3517459996552,9cyclictest461ktimers/307:30:193
3517459996552,9cyclictest461ktimers/307:30:193
3517459996548,14cyclictest461ktimers/307:50:533
3517459996543,18cyclictest0-21swapper/311:25:063
3517459996543,18cyclictest0-21swapper/311:25:063
3517459996542,12cyclictest0-21swapper/311:30:373
3517459996540,13cyclictest0-21swapper/308:10:353
3517459996540,13cyclictest0-21swapper/308:10:353
3517458996530,28cyclictest0-21swapper/211:15:552
351745899651,52cyclictest3599407-21cat10:01:152
351745899651,30cyclictest651-21containerd09:15:062
3517456996554,5cyclictest10350irq/155-8000000.ethernet-tx511:20:510
3517456996553,7cyclictest0-21swapper/012:25:160
3517456996518,35cyclictest0-21swapper/012:20:450
3517456996518,35cyclictest0-21swapper/012:20:450
3517459996445,15cyclictest0-21swapper/309:05:263
351745999641,41cyclictest3575586-21kworker/u16:4+rpciod10:00:173
3517458996452,9cyclictest0-21swapper/208:29:572
3517458996434,23cyclictest0-21swapper/208:50:322
3517458996421,38cyclictest3657934-21aten2.4-expect11:25:252
3517458996421,38cyclictest3657934-21aten2.4-expect11:25:252
3517456996442,18cyclictest0-21swapper/010:25:510
3517456996442,18cyclictest0-21swapper/010:25:510
351745699641,45cyclictest16-21ksoftirqd/007:10:530
3517458996347,13cyclictest381ktimers/209:55:122
3517458996329,27cyclictest3561293-21if_eth109:05:342
3517458996327,33cyclictest0-21swapper/208:21:102
3517458996326,29cyclictest3527031-21apt-get07:35:102
3517456996333,23cyclictest3591260-21df_inode09:50:280
351745699630,6cyclictest3550959-21kworker/u16:8+xprtiod08:44:570
3517459996230,26cyclictest0-21swapper/311:40:403
351745799621,24cyclictest3517393-21sh07:09:581
351745699622,43cyclictest21-21rcuc/008:25:440
351745699621,20cyclictest3537863-21kworker/u16:4+rpciod08:19:570
3517459996141,16cyclictest0-21swapper/307:55:313
3517459996140,9cyclictest0-21swapper/308:20:293
351745999611,32cyclictest3672486-21/usr/sbin/munin11:45:333
3517458996127,28cyclictest632653-21snmpd07:30:452
3517458996127,28cyclictest632653-21snmpd07:30:452
351745699612,52cyclictest3657903-21ssh11:25:240
351745699612,52cyclictest3657903-21ssh11:25:240
3517456996122,30cyclictest56-21kcompactd011:34:580
3517459996051,7cyclictest461ktimers/308:05:163
3517459996046,7cyclictest461ktimers/308:55:113
3517459996046,7cyclictest461ktimers/308:55:113
3517459996036,18cyclictest0-21swapper/308:40:383
3517458996027,28cyclictest3531713-21/usr/sbin/munin07:45:592
3517458996025,29cyclictest3518998-21grep07:11:062
3517458996020,32cyclictest3576741-21ssh09:29:592
351745699608,37cyclictest3560357-21kworker/u16:13+rpciod09:05:340
3517456996041,16cyclictest0-21swapper/009:25:520
3517456996028,21cyclictest171ktimers/009:30:120
3517456996014,37cyclictest3609573-21ssh10:15:520
351745999595,49cyclictest3574483-21sleep09:26:053
3517459995941,15cyclictest0-21swapper/311:10:253
3517459995914,37cyclictest0-21swapper/308:00:053
3517459995914,37cyclictest0-21swapper/308:00:053
3517456995934,18cyclictest0-21swapper/009:00:370
3517456995933,10cyclictest0-21swapper/009:45:060
3517459995838,18cyclictest0-21swapper/311:05:243
3517459995829,24cyclictest3550311-21sleep08:35:473
3517459995829,24cyclictest3550311-21sleep08:35:473
3517459995826,27cyclictest0-21swapper/307:10:323
3517458995825,31cyclictest0-21swapper/208:00:302
3517458995825,31cyclictest0-21swapper/208:00:302
3517456995827,24cyclictest3620100-21ssh10:30:500
3517458995736,11cyclictest0-21swapper/208:06:042
3517458995726,27cyclictest3519545-21apt-get07:15:112
3517458995726,27cyclictest3519545-21apt-get07:15:112
3517456995730,16cyclictest3676527-21ssh11:51:020
351745699572,44cyclictest3526019-21ntpq07:30:510
351745699572,44cyclictest3526019-21ntpq07:30:510
3517459995641,12cyclictest0-21swapper/308:16:053
3517459995621,33cyclictest0-21swapper/312:00:273
3517456995645,5cyclictest3690330-21ntpq12:10:410
3517456995643,10cyclictest0-21swapper/008:50:310
3517456995638,12cyclictest0-21swapper/008:36:050
3517456995638,12cyclictest0-21swapper/008:36:050
3517456995634,15cyclictest0-21swapper/007:50:320
3517459995545,7cyclictest461ktimers/307:25:233
3517458995535,17cyclictest0-21swapper/207:09:582
3517456995337,9cyclictest0-21swapper/008:06:040
3517456995318,30cyclictest3649359-21ssh11:12:130
3517459995143,4cyclictest3591634-21sed09:50:363
3517459995133,12cyclictest461ktimers/307:16:063
3517459995133,12cyclictest461ktimers/307:16:063
3517456995119,27cyclictest3523307-21apt-get07:25:220
351745699483,43cyclictest0-21swapper/007:09:560
3517459994031,5cyclictest461ktimers/307:09:583
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional