You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-29 - 06:30

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Mon Jun 29, 2026 00:43:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
674339995442,9cyclictest151ktimers/020:50:330
674340995037,8cyclictest3127484-21cups-browsed21:57:381
674339995033,15cyclictest680400-21latency_hist19:30:010
674339995024,19cyclictest12650irq/32-eth022:30:390
674339995024,19cyclictest12650irq/32-eth022:30:390
674341994930,16cyclictest809587-21kernelversion23:50:292
674341994930,15cyclictest0-21swapper/221:20:012
674341994926,20cyclictest770163-21mailstats22:45:412
674341994825,20cyclictest0-21swapper/219:15:372
674341994825,20cyclictest0-21swapper/219:15:372
67434099474,36cyclictest794470-21ssh23:25:331
674340994741,3cyclictest0-21swapper/123:40:011
67434199463,8cyclictest812996-21ntpq23:55:402
674341994611,5cyclictest0-21swapper/223:35:352
67434199454,8cyclictest696247-21ntpq20:20:342
674341994536,5cyclictest710328-21diskmemload22:53:362
67434199453,11cyclictest763720-21ssh22:35:352
674341994520,22cyclictest837912-21timerandwakeup00:35:462
67434199451,13cyclictest688685-21ntpq19:55:322
674339994536,6cyclictest784992-21kernelversion23:10:280
67433999452,35cyclictest736128-21ssh21:50:370
674341994435,6cyclictest833414-21systemd-run00:30:012
674340994436,5cyclictest707358-21systemd-run21:00:011
674339994437,4cyclictest753453-21munin-run22:20:010
674339994434,8cyclictest678265-21sshd19:20:370
67434199434,21cyclictest748382-21ssh22:10:322
67434199433,8cyclictest675298-21ntpq19:10:372
674341994335,5cyclictest708860-21systemd-run21:05:012
67434199432,9cyclictest791402-21ssh23:20:322
674340994333,6cyclictest831690-21/usr/sbin/munin00:25:441
674339994331,9cyclictest743675-21sshd22:03:110
674339994328,8cyclictest12650irq/32-eth020:45:310
67434199425,14cyclictest733105-21ssh21:45:362
67434199424,32cyclictest711502-21ssh21:10:382
67434199423,8cyclictest700732-21ntpq20:35:342
67434199422,7cyclictest834428-21ssh00:30:342
674341994221,17cyclictest0-21swapper/220:35:012
674341994218,21cyclictest427-21polkitd21:28:502
674341994216,24cyclictest818036-21idleruntime-cro00:05:012
674341994216,22cyclictest785253-21ntp_kernel_pll_23:10:332
674341994215,3cyclictest0-21swapper/200:20:302
67434199421,21cyclictest760681-21ssh22:30:352
67434199421,21cyclictest760681-21ssh22:30:352
67434199421,16cyclictest819254-21/usr/sbin/munin00:05:392
67434199421,14cyclictest739263-21ntpq21:55:382
67434099425,26cyclictest822255-21ssh00:10:391
67434099424,24cyclictest428-21mta-sts-daemon20:45:321
674340994234,5cyclictest677367-21systemd-run19:20:011
674340994234,5cyclictest677367-21systemd-run19:20:011
674340994234,5cyclictest1-21systemd22:40:011
674340994231,7cyclictest713435-21idleruntime-cro21:15:011
67434099422,34cyclictest837487-21ssh00:35:341
67433999424,30cyclictest825212-21ssh00:15:340
674339994236,4cyclictest793429-21cron23:25:010
67434199413,8cyclictest3127480-21cupsd21:40:352
67434199413,7cyclictest693175-21ntpq20:10:322
674341994131,7cyclictest717941-21switchtime21:20:452
674341994118,20cyclictest1001-21mta-sts-daemon23:47:382
674341994115,22cyclictest681231-21ntpq19:30:362
674341994114,3cyclictest0-21swapper/223:00:362
674341994113,5cyclictest678316-21ntpq19:20:412
67434199411,14cyclictest736062-21ntpq21:50:342
67434199411,13cyclictest781553-21ssh23:05:222
67434099414,27cyclictest809970-21ssh23:50:391
674340994131,7cyclictest756682-21latency_hist22:25:021
674339994130,8cyclictest151ktimers/020:35:350
674339994128,3cyclictest0-21swapper/000:00:010
674339994126,13cyclictest719631-21cron21:25:010
67434199404,11cyclictest754484-21ld22:20:322
67434199403,7cyclictest775995-21ssh22:55:312
67434199403,10cyclictest742314-21ssh22:00:372
674341994029,8cyclictest706348-21fschecks_time20:55:272
67434199402,8cyclictest822267-21sh00:10:392
67434199402,14cyclictest790354-21munin-run23:20:012
67434199402,12cyclictest723735-21ntpq21:30:332
674341994017,20cyclictest0-21swapper/200:15:422
674341994016,3cyclictest0-21swapper/222:15:462
674341994015,2cyclictest0-21swapper/223:30:362
674340994034,3cyclictest0-21swapper/120:20:001
674340994032,5cyclictest813469-21sed23:55:491
674339994033,4cyclictest735088-21ssh21:50:010
67434199393,8cyclictest794453-21ntpq23:25:322
674341993931,3cyclictest0-21swapper/220:50:012
674341993914,3cyclictest0-21swapper/220:50:362
67434199391,14cyclictest726951-21ntp_states21:35:402
674340993931,5cyclictest690857-21systemd-run20:05:011
674340993929,7cyclictest834359-21needreboot00:30:311
674340993927,9cyclictest825826-21unixbench_singl00:15:461
674340993926,9cyclictest788176-21missed_timers23:15:301
674339993933,3cyclictest0-21swapper/000:35:410
674339993915,6cyclictest14-21ksoftirqd/022:05:350
67434199382,8cyclictest803812-21ssh23:40:372
674341993814,2cyclictest0-21swapper/219:45:022
67434199381,13cyclictest745040-21/usr/sbin/munin22:05:292
67434199381,12cyclictest766536-21irqstats22:40:272
674341993810,6cyclictest674345-21systemd-run19:10:012
674340993824,10cyclictest791302-21missed_timers23:20:291
67434099382,25cyclictest806800-21ssh23:45:341
674340993820,10cyclictest710328-21diskmemload21:40:411
67434199373,16cyclictest695325-21munin-run20:20:012
67434199373,12cyclictest682702-21ntpq19:35:342
674341993713,2cyclictest0-21swapper/221:05:382
674340993729,5cyclictest732638-21fschecks_count21:45:271
674340993729,3cyclictest0-21swapper/121:25:421
67434099371,30cyclictest714590-21ssh21:15:381
674339993732,3cyclictest830342-21munin-plugin-st00:25:010
674339993727,5cyclictest0-21swapper/021:30:320
674339993725,9cyclictest779708-21unixbench_singl23:00:460
674339993715,12cyclictest816049-21sh00:00:370
674341993628,5cyclictest702841-21idleruntime-cro20:45:012
67434199362,12cyclictest265-21systemd-journal20:28:372
674341993612,3cyclictest0-21swapper/222:25:232
674340993628,5cyclictest773272-21switchtime22:50:431
674340993628,4cyclictest1002-21mta-sts-daemon22:50:011
674340993627,6cyclictest717928-21switchtime21:20:451
674340993625,7cyclictest821257-21ls00:10:021
674339993630,4cyclictest687818-21munin-plugin-st19:55:010
674339993629,5cyclictest707336-21sendmail21:00:010
674339993628,5cyclictest151ktimers/020:05:370
674339993627,3cyclictest0-21swapper/020:40:300
67433999361,27cyclictest773126-21ssh22:50:400
674341993513,2cyclictest0-21swapper/219:25:392
674340993528,4cyclictest1000-21mta-sts-daemon22:05:031
674340993526,5cyclictest702986-21latency_hist20:45:021
674340993526,5cyclictest3227260-21munin-node19:35:291
674340993524,3cyclictest0-21swapper/119:40:371
67433999353,27cyclictest726833-21ssh21:35:350
674339993511,6cyclictest14-21ksoftirqd/021:11:140
674341993426,5cyclictest686359-21latency_hist19:50:022
67434199341,13cyclictest690298-21modprobe20:00:372
674340993426,5cyclictest745125-21latency22:05:301
674340993426,5cyclictest265-21systemd-journal20:25:001
674340993424,5cyclictest0-21swapper/122:43:301
67433999343,26cyclictest730092-21sh21:40:410
674339993426,3cyclictest0-21swapper/023:40:360
674339993412,4cyclictest14-21ksoftirqd/023:15:330
674339993412,4cyclictest14-21ksoftirqd/020:25:370
674339993411,6cyclictest14-21ksoftirqd/023:35:240
674339993411,5cyclictest14-21ksoftirqd/000:32:390
674339993411,14cyclictest14-21ksoftirqd/022:12:130
67434199334,10cyclictest265-21systemd-journal19:51:362
67434099337,15cyclictest1003-21mta-sts-daemon23:05:311
67434099333,24cyclictest828426-21ssh00:20:381
674340993325,5cyclictest687810-21cron19:55:011
674340993325,5cyclictest1-21systemd23:05:021
67434099332,24cyclictest797619-21ssh23:30:361
674340993321,7cyclictest420-21avahi-daemon23:11:131
67434099332,12cyclictest171rcu_preempt21:50:381
67433999339,11cyclictest14-21ksoftirqd/019:55:360
674339993328,2cyclictest0-21swapper/021:25:360
674339993323,8cyclictest796515-21systemd-run23:30:010
674339993312,5cyclictest14-21ksoftirqd/000:10:300
674339993312,11cyclictest14-21ksoftirqd/021:55:230
674339993310,5cyclictest14-21ksoftirqd/021:19:470
674340993225,4cyclictest778047-21munin-run23:00:011
674340993224,4cyclictest0-21swapper/122:25:311
67434099322,23cyclictest265-21systemd-journal21:35:361
67434099322,22cyclictest708276-21sshd21:00:361
674339993227,3cyclictest768839-21munin-run22:45:000
674339993226,4cyclictest811889-21true23:55:010
674339993226,3cyclictest0-21swapper/023:00:010
67433999321,25cyclictest831340-21ssh00:25:320
674339993212,5cyclictest14-21ksoftirqd/000:05:240
674339993211,5cyclictest14-21ksoftirqd/023:31:350
674341993110,2cyclictest0-21swapper/220:10:022
67434099314,19cyclictest748342-21ssh22:10:311
67434099312,22cyclictest803793-21sshd23:40:361
67433999319,4cyclictest14-21ksoftirqd/022:50:010
67433999313,22cyclictest806887-21ssh23:45:380
674339993125,4cyclictest709639-21needreboot21:05:310
674339993125,3cyclictest0-21swapper/022:25:230
674339993123,6cyclictest3127484-21cups-browsed19:35:400
674339993122,6cyclictest151ktimers/020:20:310
674339993113,12cyclictest675231-21ntpq19:10:340
67433999311,26cyclictest782357-21ssh23:05:390
674339993112,6cyclictest14-21ksoftirqd/022:24:310
674339993111,4cyclictest14-21ksoftirqd/019:45:350
674339993111,10cyclictest14-21ksoftirqd/022:35:370
674340993022,4cyclictest0-21swapper/100:02:131
67433999309,4cyclictest14-21ksoftirqd/020:10:340
674339993023,5cyclictest0-21swapper/020:20:000
674339993010,11cyclictest14-21ksoftirqd/019:30:340
674340992922,4cyclictest679808-21ntpq19:25:371
67433999299,6cyclictest14-21ksoftirqd/021:00:290
674339992917,5cyclictest684292-21ntpq19:40:350
674339992910,3cyclictest14-21ksoftirqd/019:15:240
674339992910,3cyclictest14-21ksoftirqd/019:15:240
67434099284,14cyclictest428-21mta-sts-daemon21:30:321
67434099284,14cyclictest1000-21mta-sts-daemon19:30:361
674340992822,3cyclictest0-21swapper/120:10:011
67434099282,19cyclictest665-21snmpd22:15:391
67434099280,7cyclictest726863-21kworker/u8:1+xprtiod22:30:361
67434099280,7cyclictest726863-21kworker/u8:1+xprtiod22:30:361
67433999289,4cyclictest14-21ksoftirqd/020:00:290
674339992815,8cyclictest699215-21ntpq20:30:330
674340992719,5cyclictest420-21avahi-daemon20:11:141
674340992716,9cyclictest701327-21sendmail20:40:011
674340992618,5cyclictest689240-21unixbench_singl19:55:441
67433999268,4cyclictest14-21ksoftirqd/019:10:010
67434099254,4cyclictest0-21swapper/120:30:381
674340992418,3cyclictest0-21swapper/119:50:021
674340992418,3cyclictest0-21swapper/119:10:381
674340992416,5cyclictest427-21polkitd19:24:291
674340992415,6cyclictest3127480-21cupsd20:25:221
674340992413,7cyclictest271ktimers/120:50:361
67434099224,11cyclictest428-21mta-sts-daemon21:05:331
674340992015,2cyclictest0-21swapper/119:10:011
67434299193,8cyclictest0-21swapper/323:15:373
67434299183,4cyclictest0-21swapper/321:00:333
67434299174,7cyclictest0-21swapper/321:40:413
67434299173,7cyclictest0-21swapper/322:55:333
67434299172,7cyclictest0-21swapper/323:00:333
67434299164,7cyclictest0-21swapper/321:35:363
67434299163,7cyclictest0-21swapper/322:10:313
67434299163,7cyclictest0-21swapper/321:25:383
67434299162,7cyclictest0-21swapper/322:35:343
67434299162,7cyclictest0-21swapper/300:20:313
67434299162,6cyclictest0-21swapper/320:35:333
67434299161,8cyclictest0-21swapper/321:50:353
67434299161,7cyclictest0-21swapper/323:20:333
67434299154,4cyclictest0-21swapper/323:25:343
67434299153,7cyclictest0-21swapper/322:15:373
67434299153,7cyclictest0-21swapper/321:55:323
67434299152,7cyclictest0-21swapper/322:30:323
67434299152,7cyclictest0-21swapper/322:30:323
67434299152,7cyclictest0-21swapper/322:00:363
67434299152,5cyclictest0-21swapper/320:40:353
67434299151,8cyclictest0-21swapper/323:40:343
67434299151,8cyclictest0-21swapper/300:25:323
67434299151,6cyclictest0-21swapper/320:30:343
67434299147,5cyclictest0-21swapper/300:15:273
67434299143,7cyclictest0-21swapper/321:45:333
67434299143,6cyclictest0-21swapper/322:45:313
67434299143,6cyclictest0-21swapper/321:30:383
67434299142,7cyclictest0-21swapper/323:50:343
67434299142,7cyclictest0-21swapper/322:50:353
67434299142,7cyclictest0-21swapper/322:25:333
67434299142,7cyclictest0-21swapper/321:10:333
67434299141,8cyclictest0-21swapper/323:45:363
67434299141,7cyclictest0-21swapper/323:35:363
67434299141,6cyclictest0-21swapper/319:20:323
67434299137,4cyclictest0-21swapper/322:20:453
67434299136,4cyclictest0-21swapper/321:20:303
67434299133,5cyclictest0-21swapper/320:05:333
67434299132,6cyclictest0-21swapper/323:30:333
67434299132,5cyclictest0-21swapper/321:05:353
67434299131,7cyclictest0-21swapper/321:15:353
67434299131,7cyclictest0-21swapper/300:35:273
67434299131,7cyclictest0-21swapper/300:00:333
67434299126,4cyclictest0-21swapper/322:40:223
67434299126,4cyclictest0-21swapper/322:05:053
67434299126,4cyclictest0-21swapper/300:05:253
67434299123,5cyclictest0-21swapper/323:05:353
67434299123,5cyclictest0-21swapper/300:10:273
67434299123,4cyclictest0-21swapper/320:45:313
67434299122,6cyclictest0-21swapper/320:30:013
67434299122,6cyclictest0-21swapper/320:20:393
67434299122,5cyclictest0-21swapper/320:00:343
67434299122,5cyclictest0-21swapper/319:30:343
67434299121,7cyclictest0-21swapper/323:55:333
67434299121,7cyclictest0-21swapper/323:10:273
67434299121,7cyclictest0-21swapper/300:30:253
67434299121,6cyclictest0-21swapper/319:45:353
67434299120,6cyclictest0-21swapper/319:50:353
67434299116,3cyclictest0-21swapper/319:55:373
67434299116,3cyclictest0-21swapper/319:45:013
67434299116,3cyclictest0-21swapper/319:35:353
67434299114,3cyclictest0-21swapper/320:20:013
67434299105,3cyclictest0-21swapper/319:15:253
67434299105,3cyclictest0-21swapper/319:15:253
67434299102,5cyclictest0-21swapper/320:10:343
67434299102,5cyclictest0-21swapper/319:30:013
6743429992,5cyclictest0-21swapper/320:50:363
6743429991,6cyclictest0-21swapper/319:10:023
6743429991,4cyclictest0-21swapper/319:10:363
6743429981,4cyclictest0-21swapper/320:55:323
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional