You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-20 - 01:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Mon Apr 20, 2026 00:43:19)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
682112995735,18cyclictest856456-21cups-browsed00:20:450
682113995445,6cyclictest723348-21ssh21:15:381
682113995445,6cyclictest723348-21ssh21:15:381
68211299542,44cyclictest735729-21ssh21:30:430
682114995033,11cyclictest861966-21processes00:05:472
682112995039,7cyclictest3076692-21cups-browsed22:10:430
682114994936,6cyclictest0-21swapper/222:15:302
682112994933,11cyclictest12350irq/32-eth021:25:400
682114994735,8cyclictest3076692-21cups-browsed22:25:352
682113994738,6cyclictest420-21avahi-daemon21:50:011
682113994735,8cyclictest700095-21munin-plugin-st20:10:001
68211299463,35cyclictest837545-21awk23:35:470
682114994536,6cyclictest856476-21latency_hist00:00:012
682113994537,5cyclictest698621-21systemd-run20:05:011
682113994537,5cyclictest698621-21systemd-run20:05:011
682114994436,5cyclictest695-21cron23:20:012
682113994437,4cyclictest0-21swapper/121:05:441
682112994430,5cyclictest421-21dbus-daemon22:00:370
682112994425,11cyclictest151ktimers/019:30:410
682113994334,5cyclictest878337-21timerandwakeup00:25:561
682112994334,6cyclictest548-21gdbus19:15:500
682112994324,11cyclictest151ktimers/020:30:450
682112994321,13cyclictest12350irq/32-eth000:05:430
68211499422,32cyclictest882040-21ssh00:30:452
682112994235,4cyclictest807622-21sendmail23:00:010
682112994232,6cyclictest3076692-21cups-browsed23:08:070
682114994132,5cyclictest1-21systemd23:00:012
682114994132,5cyclictest1054-21mta-sts-daemon22:35:392
682114994132,5cyclictest1054-21mta-sts-daemon22:35:392
682114994130,7cyclictest420-21avahi-daemon21:49:482
682114994128,10cyclictest761446-21sshd22:02:102
682113994134,4cyclictest1054-21mta-sts-daemon00:07:351
682113994133,3cyclictest0-21swapper/121:30:001
682113994132,6cyclictest809161-21mailstats23:00:491
682113994131,6cyclictest420-21avahi-daemon23:19:531
682112994132,6cyclictest788948-21timerandwakeup22:35:500
682112994132,6cyclictest788948-21timerandwakeup22:35:500
682112994130,8cyclictest747763-21needreboot21:45:390
682114994032,5cyclictest771036-21munin-run22:15:012
682114994031,6cyclictest756406-21awk21:55:532
682114994031,6cyclictest756406-21awk21:55:532
682114994031,5cyclictest732169-21unixbench-2d21:25:542
682114994027,9cyclictest764377-21processes22:05:502
68211499402,31cyclictest784494-21ssh22:30:412
68211499402,13cyclictest36-21ksoftirqd/223:00:452
682113994032,5cyclictest872676-21ssh00:20:021
682114993933,4cyclictest682111-21cyclictest21:10:402
682113993931,5cyclictest0-21swapper/123:55:381
68211499382,28cyclictest421-21dbus-daemon22:45:452
68211499382,28cyclictest421-21dbus-daemon22:45:452
682113993831,4cyclictest1055-21mta-sts-daemon00:21:321
682113993829,4cyclictest0-21swapper/121:10:451
68211299383,30cyclictest865915-21ssh00:10:480
682112993831,4cyclictest799593-21latency_hist22:50:010
682112993831,4cyclictest799593-21latency_hist22:50:010
68211499375,20cyclictest428-21mta-sts-daemon19:30:432
68211499373,26cyclictest849531-21ssh23:50:402
682114993730,4cyclictest888855-21awk00:40:012
682114993728,6cyclictest701588-21munin-plugin-st20:15:012
682114993727,6cyclictest841989-21unixbench_multi23:40:552
682113993731,3cyclictest0-21swapper/122:30:431
682113993730,3cyclictest0-21swapper/121:00:011
682113993729,5cyclictest775140-21systemd-run22:20:011
682113993728,4cyclictest682111-21cyclictest22:08:271
682113993728,4cyclictest0-21swapper/122:25:411
682113993727,7cyclictest421-21dbus-daemon22:43:001
682113993727,7cyclictest421-21dbus-daemon22:43:001
68211399372,28cyclictest796700-21ssh22:45:401
68211399372,28cyclictest796700-21ssh22:45:401
682112993729,5cyclictest800785-21ntp_kernel_pll_22:50:420
68211299372,29cyclictest833216-21ssh23:30:380
68211499364,27cyclictest857731-21ssh00:00:422
682114993628,5cyclictest703094-21cut20:20:012
682114993627,6cyclictest692623-21systemd-run19:45:012
682114993627,4cyclictest0-21swapper/223:05:422
682114993625,8cyclictest1055-21mta-sts-daemon00:10:392
682113993630,3cyclictest0-21swapper/123:35:471
682113993629,3cyclictest0-21swapper/122:40:011
682113993629,3cyclictest0-21swapper/122:40:011
682112993630,4cyclictest767015-21ssh22:10:020
682112993628,6cyclictest439-21systemd-logind20:20:010
682112993627,7cyclictest857621-21needreboot00:00:390
682112993627,6cyclictest824562-21aten_r2power_vo23:20:300
682112993627,6cyclictest824562-21aten_r2power_vo23:20:300
682112993625,7cyclictest877652-21latency00:25:390
682112993625,5cyclictest0-21swapper/022:25:390
682112993624,10cyclictest845630-21proc_pri23:45:460
68211299362,28cyclictest727539-21ssh21:20:420
682114993528,4cyclictest762971-21kworker/u8:5-xprtiod23:35:402
682114993527,5cyclictest548-21gdbus23:10:472
682114993526,6cyclictest715007-21unixbench_singl20:55:512
682114993526,5cyclictest710598-21munin-plugin-st20:45:012
682114993526,5cyclictest686512-21tail19:20:512
682114993519,3cyclictest171rcu_preempt19:10:392
68211399353,28cyclictest756063-21sh21:55:451
68211399353,28cyclictest756063-21sh21:55:451
682113993529,3cyclictest0-21swapper/119:40:011
682113993527,5cyclictest860693-21latency_hist00:05:021
682113993527,5cyclictest695819-21acpi19:55:301
682113993527,5cyclictest695819-21acpi19:55:301
682113993527,5cyclictest688116-21systemd-run19:30:011
682112993529,4cyclictest726300-21tr21:20:010
682112993529,4cyclictest726300-21tr21:20:010
682112993528,4cyclictest151ktimers/021:35:470
682112993527,5cyclictest683616-21systemd-run19:15:020
682112993527,4cyclictest0-21swapper/023:55:460
682112993519,12cyclictest12350irq/32-eth022:15:380
68211299351,30cyclictest0-21swapper/019:35:370
68211499349,5cyclictest0-21swapper/221:40:482
68211499343,22cyclictest845480-21sendmail-mta23:45:412
682114993427,5cyclictest1-21systemd21:40:022
682114993426,5cyclictest726323-21systemd-run21:20:022
682114993426,5cyclictest726323-21systemd-run21:20:022
682114993417,13cyclictest869579-21latency00:15:402
68211399343,23cyclictest881884-21ssh00:30:401
682113993428,3cyclictest0-21swapper/122:50:421
682113993427,3cyclictest0-21swapper/123:25:021
682113993427,3cyclictest0-21swapper/123:25:021
682113993425,6cyclictest421-21dbus-daemon22:05:011
682113993425,6cyclictest1056-21mta-sts-daemon23:42:051
68211399342,24cyclictest849490-21ssh23:50:381
682112993427,4cyclictest692603-21grep19:45:010
68211499333,25cyclictest874050-21grep00:20:522
68211499333,22cyclictest800688-21ssh22:50:382
682114993326,3cyclictest831003-21sshd23:28:022
682114993326,3cyclictest831003-21sshd23:28:022
682114993325,5cyclictest1051-21mta-sts-daemon19:25:442
682114993322,8cyclictest696455-21ntp_kernel_pll_19:55:412
682114993322,8cyclictest696455-21ntp_kernel_pll_19:55:412
682114993321,9cyclictest703978-21ntp_kernel_pll_20:20:412
682114993315,4cyclictest171rcu_preempt20:00:432
682114993315,4cyclictest171rcu_preempt20:00:432
682113993326,3cyclictest0-21swapper/121:35:011
682113993325,5cyclictest848507-21latency_hist23:50:031
682113993321,9cyclictest739640-21needreboot21:35:381
682112993327,4cyclictest682111-21cyclictest23:15:450
682112993326,5cyclictest686600-21cron19:25:010
682112993326,4cyclictest744511-21unixbench_singl21:40:590
682112993323,4cyclictest840962-21fschecks_count23:40:330
68211499323,22cyclictest3076692-21cups-browsed20:25:452
682114993226,3cyclictest0-21swapper/223:25:012
682114993226,3cyclictest0-21swapper/223:25:012
682114993221,7cyclictest3076692-21cups-browsed21:50:432
682114993218,3cyclictest171rcu_preempt20:30:402
682113993226,3cyclictest0-21swapper/100:15:001
682113993225,5cyclictest0-21swapper/122:15:021
682113993225,3cyclictest0-21swapper/121:53:101
682113993224,5cyclictest888853-21grep00:40:011
682113993223,5cyclictest727093-21fschecks_time21:20:331
682113993223,5cyclictest689616-21systemd-run19:35:021
68211399322,23cyclictest812875-21ssh23:05:381
68211299322,19cyclictest829243-21ssh23:25:410
68211299322,19cyclictest829243-21ssh23:25:410
682114993123,5cyclictest700115-21systemd-run20:10:012
682114993123,5cyclictest695499-21unixbench_singl19:50:512
682114993123,5cyclictest695499-21unixbench_singl19:50:512
682114993123,5cyclictest3076692-21cups-browsed22:20:382
682114993123,3cyclictest0-21swapper/223:35:002
682114993122,6cyclictest709117-21sh20:40:022
682114993117,4cyclictest730398-21kworker/u8:11-xprtiod21:30:322
68211499311,11cyclictest36-21ksoftirqd/221:20:482
68211399314,22cyclictest833378-21ssh23:30:441
68211399313,21cyclictest829383-21ssh23:25:461
68211399313,21cyclictest829383-21ssh23:25:461
682113993124,4cyclictest745484-21ssh21:42:501
682113993122,6cyclictest1-21systemd20:15:011
682113993121,8cyclictest776547-21proc_pri22:20:501
682112993125,3cyclictest0-21swapper/021:55:380
682112993125,3cyclictest0-21swapper/021:55:380
682112993124,3cyclictest0-21swapper/023:50:450
682112993121,7cyclictest793293-21unixbench_singl22:40:540
682112993121,7cyclictest793293-21unixbench_singl22:40:540
68211299311,25cyclictest816949-21ssh23:10:380
682114993024,3cyclictest0-21swapper/200:30:012
682114993022,5cyclictest718075-21cron21:10:012
682114993016,2cyclictest171rcu_preempt19:35:372
68211499301,21cyclictest792594-21sh22:40:402
68211499301,21cyclictest792594-21sh22:40:402
682113993023,4cyclictest709080-21latency_hist20:40:011
682113993022,5cyclictest694622-21fschecks_time19:50:331
682113993022,5cyclictest694622-21fschecks_time19:50:331
682112993023,5cyclictest697122-21systemd-run20:00:010
682112993023,5cyclictest697122-21systemd-run20:00:010
682113992920,6cyclictest3076692-21cups-browsed19:20:511
682113992919,7cyclictest420-21avahi-daemon20:30:421
682112992924,4cyclictest682111-21cyclictest20:10:410
682112992923,3cyclictest0-21swapper/021:54:230
682112992922,4cyclictest420-21avahi-daemon00:30:310
682112992922,3cyclictest866608-21kworker/u8:0+xprtiod00:20:020
682112992922,3cyclictest0-21swapper/020:25:450
682112992918,9cyclictest151ktimers/019:25:480
682112992915,9cyclictest12350irq/32-eth022:20:460
682114992819,5cyclictest685015-21unixbench_singl19:15:572
682114992817,3cyclictest171rcu_preempt19:45:392
682114992815,4cyclictest171rcu_preempt20:50:392
682114992814,3cyclictest171rcu_preempt21:00:472
682113992822,3cyclictest0-21swapper/123:10:321
682113992821,4cyclictest703094-21cut20:20:011
682113992820,5cyclictest704592-21cron20:25:011
682113992819,7cyclictest711242-21kernelversion20:45:341
682113992819,5cyclictest804366-21/usr/sbin/munin22:55:321
682112992822,4cyclictest0-21swapper/020:40:380
682112992821,5cyclictest808108-21/usr/sbin/munin23:00:530
68211299281,14cyclictest886015-21ntpq00:35:420
682114992720,4cyclictest711993-21unixbench_multi20:45:502
68211399274,6cyclictest171rcu_preempt21:00:451
68211299272,18cyclictest719346-21ssh21:10:420
682112992714,9cyclictest12350irq/32-eth020:00:380
682112992714,9cyclictest12350irq/32-eth020:00:380
682113992618,5cyclictest710534-21unixbench_singl20:40:511
682112992620,4cyclictest420-21avahi-daemon22:30:320
682112992619,4cyclictest421-21dbus-daemon21:10:010
682112992617,7cyclictest261-21systemd-journal19:46:110
682113992516,6cyclictest685036-21unixbench_singl19:15:571
68211299252,19cyclictest3076692-21cups-browsed20:55:390
682112992520,3cyclictest703050-21kworker/u8:7-nfsiod20:50:010
682112992517,6cyclictest699119-21fschecks_count20:05:320
682113992418,3cyclictest0-21swapper/120:55:011
682113992416,5cyclictest694097-21idleruntime-cro19:50:001
682113992415,6cyclictest261-21systemd-journal19:45:001
682112992418,4cyclictest707887-21aten_r2power_en20:35:300
682113992314,6cyclictest705455-21grep20:25:381
68211299232,16cyclictest713037-21ntp_states20:50:440
682113992214,5cyclictest3076692-21cups-browsed19:12:431
68211299222,6cyclictest3076692-21cups-browsed19:50:440
68211299222,6cyclictest3076692-21cups-browsed19:50:440
68211299222,14cyclictest715935-21ntpq21:00:390
68211299218,4cyclictest261-21systemd-journal19:10:010
68211599202,8cyclictest0-21swapper/322:15:423
68211499202,11cyclictest1-21systemd19:10:012
682112992012,5cyclictest0-21swapper/020:20:390
68211399199,6cyclictest516-21in:imuxsock19:10:011
68211599172,7cyclictest0-21swapper/321:25:413
68211599171,7cyclictest0-21swapper/319:40:473
68211599163,9cyclictest0-21swapper/321:10:413
68211599163,8cyclictest0-21swapper/321:20:393
68211599162,8cyclictest0-21swapper/322:20:453
68211599162,8cyclictest0-21swapper/300:10:503
68211599161,8cyclictest0-21swapper/323:45:413
68211599161,8cyclictest0-21swapper/321:55:393
68211599161,8cyclictest0-21swapper/321:55:393
68211599161,7cyclictest0-21swapper/322:35:373
68211599161,7cyclictest0-21swapper/322:35:373
68211599161,7cyclictest0-21swapper/319:45:413
68211599161,7cyclictest0-21swapper/319:10:403
68211599161,6cyclictest0-21swapper/319:50:373
68211599161,6cyclictest0-21swapper/319:50:373
68211599154,8cyclictest0-21swapper/323:30:333
68211599154,5cyclictest0-21swapper/322:30:473
68211599153,5cyclictest0-21swapper/320:15:413
68211599153,4cyclictest0-21swapper/321:00:453
68211599152,8cyclictest0-21swapper/322:55:383
68211599152,8cyclictest0-21swapper/322:45:453
68211599152,8cyclictest0-21swapper/322:45:453
68211599152,7cyclictest0-21swapper/322:50:363
68211599152,7cyclictest0-21swapper/321:45:443
68211599152,7cyclictest0-21swapper/300:30:433
68211599151,8cyclictest0-21swapper/323:50:393
68211599143,6cyclictest0-21swapper/323:05:403
68211599143,4cyclictest0-21swapper/320:50:413
68211599142,8cyclictest0-21swapper/300:20:523
68211599142,7cyclictest0-21swapper/323:55:403
68211599142,7cyclictest0-21swapper/323:10:413
68211599142,7cyclictest0-21swapper/321:30:303
68211599142,7cyclictest0-21swapper/321:15:383
68211599142,7cyclictest0-21swapper/321:15:383
68211599142,7cyclictest0-21swapper/300:15:483
68211599142,7cyclictest0-21swapper/300:05:423
68211599142,6cyclictest0-21swapper/319:30:403
68211599142,4cyclictest0-21swapper/319:20:393
68211599141,8cyclictest0-21swapper/323:35:403
68211599141,8cyclictest0-21swapper/322:25:393
68211599141,8cyclictest0-21swapper/322:00:333
68211599141,8cyclictest0-21swapper/300:25:433
68211599141,7cyclictest0-21swapper/320:30:423
68211599141,7cyclictest0-21swapper/320:25:393
68211599141,6cyclictest0-21swapper/321:05:413
68211599141,6cyclictest0-21swapper/320:55:423
68211599141,6cyclictest0-21swapper/320:45:393
68211599141,6cyclictest0-21swapper/320:05:373
68211599141,6cyclictest0-21swapper/319:55:393
68211599141,6cyclictest0-21swapper/319:55:393
68211599141,6cyclictest0-21swapper/319:15:413
68211599140,8cyclictest0-21swapper/323:25:383
68211599140,8cyclictest0-21swapper/323:25:383
68211599134,6cyclictest0-21swapper/300:00:413
68211599132,8cyclictest0-21swapper/321:55:013
68211599132,7cyclictest0-21swapper/321:35:283
68211599132,6cyclictest0-21swapper/323:40:293
68211599132,6cyclictest0-21swapper/322:40:303
68211599132,6cyclictest0-21swapper/322:40:303
68211599132,5cyclictest0-21swapper/319:35:433
68211599131,8cyclictest0-21swapper/323:00:473
68211599131,8cyclictest0-21swapper/322:05:453
68211599131,8cyclictest0-21swapper/321:40:593
68211599131,8cyclictest0-21swapper/300:35:413
68211599131,7cyclictest0-21swapper/323:20:383
68211599131,7cyclictest0-21swapper/323:20:383
68211599131,7cyclictest0-21swapper/322:10:303
68211599131,6cyclictest0-21swapper/320:35:413
68211599124,5cyclictest0-21swapper/319:25:493
68211599121,8cyclictest0-21swapper/323:15:313
68211599121,6cyclictest0-21swapper/320:40:323
68211599111,6cyclictest0-21swapper/320:20:303
68211599111,6cyclictest0-21swapper/320:15:023
68211599111,6cyclictest0-21swapper/320:00:453
68211599111,6cyclictest0-21swapper/320:00:453
6821159991,4cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional