You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-18 - 19:31

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Mon May 18, 2026 12:43:03)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2726146995242,6cyclictest2757634-21systemd-run08:55:012
2726145995243,6cyclictest2726149-21systemd-run07:10:011
2726145994941,4cyclictest0-21swapper/111:20:011
2726144994923,18cyclictest12350irq/32-eth011:00:580
2726144994923,18cyclictest12350irq/32-eth011:00:580
2726146994739,3cyclictest0-21swapper/210:30:562
2726145994737,6cyclictest1883891-21cups-browsed11:12:571
2726145994724,17cyclictest2782030-21cron09:35:001
2726145994724,17cyclictest2782030-21cron09:35:001
272614499473,37cyclictest2771614-21ssh09:21:000
2726144994638,5cyclictest2923813-21fschecks_time12:30:470
2726144994638,5cyclictest2923813-21fschecks_time12:30:470
2726145994537,5cyclictest421-21dbus-daemon10:30:011
2726145994525,16cyclictest2735132-21basename07:40:011
272614599452,28cyclictest2848019-21ntp_states10:56:021
2726144994534,8cyclictest2750124-21ls08:30:010
2726146994425,16cyclictest2914830-21cut12:20:012
2726145994435,5cyclictest2846556-21munin-plugin-st10:55:011
2726145994429,12cyclictest0-21swapper/110:00:011
272614499447,31cyclictest2762126-21diskmemload09:40:530
2726145994337,3cyclictest0-21swapper/112:40:001
2726146994234,5cyclictest2878667-21systemd-run11:35:012
2726146994233,5cyclictest420-21avahi-daemon11:49:452
2726146994225,14cyclictest0-21swapper/210:45:592
2726146994224,15cyclictest2904356-21sendmail_mailst12:06:052
2726146994215,24cyclictest2886682-21sh11:45:012
2726146994213,21cyclictest0-21swapper/211:55:482
2726145994227,12cyclictest1056-21mta-sts-daemon11:57:541
2726144994236,4cyclictest2914827-21munin-run12:20:010
272614499423,34cyclictest2895986-21ssh11:55:540
2726144994230,4cyclictest2882634-21munin-run11:40:010
272614699413,6cyclictest2928354-21ntpq12:36:002
2726146994131,7cyclictest2802214-21munin-run10:00:012
2726146994126,12cyclictest1055-21mta-sts-daemon12:26:092
2726146994112,27cyclictest0-21swapper/212:01:002
272614599413,32cyclictest2742005-21ntpq08:00:541
2726145994130,8cyclictest2767870-21switchtime09:16:111
2726145994123,14cyclictest0-21swapper/107:15:011
2726145994122,16cyclictest2838503-21munin-plugin-st10:45:011
2726145994119,17cyclictest0-21swapper/109:06:011
2726144994131,7cyclictest1883891-21cups-browsed11:52:410
2726144994131,7cyclictest1883891-21cups-browsed11:52:410
272614499412,32cyclictest2815602-21ssh10:15:530
272614499412,32cyclictest2815602-21ssh10:15:530
2726146994032,5cyclictest2882657-21sendmail11:40:012
2726146994032,5cyclictest2762126-21diskmemload11:00:542
2726146994032,5cyclictest2762126-21diskmemload11:00:542
272614699402,8cyclictest2779341-21ssh09:30:532
272614699402,8cyclictest2779341-21ssh09:30:532
272614499406,22cyclictest2871930-21ssh11:25:550
2726144994033,5cyclictest2783513-21ssh09:36:000
2726144994033,4cyclictest2726149-21systemd-run07:10:010
2726146993933,3cyclictest0-21swapper/208:15:012
2726146993931,5cyclictest2807015-21aten_r2power_po10:05:462
2726146993930,6cyclictest1883891-21cups-browsed10:00:492
2726146993928,8cyclictest2860590-21unixbench_singl11:11:062
2726146993926,10cyclictest2824143-21timerandwakeup10:26:052
272614699392,11cyclictest2811695-21ntpq10:10:572
2726146993921,15cyclictest0-21swapper/209:40:002
2726146993921,15cyclictest0-21swapper/209:06:062
2726146993912,24cyclictest2843103-21/usr/sbin/munin10:51:052
272614699391,11cyclictest2795481-21ssh09:50:532
272614599393,29cyclictest2746509-21ntpq08:15:541
2726145993930,6cyclictest2922895-21idleruntime-cro12:30:001
2726145993929,8cyclictest2750138-21sh08:30:011
272614599392,3cyclictest0-21swapper/110:00:541
2726145993918,18cyclictest2751611-21cron08:35:011
2726144993932,4cyclictest2855514-21fschecks_time11:05:490
2726144993932,4cyclictest2855514-21fschecks_time11:05:490
2726144993929,7cyclictest1883891-21cups-browsed10:57:550
2726144993927,6cyclictest12350irq/32-eth010:31:000
2726144993919,16cyclictest0-21swapper/009:35:000
2726144993919,16cyclictest0-21swapper/009:35:000
272614699385,7cyclictest2835810-21ssh10:40:542
272614699385,12cyclictest428-21mta-sts-daemon11:05:562
272614699385,12cyclictest428-21mta-sts-daemon11:05:562
272614699383,9cyclictest2790145-21munin-run09:45:002
272614699383,7cyclictest2924250-21ssh12:30:562
272614699383,7cyclictest2924250-21ssh12:30:562
272614699383,16cyclictest2771573-21ssh09:20:592
2726146993831,4cyclictest2822421-21rm10:25:012
2726146993830,5cyclictest2834561-21latency_hist10:40:022
2726146993830,5cyclictest2739609-21cron07:55:002
2726146993817,17cyclictest0-21swapper/209:05:012
2726146993814,21cyclictest0-21swapper/212:10:452
2726146993813,22cyclictest2847917-21sh10:55:592
272614599387,29cyclictest2777137-21ssh09:28:151
272614599386,30cyclictest2870285-21ssh11:24:211
272614599386,29cyclictest2790125-21ssh09:45:001
272614599385,30cyclictest2797670-21ssh09:54:001
272614599385,29cyclictest2810544-21ssh10:10:041
272614599382,5cyclictest2924344-21ntpq12:31:001
272614599382,5cyclictest2924344-21ntpq12:31:001
2726145993822,13cyclictest0-21swapper/111:41:061
2726145993822,13cyclictest0-21swapper/110:25:011
272614599381,4cyclictest2755695-21/usr/sbin/munin08:46:011
2726144993830,5cyclictest2778076-21ssh09:30:020
2726144993825,10cyclictest2735074-21head07:36:070
2726144993819,10cyclictest12350irq/32-eth011:20:570
272614499381,31cyclictest2839983-21ssh10:46:010
272614699375,6cyclictest2767487-21ntpq09:15:582
2726146993730,4cyclictest2735138-21sendmail07:40:012
2726146993729,5cyclictest2871722-21latency11:25:522
272614699372,10cyclictest1883891-21cups-browsed08:30:532
2726146993719,15cyclictest0-21swapper/209:50:002
272614599375,29cyclictest2765845-21ssh09:14:251
2726145993729,4cyclictest0-21swapper/109:20:481
2726145993728,6cyclictest753-21ntpd12:21:021
2726145993728,6cyclictest659-21snmpd11:54:481
2726145993728,6cyclictest659-21snmpd11:54:481
272614599372,5cyclictest2737527-21ntpq07:45:541
272614599372,5cyclictest2733036-21ntpq07:30:561
2726145993717,17cyclictest2790767-21aten_r2power_cu09:45:441
272614599371,4cyclictest2904280-21/usr/sbin/munin12:06:041
272614599371,4cyclictest2888101-21ntpq11:45:581
272614599371,4cyclictest2831708-21ntpq10:35:531
272614599371,4cyclictest2783347-21ssh09:35:541
272614599371,4cyclictest2758505-21ntpq08:55:581
272614599371,4cyclictest2731525-21ntpq07:25:571
272614599371,4cyclictest2729995-21ntpq07:20:521
272614599371,3cyclictest0-21swapper/107:40:551
2726145993712,22cyclictest2908126-21ntp_kernel_pll_12:10:561
272614599371,10cyclictest2872108-21ntpq11:26:021
2726144993731,4cyclictest2890664-21cron11:50:010
2726144993728,6cyclictest2928767-21timerwakeupswit12:36:070
2726144993728,6cyclictest2919597-21aten_r2power_po12:25:450
2726144993728,6cyclictest12350irq/32-eth009:11:030
272614699369,5cyclictest2743636-21/usr/sbin/munin08:06:032
272614699364,6cyclictest2864003-21ssh11:16:012
272614699363,7cyclictest2916135-21ntpq12:20:562
2726146993629,4cyclictest1051-21mta-sts-daemon07:15:582
272614699362,8cyclictest2775555-21ssh09:25:582
2726146993626,6cyclictest2868550-21unixbench_multi11:21:072
272614699361,9cyclictest2733063-21ntpq07:30:572
272614699361,13cyclictest2815852-21ps10:16:012
272614699361,13cyclictest2815852-21ps10:16:012
272614699361,11cyclictest2764930-21ssh09:12:382
272614699361,11cyclictest2752493-21ntpq08:35:552
272614699360,11cyclictest2754061-21ntpq08:40:572
272614699360,10cyclictest2893919-21ssh11:53:322
272614699360,10cyclictest2893919-21ssh11:53:322
272614599369,24cyclictest2751848-21/usr/sbin/munin08:36:071
272614599368,26cyclictest2818228-21ssh10:19:491
272614599368,26cyclictest2818228-21ssh10:19:491
272614599364,26cyclictest428-21mta-sts-daemon10:33:041
2726145993629,3cyclictest0-21swapper/108:10:011
2726145993628,5cyclictest2900695-21unixbench_singl12:01:071
2726145993623,9cyclictest2762126-21diskmemload10:05:551
272614599362,27cyclictest2912135-21ssh12:15:551
272614599361,6cyclictest2745041-21ntpq08:10:581
272614599361,4cyclictest2839963-21ntp_states10:46:001
272614599361,4cyclictest2748021-21ntpq08:20:541
272614599361,4cyclictest2740572-21ntp_states07:55:591
272614599361,4cyclictest2739107-21ntpq07:51:001
272614599361,3cyclictest2760102-21ntpq09:01:001
272614599361,3cyclictest2728547-21ntpq07:15:571
2726145993611,22cyclictest2855738-21cut11:05:511
2726145993611,22cyclictest2855738-21cut11:05:511
2726144993617,14cyclictest12350irq/32-eth011:16:050
272614699359,23cyclictest2729450-21aten_r2power_en07:20:442
272614699352,15cyclictest2749562-21ntpq08:25:572
2726146993518,15cyclictest2718014-21kworker/u8:9-nfsiod07:30:022
2726146993517,15cyclictest0-21swapper/209:00:022
2726146993514,18cyclictest2756010-21sed08:46:062
272614699351,14cyclictest2747120-21/usr/sbin/munin08:20:022
2726146993511,3cyclictest0-21swapper/208:00:472
272614699351,11cyclictest2748067-21ntpq08:20:562
272614699351,10cyclictest2727059-21modprobe07:11:032
2726145993529,3cyclictest0-21swapper/111:05:011
2726145993529,3cyclictest0-21swapper/111:05:011
272614599352,26cyclictest2756993-21ntpq08:50:511
272614599351,4cyclictest2754051-21ntpq08:40:571
2726145993512,13cyclictest2762126-21diskmemload11:30:031
2726145993511,21cyclictest0-21swapper/111:35:541
2726144993528,4cyclictest2794191-21systemd-run09:50:010
2726144993528,3cyclictest0-21swapper/012:10:560
272614499352,5cyclictest171rcu_preempt10:50:580
2726144993517,15cyclictest2826410-21munin-plugin-st10:30:000
272614699347,3cyclictest0-21swapper/208:00:012
272614699341,9cyclictest2737611-21ntpq07:45:592
272614699341,10cyclictest2735987-21ntpq07:40:532
272614499346,21cyclictest2884058-21ssh11:40:560
2726144993429,3cyclictest2834479-21plymouth10:40:010
2726144993424,7cyclictest12350irq/32-eth009:15:590
272614499342,14cyclictest171rcu_preempt08:20:590
2726144993327,4cyclictest2736624-21cron07:45:010
2726144993325,4cyclictest0-21swapper/010:20:510
2726144993323,7cyclictest2900066-21ntp_kernel_pll_12:00:560
2726144993321,9cyclictest2857277-21kworker/u8:0-nfsiod11:10:460
272614699321,9cyclictest261-21systemd-journal07:10:022
272614499326,16cyclictest428-21mta-sts-daemon10:05:580
2726144993224,4cyclictest0-21swapper/012:05:590
2726144993222,7cyclictest2758148-21fschecks_time08:55:510
272614499322,24cyclictest2811580-21ssh10:10:530
2726144993220,9cyclictest2798188-21cron09:55:000
2726144993213,14cyclictest1883887-21cupsd08:30:540
2726144993212,16cyclictest0-21swapper/008:00:510
272614499317,6cyclictest171rcu_preempt11:30:560
2726144993124,5cyclictest1883891-21cups-browsed10:44:320
2726144993123,5cyclictest0-21swapper/010:00:550
2726144993121,7cyclictest1054-21mta-sts-daemon12:21:330
2726144993117,10cyclictest151ktimers/009:56:000
2726144993023,5cyclictest2760513-21unixbench_multi09:01:070
2726144993018,9cyclictest2753785-21kernelversion08:40:500
2726144992921,6cyclictest2739632-21sh07:55:010
2726144992921,5cyclictest2727642-21systemd-run07:15:010
2726144992913,13cyclictest151ktimers/008:05:580
2726144992822,3cyclictest0-21swapper/007:20:020
2726144992615,7cyclictest421-21dbus-daemon08:20:020
272614499259,14cyclictest0-21swapper/007:23:260
2726144992518,3cyclictest0-21swapper/008:50:570
272614499247,9cyclictest171rcu_preempt08:10:570
2726144992419,2cyclictest0-21swapper/009:05:460
2726144992418,4cyclictest2741113-21sendmail08:00:000
2726144992418,4cyclictest2733616-21cron07:35:010
2726144992417,5cyclictest1883891-21cups-browsed08:48:290
272614499232,15cyclictest2731596-21ntp_states07:26:010
2726144992214,7cyclictest57-21kcompactd008:35:540
2726144992115,4cyclictest151ktimers/007:45:530
272614799187,6cyclictest0-21swapper/309:30:553
272614799187,6cyclictest0-21swapper/309:30:553
272614799179,3cyclictest0-21swapper/310:56:003
272614799178,5cyclictest0-21swapper/311:05:573
272614799178,5cyclictest0-21swapper/311:05:573
272614799176,5cyclictest0-21swapper/312:30:023
272614799176,5cyclictest0-21swapper/311:30:443
272614799176,5cyclictest0-21swapper/310:30:023
272614799169,5cyclictest0-21swapper/311:50:593
272614799169,5cyclictest0-21swapper/311:50:593
272614799168,5cyclictest0-21swapper/309:25:013
272614799168,5cyclictest0-21swapper/307:46:053
272614799168,4cyclictest0-21swapper/307:15:573
272614799167,6cyclictest0-21swapper/311:41:033
272614799167,5cyclictest0-21swapper/311:36:013
272614799167,4cyclictest0-21swapper/308:46:003
272614799166,7cyclictest0-21swapper/310:35:453
272614799166,6cyclictest0-21swapper/312:30:593
272614799166,6cyclictest0-21swapper/312:30:593
272614799166,6cyclictest0-21swapper/312:20:473
272614799166,6cyclictest0-21swapper/311:30:013
272614799166,6cyclictest0-21swapper/311:20:543
272614799158,5cyclictest0-21swapper/309:00:543
272614799157,5cyclictest0-21swapper/311:01:003
272614799157,5cyclictest0-21swapper/311:01:003
272614799157,5cyclictest0-21swapper/308:55:563
272614799157,5cyclictest0-21swapper/307:31:003
272614799157,4cyclictest0-21swapper/311:16:003
272614799157,4cyclictest0-21swapper/310:00:533
272614799157,4cyclictest0-21swapper/309:40:543
272614799157,4cyclictest0-21swapper/308:35:553
272614799157,4cyclictest0-21swapper/308:30:543
272614799157,4cyclictest0-21swapper/308:10:553
272614799157,4cyclictest0-21swapper/307:25:563
272614799156,5cyclictest0-21swapper/312:05:523
272614799156,5cyclictest0-21swapper/310:45:573
272614799156,5cyclictest0-21swapper/310:10:443
272614799156,4cyclictest0-21swapper/308:50:503
272614799151,8cyclictest0-21swapper/310:30:563
272614799149,3cyclictest0-21swapper/309:55:573
272614799148,4cyclictest0-21swapper/312:35:483
272614799148,4cyclictest0-21swapper/309:45:573
272614799148,3cyclictest0-21swapper/307:10:013
272614799147,5cyclictest0-21swapper/311:45:533
272614799147,5cyclictest0-21swapper/311:10:513
272614799147,4cyclictest0-21swapper/312:15:553
272614799147,4cyclictest0-21swapper/310:20:533
272614799147,4cyclictest0-21swapper/310:05:553
272614799147,4cyclictest0-21swapper/309:50:583
272614799147,4cyclictest0-21swapper/308:41:003
272614799147,4cyclictest0-21swapper/308:25:533
272614799147,4cyclictest0-21swapper/308:00:533
272614799147,4cyclictest0-21swapper/307:40:543
272614799147,4cyclictest0-21swapper/307:35:553
272614799146,5cyclictest0-21swapper/312:04:143
272614799146,5cyclictest0-21swapper/310:40:503
272614799146,5cyclictest0-21swapper/309:25:463
272614799146,4cyclictest0-21swapper/312:10:083
272614799146,4cyclictest0-21swapper/309:05:453
272614799145,5cyclictest0-21swapper/310:50:143
272614799138,4cyclictest0-21swapper/307:55:583
272614799137,4cyclictest0-21swapper/310:15:593
272614799137,4cyclictest0-21swapper/310:15:593
272614799137,4cyclictest0-21swapper/309:36:003
272614799137,4cyclictest0-21swapper/309:10:483
272614799137,4cyclictest0-21swapper/308:15:573
272614799137,4cyclictest0-21swapper/308:05:573
272614799137,4cyclictest0-21swapper/307:50:533
272614799136,4cyclictest0-21swapper/311:57:383
272614799136,4cyclictest0-21swapper/309:15:233
272614799136,4cyclictest0-21swapper/308:20:443
272614799136,4cyclictest0-21swapper/307:20:473
272614799136,4cyclictest0-21swapper/307:10:463
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional