You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-14 - 02:34

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Mon Sep 14, 2026 00:42:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2770164996150,5cyclictest0-21swapper/200:11:242
2770163995446,5cyclictest2849057-21munin-run22:20:011
2770163994942,3cyclictest0-21swapper/100:00:021
2770163994942,3cyclictest0-21swapper/100:00:021
277016499483,32cyclictest2856496-21ssh22:31:192
277016499483,32cyclictest2856496-21ssh22:31:192
2770163994636,8cyclictest1-21systemd22:30:021
2770162994638,5cyclictest2910116-40ogrotate00:00:010
2770162994638,5cyclictest2910116-40ogrotate00:00:010
2770162994638,5cyclictest1066030-21cups-browsed22:29:490
2770164994531,9cyclictest421-21dbus-daemon21:00:012
277016399454,33cyclictest2887077-21grep23:21:191
2770163994538,4cyclictest2822893-21sshd21:36:161
2770162994538,4cyclictest2779181-21systemd-run19:40:010
2770162994535,7cyclictest0-21swapper/021:26:010
2770164994435,6cyclictest2887125-21mailstats23:21:192
2770163994334,6cyclictest265-21systemd-journal21:30:011
2770162994328,12cyclictest2791197-21latency_hist20:20:020
2770164994234,5cyclictest2792675-21systemd-run20:25:012
2770164994232,6cyclictest1-21systemd19:20:012
2770164994231,8cyclictest2824576-21sendmail21:40:012
2770163994233,5cyclictest1001-21mta-sts-daemon19:46:141
2770163994233,5cyclictest1001-21mta-sts-daemon19:46:141
2770162994232,7cyclictest0-21swapper/023:00:010
2770163994132,6cyclictest1066010-21cupsd23:36:121
2770163994132,5cyclictest2861477-21latency_hist22:40:021
277016399412,34cyclictest2790598-21sshd20:16:161
2770164994032,5cyclictest2849931-21fschecks_time22:21:042
2770163994032,5cyclictest2827645-21ssh21:45:011
2770162994032,5cyclictest2798134-21ntpq20:41:180
2770162994031,6cyclictest420-21avahi-daemon22:24:390
2770164993933,3cyclictest0-21swapper/222:17:172
2770164993933,3cyclictest0-21swapper/200:20:012
2770164993930,6cyclictest439-21systemd-logind19:55:012
2770163993931,5cyclictest1-21systemd20:50:011
2770163993931,5cyclictest1001-21mta-sts-daemon22:44:181
2770163993928,8cyclictest2884238-21timerandwakeup23:16:211
2770162993932,4cyclictest2931570-21latency_hist00:35:020
2770162993932,4cyclictest2826398-21unixbench_multi21:41:230
2770162993932,4cyclictest2-21kthreadd19:20:010
2770162993929,7cyclictest2828431-21cpuspeed21:46:020
2770164993830,5cyclictest2926904-21mailstats00:26:192
2770164993826,9cyclictest2899448-21switchtime23:41:222
2770164993825,9cyclictest2881129-21switchtime23:11:222
277016499382,28cyclictest2914538-21sshd00:06:172
2770163993831,4cyclictest1002-21mta-sts-daemon19:36:161
2770163993830,5cyclictest2900924-21munin-run23:45:011
2770163993830,5cyclictest1066030-21cups-browsed23:31:041
2770162993830,5cyclictest2800168-21systemd-run20:50:010
2770164993729,5cyclictest2931506-21cron00:35:012
2770164993729,5cyclictest2885631-21munin-run23:20:002
2770164993729,5cyclictest2871237-21fschecks_time22:56:052
2770164993729,5cyclictest2806170-21systemd-run21:10:012
2770164993725,9cyclictest2820026-21switchtime21:31:222
277016399374,13cyclictest1003-21mta-sts-daemon23:46:121
2770163993731,3cyclictest0-21swapper/123:51:151
2770163993729,5cyclictest2806137-21cron21:10:001
277016299373,29cyclictest2822890-21sshd21:36:160
2770162993710,21cyclictest665-21snmpd21:11:110
2770164993628,5cyclictest2833759-21ssh21:55:022
2770164993628,5cyclictest2833759-21ssh21:55:022
2770164993627,5cyclictest1001-21mta-sts-daemon21:17:332
2770164993625,8cyclictest2795662-21sh20:35:012
277016499361,27cyclictest2902273-21ssh23:46:162
2770163993628,5cyclictest2922369-21ssh00:20:011
2770163993628,5cyclictest2788681-21fschecks_time20:11:051
2770163993626,6cyclictest1066030-21cups-browsed22:32:561
2770163993626,6cyclictest1066030-21cups-browsed22:32:561
2770163993625,8cyclictest2878185-21timerandwakeup23:06:231
2770162993631,3cyclictest2888724-21systemd-run23:25:010
2770162993628,5cyclictest2910146-21cupsd00:16:430
2770162993628,4cyclictest0-21swapper/023:06:110
2770162993626,7cyclictest2896614-21tail23:36:230
277016299362,29cyclictest2810480-21ssh21:16:160
2770162993612,20cyclictest2926798-21ssh00:26:170
2770164993528,4cyclictest0-21swapper/223:05:012
2770163993529,3cyclictest0-21swapper/121:31:141
2770163993527,5cyclictest2934562-21ssh00:40:011
2770163993526,6cyclictest1066030-21cups-browsed21:19:411
2770162993527,6cyclictest12650irq/32-eth000:36:130
2770162993527,5cyclictest2898954-21missed_timers23:41:080
2770162993527,3cyclictest0-21swapper/023:26:180
2770162993526,5cyclictest12650irq/32-eth022:01:170
2770162993524,8cyclictest2844557-21timerandwakeup22:11:200
2770162993520,3cyclictest0-21swapper/021:51:150
2770162993520,3cyclictest0-21swapper/021:51:150
2770164993427,3cyclictest0-21swapper/222:51:052
2770164993426,5cyclictest2878306-21unixbench_multi23:06:242
2770164993426,4cyclictest1001-21mta-sts-daemon22:01:162
2770163993427,5cyclictest265-21systemd-journal21:00:011
2770163993427,4cyclictest2809214-21cron21:15:001
2770163993426,5cyclictest2871364-21kernelversion22:56:081
2770163993425,6cyclictest1003-21mta-sts-daemon21:55:341
2770163993425,6cyclictest1003-21mta-sts-daemon21:55:341
2770163993424,7cyclictest2931510-21cron00:35:011
2770163993424,7cyclictest2875036-21switchtime23:01:231
2770163993423,8cyclictest2850658-21switchtime22:21:221
277016399342,24cyclictest2911360-21ssh00:01:151
2770162993425,4cyclictest0-21swapper/023:31:170
2770162993424,8cyclictest265-21systemd-journal19:22:170
2770162993421,9cyclictest12650irq/32-eth023:51:120
277016499336,17cyclictest2890121-21grep23:26:192
2770164993327,3cyclictest0-21swapper/222:40:002
2770164993327,3cyclictest0-21swapper/222:00:012
2770164993327,3cyclictest0-21swapper/222:00:012
2770164993326,4cyclictest2786672-21kworker/u8:3-nfsiod21:45:012
2770164993326,4cyclictest1001-21mta-sts-daemon22:41:142
2770164993325,6cyclictest2806146-21diskmemload21:11:152
2770164993315,14cyclictest351ktimers/219:21:132
2770163993328,2cyclictest0-21swapper/100:11:171
2770163993326,4cyclictest2923423-21missed_timers00:21:071
2770163993326,4cyclictest2846007-21munin-plugin-st22:15:011
2770162993326,5cyclictest1066030-21cups-browsed22:46:520
2770162993325,5cyclictest420-21avahi-daemon20:40:010
2770162993325,5cyclictest2783665-21systemd-run19:55:010
2770162993323,7cyclictest421-21dbus-daemon00:15:010
2770164993226,3cyclictest0-21swapper/200:21:232
2770164993223,6cyclictest2911650-21mailstats00:01:242
2770163993227,3cyclictest0-21swapper/123:11:091
2770163993227,2cyclictest0-21swapper/100:30:011
2770163993226,3cyclictest0-21swapper/120:00:001
2770163993226,3cyclictest0-21swapper/119:20:011
2770163993226,3cyclictest0-21swapper/100:10:021
2770163993224,5cyclictest2829380-21timerwakeupswit21:46:221
2770163993223,6cyclictest421-21dbus-daemon20:06:141
2770162993226,4cyclictest2862957-21ssh22:41:260
2770162993226,3cyclictest0-21swapper/022:35:010
2770162993226,3cyclictest0-21swapper/022:35:010
2770162993221,8cyclictest2786062-21ntp_kernel_pll_20:01:150
2770162993218,9cyclictest623-21sshd19:11:170
2770162993218,10cyclictest0-21swapper/022:36:210
2770164993123,5cyclictest2895386-21aten_r2power_en23:36:002
2770164993123,5cyclictest265-21systemd-journal00:35:032
2770164993123,4cyclictest1003-21mta-sts-daemon21:28:102
2770164993120,9cyclictest2853804-21timerandwakeup22:26:252
2770164993114,13cyclictest351ktimers/219:26:122
277016499311,25cyclictest665-21snmpd19:11:152
2770163993126,3cyclictest1002-21mta-sts-daemon22:52:251
2770163993125,3cyclictest0-21swapper/123:26:181
2770163993125,3cyclictest0-21swapper/121:05:011
2770163993125,3cyclictest0-21swapper/120:21:241
2770163993124,4cyclictest1003-21mta-sts-daemon22:06:581
2770163993124,3cyclictest0-21swapper/120:31:131
2770162993123,5cyclictest2813174-21fschecks_time21:21:080
277016299312,26cyclictest2868589-21ssh22:51:130
2770162993122,6cyclictest1066030-21cups-browsed23:10:320
2770162993122,5cyclictest0-21swapper/019:56:140
2770162993119,9cyclictest2792653-21cron20:25:010
2770164993024,3cyclictest0-21swapper/222:10:012
2770163993027,2cyclictest0-21swapper/120:51:221
2770163993023,4cyclictest2797142-21munin-plugin-st20:40:011
277016399302,20cyclictest2786115-21sshd20:01:161
2770163993015,9cyclictest2806146-21diskmemload21:51:171
2770163993015,9cyclictest2806146-21diskmemload21:51:171
2770162993022,5cyclictest2818977-21/usr/sbin/munin21:31:220
2770162993022,4cyclictest0-21swapper/020:51:170
2770162993018,7cyclictest12750irq/33-eth019:46:160
2770162993018,7cyclictest12750irq/33-eth019:46:160
2770162993012,14cyclictest2902715-21unixbench_multi23:46:230
2770164992922,5cyclictest2910075-21munin-run00:00:012
2770164992922,5cyclictest2910075-21munin-run00:00:012
2770164992922,4cyclictest2815365-21grep21:25:012
2770164992922,4cyclictest2797165-21idleruntime-cro20:40:012
2770164992921,5cyclictest2801655-21systemd-run20:55:012
2770164992920,5cyclictest0-21swapper/222:11:032
277016499291,21cyclictest2893054-21ssh23:31:152
2770163992919,7cyclictest1002-21mta-sts-daemon21:21:261
2770162992923,4cyclictest1003-21mta-sts-daemon23:01:060
2770162992922,5cyclictest2921367-21kworker/u8:12+nfsiod00:21:030
2770162992922,3cyclictest0-21swapper/021:56:120
2770162992922,3cyclictest0-21swapper/021:56:120
2770162992921,5cyclictest0-21swapper/022:16:120
2770162992919,7cyclictest694-21cron20:15:010
2770162992917,9cyclictest2840165-21sshd22:05:160
277016299291,14cyclictest2913341-21wc00:05:020
2770164992822,3cyclictest1001-21mta-sts-daemon23:50:122
2770164992821,4cyclictest2797890-21memory20:41:072
2770164992820,5cyclictest1066030-21cups-browsed19:30:142
2770164992819,4cyclictest0-21swapper/219:36:182
2770163992823,2cyclictest0-21swapper/119:55:001
2770163992822,3cyclictest0-21swapper/119:11:171
2770163992821,4cyclictest2776688-21fschecks_time19:31:061
2770163992821,4cyclictest1002-21mta-sts-daemon20:41:161
2770163992820,5cyclictest2779497-21aten_r2power_fr19:41:031
2770162992822,3cyclictest0-21swapper/000:06:230
2770162992820,6cyclictest2775906-21timerandwakeup19:26:240
277016299281,14cyclictest2884246-21cat23:16:220
2770164992721,3cyclictest0-21swapper/221:45:162
2770164992721,3cyclictest0-21swapper/220:20:012
2770164992719,5cyclictest1003-21mta-sts-daemon19:46:082
2770164992719,5cyclictest1003-21mta-sts-daemon19:46:082
277016299272,18cyclictest665-21snmpd21:06:100
2770162992720,4cyclictest2804645-21cron21:05:000
277016299271,22cyclictest265-21systemd-journal20:26:160
2770164992620,4cyclictest2770161-21cyclictest20:26:112
2770164992618,5cyclictest1066030-21cups-browsed20:03:062
2770163992621,3cyclictest0-21swapper/122:01:141
2770162992618,5cyclictest2795644-21sh20:35:010
2770162992618,5cyclictest1-21systemd19:10:010
2770164992519,3cyclictest2798670-21kworker/u8:2-xprtiod21:01:232
2770164992518,3cyclictest0-21swapper/222:46:172
2770164992517,4cyclictest2780677-21kworker/u8:4-xprtiod20:10:162
277016499251,19cyclictest1066030-21cups-browsed19:56:092
277016399251,7cyclictest171rcu_preempt20:26:131
2770163992516,6cyclictest0-21swapper/122:47:401
2770164992416,5cyclictest1066030-21cups-browsed20:07:412
277016299244,7cyclictest2787521-21ntpq20:06:110
277016299242,15cyclictest151ktimers/019:41:180
2770162992418,3cyclictest0-21swapper/019:31:170
2770162992413,4cyclictest2802288-21kernelversion20:56:070
277016399232,15cyclictest2775618-21ntp_states19:26:181
2770163992313,7cyclictest2774536-21unixbench_multi19:21:241
277016599222,13cyclictest0-21swapper/322:31:203
277016599222,13cyclictest0-21swapper/322:31:203
277016499222,14cyclictest2780024-21ntpq19:41:132
2770164992115,4cyclictest2800093-21unixbench_singl20:46:242
2770163992110,7cyclictest421-21dbus-daemon19:10:011
277016599203,11cyclictest0-21swapper/321:51:193
277016599203,11cyclictest0-21swapper/321:51:193
277016599203,11cyclictest0-21swapper/321:36:093
277016599202,11cyclictest0-21swapper/323:46:143
277016599193,9cyclictest0-21swapper/322:11:113
277016599192,9cyclictest0-21swapper/300:06:133
277016599192,11cyclictest0-21swapper/322:41:163
277016599192,11cyclictest0-21swapper/300:16:193
277016599191,9cyclictest0-21swapper/300:26:163
277016599184,8cyclictest0-21swapper/321:46:173
277016599183,9cyclictest0-21swapper/323:21:163
277016599183,9cyclictest0-21swapper/320:16:163
277016599183,6cyclictest0-21swapper/320:11:103
277016599183,10cyclictest0-21swapper/321:26:103
277016599182,9cyclictest0-21swapper/323:41:153
277016599182,9cyclictest0-21swapper/322:51:133
277016599182,9cyclictest0-21swapper/300:31:103
277016599182,10cyclictest0-21swapper/323:36:113
277016599182,10cyclictest0-21swapper/322:26:153
277016599182,10cyclictest0-21swapper/300:36:163
277016599181,9cyclictest0-21swapper/320:26:103
277016599181,9cyclictest0-21swapper/319:16:103
277016599181,8cyclictest0-21swapper/323:51:003
277016599181,12cyclictest0-21swapper/321:21:183
277016599181,10cyclictest0-21swapper/321:41:093
277016599175,8cyclictest0-21swapper/320:21:163
277016599173,9cyclictest0-21swapper/322:56:193
277016599173,9cyclictest0-21swapper/321:56:133
277016599173,9cyclictest0-21swapper/321:56:133
277016599173,7cyclictest0-21swapper/322:16:103
277016599172,9cyclictest0-21swapper/323:56:103
277016599172,9cyclictest0-21swapper/323:56:103
277016599172,9cyclictest0-21swapper/323:31:013
277016599172,9cyclictest0-21swapper/323:01:163
277016599172,9cyclictest0-21swapper/321:31:163
277016599172,10cyclictest0-21swapper/323:16:013
277016599172,10cyclictest0-21swapper/321:16:173
277016599172,10cyclictest0-21swapper/321:11:113
277016599172,10cyclictest0-21swapper/300:21:063
277016599171,9cyclictest0-21swapper/323:26:113
277016599171,9cyclictest0-21swapper/322:01:113
277016599171,8cyclictest0-21swapper/320:06:143
277016599171,10cyclictest0-21swapper/300:01:183
2770164991712,3cyclictest1-21systemd19:10:012
277016599163,9cyclictest0-21swapper/322:05:163
277016599163,8cyclictest0-21swapper/322:21:133
277016599163,7cyclictest0-21swapper/323:06:113
277016599163,6cyclictest0-21swapper/320:56:113
277016599162,9cyclictest0-21swapper/320:41:113
277016599162,8cyclictest0-21swapper/322:36:123
277016599162,8cyclictest0-21swapper/321:10:013
277016599162,8cyclictest0-21swapper/319:46:143
277016599162,8cyclictest0-21swapper/319:46:143
277016599162,6cyclictest0-21swapper/320:51:133
277016599154,6cyclictest0-21swapper/320:36:123
277016599153,7cyclictest0-21swapper/322:46:183
277016599153,7cyclictest0-21swapper/319:56:093
277016599152,8cyclictest0-21swapper/319:36:173
277016599152,7cyclictest0-21swapper/319:26:183
277016599151,9cyclictest0-21swapper/323:11:103
277016599151,10cyclictest0-21swapper/300:11:083
277016599142,7cyclictest0-21swapper/319:31:123
277016599142,6cyclictest0-21swapper/319:21:103
277016599142,6cyclictest0-21swapper/319:11:133
277016599141,8cyclictest0-21swapper/319:41:173
277016599141,7cyclictest0-21swapper/320:46:113
277016599141,7cyclictest0-21swapper/320:01:123
277016599141,7cyclictest0-21swapper/319:51:123
277016599133,6cyclictest0-21swapper/321:01:113
277016599133,6cyclictest0-21swapper/320:31:133
277016599110,6cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional