You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-08 - 20:12

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Sat Aug 08, 2026 12:43:05)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
882420995139,9cyclictest936824-21awk09:40:010
882421994835,7cyclictest0-21swapper/111:25:531
882421994739,5cyclictest988678-21systemd-run11:05:011
882422994538,4cyclictest1012962-21cut11:45:012
882422994537,5cyclictest1000-21mta-sts-daemon11:06:302
882422994535,6cyclictest108584-21cups-browsed11:30:442
882422994436,5cyclictest970387-21systemd-run10:35:012
882422994434,7cyclictest108584-21cups-browsed08:55:552
882420994431,10cyclictest1028192-21munin-run12:10:000
882420994431,10cyclictest1028192-21munin-run12:10:000
882421994333,5cyclictest0-21swapper/109:40:541
882422994234,5cyclictest979526-21ssh10:50:012
882422994234,5cyclictest964308-21systemd-run10:25:012
882421994234,5cyclictest421-21dbus-daemon10:55:011
882422994132,6cyclictest421-21dbus-daemon10:25:552
882421994134,4cyclictest991705-21kworker/u8:1+xprtiod11:10:011
882422993932,4cyclictest1000-21mta-sts-daemon11:29:142
882422993931,5cyclictest1009940-21systemd-run11:40:012
882422993930,6cyclictest421-21dbus-daemon09:19:492
882421993933,3cyclictest0-21swapper/110:20:011
882421993931,5cyclictest888429-21systemd-run07:30:011
882420993923,2cyclictest0-21swapper/010:35:010
882422993832,4cyclictest882419-21cyclictest11:50:442
882422993831,4cyclictest891403-21sendmail07:40:012
882422993830,5cyclictest1022082-21munin-run12:00:012
882422993829,6cyclictest1003-21mta-sts-daemon10:02:092
882422993829,5cyclictest898860-21grep08:01:092
882421993830,5cyclictest997714-21munin-plugin-st11:20:011
882421993830,5cyclictest997714-21munin-plugin-st11:20:011
882421993830,5cyclictest1044432-21missed_timers12:35:511
882421993829,4cyclictest0-21swapper/110:25:491
882421993821,12cyclictest108584-21cups-browsed11:21:001
882421993821,12cyclictest108584-21cups-browsed11:21:001
882420993831,4cyclictest886940-21systemd-run07:25:010
882420993821,10cyclictest12650irq/32-eth010:25:550
882422993730,3cyclictest0-21swapper/209:21:102
882421993731,3cyclictest0-21swapper/107:25:011
882421993729,5cyclictest921476-21cut09:15:011
882421993728,5cyclictest0-21swapper/112:10:531
882421993728,5cyclictest0-21swapper/112:10:531
882420993730,4cyclictest1045158-21head12:36:060
882420993730,4cyclictest1022071-21cron12:00:010
882420993725,10cyclictest694-21cron07:15:010
882422993630,3cyclictest0-21swapper/210:05:542
882422993630,3cyclictest0-21swapper/210:05:542
882422993629,4cyclictest927860-21kworker/u8:10-xprtiod09:41:002
882422993627,6cyclictest897426-21kworker/u8:12-xprtiod09:40:012
882422993627,6cyclictest420-21avahi-daemon12:12:462
882422993627,6cyclictest420-21avahi-daemon12:12:462
882422993626,7cyclictest985599-21awk11:00:012
882421993628,5cyclictest909438-21systemd-run08:40:011
882421993628,5cyclictest909438-21systemd-run08:40:011
88242199362,28cyclictest1011034-21ssh11:40:521
88242199361,26cyclictest428-21mta-sts-daemon07:30:571
882420993631,3cyclictest949010-21munin-run10:00:010
882420993630,4cyclictest985801-21latency_hist11:00:020
882420993628,4cyclictest0-21swapper/011:21:000
882420993628,4cyclictest0-21swapper/011:21:000
882422993526,6cyclictest420-21avahi-daemon12:26:312
88242199353,27cyclictest1002-21mta-sts-daemon12:25:561
882421993527,5cyclictest1037481-21latency_hist12:25:021
882421993527,5cyclictest1006857-21idleruntime-cro11:35:011
882421993526,6cyclictest108584-21cups-browsed07:43:241
88242199350,28cyclictest925780-21ssh09:21:031
882420993529,4cyclictest1010032-21latency_hist11:40:020
882420993527,5cyclictest1037351-21ssh12:25:020
882420993525,8cyclictest1002492-21grep11:26:050
882422993428,3cyclictest0-21swapper/210:40:472
882422993428,3cyclictest0-21swapper/210:40:472
882422993427,3cyclictest0-21swapper/212:20:532
882422993424,6cyclictest420-21avahi-daemon10:38:342
882421993428,3cyclictest0-21swapper/112:20:011
882421993426,5cyclictest978245-21unixbench_singl10:46:081
882421993426,5cyclictest950780-21unixbench_singl10:01:041
882421993426,5cyclictest949026-21idleruntime-cro10:00:011
882420993428,4cyclictest894422-21kthreadd07:50:010
882420993428,4cyclictest439-21systemd-logind10:05:020
882420993428,4cyclictest1012951-21cron11:45:010
882420993427,4cyclictest898935-21systemd-run08:05:010
882420993427,4cyclictest888343-21head07:26:040
88242099341,24cyclictest974573-21ssh10:40:530
88242099341,24cyclictest974573-21ssh10:40:530
88242099341,23cyclictest1014102-21ssh11:45:540
882422993326,4cyclictest1003-21mta-sts-daemon09:50:342
882422993326,3cyclictest0-21swapper/211:45:582
882422993325,4cyclictest1000-21mta-sts-daemon12:34:102
882422993322,8cyclictest928673-21netstat09:25:502
882421993325,5cyclictest956860-21unixbench_singl10:11:071
882421993325,5cyclictest956860-21unixbench_singl10:11:071
882421993325,5cyclictest915389-21sendmail09:00:011
882421993324,4cyclictest0-21swapper/110:05:531
882421993324,4cyclictest0-21swapper/110:05:531
882420993327,4cyclictest941643-21sed09:46:050
882420993325,5cyclictest108584-21cups-browsed10:35:150
882420993325,4cyclictest0-21swapper/011:00:560
882420993324,6cyclictest980566-21needreboot10:50:510
882420993324,6cyclictest1028659-21aten_r2power_cu12:10:430
882420993324,6cyclictest1028659-21aten_r2power_cu12:10:430
882422993227,2cyclictest0-21swapper/209:46:032
882422993225,4cyclictest1003-21mta-sts-daemon07:25:532
882422993225,4cyclictest1001-21mta-sts-daemon09:13:242
882422993224,5cyclictest895903-21cut07:55:002
882422993224,5cyclictest895903-21cut07:55:002
882422993224,5cyclictest265-21systemd-journal07:45:012
882422993222,7cyclictest1046457-21munin-plugin-st12:40:022
882421993226,3cyclictest0-21swapper/110:45:021
882421993226,3cyclictest0-21swapper/110:45:021
882421993225,4cyclictest967840-21aten_r2power_en10:30:431
882421993225,4cyclictest1008520-21unixbench-2d11:36:061
882421993224,5cyclictest994726-21ssh11:15:011
882421993224,4cyclictest0-21swapper/110:25:011
882421993221,8cyclictest108584-21cups-browsed08:30:021
882420993226,4cyclictest913919-21systemd-run08:55:010
882420993225,5cyclictest108584-21cups-browsed08:12:150
882420993223,6cyclictest750-21ntpd12:15:460
882420993219,10cyclictest903417-21sendmail08:20:010
882420993215,13cyclictest151ktimers/009:26:460
882420993211,14cyclictest12650irq/32-eth010:45:560
882422993124,4cyclictest1002-21mta-sts-daemon08:50:532
882422993124,3cyclictest0-21swapper/210:50:522
882422993123,5cyclictest903399-21grep08:20:012
882422993123,5cyclictest1026829-21unixbench-2d12:06:062
882422993123,5cyclictest1026829-21unixbench-2d12:06:062
882422993123,5cyclictest1023424-21proc_pri12:01:012
882422993122,6cyclictest947598-21timerwakeupswit09:56:052
882421993126,2cyclictest0-21swapper/111:50:021
882421993125,3cyclictest0-21swapper/111:50:561
882421993123,5cyclictest898909-21latency_hist08:05:011
882421993123,3cyclictest0-21swapper/109:45:531
882421993122,6cyclictest421-21dbus-daemon12:01:571
882420993125,4cyclictest1022879-21gltestperf12:00:480
882420993124,5cyclictest108584-21cups-browsed09:04:110
882420993121,7cyclictest995271-21basename11:15:450
882420993121,7cyclictest995271-21basename11:15:450
882420993114,6cyclictest1037920-21sh12:25:450
882422993024,3cyclictest0-21swapper/212:20:012
882422993023,3cyclictest0-21swapper/210:10:482
882422993023,3cyclictest0-21swapper/210:10:482
882422993020,8cyclictest891646-21kworker/u8:2+xprtiod08:22:052
882421993024,3cyclictest0-21swapper/112:05:591
882421993024,3cyclictest0-21swapper/112:05:591
882421993024,3cyclictest0-21swapper/109:10:011
882421993023,3cyclictest0-21swapper/112:31:011
882421993022,5cyclictest1022119-21systemd-run12:00:011
882421993019,8cyclictest944346-21mailstats09:51:021
882420993024,3cyclictest1000-21mta-sts-daemon09:33:300
882420993024,2cyclictest0-21swapper/011:50:540
882420993023,5cyclictest420-21avahi-daemon09:11:020
882420993023,5cyclictest108584-21cups-browsed09:08:480
882420993022,5cyclictest108584-21cups-browsed09:52:420
882420993017,5cyclictest171rcu_preempt11:10:570
88242299293,21cyclictest108584-21cups-browsed09:00:532
88242299292,24cyclictest992951-21ssh11:10:582
88242299292,24cyclictest959384-21ssh10:16:002
882422992922,4cyclictest897381-21cron08:00:002
882422992922,4cyclictest897381-21cron08:00:002
882422992921,5cyclictest900313-21unixbench_multi08:06:052
882422992920,5cyclictest108580-21cupsd11:01:312
882421992921,5cyclictest885330-21unixbench_singl07:16:081
882421992921,4cyclictest0-21swapper/110:56:571
882420992924,2cyclictest0-21swapper/010:20:010
882420992922,5cyclictest485-21in:imuxsock07:58:070
882420992922,5cyclictest485-21in:imuxsock07:58:070
882422992821,4cyclictest1002-21mta-sts-daemon08:45:552
882422992821,4cyclictest1002-21mta-sts-daemon08:45:552
882422992821,3cyclictest0-21swapper/211:21:012
882422992821,3cyclictest0-21swapper/211:21:012
882422992821,3cyclictest0-21swapper/209:31:002
882422992818,7cyclictest910809-21unixbench_multi08:41:032
882422992818,7cyclictest910809-21unixbench_multi08:41:032
88242199288,6cyclictest171rcu_preempt08:40:571
88242199288,6cyclictest171rcu_preempt08:40:571
882421992821,3cyclictest0-21swapper/109:25:471
882421992820,5cyclictest912423-21systemd-run08:50:011
882421992820,5cyclictest912423-21systemd-run08:50:011
882421992820,5cyclictest907794-21sed08:31:041
882421992815,9cyclictest750-21ntpd09:00:551
88242199281,21cyclictest934874-21ssh09:35:521
882420992822,4cyclictest900344-21sed08:06:050
882420992822,4cyclictest0-21swapper/007:16:070
882420992820,6cyclictest906096-21switchtime08:26:030
882420992820,5cyclictest925998-21systemctl09:21:120
882420992819,6cyclictest938566-21rm09:41:060
882420992819,6cyclictest1041307-21latency12:30:490
882420992818,2cyclictest171rcu_preempt07:35:520
88242099281,21cyclictest151ktimers/010:05:590
88242099281,21cyclictest151ktimers/010:05:590
882420992811,11cyclictest151ktimers/008:40:540
882420992811,11cyclictest151ktimers/008:40:540
882422992719,5cyclictest883846-21head07:11:042
882422992718,6cyclictest886646-21sshd07:21:062
882421992721,3cyclictest0-21swapper/109:30:511
882421992721,3cyclictest0-21swapper/107:15:011
882421992720,4cyclictest0-21swapper/107:56:041
882421992720,4cyclictest0-21swapper/107:56:041
882421992715,3cyclictest171rcu_preempt10:35:531
882420992720,5cyclictest961690-21/usr/sbin/munin10:20:530
882420992720,5cyclictest867837-21kworker/u8:17-xprtiod08:22:040
882420992719,5cyclictest0-21swapper/011:30:480
88242299263,18cyclictest917845-21sshd09:05:562
882422992620,4cyclictest1003-21mta-sts-daemon08:25:522
882422992620,3cyclictest0-21swapper/207:20:012
882422992619,4cyclictest907900-21idleruntime-cro08:35:002
882422992618,5cyclictest889904-21grep07:35:012
882421992621,2cyclictest0-21swapper/108:16:071
882421992620,3cyclictest0-21swapper/109:15:471
882421992618,5cyclictest913887-21cron08:55:001
882420992621,2cyclictest0-21swapper/009:00:010
882420992620,3cyclictest0-21swapper/011:05:460
88242299252,18cyclictest909406-21awk08:40:002
88242299252,18cyclictest909406-21awk08:40:002
882422992518,5cyclictest0-21swapper/208:11:002
882422992515,7cyclictest997715-21munin-plugin-st11:20:012
882422992515,7cyclictest997715-21munin-plugin-st11:20:012
882421992519,3cyclictest0-21swapper/108:10:551
882421992518,4cyclictest0-21swapper/107:50:011
882420992520,3cyclictest0-21swapper/007:45:010
882420992519,4cyclictest956281-21ssh10:10:560
882420992519,4cyclictest956281-21ssh10:10:560
882420992518,5cyclictest1003-21mta-sts-daemon09:15:290
882420992517,6cyclictest0-21swapper/007:50:450
882420992517,6cyclictest0-21swapper/007:50:450
882422992417,4cyclictest882596-21grep07:10:032
88242199242,16cyclictest899796-21ntpq08:05:541
882421992418,3cyclictest0-21swapper/107:50:581
882421992418,3cyclictest0-21swapper/107:50:581
882420992417,4cyclictest909397-21sendmail08:40:000
882420992417,4cyclictest909397-21sendmail08:40:000
88242399232,11cyclictest0-21swapper/310:10:563
88242399232,11cyclictest0-21swapper/310:10:563
88242299235,12cyclictest1002-21mta-sts-daemon07:45:512
88242199237,3cyclictest171rcu_preempt08:22:061
882420992318,3cyclictest911610-21latency08:45:490
882420992318,3cyclictest911610-21latency08:45:490
88242399223,12cyclictest0-21swapper/309:15:583
88242399222,13cyclictest0-21swapper/310:46:023
88242399221,12cyclictest0-21swapper/309:35:533
88242199222,8cyclictest890878-21ntpq07:35:581
882420992215,5cyclictest906775-21telnet08:30:440
882420992215,4cyclictest108584-21cups-browsed07:30:530
88242399217,11cyclictest0-21swapper/310:20:563
88242399215,11cyclictest0-21swapper/310:00:573
88242399212,12cyclictest0-21swapper/311:16:023
88242399212,12cyclictest0-21swapper/311:16:023
88242399211,12cyclictest0-21swapper/311:00:573
88242399211,12cyclictest0-21swapper/310:05:553
88242399211,12cyclictest0-21swapper/310:05:553
88242399203,9cyclictest0-21swapper/312:00:583
88242399203,11cyclictest0-21swapper/310:16:093
88242399203,10cyclictest0-21swapper/312:15:543
88242399202,8cyclictest0-21swapper/307:45:583
88242399202,11cyclictest0-21swapper/312:35:533
88242399202,11cyclictest0-21swapper/311:25:543
882420992012,6cyclictest882380-21/usr/sbin/munin07:10:020
88242399194,9cyclictest0-21swapper/311:45:533
88242399194,9cyclictest0-21swapper/310:25:533
88242399194,9cyclictest0-21swapper/308:22:053
88242399193,10cyclictest0-21swapper/309:10:573
88242399192,9cyclictest0-21swapper/311:20:503
88242399192,9cyclictest0-21swapper/311:20:503
88242399192,8cyclictest0-21swapper/307:35:563
88242399192,11cyclictest0-21swapper/311:56:013
88242399192,11cyclictest0-21swapper/309:25:543
88242399192,11cyclictest0-21swapper/309:05:573
88242399192,10cyclictest0-21swapper/310:30:523
88242399192,10cyclictest0-21swapper/309:50:593
88242399192,10cyclictest0-21swapper/309:20:563
88242399191,10cyclictest0-21swapper/310:40:033
88242399183,9cyclictest0-21swapper/311:30:523
88242399183,9cyclictest0-21swapper/311:05:583
88242399183,9cyclictest0-21swapper/309:00:533
88242399182,9cyclictest0-21swapper/312:05:593
88242399182,9cyclictest0-21swapper/312:05:593
88242399182,9cyclictest0-21swapper/311:40:573
88242399182,8cyclictest0-21swapper/311:35:523
88242399182,11cyclictest0-21swapper/312:20:543
88242399182,10cyclictest0-21swapper/309:55:593
88242399182,10cyclictest0-21swapper/309:45:523
88242399182,10cyclictest0-21swapper/309:30:593
88242399181,10cyclictest0-21swapper/311:15:033
88242399181,10cyclictest0-21swapper/310:55:543
88242399173,9cyclictest0-21swapper/311:50:563
88242399173,7cyclictest0-21swapper/308:35:593
88242399173,7cyclictest0-21swapper/308:35:593
88242399172,9cyclictest0-21swapper/312:25:533
88242399172,9cyclictest0-21swapper/312:10:523
88242399172,9cyclictest0-21swapper/312:10:523
88242399172,10cyclictest0-21swapper/312:30:563
88242399172,10cyclictest0-21swapper/310:40:523
88242399172,10cyclictest0-21swapper/310:40:523
88242399171,8cyclictest0-21swapper/307:50:533
88242399171,8cyclictest0-21swapper/307:50:533
88242399171,8cyclictest0-21swapper/307:20:573
88242399171,7cyclictest0-21swapper/307:10:513
88242399171,10cyclictest0-21swapper/310:50:423
882421991711,4cyclictest1-21systemd07:10:011
88242399164,9cyclictest0-21swapper/309:40:523
88242399162,8cyclictest0-21swapper/308:40:513
88242399162,8cyclictest0-21swapper/308:40:513
88242399162,8cyclictest0-21swapper/308:10:533
88242399161,8cyclictest0-21swapper/308:25:523
88242399161,8cyclictest0-21swapper/308:15:543
88242399152,8cyclictest0-21swapper/308:30:583
88242399152,8cyclictest0-21swapper/307:55:583
88242399152,8cyclictest0-21swapper/307:55:583
88242399152,8cyclictest0-21swapper/307:30:533
88242399152,5cyclictest0-21swapper/308:45:513
88242399152,5cyclictest0-21swapper/308:45:513
88242399151,9cyclictest0-21swapper/307:15:543
88242399151,7cyclictest0-21swapper/307:25:543
88242399141,7cyclictest0-21swapper/307:40:563
88242399132,7cyclictest0-21swapper/308:55:523
88242399132,7cyclictest0-21swapper/308:50:533
88242399131,7cyclictest0-21swapper/308:05:533
88242399131,6cyclictest0-21swapper/308:00:523
88242399122,8cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional