You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-01 - 18:36

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot3s.osadl.org (updated Mon Dec 01, 2025 12:45:04)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
74656299721,12cyclictest759035-21munin-run11:10:010
74657199683,58cyclictest756261-21grep10:15:012
746575996723,15cyclictest1-21systemd09:55:003
74657199672,17cyclictest759021-21cron11:10:012
74656299662,16cyclictest755854-21sshd10:09:030
746562996618,41cyclictest272-21dbus-daemon07:45:020
746562996618,41cyclictest272-21dbus-daemon07:45:010
746566996550,11cyclictest23-21ksoftirqd/110:21:301
746562996525,36cyclictest754556-21sshd09:41:070
74656299642,15cyclictest761369-21munin-run11:55:000
746571996323,36cyclictest1-21systemd11:30:002
74656299632,15cyclictest75297750sshd09:11:010
74656299631,13cyclictest363-21snmpd11:29:250
746571996221,36cyclictest272-21dbus-daemon08:40:002
746571996218,5cyclictest1-21systemd09:35:012
746562996226,31cyclictest758012-21systemd-run10:50:000
746571996124,32cyclictest306-21in:imuxsock12:00:002
74656299612,12cyclictest748027-21sshd07:35:400
74656299611,5cyclictest761876-21sshd12:02:100
746571996024,30cyclictest306-21in:imuxsock08:25:012
746571996023,34cyclictest30-21ksoftirqd/208:20:002
746571996022,34cyclictest748628-21latency_hist07:50:012
746562996035,21cyclictest1-21systemd12:35:010
746562996029,27cyclictest235-21systemd-journal07:20:000
74656299602,12cyclictest761598-21sshd11:58:120
74656299601,3cyclictest0-21swapper/007:35:010
74656299601,13cyclictest752457-21sshd09:00:490
74656299601,13cyclictest752457-21sshd09:00:480
746575995923,10cyclictest37-21ksoftirqd/310:21:303
746571995913,7cyclictest756911-21latency_hist10:25:022
746562995930,25cyclictest19050irq/34-mmc109:20:010
746562995919,35cyclictest272-21dbus-daemon11:35:010
74656299591,13cyclictest762406-21munin-run12:15:000
746571995821,30cyclictest1-21systemd07:45:022
746571995821,30cyclictest1-21systemd07:45:012
746571995820,32cyclictest749880-21modprobe08:15:012
746571995818,4cyclictest0-21swapper/210:00:022
746566995838,15cyclictest1-21systemd11:40:011
746562995824,29cyclictest12-21ksoftirqd/009:48:250
74656299582,16cyclictest752771-21munin-run09:10:010
74656299582,12cyclictest757735-21cron10:45:000
74657199573,20cyclictest757462-21modprobe10:40:002
746571995724,29cyclictest30-21ksoftirqd/208:30:022
746571995723,30cyclictest752746-21latency_hist09:10:012
746571995718,11cyclictest762418-21munin-run12:15:012
746571995714,5cyclictest306-21in:imuxsock08:40:572
74656299572,15cyclictest751972-21munin-run08:55:000
74656299572,14cyclictest747531-21sshd07:27:370
74656299572,13cyclictest750629-21latency_hist08:25:020
746562995718,35cyclictest760852-21cron11:45:000
74656299571,52cyclictest0-21swapper/008:50:030
74656299571,52cyclictest0-21swapper/008:50:020
746562995712,9cyclictest12-21ksoftirqd/008:10:010
746571995617,5cyclictest306-21in:imuxsock08:49:482
746571995617,5cyclictest306-21in:imuxsock08:49:482
746571995615,11cyclictest272-21dbus-daemon09:55:012
746571995613,11cyclictest272-21dbus-daemon09:15:012
746571995610,9cyclictest272-21dbus-daemon11:50:012
74656299562,13cyclictest758513-21munin-run11:00:000
746566995543,6cyclictest746568-21cat07:10:011
74656299552,15cyclictest747280-21sshd07:22:360
74656299552,14cyclictest756979-21munin-run10:30:020
74656299552,13cyclictest235-21systemd-journal08:20:010
74656299551,13cyclictest749345-21sshd08:00:480
74656299542,15cyclictest762620-21sshd12:15:100
74656299542,15cyclictest756106-21sshd10:14:030
74656299542,15cyclictest755608-21cron10:05:000
74656299541,16cyclictest754035-21sshd09:33:590
74656299541,14cyclictest759532-21sshd11:19:110
746571995325,25cyclictest30-21ksoftirqd/207:55:022
746571995319,11cyclictest272-21dbus-daemon08:10:002
74657199531,25cyclictest749192-21cat08:00:022
746566995336,12cyclictest235-21systemd-journal10:55:001
74656299532,11cyclictest756632-21modprobe10:21:040
74656299532,11cyclictest746734-21sshd07:11:360
74656299531,15cyclictest758748-21sshd11:00:120
74656299531,14cyclictest753530-21sshd09:23:480
74656299531,13cyclictest760551-21sshd11:36:110
746571995216,12cyclictest235-21systemd-journal08:55:002
746571995215,8cyclictest30-21ksoftirqd/211:04:442
746571995210,13cyclictest272-21dbus-daemon12:25:012
746571995210,13cyclictest272-21dbus-daemon12:25:002
746566995237,11cyclictest272-21dbus-daemon12:15:001
74656299524,9cyclictest757464-21modprobe10:40:010
746562995216,32cyclictest759031-21latency_hist11:10:020
746562995214,8cyclictest755124-21latency_hist09:55:010
74656299521,47cyclictest0-21swapper/010:17:000
74656299521,15cyclictest757281-21sort10:35:010
74656299521,15cyclictest754276-21sshd09:36:070
746571995122,26cyclictest758506-21latency_hist11:00:032
74657199512,14cyclictest747810-21modprobe07:34:592
746566995131,10cyclictest306-21in:imuxsock12:05:011
74656299519,7cyclictest0-21swapper/011:50:000
74656299511,3cyclictest0-21swapper/009:28:550
74656299511,12cyclictest748816-21sshd07:51:380
746562995110,34cyclictest16850irq/134-800000011:23:110
74657199502,13cyclictest746689-21wc07:10:032
746571995020,4cyclictest748061-21latency_hist07:40:012
746571995017,8cyclictest272-21dbus-daemon11:40:012
746566995028,16cyclictest235-21systemd-journal08:00:001
746562995016,30cyclictest752216-21cat09:00:010
746571994922,24cyclictest30-21ksoftirqd/208:05:012
74656699496,31cyclictest763714-21systemctl12:40:011
74656699496,31cyclictest763714-21systemctl12:40:001
74656699495,32cyclictest748070-21cut07:40:011
746566994930,12cyclictest1-21systemd07:35:001
746566994924,19cyclictest235-21systemd-journal10:00:011
74656299492,12cyclictest749901-21wc08:15:010
746562994916,4cyclictest763689-21cron12:40:000
746562994916,4cyclictest763689-21cron12:40:000
74656299491,44cyclictest0-21swapper/008:26:160
74656299491,44cyclictest0-21swapper/008:26:150
746562994914,11cyclictest763199-21grep12:30:000
74656299491,14cyclictest750910-21cron08:34:590
74656299491,12cyclictest363-21snmpd10:50:210
746575994833,11cyclictest235-21systemd-journal12:19:593
746571994822,24cyclictest30-21ksoftirqd/211:20:012
746571994813,8cyclictest753573-21wc09:25:022
746566994820,6cyclictest23-21ksoftirqd/111:45:001
74656299483,15cyclictest746561-21date07:10:020
74656299481,43cyclictest0-21swapper/012:24:040
74656299481,43cyclictest0-21swapper/012:24:040
746571994723,20cyclictest757997-21latency_hist10:50:012
74656699478,29cyclictest757219-21cut10:35:001
74656699478,27cyclictest756117-21modprobe10:15:001
74656699474,31cyclictest235-21systemd-journal10:45:001
746566994732,10cyclictest749363-21cron08:05:001
74656299479,11cyclictest861385-21sendmail-mta08:35:080
74657199462,16cyclictest363-21snmpd11:55:012
746571994610,6cyclictest0-21swapper/212:40:012
746571994610,6cyclictest0-21swapper/212:40:002
746566994630,11cyclictest758507-21sendmail11:00:011
746566994626,11cyclictest306-21in:imuxsock12:25:011
746566994626,11cyclictest306-21in:imuxsock12:25:001
746566994625,14cyclictest272-21dbus-daemon08:25:001
746566994621,16cyclictest272-21dbus-daemon09:50:011
74656299462,17cyclictest16850irq/134-800000009:59:000
746575994534,8cyclictest235-21systemd-journal11:32:123
74657199452,3cyclictest131rcu_preempt09:05:032
74657199452,3cyclictest131rcu_preempt09:05:022
746571994516,3cyclictest208-21jbd2/mmcblk1p2-10:50:122
74656699457,27cyclictest752739-21modprobe09:09:591
74656699453,4cyclictest131rcu_preempt11:25:021
746566994527,10cyclictest757454-21cron10:40:001
746566994526,15cyclictest272-21dbus-daemon07:20:001
74656299455,9cyclictest0-21swapper/008:45:000
74656299452,13cyclictest748672-21latency_hist07:50:010
74656299451,12cyclictest749225-21cat08:00:020
74657599447,6cyclictest131rcu_preempt07:47:563
746575994421,10cyclictest37-21ksoftirqd/312:00:023
746571994412,9cyclictest272-21dbus-daemon11:25:012
746566994429,11cyclictest272-21dbus-daemon08:19:591
746566994421,18cyclictest272-21dbus-daemon09:45:011
74657599434,9cyclictest37-21ksoftirqd/311:05:023
746575994328,12cyclictest755607-21sshd10:04:583
74657199439,6cyclictest131rcu_preempt12:30:012
74657199435,10cyclictest30-21ksoftirqd/207:19:282
74656699436,25cyclictest754055-21modprobe09:35:001
746566994326,10cyclictest306-21in:imuxsock08:35:021
746566994325,14cyclictest754326-21sendmail09:39:591
746566994325,11cyclictest0-21swapper/109:20:011
746566994324,14cyclictest272-21dbus-daemon07:30:011
746575994225,13cyclictest272-21dbus-daemon11:00:013
746575994223,14cyclictest1-21systemd09:20:023
746571994214,7cyclictest30-21ksoftirqd/207:30:002
746571994214,5cyclictest0-21swapper/211:45:012
74656699425,24cyclictest747305-21grep07:25:001
746566994229,10cyclictest23-21ksoftirqd/109:55:001
746566994223,12cyclictest306-21in:imuxsock08:30:031
746566994219,17cyclictest272-21dbus-daemon10:20:011
746566994217,16cyclictest0-21swapper/107:50:001
74656699421,4cyclictest131rcu_preempt12:00:021
746575994130,9cyclictest37-21ksoftirqd/309:40:013
746575994130,8cyclictest760829-21sshd11:40:113
746575994125,12cyclictest235-21systemd-journal11:15:013
746575994125,11cyclictest37-21ksoftirqd/309:50:023
746571994127,9cyclictest1-21systemd10:05:022
74656699419,23cyclictest755872-21grep10:10:001
746566994124,13cyclictest235-21systemd-journal12:17:001
746566994120,16cyclictest23-21ksoftirqd/108:45:011
746566994119,16cyclictest761381-21systemd-run11:55:011
74656299411,13cyclictest235-21systemd-journal12:07:120
746575994029,9cyclictest37-21ksoftirqd/308:50:033
746575994029,9cyclictest37-21ksoftirqd/308:50:023
746575994028,9cyclictest235-21systemd-journal11:21:173
746575994024,12cyclictest37-21ksoftirqd/311:55:013
746575994022,13cyclictest272-21dbus-daemon09:35:023
74657199406,8cyclictest30-21ksoftirqd/210:09:042
746566994029,7cyclictest23-21ksoftirqd/111:30:011
746566994027,10cyclictest1-21systemd11:10:001
746566994026,10cyclictest23-21ksoftirqd/112:30:001
746566994024,10cyclictest23-21ksoftirqd/111:15:031
74657599393,10cyclictest235-21systemd-journal09:10:013
746575993922,11cyclictest272-21dbus-daemon12:35:013
746575993916,10cyclictest37-21ksoftirqd/311:40:003
746575993913,8cyclictest748119-21kworker/3:008:25:013
746571993921,14cyclictest272-21dbus-daemon11:35:012
74656699394,27cyclictest762156-21cut12:10:011
74656699394,21cyclictest759538-21modprobe11:19:591
74656699393,26cyclictest235-21systemd-journal08:30:021
74656699393,26cyclictest235-21systemd-journal08:30:011
746566993925,10cyclictest235-21systemd-journal07:11:261
746566993925,10cyclictest23-21ksoftirqd/109:15:011
746566993922,12cyclictest235-21systemd-journal08:10:001
74656699391,26cyclictest221rcuc/111:35:011
74657599387,4cyclictest131rcu_preempt10:40:593
746575993831,4cyclictest756384-21sendmail10:19:593
746575993827,9cyclictest37-21ksoftirqd/307:45:033
746575993827,9cyclictest37-21ksoftirqd/307:45:023
746575993827,8cyclictest37-21ksoftirqd/308:35:013
746575993826,9cyclictest751931-21sshd08:51:493
746575993826,10cyclictest37-21ksoftirqd/307:35:003
746575993821,12cyclictest235-21systemd-journal07:20:013
74657599381,3cyclictest131rcu_preempt10:00:023
74657199382,4cyclictest131rcu_preempt12:05:022
74657199381,32cyclictest753944-21cat09:30:022
746566993827,8cyclictest755598-21sshd10:02:581
746566993824,10cyclictest23-21ksoftirqd/112:34:591
746566993823,12cyclictest23-21ksoftirqd/110:30:011
74657599372,9cyclictest762948-21munin-plugin-st12:25:013
74657599372,9cyclictest762948-21munin-plugin-st12:25:003
74657599372,8cyclictest0-21swapper/308:05:003
746575993728,6cyclictest37-21ksoftirqd/310:50:023
74657599372,7cyclictest0-21swapper/312:05:033
746575993727,7cyclictest37-21ksoftirqd/311:30:023
746575993726,9cyclictest37-21ksoftirqd/311:10:023
746575993726,9cyclictest37-21ksoftirqd/309:24:593
74657599372,11cyclictest749940-21latency_hist08:15:013
746575993720,11cyclictest1-21systemd10:30:023
746575993719,14cyclictest1-21systemd07:25:003
74657599371,11cyclictest0-21swapper/310:36:123
746571993727,7cyclictest750894-21sshd08:31:442
74657199372,4cyclictest131rcu_preempt08:30:022
746571993723,10cyclictest759365-21cat11:15:022
74656699376,19cyclictest748841-21munin-plugin-st07:55:001
74656699374,4cyclictest131rcu_preempt09:30:021
74656699372,24cyclictest752378-21latency_hist09:00:021
746566993722,11cyclictest235-21systemd-journal09:20:021
74657599367,7cyclictest0-21swapper/309:45:023
746575993625,8cyclictest752974-21sshd09:10:483
74657599362,3cyclictest131rcu_preempt08:40:013
746575993623,9cyclictest1-21systemd10:55:013
746575993622,11cyclictest37-21ksoftirqd/308:20:003
74657599361,11cyclictest235-21systemd-journal08:05:023
74657199365,4cyclictest131rcu_preempt10:44:242
74657199363,4cyclictest131rcu_preempt07:15:012
746571993619,13cyclictest1-21systemd09:40:012
74657199361,6cyclictest0-21swapper/212:10:012
74656699364,24cyclictest758804-21latency_hist11:05:021
74656699363,4cyclictest131rcu_preempt08:54:591
74656699363,24cyclictest1-21systemd09:05:021
74656699363,24cyclictest1-21systemd09:05:011
746566993629,4cyclictest761114-21latency_hist11:50:011
74656699362,3cyclictest131rcu_preempt08:15:021
746575993526,6cyclictest763383-21sed12:30:023
746575993525,6cyclictest37-21ksoftirqd/307:15:023
746575993524,8cyclictest37-21ksoftirqd/311:17:113
746575993520,12cyclictest37-21ksoftirqd/312:05:003
746571993522,9cyclictest1-21systemd09:50:022
746571993520,11cyclictest30-21ksoftirqd/212:20:012
746571993519,12cyclictest272-21dbus-daemon12:35:012
74656699354,23cyclictest748338-21modprobe07:45:001
74656699354,23cyclictest748338-21modprobe07:45:001
746575993427,4cyclictest750856-21latency_hist08:30:033
746575993427,4cyclictest750856-21latency_hist08:30:023
746575993426,5cyclictest756249-21latency_hist10:15:023
746575993426,5cyclictest752584-21latency_hist09:05:023
746575993426,5cyclictest752584-21latency_hist09:05:023
746575993425,7cyclictest37-21ksoftirqd/307:30:013
746575993425,6cyclictest751466-21kworker/3:008:45:013
74657599342,4cyclictest131rcu_preempt12:15:013
74657599341,9cyclictest0-21swapper/307:55:473
74657199343,3cyclictest131rcu_preempt09:17:002
74657199342,4cyclictest131rcu_preempt09:45:002
746571993422,9cyclictest30-21ksoftirqd/210:26:102
746575993324,6cyclictest757401-21latency_hist10:35:013
746575993322,8cyclictest755844-21sshd10:06:083
74657599331,5cyclictest753858-21cut09:30:013
74657199331,5cyclictest131rcu_preempt10:15:032
74657599325,6cyclictest131rcu_preempt08:58:493
74657599322,5cyclictest761118-21munin-run11:50:013
746575993225,5cyclictest37-21ksoftirqd/312:40:023
746575993225,5cyclictest37-21ksoftirqd/312:40:013
746571993219,10cyclictest272-21dbus-daemon07:25:012
746571993219,10cyclictest1-21systemd10:35:002
74656699323,22cyclictest751722-21unin-run08:50:021
74656699323,22cyclictest751722-21unin-run08:50:011
746575993123,5cyclictest740189-21kworker/3:107:40:013
746575993118,10cyclictest272-21dbus-daemon07:55:013
74657199311,3cyclictest131rcu_preempt09:00:002
74656699313,20cyclictest758000-21munin-run10:50:001
746575992513,9cyclictest746633-21cut07:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional