You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-18 - 16:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot3s.osadl.org (updated Thu Dec 18, 2025 12:45:01)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
72152799911,69cyclictest0-21swapper/007:55:030
72152799911,69cyclictest0-21swapper/007:55:020
72154499742,18cyclictest736502-21sshd11:58:143
721527997367,2cyclictest0-21swapper/012:00:020
72154499692,17cyclictest735255-21munin-run11:35:013
72154499678,21cyclictest722256-21modprobe07:25:013
721544996625,33cyclictest309-21in:imuxsock09:55:013
721544996625,33cyclictest309-21in:imuxsock09:55:003
72154499653,12cyclictest734448-21cron11:20:003
721544996430,29cyclictest1-21systemd12:35:013
721544996430,29cyclictest1-21systemd12:35:013
72154499642,15cyclictest364-21snmpd09:57:343
721544996418,42cyclictest727969-21sshd09:11:153
721527996430,25cyclictest19350irq/34-mmc112:20:020
72154499633,11cyclictest737827-21cron12:25:003
72154499632,15cyclictest733182-21munin-run10:55:003
72154499631,16cyclictest734163-21sshd11:10:143
721527996252,6cyclictest721538-21sort07:10:010
72154499615,11cyclictest737303-21modprobe12:15:003
72154499614,12cyclictest726470-21latency_hist08:45:023
72154499613,20cyclictest275-21dbus-daemon12:20:003
72154499613,15cyclictest728307-21latency_hist09:20:023
72154499612,18cyclictest732435-21cat10:40:013
72154499612,16cyclictest727369-21latency_hist09:00:023
72154499612,14cyclictest284-21systemd-logind08:40:013
721544996115,10cyclictest738062-21sshd12:26:143
72153999616,9cyclictest30-21ksoftirqd/208:05:002
721535996115,8cyclictest23-21ksoftirqd/110:35:011
72154499608,10cyclictest0-21swapper/308:05:003
72154499605,12cyclictest730591-21modprobe10:05:003
72154499604,12cyclictest735478-21cron11:40:003
72154499604,12cyclictest735478-21cron11:40:003
721544996025,32cyclictest37-21ksoftirqd/307:52:153
721544996014,11cyclictest725966-21cat08:35:023
72154499594,12cyclictest724112-21modprobe08:00:013
72154499594,12cyclictest724112-21modprobe08:00:003
72154499594,10cyclictest275-21dbus-daemon08:30:003
72154499593,16cyclictest731887-21grep10:30:003
72154499593,10cyclictest731361-21sendmail10:20:003
721544995925,31cyclictest737048-21latency_hist12:10:013
72154499592,16cyclictest732930-21munin-run10:50:013
72154499592,16cyclictest721550-21latency_hist07:10:003
72154499592,15cyclictest735783-21munin-run11:45:013
721544995914,7cyclictest733845-21sed11:05:023
721544995914,7cyclictest733845-21sed11:05:013
721544995913,7cyclictest729020-21sshd09:33:153
72154499591,17cyclictest722505-21cron07:30:003
721539995914,13cyclictest30-21ksoftirqd/209:25:002
721535995915,6cyclictest23-21ksoftirqd/109:49:591
72154499583,16cyclictest724900-21latency_hist08:15:013
72154499583,15cyclictest284-21systemd-logind11:00:013
72154499582,14cyclictest738601-21munin-plugin-st12:40:003
72154499582,13cyclictest723028-21munin-plugin-st07:40:013
721544995821,34cyclictest37-21ksoftirqd/308:25:003
721544995817,13cyclictest729298-21systemctl09:40:003
721544995810,9cyclictest275-21dbus-daemon10:25:013
721535995812,9cyclictest23-21ksoftirqd/107:10:011
72154499577,12cyclictest238-21systemd-journal09:30:013
72154499573,10cyclictest731275-21latency_hist10:15:033
72154499573,10cyclictest731275-21latency_hist10:15:033
721544995723,29cyclictest37-21ksoftirqd/308:20:023
72154499572,17cyclictest732661-21sh10:45:003
721535995716,8cyclictest23-21ksoftirqd/110:00:141
721535995715,11cyclictest23-21ksoftirqd/109:20:001
721535995712,9cyclictest23-21ksoftirqd/108:05:001
72154499569,9cyclictest238-21systemd-journal11:06:233
72154499562,16cyclictest730849-21munin-run10:10:013
72154499562,10cyclictest727729-21modprobe09:10:003
72154499559,12cyclictest1-21systemd11:55:013
72154499555,8cyclictest736019-21modprobe11:50:003
72154499553,9cyclictest722000-21munin-plugin-st07:20:013
721544995535,15cyclictest1-21systemd09:45:013
721544995515,5cyclictest722793-21latency_hist07:35:013
72153599557,10cyclictest23-21ksoftirqd/107:30:001
72154499542,13cyclictest726966-21munin-run08:55:013
721535995436,13cyclictest732373-21cron10:40:001
721535995412,8cyclictest23-21ksoftirqd/111:30:011
72154499535,12cyclictest732158-21latency_hist10:35:013
72153599539,8cyclictest722295-21sed07:25:021
72153599537,10cyclictest23-21ksoftirqd/112:30:021
721527995316,34cyclictest12-21ksoftirqd/011:10:000
72154499522,15cyclictest723311-21unin-run07:45:013
72153999528,5cyclictest131rcu_preempt09:05:142
72153999525,7cyclictest30-21ksoftirqd/207:20:012
72153999525,10cyclictest30-21ksoftirqd/210:50:012
72153599524,11cyclictest23-21ksoftirqd/109:55:021
72153599524,11cyclictest23-21ksoftirqd/109:55:021
72154499512,15cyclictest311-21rs:main3
72153999514,9cyclictest30-21ksoftirqd/208:10:012
721539995133,14cyclictest1-21systemd08:35:002
72153999512,8cyclictest30-21ksoftirqd/211:10:002
72153599517,10cyclictest23-21ksoftirqd/109:15:021
721535995112,9cyclictest23-21ksoftirqd/110:25:011
721527995134,14cyclictest12-21ksoftirqd/008:30:000
72152799512,12cyclictest311-21rs:main0
72154499502,10cyclictest726699-21modprobe08:50:003
721544995016,7cyclictest37-21ksoftirqd/312:05:003
72154499501,12cyclictest724803-21cat08:10:023
72153999504,9cyclictest30-21ksoftirqd/209:20:012
72153999503,11cyclictest30-21ksoftirqd/207:45:012
721535995013,7cyclictest0-21swapper/108:55:001
72152799503,10cyclictest726167-21modprobe08:40:000
72153999498,8cyclictest30-21ksoftirqd/211:55:002
72153999496,10cyclictest30-21ksoftirqd/210:00:012
72153999494,13cyclictest30-21ksoftirqd/208:00:012
72153999494,13cyclictest30-21ksoftirqd/208:00:012
721539994933,12cyclictest1-21systemd10:15:012
721539994933,12cyclictest1-21systemd10:15:012
721539994916,10cyclictest30-21ksoftirqd/209:15:022
72153599494,10cyclictest23-21ksoftirqd/108:10:001
721527994927,14cyclictest238-21systemd-journal09:40:000
72152799492,42cyclictest735954-21latency_hist11:45:020
72153999486,11cyclictest30-21ksoftirqd/212:40:022
721539994840,6cyclictest30-21ksoftirqd/210:30:022
721539994826,17cyclictest1-21systemd12:05:002
72153999482,15cyclictest30-21ksoftirqd/211:30:002
721539994817,6cyclictest131rcu_preempt08:25:022
721539994812,9cyclictest30-21ksoftirqd/212:35:002
721539994812,9cyclictest30-21ksoftirqd/212:35:002
72153999476,9cyclictest30-21ksoftirqd/212:15:002
721535994710,6cyclictest0-21swapper/111:45:001
72152799471,43cyclictest0-21swapper/011:55:020
721527994714,29cyclictest12-21ksoftirqd/007:35:020
72154499462,16cyclictest1-21systemd09:05:013
72153999467,9cyclictest30-21ksoftirqd/209:44:592
72153999464,12cyclictest30-21ksoftirqd/212:00:012
72153999461,8cyclictest0-21swapper/212:07:142
721539994610,5cyclictest131rcu_preempt09:00:022
721527994632,9cyclictest735696-21grep11:40:020
721527994632,9cyclictest735696-21grep11:40:020
72154499451,12cyclictest723550-21cut07:50:003
72153999457,8cyclictest30-21ksoftirqd/207:55:022
72153999456,8cyclictest30-21ksoftirqd/209:45:152
72153999454,9cyclictest30-21ksoftirqd/207:25:022
72153999454,10cyclictest30-21ksoftirqd/209:01:142
721539994537,6cyclictest291rcuc/208:55:022
721539994531,10cyclictest1-21systemd12:20:002
721539994512,11cyclictest30-21ksoftirqd/211:35:012
72153599455,9cyclictest23-21ksoftirqd/110:10:021
721535994532,9cyclictest275-21dbus-daemon12:25:011
721527994538,4cyclictest16950irq/224-800000010:45:000
72152799451,40cyclictest0-21swapper/007:25:030
721544994413,7cyclictest37-21ksoftirqd/311:30:023
72153999447,5cyclictest131rcu_preempt08:30:012
721539994423,17cyclictest275-21dbus-daemon10:35:002
72153999442,11cyclictest30-21ksoftirqd/210:45:022
721539994418,21cyclictest291rcuc/212:20:142
72153599445,8cyclictest23-21ksoftirqd/107:20:011
72153599443,12cyclictest23-21ksoftirqd/111:14:591
721535994429,11cyclictest275-21dbus-daemon09:40:011
721527994412,10cyclictest12-21ksoftirqd/010:00:010
72153999435,7cyclictest30-21ksoftirqd/208:40:032
72153999434,12cyclictest30-21ksoftirqd/211:15:002
721539994326,13cyclictest30-21ksoftirqd/210:59:592
721539994312,5cyclictest131rcu_preempt11:16:242
72153599435,7cyclictest737300-21latency_hist12:15:021
721535994332,7cyclictest735532-21unin-run11:40:011
721535994332,7cyclictest735532-21unin-run11:40:011
721535994328,12cyclictest275-21dbus-daemon08:20:011
72152799439,6cyclictest131rcu_preempt07:42:140
72152799435,34cyclictest12-21ksoftirqd/011:00:000
721527994336,4cyclictest16950irq/224-800000007:20:010
72152799432,8cyclictest12-21ksoftirqd/009:35:020
721527994325,13cyclictest275-21dbus-daemon10:55:010
72153999427,12cyclictest30-21ksoftirqd/209:30:012
721539994230,8cyclictest238-21systemd-journal09:55:002
721539994230,8cyclictest238-21systemd-journal09:54:592
721539994228,11cyclictest275-21dbus-daemon08:20:002
721539994227,12cyclictest721433-21kworker/u8:307:15:002
721539994212,9cyclictest30-21ksoftirqd/208:40:042
72153599421,12cyclictest23-21ksoftirqd/110:55:001
721527994235,4cyclictest16950irq/224-800000011:30:000
721527994234,4cyclictest16950irq/224-800000007:10:140
72152799423,34cyclictest728548-21kworker/0:109:43:150
721527994229,10cyclictest738602-21systemctl12:40:000
72153999418,4cyclictest131rcu_preempt10:10:012
721539994130,8cyclictest730586-21cron10:05:002
721539994126,12cyclictest736188-21sed11:50:022
721539994126,11cyclictest732374-21cron10:40:002
721539994125,11cyclictest726686-21cron08:50:002
72153999411,9cyclictest30-21ksoftirqd/211:40:012
72153999411,9cyclictest30-21ksoftirqd/211:40:012
721535994127,11cyclictest726193-21tr08:40:001
72153599411,13cyclictest23-21ksoftirqd/112:05:021
72152799415,31cyclictest12-21ksoftirqd/012:30:020
721527994134,4cyclictest16950irq/224-800000012:35:010
721527994134,4cyclictest16950irq/224-800000012:35:010
721527994129,10cyclictest0-21swapper/008:55:010
721527994124,12cyclictest275-21dbus-daemon09:30:010
72152799411,6cyclictest722531-21unin-run07:30:010
72152799411,34cyclictest12-21ksoftirqd/008:45:020
721539994027,10cyclictest0-21swapper/207:50:022
72153599406,8cyclictest23-21ksoftirqd/107:40:011
721535994029,8cyclictest730304-21sshd09:59:131
721535994026,10cyclictest309-21in:imuxsock09:05:031
721535994026,10cyclictest23-21ksoftirqd/111:10:011
721535994025,10cyclictest275-21dbus-daemon08:15:011
721535994024,11cyclictest238-21systemd-journal10:15:011
721535994024,11cyclictest238-21systemd-journal10:15:011
721527994034,4cyclictest16950irq/224-800000008:15:000
721527994033,4cyclictest16950irq/224-800000009:00:010
721527994032,6cyclictest12-21ksoftirqd/010:30:010
721527994030,7cyclictest12-21ksoftirqd/012:05:020
721527994030,7cyclictest12-21ksoftirqd/010:35:000
721527994029,6cyclictest737070-21latency_hist12:10:010
721527994026,11cyclictest12-21ksoftirqd/008:20:020
721527994025,10cyclictest309-21in:imuxsock10:50:010
721527994021,14cyclictest12-21ksoftirqd/009:10:000
72152799401,8cyclictest1-21systemd10:25:010
72152799401,4cyclictest734664-21wc11:20:020
72152799401,35cyclictest728525-21modprobe09:24:590
72153999393,11cyclictest30-21ksoftirqd/210:54:142
72153599397,8cyclictest23-21ksoftirqd/111:00:011
72153599396,7cyclictest732868-21cat10:45:021
721535993921,13cyclictest725901-21sshd08:34:141
721535993920,15cyclictest727461-21sshd09:03:141
72153599391,8cyclictest23-21ksoftirqd/112:17:131
72153599391,18cyclictest0-21swapper/110:50:011
721527993934,3cyclictest16950irq/224-800000008:25:000
72152799393,32cyclictest0-21swapper/012:15:020
721527993929,6cyclictest309-21in:imuxsock10:40:000
721527993925,10cyclictest275-21dbus-daemon08:05:000
721527993924,9cyclictest730063-21modprobe09:55:010
721527993924,9cyclictest730063-21modprobe09:55:000
72152799392,32cyclictest0-21swapper/009:20:010
721527993922,14cyclictest726672-21sshd08:46:150
721527993921,14cyclictest275-21dbus-daemon11:05:010
721527993921,14cyclictest275-21dbus-daemon11:05:000
72153999389,5cyclictest131rcu_preempt07:26:152
72153999387,5cyclictest131rcu_preempt08:15:002
72153999382,8cyclictest30-21ksoftirqd/207:35:402
72153999381,8cyclictest30-21ksoftirqd/211:25:022
72153599384,5cyclictest23-21ksoftirqd/112:33:521
72153599384,5cyclictest23-21ksoftirqd/112:33:521
72153599382,7cyclictest23-21ksoftirqd/108:43:081
721535993820,14cyclictest736492-21sshd11:56:141
721535993817,17cyclictest734448-21cron11:20:001
721535993813,5cyclictest0-21swapper/107:35:011
721527993827,9cyclictest12-21ksoftirqd/012:24:590
721527993825,10cyclictest364-21snmpd09:48:200
72152799382,32cyclictest724139-21kworker/0:209:13:140
72152799381,12cyclictest12-21ksoftirqd/011:33:390
721544993721,13cyclictest1-21systemd09:25:003
72153999376,5cyclictest131rcu_preempt10:18:152
721539993729,5cyclictest309-21in:imuxsock07:35:002
721539993728,7cyclictest30-21ksoftirqd/211:05:022
721539993728,7cyclictest30-21ksoftirqd/211:05:022
721539993727,7cyclictest30-21ksoftirqd/210:25:012
721539993726,8cyclictest721629-21sed07:10:022
72153599373,11cyclictest23-21ksoftirqd/109:22:151
721535993730,4cyclictest724099-21sh08:00:011
721535993730,4cyclictest724099-21sh08:00:001
721535993727,6cyclictest309-21in:imuxsock11:25:011
721535993726,8cyclictest736247-21sshd11:52:141
721535993725,9cyclictest309-21in:imuxsock09:34:591
721535993721,12cyclictest275-21dbus-daemon07:50:011
72152799373,30cyclictest0-21swapper/008:10:010
721527993724,10cyclictest12-21ksoftirqd/010:05:000
721527993721,12cyclictest1-21systemd08:35:010
721527993713,9cyclictest131rcu_preempt11:25:010
72152799371,33cyclictest0-21swapper/011:15:010
721544993622,10cyclictest734753-21systemd-run11:25:013
72153999361,6cyclictest0-21swapper/211:42:492
72153999361,5cyclictest0-21swapper/209:33:152
72153599364,6cyclictest23-21ksoftirqd/107:15:011
72153599362,7cyclictest23-21ksoftirqd/109:25:141
721535993626,6cyclictest736788-21cron12:05:001
721535993624,9cyclictest23-21ksoftirqd/107:55:011
721535993624,8cyclictest729534-21sshd09:41:131
721535993623,10cyclictest23-21ksoftirqd/109:00:011
721535993621,11cyclictest735984-21sshd11:45:141
721535993619,13cyclictest275-21dbus-daemon08:25:001
721535993619,11cyclictest275-21dbus-daemon10:20:001
721527993627,6cyclictest12-21ksoftirqd/010:10:020
72152799361,31cyclictest0-21swapper/009:03:140
72154499354,3cyclictest131rcu_preempt07:15:013
72153999358,6cyclictest131rcu_preempt12:30:012
72153599354,6cyclictest23-21ksoftirqd/108:28:051
721535993524,8cyclictest23-21ksoftirqd/108:50:001
721535993523,8cyclictest738580-21cron12:40:001
72153599351,12cyclictest65950agetty11:02:101
72153599351,12cyclictest65950agetty11:02:091
721527993522,9cyclictest275-21dbus-daemon10:15:010
721527993522,9cyclictest275-21dbus-daemon10:15:010
721535993426,4cyclictest735422-21latency_hist11:35:021
721535993419,11cyclictest731886-21munin-run10:30:011
721535993410,5cyclictest131rcu_preempt07:44:141
721527993425,6cyclictest12-21ksoftirqd/010:20:020
721539993322,9cyclictest30-21ksoftirqd/209:40:012
721527993325,5cyclictest736130-21latency_hist11:50:020
72152799332,4cyclictest0-21swapper/007:50:020
721527993220,8cyclictest0-21swapper/007:55:010
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional