You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-07-16 - 14:10

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot3s.osadl.org (updated Mon Jul 15, 2024 12:45:11)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2194444991273,3cyclictest131rcu_preempt10:10:020
2194444991064,91cyclictest0-21swapper/011:55:020
21944449910197,2cyclictest0-21swapper/012:35:020
2194444999995,2cyclictest0-21swapper/007:40:020
2194444999086,2cyclictest0-21swapper/008:35:020
2194452998867,13cyclictest23-21ksoftirqd/111:55:011
219446199822,53cyclictest2209108-21sshd11:26:133
2194444997975,2cyclictest0-21swapper/010:45:010
219444499771,3cyclictest0-21swapper/008:50:020
2194444997349,21cyclictest12-21ksoftirqd/008:23:190
2194444997164,5cyclictest12-21ksoftirqd/009:40:030
2194461997029,36cyclictest37-21ksoftirqd/311:05:013
2194444997043,24cyclictest0-21swapper/007:45:030
219444499671,3cyclictest0-21swapper/010:35:020
219446199662,59cyclictest2209369-21sshd11:33:443
219446199661,61cyclictest2200901-21sshd09:01:233
219446199661,59cyclictest2208812-21sshd11:22:013
219446199641,59cyclictest2199038-21sshd08:38:453
219446199641,59cyclictest2197244-21sshd08:04:453
2194444996426,11cyclictest235-21systemd-journal08:00:010
2194444996426,11cyclictest235-21systemd-journal08:00:000
219446199632,57cyclictest2206084-21sshd10:33:453
219446199631,57cyclictest2206342-21sshd10:39:483
2194444996359,2cyclictest0-21swapper/009:10:030
219446199626,51cyclictest2201643-21sshd09:05:453
219446199622,56cyclictest2201943-21munin-run09:15:013
219446199622,55cyclictest2195925-21sshd07:39:443
219446199621,56cyclictest2207988-21sshd11:05:403
219446199621,56cyclictest2202168-21sshd09:16:433
219446199613,54cyclictest2210148-21sshd11:46:443
219446199612,54cyclictest2211182-21sshd12:06:173
219446199612,54cyclictest2211182-21sshd12:06:173
2194461996122,34cyclictest2203760-21cron09:50:003
219446199611,8cyclictest2207430-21sshd10:56:443
219446199611,56cyclictest2204786-21sshd10:07:453
219446199611,55cyclictest2210429-21munin-run11:55:003
219446199611,34cyclictest1917536-21snmpd10:49:013
219446199605,51cyclictest2197491-21sshd08:08:453
219446199603,53cyclictest2212476-21sshd12:31:203
219446199602,54cyclictest2211707-21sshd12:18:443
219446199602,54cyclictest2198032-21munin-run08:20:003
219446199602,53cyclictest2196235-21munin-run07:45:023
219446199602,53cyclictest2195688-21munin-run07:35:003
219446199601,6cyclictest1917536-21snmpd09:33:143
219446199601,3cyclictest2211441-21sshd12:12:433
2194444996028,14cyclictest2210649-21sshd11:56:160
2194444996028,14cyclictest2210649-21sshd11:56:150
219446199599,46cyclictest2212226-21sshd12:26:183
219446199596,48cyclictest1917536-21snmpd11:11:493
219446199596,48cyclictest1917536-21snmpd11:11:493
219446199592,52cyclictest2210937-21sshd12:02:443
219446199592,52cyclictest2209654-21munin-run11:40:013
219446199591,54cyclictest235-21systemd-journal07:20:013
219446199591,53cyclictest1917536-21snmpd08:33:033
219446199591,4cyclictest2205275-21sshd10:15:443
219446199591,4cyclictest2199563-21sshd08:46:443
219446199582,52cyclictest2203490-21sshd09:41:013
219446199582,51cyclictest2207219-21munin-run10:55:013
219446199581,53cyclictest2205040-21sshd10:13:443
219446199581,53cyclictest2198267-21sshd08:20:383
219446199581,51cyclictest2197737-21sshd08:12:433
219444499587,47cyclictest16850irq/224-800000010:15:020
2194444995831,4cyclictest16850irq/224-800000011:19:590
219446199573,49cyclictest1917536-21snmpd07:46:063
219446199572,51cyclictest235-21systemd-journal09:22:473
219446199572,50cyclictest2205606-21true10:25:013
219446199572,50cyclictest1917536-21snmpd09:57:463
219446199572,50cyclictest1917536-21snmpd09:57:463
219446199572,49cyclictest2210656-21sshd11:57:453
219446199572,49cyclictest2210656-21sshd11:57:443
219446199571,52cyclictest2195413-21sshd07:27:453
219446199571,51cyclictest1917536-21snmpd10:00:453
219446199571,51cyclictest1917536-21snmpd07:57:273
219446199571,51cyclictest1917536-21snmpd07:57:263
2194452995711,21cyclictest2206375-21kworker/u8:311:00:021
2194452995710,26cyclictest2206375-21kworker/u8:310:40:011
219446199562,50cyclictest2209924-21munin-run11:45:003
219446199562,49cyclictest2212771-21munin-run12:40:013
219446199562,49cyclictest2212771-21munin-run12:40:003
219446199562,49cyclictest2194643-21munin-run07:15:003
219446199561,50cyclictest1917536-21snmpd09:54:123
219446199561,4cyclictest2200073-21sshd08:57:453
219446199561,4cyclictest2200073-21sshd08:57:443
219446199561,17cyclictest2199830-21cron08:55:003
2194456995639,12cyclictest1-21systemd10:10:002
219445699562,47cyclictest274-21dbus-daemon11:35:442
219446199552,49cyclictest2208536-21sshd11:18:443
219446199551,50cyclictest1917536-21snmpd08:26:283
219446199551,50cyclictest1917536-21snmpd08:26:273
219446199551,49cyclictest274-21dbus-daemon10:40:043
219446199551,49cyclictest1917536-21snmpd08:41:323
219446199551,49cyclictest1917536-21snmpd08:41:313
219446199551,49cyclictest1917536-21snmpd07:53:263
219446199551,42cyclictest0-21swapper/310:30:023
219446199541,50cyclictest1917536-21snmpd09:25:273
219446199541,50cyclictest1917536-21snmpd09:25:263
219446199541,48cyclictest2211987-21sshd12:24:453
219446199541,48cyclictest2211987-21sshd12:24:453
219446199541,48cyclictest1917536-21snmpd07:21:583
219446199531,48cyclictest1917536-21snmpd09:35:463
219445699537,8cyclictest0-21swapper/208:00:022
219445699537,8cyclictest0-21swapper/208:00:012
2194452995337,11cyclictest1-21systemd12:00:011
2194452995337,11cyclictest1-21systemd12:00:011
2194452995335,14cyclictest235-21systemd-journal09:01:581
2194452995331,14cyclictest235-21systemd-journal07:40:011
219446199521,47cyclictest2194505-21latency_hist07:10:023
219445299529,6cyclictest131rcu_preempt11:22:041
219444499522,46cyclictest1-21systemd11:00:010
219445699516,13cyclictest2208678-21cat11:20:022
219444499512,43cyclictest2198022-21modprobe08:20:000
219444499511,45cyclictest2211998-21kworker/u8:212:40:010
219444499511,45cyclictest2211998-21kworker/u8:212:40:000
2194456995011,8cyclictest30-21ksoftirqd/212:20:002
2194452995035,11cyclictest235-21systemd-journal10:40:051
219445699497,9cyclictest30-21ksoftirqd/211:45:012
2194456994936,9cyclictest235-21systemd-journal08:15:432
219445699491,15cyclictest2206348-21systemd10:39:492
2194452994934,11cyclictest1-21systemd12:30:001
2194452994931,11cyclictest304-21in:imuxsock11:20:001
2194444994932,13cyclictest1-21systemd09:30:010
2194444994932,13cyclictest1-21systemd09:30:000
2194444994920,7cyclictest12-21ksoftirqd/007:35:020
219445699489,8cyclictest2202672-21latency_hist09:25:012
219445699484,16cyclictest2201948-21systemd-run09:15:012
219445699479,13cyclictest2202247-21unin-run09:20:012
219445699475,8cyclictest30-21ksoftirqd/211:22:022
219445699474,8cyclictest30-21ksoftirqd/210:30:432
219445699471,18cyclictest30-21ksoftirqd/208:45:012
219445699471,18cyclictest30-21ksoftirqd/208:45:012
219445299471,37cyclictest3451642-1kworker/1:1H11:50:021
219444499473,9cyclictest2196907-21ls07:55:010
2194444994739,5cyclictest16750irq/134-800000010:39:510
2194444994728,14cyclictest2197741-21sshd08:13:440
219445699461,7cyclictest0-21swapper/210:15:012
2194456994614,10cyclictest30-21ksoftirqd/211:31:422
2194456994610,9cyclictest0-21swapper/207:40:012
2194452994611,7cyclictest131rcu_preempt07:10:011
2194444994631,11cyclictest2200099-21cat09:00:010
2194444994631,11cyclictest2200099-21cat09:00:000
2194444994625,14cyclictest1-21systemd09:01:030
2194456994531,11cyclictest30-21ksoftirqd/211:30:012
2194456994526,13cyclictest235-21systemd-journal09:01:352
219445699451,13cyclictest30-21ksoftirqd/210:50:002
2194452994527,14cyclictest235-21systemd-journal09:10:021
219445699444,9cyclictest30-21ksoftirqd/208:05:012
219445699444,5cyclictest30-21ksoftirqd/208:15:012
2194456994437,4cyclictest2185683-21kworker/2:007:13:512
2194456994427,12cyclictest274-21dbus-daemon10:40:052
2194456994426,12cyclictest274-21dbus-daemon07:25:012
2194452994431,10cyclictest274-21dbus-daemon12:40:011
2194452994431,10cyclictest274-21dbus-daemon12:40:001
2194444994440,2cyclictest0-21swapper/012:15:020
2194444994439,2cyclictest0-21swapper/010:20:020
2194444994437,4cyclictest16850irq/224-800000007:20:010
2194444994427,13cyclictest235-21systemd-journal09:20:020
2194444994413,17cyclictest307-21rs:main0
2194444994413,17cyclictest307-21rs:main0
219444499441,15cyclictest235-21systemd-journal11:22:160
219445699435,11cyclictest30-21ksoftirqd/207:20:002
2194456994329,9cyclictest304-21in:imuxsock12:15:002
2194456994329,9cyclictest304-21in:imuxsock08:45:022
2194456994328,11cyclictest235-21systemd-journal12:40:012
2194456994328,11cyclictest235-21systemd-journal12:40:012
219445299434,24cyclictest235-21systemd-journal10:20:001
2194452994328,11cyclictest2198044-21tr08:20:001
2194444994336,4cyclictest16850irq/224-800000012:05:000
2194444994335,5cyclictest16850irq/224-800000010:05:000
2194444994326,13cyclictest274-21dbus-daemon07:25:000
2194444994326,13cyclictest235-21systemd-journal12:24:270
2194444994326,13cyclictest235-21systemd-journal12:24:270
2194456994231,8cyclictest30-21ksoftirqd/208:10:022
219445699422,7cyclictest30-21ksoftirqd/211:00:002
2194452994230,9cyclictest23-21ksoftirqd/112:05:001
2194452994223,13cyclictest274-21dbus-daemon12:35:011
2194444994235,4cyclictest16850irq/224-800000011:14:450
2194444994235,4cyclictest16850irq/224-800000011:14:450
2194444994227,10cyclictest2199063-21cat08:39:590
2194444994225,13cyclictest2204002-21sshd09:52:440
2194444994221,16cyclictest1-21systemd10:30:000
2194444994221,15cyclictest1-21systemd10:50:010
2194456994134,5cyclictest2201970-21kworker/2:211:12:152
2194456994134,5cyclictest2201970-21kworker/2:211:12:142
2194456994133,5cyclictest2204565-21kworker/2:110:25:022
2194456994131,7cyclictest30-21ksoftirqd/207:50:422
2194456994129,8cyclictest2204245-21sshd09:56:022
2194456994129,8cyclictest2204245-21sshd09:56:012
219445699411,6cyclictest0-21swapper/211:58:442
219445699411,6cyclictest0-21swapper/211:58:442
219445299413,31cyclictest274-21dbus-daemon12:15:011
2194452994131,7cyclictest23-21ksoftirqd/107:55:011
2194452994129,8cyclictest2199567-21sshd08:47:451
2194452994128,10cyclictest2205961-21sed10:30:021
2194452994126,12cyclictest274-21dbus-daemon12:25:011
2194452994126,12cyclictest274-21dbus-daemon12:25:001
219444499415,31cyclictest0-21swapper/008:06:540
2194444994130,7cyclictest235-21systemd-journal12:25:020
2194444994129,9cyclictest12-21ksoftirqd/010:00:010
2194444994129,9cyclictest12-21ksoftirqd/010:00:010
2194444994125,12cyclictest235-21systemd-journal09:20:000
219444499412,35cyclictest2208039-21cron11:09:590
219444499411,36cyclictest2203231-21modprobe09:40:000
219445699407,4cyclictest131rcu_preempt09:46:012
219445699405,30cyclictest2203230-21cron09:40:002
219445299406,24cyclictest2199829-21kworker/u8:008:55:031
219445299406,24cyclictest2199829-21kworker/u8:008:55:031
2194452994027,9cyclictest23-21ksoftirqd/108:34:591
2194452994025,10cyclictest274-21dbus-daemon07:35:001
2194444994022,15cyclictest2196453-21sshd07:47:440
2194444994022,14cyclictest1-21systemd10:20:010
2194456993930,5cyclictest2200097-21sendmail09:00:012
2194456993930,5cyclictest2200097-21sendmail09:00:002
2194456993928,8cyclictest2212000-21sh12:25:012
2194456993928,8cyclictest2212000-21sh12:25:002
2194456993924,12cyclictest2195421-21sshd07:29:452
2194452993930,6cyclictest2204277-21sendmail10:00:011
2194452993930,6cyclictest2204277-21sendmail10:00:001
2194452993924,13cyclictest23-21ksoftirqd/110:15:001
2194452993924,11cyclictest23-21ksoftirqd/109:40:001
2194444993924,9cyclictest2209631-21cron11:40:000
219445699385,6cyclictest30-21ksoftirqd/210:05:012
219445699384,9cyclictest30-21ksoftirqd/210:30:022
2194456993826,8cyclictest235-21systemd-journal10:15:022
219445699381,7cyclictest2212521-21systemd-run12:35:002
2194452993823,11cyclictest274-21dbus-daemon11:05:521
2194452993823,10cyclictest274-21dbus-daemon09:30:011
2194452993823,10cyclictest274-21dbus-daemon09:30:001
2194452993822,11cyclictest23-21ksoftirqd/109:25:011
2194452993821,12cyclictest274-21dbus-daemon07:50:001
2194444993831,5cyclictest0-21swapper/008:04:380
2194444993828,7cyclictest2209288-21cat11:30:030
2194444993824,11cyclictest12-21ksoftirqd/009:50:000
219444499381,8cyclictest2198761-21sed08:30:030
219444499381,33cyclictest0-21swapper/009:10:010
219445699374,5cyclictest30-21ksoftirqd/212:08:462
219445699374,5cyclictest30-21ksoftirqd/212:08:452
219445699374,5cyclictest30-21ksoftirqd/209:33:132
2194456993730,4cyclictest2210955-21sh12:05:002
2194456993723,11cyclictest30-21ksoftirqd/211:05:012
2194456993723,10cyclictest235-21systemd-journal11:05:382
2194452993728,5cyclictest2202987-21latency_hist09:35:001
2194452993725,8cyclictest2209648-21cron11:39:591
2194452993724,9cyclictest23-21ksoftirqd/108:00:021
2194452993724,9cyclictest23-21ksoftirqd/108:00:021
2194452993721,12cyclictest23-21ksoftirqd/108:15:021
2194444993728,5cyclictest2195424-21cron07:30:010
219444499372,29cyclictest18650irq/34-mmc110:55:010
2194444993722,12cyclictest2194475-21sed07:10:020
219444499371,3cyclictest131rcu_preempt09:35:000
219445699366,6cyclictest30-21ksoftirqd/208:38:032
219445699365,8cyclictest30-21ksoftirqd/207:45:002
2194456993623,10cyclictest30-21ksoftirqd/208:31:352
2194456993620,12cyclictest30-21ksoftirqd/209:55:002
2194456993613,4cyclictest291rcuc/208:25:022
2194456993610,22cyclictest2202749-21unin-run09:30:012
2194456993610,22cyclictest2202749-21unin-run09:30:012
2194452993628,4cyclictest2199064-21munin-plugin-st08:40:001
2194452993626,7cyclictest23-21ksoftirqd/108:20:031
2194452993624,8cyclictest23-21ksoftirqd/109:15:001
2194452993623,10cyclictest23-21ksoftirqd/111:35:001
2194452993622,11cyclictest23-21ksoftirqd/108:30:011
2194452993622,11cyclictest23-21ksoftirqd/108:30:011
2194452993621,11cyclictest274-21dbus-daemon07:20:001
2194452993617,14cyclictest274-21dbus-daemon12:10:011
2194452993617,14cyclictest274-21dbus-daemon12:10:001
219444499361,3cyclictest131rcu_preempt08:55:020
219444499361,31cyclictest0-21swapper/011:40:110
219445699356,5cyclictest131rcu_preempt07:33:452
2194456993526,7cyclictest30-21ksoftirqd/208:30:032
2194456993526,7cyclictest30-21ksoftirqd/208:30:022
2194456993523,9cyclictest274-21dbus-daemon10:55:012
219445299358,6cyclictest131rcu_preempt11:28:451
219445299354,7cyclictest23-21ksoftirqd/108:55:001
2194452993528,5cyclictest23-21ksoftirqd/108:05:021
2194452993527,6cyclictest23-21ksoftirqd/107:30:021
2194452993523,10cyclictest23-21ksoftirqd/110:04:441
2194452993521,10cyclictest23-21ksoftirqd/112:15:441
2194452993520,10cyclictest235-21systemd-journal11:13:441
2194452993520,10cyclictest235-21systemd-journal11:13:431
219445299351,31cyclictest23-21ksoftirqd/109:55:011
2194444993529,4cyclictest16850irq/224-800000008:30:010
2194444993519,12cyclictest235-21systemd-journal11:00:030
219444499351,30cyclictest0-21swapper/012:11:320
219445699347,4cyclictest131rcu_preempt08:50:512
2194456993412,17cyclictest1-21systemd09:45:012
2194452993424,7cyclictest2204819-21systemctl10:10:011
2194452993423,7cyclictest23-21ksoftirqd/107:15:021
2194452993421,9cyclictest23-21ksoftirqd/109:15:561
219444499341,4cyclictest0-21swapper/011:45:190
219444499341,30cyclictest0-21swapper/011:32:470
219444499341,30cyclictest0-21swapper/007:12:430
2194456993325,5cyclictest2196436-21sshd07:45:292
2194456993314,13cyclictest30-21ksoftirqd/209:09:592
219445299333,6cyclictest131rcu_preempt07:21:331
2194452993320,9cyclictest23-21ksoftirqd/110:53:141
2194452993316,14cyclictest1-21systemd08:10:001
219444499331,6cyclictest235-21systemd-journal08:43:470
219444499331,6cyclictest235-21systemd-journal08:43:460
2194456993217,11cyclictest235-21systemd-journal12:30:002
219445699321,6cyclictest30-21ksoftirqd/211:50:012
219445299323,5cyclictest131rcu_preempt10:21:041
2194452993221,8cyclictest23-21ksoftirqd/109:50:021
2194452993219,10cyclictest23-21ksoftirqd/111:02:441
2194452993213,14cyclictest2194440-21cyclictest07:45:031
2194452993212,7cyclictest131rcu_preempt08:45:011
2194452993212,7cyclictest131rcu_preempt08:45:001
2194452993117,11cyclictest235-21systemd-journal10:33:261
2194456993016,10cyclictest2194536-21cat07:10:022
219445699301,4cyclictest0-21swapper/211:50:522
2194452993019,8cyclictest23-21ksoftirqd/111:43:411
2194452992920,5cyclictest23-21ksoftirqd/110:50:021
2194452992916,10cyclictest274-21dbus-daemon09:45:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional