You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-30 - 15:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Sun Aug 30, 2026 12:42:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
733706995749,5cyclictest1000-21mta-sts-daemon07:56:082
733706995749,5cyclictest1000-21mta-sts-daemon07:56:082
733706995748,6cyclictest824598-21sendmail10:40:012
733706995648,5cyclictest876372-21latency_hist12:05:022
733704995437,12cyclictest12650irq/32-eth009:41:070
733704995437,12cyclictest12650irq/32-eth009:41:070
733705995244,5cyclictest778880-21cron09:25:011
733705995135,12cyclictest0-21swapper/112:10:021
733704995132,16cyclictest888524-21munin-plugin-st12:25:000
733706994839,6cyclictest806460-21latency_hist10:10:022
733705994826,18cyclictest798927-21timerwakeupswit09:56:181
733704994833,10cyclictest772772-21ssh09:15:020
733704994828,17cyclictest856087-21missed_timers11:31:030
733704994618,5cyclictest815489-21kworker/u8:10+nfsiod11:53:590
73370599452,35cyclictest883665-21ssh12:16:061
73370599451,16cyclictest743581-21ntpq07:41:051
733704994537,5cyclictest867095-21sshd11:49:570
73370499452,15cyclictest740635-21ntpq07:31:070
733706994438,3cyclictest0-21swapper/210:25:022
733706994436,5cyclictest870192-21ssh11:55:012
73370599442,7cyclictest758572-21ntpq08:31:041
733705994426,15cyclictest824594-21ssh10:40:011
733705994421,20cyclictest0-21swapper/109:30:011
73370599441,11cyclictest752549-21ntpq08:11:031
733704994421,21cyclictest0-21swapper/012:05:010
733704994421,20cyclictest754603-21unixbench_singl08:16:170
733704994414,5cyclictest12650irq/32-eth010:56:050
733704994414,5cyclictest12650irq/32-eth010:56:050
733705994334,5cyclictest892991-21mailstats12:31:131
73370599433,35cyclictest816704-21ssh10:26:071
733704994320,3cyclictest0-21swapper/011:06:060
733704994310,8cyclictest892881-21ssh12:31:100
733706994236,2cyclictest0-21swapper/207:20:012
733706994233,6cyclictest846469-21aten2.4-expect11:15:572
733706994232,6cyclictest1000-21mta-sts-daemon11:23:032
733705994234,5cyclictest806339-21cron10:10:011
73370599423,33cyclictest774036-21ssh09:16:071
73370599422,6cyclictest764582-21ntpq08:51:051
73370599421,10cyclictest880587-21ntpq12:11:051
733704994222,17cyclictest745835-21latency_hist07:50:020
733704994219,21cyclictest0-21swapper/012:00:030
733704994219,20cyclictest4095404-21cups-browsed09:34:540
733706994132,6cyclictest421-21dbus-daemon12:00:012
73370599414,6cyclictest792353-21ntpq09:46:051
73370599413,7cyclictest754085-21ntpq08:16:071
733705994133,5cyclictest421-21dbus-daemon08:10:011
733705994131,7cyclictest819290-21/usr/sbin/munin10:30:561
73370599412,6cyclictest736158-21ntpq07:16:081
733705994121,17cyclictest0-21swapper/112:00:571
733705994120,17cyclictest0-21swapper/109:36:071
73370599411,14cyclictest843606-21diskstats11:10:571
73370599411,11cyclictest746182-21diskstats07:50:541
73370599411,11cyclictest746182-21diskstats07:50:541
733706994033,3cyclictest0-21swapper/211:46:112
733706994031,6cyclictest739713-21unin-run07:30:012
733706994031,6cyclictest420-21avahi-daemon10:17:172
733706994031,6cyclictest4095398-21cupsd09:17:272
73370599403,5cyclictest760167-21ntpq08:36:101
733705994026,11cyclictest897609-21munin-plugin-st12:40:011
733705994026,11cyclictest1000-21mta-sts-daemon10:51:041
73370599402,5cyclictest841005-21ntpq11:06:041
73370599402,5cyclictest834988-21ntpq10:56:101
73370599402,5cyclictest834988-21ntpq10:56:101
73370599402,5cyclictest763109-21ntpq08:46:041
73370599402,5cyclictest739061-21ntpq07:26:041
733705994022,15cyclictest1002-21mta-sts-daemon09:33:371
73370599401,9cyclictest766036-21ntpq08:56:051
73370599401,5cyclictest865423-21ntpq11:46:101
73370599401,4cyclictest889830-21ntpq12:26:091
73370599401,4cyclictest745102-21ntpq07:46:061
733704994034,4cyclictest882490-21latency_hist12:15:020
733704994032,5cyclictest823028-21mailstats10:36:170
73370499403,15cyclictest847037-21ssh11:16:070
733704994019,18cyclictest0-21swapper/008:55:590
733704994018,2cyclictest0-21swapper/010:16:090
733704994017,2cyclictest0-21swapper/009:50:560
733704994017,2cyclictest0-21swapper/009:50:560
733704994014,8cyclictest12650irq/32-eth009:46:050
73370499401,17cyclictest802695-21ssh10:03:060
73370499401,14cyclictest895853-21ntpq12:36:110
73370499401,14cyclictest749720-21ps08:01:100
73370499401,14cyclictest749720-21ps08:01:100
733706993933,3cyclictest0-21swapper/209:26:052
733706993931,5cyclictest864129-21latency_hist11:45:022
733706993931,5cyclictest794185-21systemd-run09:50:012
733706993931,5cyclictest265-21systemd-journal10:45:012
733706993929,7cyclictest750197-21/usr/sbin/munin08:05:012
733706993929,7cyclictest750197-21/usr/sbin/munin08:05:012
73370599392,7cyclictest795336-21ntpq09:51:021
73370599392,7cyclictest795336-21ntpq09:51:021
73370599392,5cyclictest850110-21ntpq11:21:041
73370599392,5cyclictest769109-21ntpq09:06:061
73370599392,4cyclictest856161-21ntpq11:31:051
733705993924,12cyclictest0-21swapper/111:36:111
73370599391,9cyclictest767558-21ntpq09:01:031
73370599391,8cyclictest737567-21ntpq07:21:011
73370599391,8cyclictest734293-21if_wlan007:10:591
733705993916,18cyclictest0-21swapper/111:55:031
73370599391,3cyclictest740618-21ntpq07:31:071
73370599391,15cyclictest828935-21ntpq10:46:081
73370599391,13cyclictest853211-21ntpq11:26:071
73370599391,12cyclictest847739-21ssh11:16:251
73370599391,12cyclictest757099-21ntpq08:26:061
73370599391,12cyclictest748054-21ntpq07:56:041
73370599391,12cyclictest748054-21ntpq07:56:041
73370599390,10cyclictest749593-21ntpq08:01:041
73370599390,10cyclictest749593-21ntpq08:01:041
73370499399,10cyclictest4095404-21cups-browsed10:42:580
73370499392,15cyclictest816766-21ssh10:26:090
733704993918,3cyclictest0-21swapper/010:31:030
733704993915,3cyclictest0-21swapper/007:50:530
733704993915,3cyclictest0-21swapper/007:50:530
733704993913,8cyclictest12650irq/32-eth011:21:090
733706993833,2cyclictest0-21swapper/212:36:122
733706993832,2cyclictest0-21swapper/209:00:012
733706993831,4cyclictest747197-21kthreadd07:55:012
733706993831,4cyclictest747197-21kthreadd07:55:012
733706993830,5cyclictest751681-21cron08:10:002
73370599381,4cyclictest810687-21ntpq10:16:081
73370599381,13cyclictest863012-21ssh11:41:361
73370599381,12cyclictest770953-21ntpq09:11:071
73370599381,11cyclictest742131-21ntpq07:36:061
73370599381,10cyclictest871342-21ntpq11:56:031
733704993814,4cyclictest0-21swapper/012:16:000
733704993813,4cyclictest0-21swapper/007:40:580
73370499381,18cyclictest755661-21ntpq08:21:080
733704993811,5cyclictest769686-21diskmemload12:27:550
73370699374,28cyclictest837951-21ssh11:01:052
73370699374,28cyclictest837951-21ssh11:01:052
733706993730,3cyclictest0-21swapper/210:00:002
733706993728,5cyclictest789253-21sh09:41:032
733706993728,5cyclictest789253-21sh09:41:032
733706993727,4cyclictest0-21swapper/209:06:042
733705993727,7cyclictest800807-21aten2.4-expect10:00:531
733705993721,12cyclictest0-21swapper/111:01:011
733705993721,12cyclictest0-21swapper/111:01:011
73370599371,7cyclictest755694-21open_files08:21:101
73370599371,6cyclictest813739-21ntpq10:21:111
73370599371,5cyclictest761082-21aten_r2power_vo08:40:561
73370599371,12cyclictest886724-21ntpq12:21:051
73370599371,11cyclictest807501-21ntpq10:11:011
73370599371,10cyclictest825795-21ntpq10:41:061
733704993717,17cyclictest1001-21mta-sts-daemon09:20:210
733704993716,3cyclictest0-21swapper/008:06:140
73370499371,16cyclictest813755-21ssh10:21:120
733706993628,5cyclictest885453-21cron12:20:002
733706993628,5cyclictest778915-21systemd09:25:022
733706993619,12cyclictest421-21dbus-daemon10:02:132
73370599364,8cyclictest733660-21munin-run07:10:011
733704993628,5cyclictest1-21systemd07:30:010
73370499362,15cyclictest665-21snmpd10:14:390
733704993615,3cyclictest1002-21mta-sts-daemon07:11:100
73370499361,13cyclictest862295-21ntpq11:41:080
733706993528,4cyclictest742694-21awk07:40:012
73370599351,10cyclictest789258-21ntpq09:41:041
73370599351,10cyclictest789258-21ntpq09:41:041
73370499355,9cyclictest428-21mta-sts-daemon11:25:400
73370499352,14cyclictest844137-21ntp_states11:11:100
73370499351,14cyclictest665-21snmpd10:09:260
733706993427,4cyclictest888529-21idleruntime-cro12:25:002
733706993425,6cyclictest836707-21munin-run11:00:002
733706993425,6cyclictest836707-21munin-run11:00:002
733706993425,6cyclictest4095404-21cups-browsed08:20:552
73370499341,15cyclictest798394-21ntpq09:56:060
733706993326,4cyclictest1002-21mta-sts-daemon09:37:022
733706993326,3cyclictest0-21swapper/211:35:562
733706993326,3cyclictest0-21swapper/210:31:042
733706993326,3cyclictest0-21swapper/210:26:172
733706993325,5cyclictest794994-21fschecks_time09:50:562
733706993325,5cyclictest794994-21fschecks_time09:50:562
733706993325,5cyclictest744194-21munin-plugin-st07:45:012
733706993325,5cyclictest1000-21mta-sts-daemon10:10:032
733706993324,6cyclictest4095404-21cups-browsed10:51:572
733706993323,6cyclictest4095404-21cups-browsed11:31:022
73370499335,8cyclictest309-21munin-node08:51:050
733704993323,7cyclictest759171-21cron08:35:010
733704993322,9cyclictest747716-21fschecks_time07:55:580
733704993322,9cyclictest747716-21fschecks_time07:55:580
733704993322,4cyclictest830654-21munin-plugin-st10:50:010
733706993226,3cyclictest0-21swapper/209:15:012
733706993225,4cyclictest1003-21mta-sts-daemon09:35:012
733706993224,5cyclictest0-21swapper/211:10:012
73370699322,25cyclictest892773-21ssh12:31:062
733706993220,9cyclictest745035-21ntp_kernel_err07:46:042
73370499321,14cyclictest837938-21ntpq11:01:040
73370499321,14cyclictest837938-21ntpq11:01:040
733706993123,5cyclictest890047-21/usr/sbin/munin12:26:152
733706993123,5cyclictest0-21swapper/208:10:582
73370699312,24cyclictest844085-21ssh11:11:072
733706993121,6cyclictest4095404-21cups-browsed08:46:142
733704993125,4cyclictest861058-21munin-run11:40:010
733704993120,8cyclictest0-21swapper/012:06:180
733706993025,2cyclictest0-21swapper/210:46:032
733706993023,3cyclictest0-21swapper/211:26:162
733706993022,5cyclictest623-21sshd08:28:562
73370699302,18cyclictest877648-21sh12:06:102
733706993021,6cyclictest1-21systemd08:36:132
733706993015,11cyclictest567-21gdbus08:55:022
733704993026,2cyclictest0-21swapper/007:20:010
733704993024,4cyclictest769717-21latency_hist09:10:020
733704993023,5cyclictest1003-21mta-sts-daemon09:29:450
733704993023,2cyclictest0-21swapper/007:40:010
733706992923,3cyclictest0-21swapper/212:11:032
733706992920,5cyclictest735178-21cron07:15:012
733704992924,3cyclictest0-21swapper/010:55:000
733706992822,3cyclictest0-21swapper/207:35:012
733706992810,13cyclictest567-21gdbus08:15:572
733704992821,5cyclictest773872-21needreboot09:16:010
733704992820,6cyclictest763001-21needreboot08:46:000
733704992810,13cyclictest12650irq/32-eth009:36:050
733706992616,6cyclictest439-21systemd-logind07:10:022
73370699261,19cyclictest665-21snmpd08:41:092
733706992514,9cyclictest351ktimers/208:31:082
733706992514,7cyclictest767615-21ntpq09:01:062
733704992519,4cyclictest1-21systemd08:40:010
733704992518,5cyclictest1003-21mta-sts-daemon07:21:030
733704992517,6cyclictest0-21swapper/008:15:020
733706992411,11cyclictest351ktimers/207:21:052
733704992418,3cyclictest756940-21missed_timers08:26:010
733704992317,3cyclictest761158-21cpuspeed08:40:570
733704992315,6cyclictest767595-21ntp_kernel_pll_09:01:050
73370499186,9cyclictest421-21dbus-daemon07:10:010
73370799164,8cyclictest0-21swapper/309:31:063
73370799163,9cyclictest0-21swapper/309:56:053
73370799163,7cyclictest0-21swapper/309:16:043
73370799162,9cyclictest0-21swapper/310:11:073
73370799161,9cyclictest0-21swapper/311:06:033
73370799153,6cyclictest0-21swapper/310:16:053
73370799152,9cyclictest0-21swapper/311:21:033
73370799152,8cyclictest0-21swapper/311:11:043
73370799152,8cyclictest0-21swapper/309:11:073
73370799152,7cyclictest0-21swapper/308:16:043
73370799152,6cyclictest0-21swapper/308:06:063
73370799151,9cyclictest0-21swapper/309:36:063
73370799151,7cyclictest0-21swapper/307:21:053
73370799143,6cyclictest0-21swapper/312:15:553
73370799143,5cyclictest0-21swapper/311:30:553
73370799143,5cyclictest0-21swapper/308:31:063
73370799142,7cyclictest0-21swapper/312:11:043
73370799142,7cyclictest0-21swapper/310:31:033
73370799142,7cyclictest0-21swapper/309:51:053
73370799142,7cyclictest0-21swapper/309:51:053
73370799142,6cyclictest0-21swapper/312:26:053
73370799142,6cyclictest0-21swapper/311:41:033
73370799142,5cyclictest0-21swapper/308:41:093
73370799142,5cyclictest0-21swapper/308:26:033
73370799141,8cyclictest0-21swapper/312:36:083
73370799141,7cyclictest0-21swapper/310:46:053
73370799141,6cyclictest0-21swapper/308:01:043
73370799141,6cyclictest0-21swapper/308:01:043
73370799141,5cyclictest0-21swapper/308:46:013
73370799133,7cyclictest0-21swapper/310:56:053
73370799133,7cyclictest0-21swapper/310:56:053
73370799133,6cyclictest0-21swapper/312:06:133
73370799133,5cyclictest0-21swapper/310:50:593
73370799133,5cyclictest0-21swapper/310:06:023
73370799133,5cyclictest0-21swapper/307:36:103
73370799133,4cyclictest0-21swapper/308:36:063
73370799132,7cyclictest0-21swapper/311:55:473
73370799132,7cyclictest0-21swapper/311:51:033
73370799132,7cyclictest0-21swapper/311:26:063
73370799132,7cyclictest0-21swapper/309:21:063
73370799132,6cyclictest0-21swapper/309:46:053
73370799132,6cyclictest0-21swapper/308:51:033
73370799132,5cyclictest0-21swapper/310:20:583
73370799132,5cyclictest0-21swapper/308:11:033
73370799132,5cyclictest0-21swapper/307:50:013
73370799131,8cyclictest0-21swapper/312:01:123
73370799131,8cyclictest0-21swapper/311:16:073
73370799131,8cyclictest0-21swapper/308:21:053
73370799131,7cyclictest0-21swapper/312:31:043
73370799131,7cyclictest0-21swapper/309:41:053
73370799131,7cyclictest0-21swapper/309:41:053
73370799131,6cyclictest0-21swapper/311:01:053
73370799131,6cyclictest0-21swapper/311:01:053
73370799131,6cyclictest0-21swapper/307:56:053
73370799131,6cyclictest0-21swapper/307:56:053
73370799131,6cyclictest0-21swapper/307:51:023
73370799131,6cyclictest0-21swapper/307:51:023
73370799123,6cyclictest0-21swapper/309:06:043
73370799122,6cyclictest0-21swapper/311:45:553
73370799122,6cyclictest0-21swapper/310:26:013
73370799122,6cyclictest0-21swapper/309:25:543
73370799122,5cyclictest0-21swapper/310:00:453
73370799122,5cyclictest0-21swapper/307:11:053
73370799121,6cyclictest0-21swapper/312:21:023
73370799121,6cyclictest0-21swapper/310:36:143
73370799121,6cyclictest0-21swapper/307:41:033
73370799121,6cyclictest0-21swapper/307:20:013
73370799113,6cyclictest0-21swapper/307:30:563
73370799112,6cyclictest0-21swapper/311:40:013
73370799112,5cyclictest0-21swapper/310:40:553
73370799111,6cyclictest0-21swapper/307:26:033
73370799111,5cyclictest0-21swapper/309:00:563
73370799111,5cyclictest0-21swapper/308:56:053
7337079991,5cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional