You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-18 - 21:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Tue Aug 18, 2026 12:44:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1957814995439,11cyclictest391ktimers/307:40:123
1957809994817,3cyclictest0-21swapper/210:10:272
1957814994715,29cyclictest2000933-21sed09:10:243
1957809994719,24cyclictest208-21systemd-logind11:54:322
1957809994639,4cyclictest2061946-21sh12:10:002
1957809994637,5cyclictest2006736-21idleruntime-cro09:30:012
1957814994536,5cyclictest208-21systemd-logind08:34:033
1957809994533,8cyclictest2063242-21grep12:10:252
1957809994515,6cyclictest0-21swapper/208:40:222
1957814994335,4cyclictest1994765-21cron08:55:003
1957809994316,4cyclictest0-21swapper/208:00:262
1957814994222,16cyclictest0-21swapper/310:35:283
1957814994213,3cyclictest0-21swapper/308:40:163
195781499421,13cyclictest1980693-21head08:10:263
195781499421,10cyclictest2017979-21/usr/sbin/munin10:00:253
1957805994233,6cyclictest2056358-21grep11:50:261
1957800994231,7cyclictest2001136-21grep09:10:250
1957800994230,7cyclictest0-21swapper/011:35:260
1957800994229,9cyclictest121ktimers/011:10:120
195781499416,5cyclictest0-21swapper/312:00:233
1957814994121,16cyclictest0-21swapper/311:20:003
1957814994112,7cyclictest2035842-21seq10:54:103
1957814994111,5cyclictest2055447-21cstates11:50:143
195781499411,11cyclictest2064108-21tune2fs12:15:163
1957800994132,5cyclictest1989234-21unixbench_singl08:35:240
1957800994131,6cyclictest1973653-21unixbench_multi07:50:260
1957800994129,8cyclictest2064862-21grep12:15:260
1957800994129,8cyclictest2010151-21sendmail09:40:000
1957814994032,4cyclictest2061938-21cron12:10:003
1957814994010,2cyclictest0-21swapper/312:30:163
1957814994010,2cyclictest0-21swapper/312:30:163
1957809994031,6cyclictest2046761-21fschecks_count11:25:162
1957814993916,19cyclictest0-21swapper/311:20:163
195781499391,10cyclictest2047607-21tail11:25:273
195781499391,10cyclictest2005356-21/usr/sbin/munin09:25:153
195781499391,10cyclictest1984566-21basename08:25:013
1957809993927,8cyclictest2038931-21grep11:00:252
1957805993917,12cyclictest131rcu_preempt10:44:001
195781499389,5cyclictest1964551-21load07:25:203
195781499387,7cyclictest1963765-21cut07:25:013
195781499381,9cyclictest1998201-21latency_hist09:05:003
195781499381,8cyclictest2026949-21grep10:25:263
1957814993811,4cyclictest0-21swapper/312:15:003
195781499381,11cyclictest2049012-21fgrep11:30:253
195781499381,10cyclictest2039796-21fschecks_time11:05:153
195781499381,10cyclictest2020573-21cron10:10:003
1957814993810,25cyclictest0-21swapper/309:40:213
1957809993827,7cyclictest2002887-21unixbench_singl09:15:272
1957809993826,7cyclictest1973642-21grep07:50:272
1957805993829,4cyclictest0-21swapper/109:14:071
1957805993810,8cyclictest24-21ksoftirqd/108:00:001
195781499377,6cyclictest2066403-21wc12:20:253
195781499371,9cyclictest1999910-21basename09:10:003
195781499371,8cyclictest1996070-21unixbench_singl08:55:273
1957814993714,20cyclictest1965925-21sh07:30:163
1957814993713,2cyclictest0-21swapper/307:56:583
195781499371,10cyclictest2037645-21awk11:00:013
195781499371,10cyclictest2029097-21cron10:35:013
1957809993714,3cyclictest0-21swapper/211:30:212
1957805993731,4cyclictest1997983-21kworker/u8:0+events_unbound09:04:061
195781499367,4cyclictest0-21swapper/307:15:013
195781499362,7cyclictest2032946-21grep10:45:173
195781499361,9cyclictest2009113-21memory09:35:223
195781499361,5cyclictest2005021-21cron09:25:013
1957814993612,4cyclictest1959761-21apt-key07:15:023
195781499361,10cyclictest2052547-21grep11:40:233
1957814993610,5cyclictest2014539-21swap09:50:213
1957809993628,4cyclictest0-21swapper/208:00:002
1957805993630,4cyclictest2037444-21kworker/u8:1+events_unbound10:59:211
1957805993624,5cyclictest131rcu_preempt12:26:551
1957805993624,5cyclictest131rcu_preempt12:26:551
1957800993629,4cyclictest2023991-21munin-run10:20:010
1957800993624,7cyclictest645-21runrttasks09:50:140
195781499358,4cyclictest2021877-21unixbench_singl10:10:273
195781499352,5cyclictest1971919-21tail07:45:263
195781499351,9cyclictest2054924-21basename11:50:003
195781499351,8cyclictest2068201-21wc12:25:233
195781499351,8cyclictest2068201-21wc12:25:233
195781499351,8cyclictest1979419-21cron08:10:003
195781499351,8cyclictest1968320-21wc07:35:243
1957814993511,3cyclictest2057050-21/usr/sbin/munin11:55:193
195781499351,12cyclictest2023565-21unixbench_singl10:15:233
195781499351,10cyclictest1992641-21grep08:45:263
1957809993528,4cyclictest1996603-21runrttasks09:00:012
1957805993528,5cyclictest1987696-21kworker/u8:0+events_unbound08:48:421
1957805993526,5cyclictest0-21swapper/111:10:251
1957805993526,5cyclictest0-21swapper/110:25:021
1957805993525,7cyclictest1959546-21munin-node07:15:021
1957800993526,5cyclictest2061528-21grep12:05:260
1957800993524,7cyclictest0-21swapper/008:40:270
195781499349,2cyclictest0-21swapper/308:00:183
195781499347,5cyclictest1973726-21taskset07:50:393
195781499344,5cyclictest0-21swapper/310:45:003
1957814993423,6cyclictest0-21swapper/309:45:263
195781499341,8cyclictest2025243-21tail10:20:263
195781499341,5cyclictest2072400-21sendmail12:40:013
195781499341,5cyclictest2072400-21sendmail12:40:003
195781499341,10cyclictest2015588-21df09:55:153
1957814993410,5cyclictest1983055-21latency_hist08:20:023
1957814993410,21cyclictest0-21swapper/311:00:243
1957809993424,6cyclictest2016951-21kthreadd10:00:002
1957809993421,10cyclictest311ktimers/207:10:132
1957805993426,4cyclictest0-21swapper/112:20:151
1957805993424,7cyclictest1987951-21sh08:35:011
1957805993424,6cyclictest0-21swapper/112:00:001
1957805993423,5cyclictest1963394-21kworker/u8:2+events_unbound07:31:551
1957805993422,9cyclictest221rcuc/111:30:581
1957800993424,8cyclictest121ktimers/009:55:130
1957800993424,7cyclictest2040574-21grep11:05:240
195781499339,2cyclictest0-21swapper/311:35:143
195781499339,2cyclictest0-21swapper/308:38:433
1957809993324,6cyclictest1963255-21unixbench_singl07:20:252
195780599335,5cyclictest24-21ksoftirqd/110:50:011
1957805993324,4cyclictest0-21swapper/109:10:001
1957805993322,5cyclictest131rcu_preempt08:01:041
1957805993314,11cyclictest131rcu_preempt09:50:241
1957800993325,4cyclictest0-21swapper/009:30:260
1957800993325,4cyclictest0-21swapper/007:15:040
1957800993324,6cyclictest2036351-21fschecks_time10:55:180
1957800993322,8cyclictest1963889-21latency_hist07:25:010
1957800993322,7cyclictest2068973-21sh12:30:000
1957800993322,7cyclictest2068973-21sh12:30:000
195781499328,4cyclictest645-21runrttasks09:15:533
195781499321,11cyclictest1984910-21diskstats08:25:173
1957809993223,4cyclictest0-21swapper/210:45:262
1957805993223,4cyclictest0-21swapper/109:25:281
1957805993222,6cyclictest0-21swapper/107:35:251
1957805993219,6cyclictest131rcu_preempt12:08:111
1957805993219,4cyclictest131rcu_preempt08:15:181
1957805993215,5cyclictest131rcu_preempt10:25:241
1957805993213,10cyclictest131rcu_preempt07:40:141
1957800993224,4cyclictest0-21swapper/010:05:270
195781499311,7cyclictest2041807-21tr11:10:203
1957809993123,4cyclictest0-21swapper/207:45:262
1957809993121,7cyclictest2009666-21grep09:35:262
195780599319,12cyclictest24-21ksoftirqd/110:10:141
195780599317,7cyclictest24-21ksoftirqd/110:20:011
1957805993124,4cyclictest2044466-21idleruntime-cro11:20:011
1957805993124,4cyclictest1974103-21sh07:55:001
1957805993123,5cyclictest231ktimers/107:30:011
1957805993123,4cyclictest0-21swapper/111:20:261
1957805993122,7cyclictest1987696-21kworker/u8:0+events_unbound08:54:401
1957805993121,7cyclictest231ktimers/111:45:131
1957805993120,4cyclictest131rcu_preempt09:35:161
1957805993117,5cyclictest131rcu_preempt08:09:011
1957805993117,4cyclictest131rcu_preempt09:15:161
1957805993116,9cyclictest131rcu_preempt08:35:161
1957805993114,5cyclictest131rcu_preempt08:55:211
1957805993114,4cyclictest131rcu_preempt11:28:201
1957805993111,12cyclictest131rcu_preempt11:42:271
1957805993110,5cyclictest131rcu_preempt09:30:131
1957805993110,15cyclictest24-21ksoftirqd/109:55:151
1957800993123,5cyclictest1998189-21cron09:05:000
1957800993123,4cyclictest0-21swapper/010:05:010
1957800993122,6cyclictest2013556-21idleruntime-cro09:50:000
1957800993120,7cyclictest0-21swapper/008:30:250
1957809993023,3cyclictest0-21swapper/207:15:032
1957809993019,7cyclictest2045726-21grep11:20:262
1957809993018,8cyclictest1982853-21sendmail08:20:012
195780599307,6cyclictest24-21ksoftirqd/112:10:161
1957805993022,4cyclictest0-21swapper/111:35:251
1957805993016,4cyclictest1961432-21timerwakeupswit07:15:251
1957805993015,4cyclictest131rcu_preempt08:40:251
1957805993015,3cyclictest131rcu_preempt11:00:231
1957805993013,5cyclictest131rcu_preempt12:15:121
1957805993012,10cyclictest131rcu_preempt08:10:191
1957800993020,6cyclictest0-21swapper/009:05:280
195780099301,6cyclictest2048094-21munin-plugin-st11:30:010
1957809992920,4cyclictest0-21swapper/210:40:002
1957809992918,8cyclictest2026236-21if_eth010:25:182
195780599299,7cyclictest24-21ksoftirqd/107:20:241
195780599295,12cyclictest24-21ksoftirqd/110:50:221
195780599293,15cyclictest24-21ksoftirqd/110:35:231
195780599292,5cyclictest221rcuc/110:05:001
1957805992915,4cyclictest131rcu_preempt09:20:151
1957805992913,9cyclictest131rcu_preempt12:00:151
1957805992913,9cyclictest131rcu_preempt09:45:151
1957805992911,5cyclictest131rcu_preempt08:24:131
195780099294,8cyclictest20276512egrep10:30:150
1957800992922,4cyclictest2025717-21idleruntime-cro10:25:010
1957800992922,4cyclictest1977732-21cron08:05:000
1957800992922,4cyclictest1975810-21munin-plugin-st08:00:000
1957800992922,4cyclictest0-21swapper/008:20:010
1957800992919,7cyclictest2072375-21sh12:40:000
1957800992919,7cyclictest2072375-21sh12:40:000
1957800992919,7cyclictest2003307-21sh09:20:010
1957800992918,8cyclictest1984552-21auditctl08:25:010
1957814992821,4cyclictest0-21swapper/309:30:263
1957809992821,3cyclictest0-21swapper/209:20:262
1957809992821,3cyclictest0-21swapper/209:00:252
1957809992820,5cyclictest0-21swapper/211:40:242
1957809992820,4cyclictest0-21swapper/209:50:142
1957809992818,6cyclictest2066647-21unixbench_singl12:20:252
1957809992817,7cyclictest1-21systemd09:49:102
1957809992816,7cyclictest0-21swapper/211:15:262
195780599289,12cyclictest24-21ksoftirqd/110:35:011
195780599288,13cyclictest24-21ksoftirqd/109:45:011
195780599282,8cyclictest24-21ksoftirqd/111:05:241
195780599281,17cyclictest1984878-21awk08:25:161
1957805992811,5cyclictest131rcu_preempt12:30:191
1957805992811,5cyclictest131rcu_preempt12:30:191
1957800992822,3cyclictest0-21swapper/008:10:240
1957800992819,5cyclictest0-21swapper/011:55:170
1957800992818,7cyclictest2034690-21grep10:50:160
1957800992818,5cyclictest0-21swapper/007:25:270
1957809992720,4cyclictest2058522-21sh12:00:002
1957809992720,3cyclictest0-21swapper/209:10:252
1957809992719,4cyclictest0-21swapper/210:50:252
195780599274,7cyclictest24-21ksoftirqd/110:05:201
1957805992723,2cyclictest0-21swapper/112:35:211
1957805992723,2cyclictest0-21swapper/112:35:211
1957800992721,3cyclictest0-21swapper/010:10:270
1957800992719,4cyclictest0-21swapper/010:50:000
1957800992718,6cyclictest1969386-21tune2fs07:40:170
1957800992715,9cyclictest121ktimers/007:45:120
195780099271,21cyclictest2054909-21apt-get11:50:000
1957809992618,4cyclictest0-21swapper/212:35:162
1957809992618,4cyclictest0-21swapper/212:35:162
1957809992616,6cyclictest2042314-21grep11:10:262
1957809992616,6cyclictest0-21swapper/211:35:262
1957805992617,6cyclictest0-21swapper/107:45:131
1957800992618,5cyclictest0-21swapper/010:25:260
1957800992618,4cyclictest0-21swapper/010:35:260
1957800992617,6cyclictest1959608-21apt-key07:15:010
1957800992617,5cyclictest2067273-21sed12:25:020
1957800992617,5cyclictest0-21swapper/008:45:260
1957800992616,7cyclictest2014022-1kworker/0:0H+mmc_complete11:25:000
1957809992519,3cyclictest0-21swapper/208:50:122
1957809992514,8cyclictest1970233-21grep07:40:252
1957800992516,6cyclictest2044040-21grep11:15:260
1957809992418,3cyclictest0-21swapper/208:30:122
1957809992417,4cyclictest2007176-21sort09:30:162
1957800992417,4cyclictest13850irq/36-mmc108:10:010
1957800992417,4cyclictest0-21swapper/009:40:260
195780099241,6cyclictest1969002-21awk07:40:010
195780099241,5cyclictest1995873-21cat08:55:260
1957800992415,7cyclictest121ktimers/009:20:130
1957800992414,6cyclictest2032081-21grep10:40:280
195780099241,19cyclictest0-21swapper/012:01:010
195780099240,3cyclictest1984790-21apt-get08:25:130
1957809992316,3cyclictest0-21swapper/207:40:012
1957809992315,5cyclictest0-21swapper/211:05:262
1957809992314,6cyclictest2055003-21sed11:50:002
1957800992316,4cyclictest0-21swapper/011:40:240
1957800992316,3cyclictest0-21swapper/011:54:440
195780099231,18cyclictest0-21swapper/009:26:400
195780099230,19cyclictest0-21swapper/012:32:480
195780099230,19cyclictest0-21swapper/012:32:480
1957809992216,3cyclictest0-21swapper/210:00:252
1957809992215,3cyclictest0-21swapper/207:30:252
1957809992214,5cyclictest20230862sleep210:15:202
1957809992214,4cyclictest0-21swapper/209:40:262
1957809992213,6cyclictest2067632-21diskstats12:25:162
1957809992213,6cyclictest2067632-21diskstats12:25:152
1957809992212,6cyclictest0-21swapper/208:35:232
1957809992211,8cyclictest1965124-21awk07:25:282
1957800992216,3cyclictest0-21swapper/012:10:340
195780099221,5cyclictest2038060-21tune2fs11:00:160
195780099220,18cyclictest0-21swapper/011:30:020
1957809992116,3cyclictest0-21swapper/209:10:002
1957809992115,4cyclictest2069427-21fschecks_time12:30:162
1957809992115,4cyclictest2069427-21fschecks_time12:30:162
1957809992115,3cyclictest0-21swapper/210:25:012
1957809992114,4cyclictest2060305-21latency_hist12:05:012
1957809992114,4cyclictest2037633-21cron11:00:002
1957809992113,4cyclictest0-21swapper/210:30:182
1957809992112,6cyclictest1991965-21tr08:45:192
1957809992014,4cyclictest1980002-21kernelversion08:10:182
1957809992014,3cyclictest0-21swapper/208:20:132
195780999192,14cyclictest2018670-21apt-get10:05:052
1957809991912,5cyclictest311ktimers/208:25:162
1957809991912,3cyclictest0-21swapper/212:15:122
1957809991911,5cyclictest311ktimers/208:05:122
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional