You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-06 - 15:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackbslot5s.osadl.org (updated Sun Sep 06, 2026 12:44:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2223264995547,5cyclictest2323430-21kworker/u8:2+events_unbound12:00:210
2223277995428,22cyclictest0-21swapper/308:40:263
2223277995428,22cyclictest0-21swapper/308:40:263
2223277995035,11cyclictest391ktimers/312:30:123
2223264995042,4cyclictest2290779-21munin-plugin-st10:25:000
2223273994841,5cyclictest2283647-21kworker/u8:1+events_unbound10:05:002
2223277994636,7cyclictest2316342-21grep11:35:253
2223273994633,10cyclictest311ktimers/211:00:132
2223273994633,10cyclictest311ktimers/211:00:132
2223268994632,10cyclictest231ktimers/107:10:111
2223268994632,10cyclictest231ktimers/107:10:111
2223264994638,4cyclictest2306543-21munin-plugin-st11:10:000
2223264994638,4cyclictest2306543-21munin-plugin-st11:10:000
2223277994536,6cyclictest2235745-21cron07:45:013
2223273994538,4cyclictest2288589-21unixbench_multi10:15:262
2223273994537,5cyclictest2309947-21grep11:20:002
222327799441,12cyclictest2280539-21grep09:55:003
2223273994433,6cyclictest2263067-21unixbench_singl09:00:252
2223277994334,5cyclictest2289068-21sendmail10:20:003
2223277994324,15cyclictest0-21swapper/311:20:183
2223277994318,22cyclictest0-21swapper/307:45:143
2223264994331,8cyclictest2323601-21sendmail12:00:000
2223277994235,4cyclictest2253007-21cron08:35:003
222327799421,3cyclictest0-21swapper/312:10:113
222327799420,3cyclictest0-21swapper/310:25:113
222327799411,3cyclictest0-21swapper/307:30:103
222327799411,33cyclictest2335903-21fschecks_count12:35:183
222327799411,11cyclictest2238696-21grep07:50:253
2223268994113,9cyclictest2304695-21chrt11:03:221
2223268994113,9cyclictest2304695-21chrt11:03:221
2223268994112,10cyclictest2335746-21chrt12:35:011
2223264994134,5cyclictest2328393-21kworker/u8:0+events_unbound12:20:220
2223264994134,5cyclictest2328393-21kworker/u8:0+events_unbound12:20:210
2223264994131,5cyclictest0-21swapper/009:09:530
222327799404,33cyclictest2298384-21irqstats10:45:173
222327799403,3cyclictest2248261-21diskstats08:20:143
2223277994030,6cyclictest0-21swapper/309:40:003
222327799402,32cyclictest2312035-21cut11:25:153
222327799401,6cyclictest2307293-21/usr/sbin/munin11:10:203
222327799401,35cyclictest2273236-21tail09:30:263
222327799401,34cyclictest2275779-21diskstats09:40:163
222327799401,10cyclictest2318499-21basename11:45:003
222327799400,3cyclictest0-21swapper/310:20:113
2223268994031,6cyclictest2311659-21auditctl11:25:001
2223268994012,11cyclictest2333644-21chrt12:27:501
222327799397,29cyclictest2271239-21run-parts09:25:213
222327799392,32cyclictest2306142-21grep11:05:253
222327799392,32cyclictest2306142-21grep11:05:253
222327799392,30cyclictest2239575-21cut07:55:163
222327799391,9cyclictest2227456-21/usr/sbin/munin07:20:273
222327799391,7cyclictest2258748-21fschecks_count08:50:153
2223277993917,18cyclictest0-21swapper/308:10:153
222327799391,6cyclictest2229722-21ntp_states07:25:213
222327799391,5cyclictest2284320-21/usr/sbin/munin10:05:153
222327799391,5cyclictest2264432-21/usr/sbin/munin09:05:243
222327799391,4cyclictest2262539-21/usr/sbin/munin09:00:203
222327799391,3cyclictest2323837-21apt-get12:00:123
222327799391,3cyclictest0-21swapper/310:55:063
222327799391,3cyclictest0-21swapper/309:55:113
222327799391,3cyclictest0-21swapper/308:15:113
222327799391,3cyclictest0-21swapper/308:15:113
222327799391,35cyclictest2326286-21grep12:05:223
222327799391,12cyclictest2260340-21/usr/sbin/munin08:55:153
222327799391,11cyclictest2330658-21/usr/sbin/munin12:20:203
222327799391,11cyclictest2330658-21/usr/sbin/munin12:20:203
222327799390,4cyclictest0-21swapper/310:00:123
222327799390,3cyclictest0-21swapper/311:45:103
222327799390,3cyclictest0-21swapper/309:15:123
2223268993928,7cyclictest0-21swapper/108:00:251
2223268993913,9cyclictest2318315-21chrt11:43:041
222327799381,3cyclictest0-21swapper/307:10:123
222327799381,3cyclictest0-21swapper/307:10:123
222327799381,34cyclictest2332812-21meminfo12:25:193
222327799381,2cyclictest2241109-21apt-get08:00:123
222327799381,12cyclictest2227217-21ls07:20:003
222327799381,10cyclictest2303375-21/usr/sbin/munin11:00:183
222327799381,10cyclictest2303375-21/usr/sbin/munin11:00:173
222327799381,10cyclictest2292710-21apt-get10:30:123
222327799380,3cyclictest2320416-21apt-get11:50:123
222327799380,3cyclictest0-21swapper/308:35:153
2223273993831,4cyclictest2245725-21unixbench_multi08:10:242
2223268993828,6cyclictest2257903-21grep08:45:251
2223268993828,6cyclictest2257903-21grep08:45:251
2223268993812,9cyclictest2328381-21modprobe12:11:071
2223268993812,9cyclictest2283855-21taskset10:04:001
2223264993830,4cyclictest0-21swapper/009:00:000
222327799372,4cyclictest2296135-21apt-get10:40:143
222327799372,10cyclictest2286065-21grep10:10:183
222327799372,10cyclictest2286065-21grep10:10:173
222327799371,5cyclictest2266023-21/usr/sbin/munin09:10:243
222327799371,5cyclictest2242575-21apt-get08:05:063
222327799371,4cyclictest2294942-21/usr/sbin/munin10:35:203
222327799371,4cyclictest2257448-21ntp_states08:45:213
222327799371,4cyclictest2257448-21ntp_states08:45:213
222327799371,3cyclictest2277361-21apt-get09:45:143
222327799371,3cyclictest2232565-21apt-get07:35:133
222327799371,3cyclictest0-21swapper/311:55:133
222327799371,3cyclictest0-21swapper/311:30:113
222327799371,3cyclictest0-21swapper/308:25:133
222327799370,3cyclictest0-21swapper/309:20:123
2223273993729,4cyclictest0-21swapper/212:20:212
2223273993729,4cyclictest0-21swapper/212:20:212
2223273993727,5cyclictest2333832-21audit_send_reply12:30:012
2223268993730,4cyclictest0-21swapper/109:00:001
2223268993728,6cyclictest2280925-21cut09:55:151
2223268993728,4cyclictest0-21swapper/108:54:521
2223268993720,13cyclictest2323176-21unixbench_singl11:55:261
2223268993712,9cyclictest2306385-21chrt11:08:121
2223268993712,9cyclictest2306385-21chrt11:08:121
2223264993727,6cyclictest0-21swapper/010:00:260
222327799362,3cyclictest2299743-21apt-get10:50:113
2223273993624,9cyclictest0-21swapper/210:50:122
2223268993625,7cyclictest0-21swapper/109:25:231
2223268993625,7cyclictest0-21swapper/108:05:251
2223268993612,9cyclictest2227045-21chrt07:18:121
2223264993627,4cyclictest0-21swapper/010:30:030
222327799351,3cyclictest2308471-21apt-get11:15:123
222327799351,3cyclictest0-21swapper/312:15:123
2223273993527,4cyclictest0-21swapper/211:30:252
2223273993527,4cyclictest0-21swapper/210:45:152
2223268993527,4cyclictest0-21swapper/109:30:261
2223268993524,7cyclictest0-21swapper/112:25:001
2223268993524,7cyclictest0-21swapper/112:25:001
2223268993510,10cyclictest645-21runrttasks09:13:261
2223264993527,4cyclictest0-21swapper/008:39:500
2223264993527,4cyclictest0-21swapper/007:30:140
2223264993526,5cyclictest2299087-21grep10:45:250
222326499350,5cyclictest131rcu_preempt11:10:120
2223273993426,4cyclictest0-21swapper/210:45:002
2223273993426,4cyclictest0-21swapper/208:20:242
2223273993424,7cyclictest2282275-21latency_hist10:00:002
2223268993424,6cyclictest0-21swapper/112:30:261
2223268993423,7cyclictest0-21swapper/110:55:251
2223268993419,9cyclictest2275660-21apt-get09:40:121
2223264993425,5cyclictest0-21swapper/010:40:020
2223273993322,6cyclictest0-21swapper/208:00:252
2223273993321,8cyclictest2252532-21grep08:30:242
2223268993326,4cyclictest0-21swapper/108:30:001
2223268993323,4cyclictest2273941-21apt-get09:35:111
2223268993322,8cyclictest2237687-21apt-get07:50:141
2223268993319,9cyclictest231ktimers/111:15:111
2223268993318,11cyclictest2277345-21taskset09:45:051
2223268993318,11cyclictest2268836-21munin-node09:20:121
2223268993316,13cyclictest438-21cron11:40:001
2223268993316,12cyclictest2287490-21wc10:15:001
2223268993316,12cyclictest2287490-21wc10:15:001
2223264993326,5cyclictest2268453-21kworker/u8:2+events_unbound09:24:560
2223264993319,9cyclictest204-21dbus-daemon07:54:430
2223273993224,4cyclictest0-21swapper/212:00:152
2223268993224,4cyclictest2325537-21apt-get12:05:111
2223268993224,4cyclictest0-21swapper/108:00:011
2223268993223,6cyclictest0-21swapper/111:15:001
2223268993218,11cyclictest2292200-21runrttasks10:26:501
2223268993217,12cyclictest2293702-21grep10:30:251
2223268993217,11cyclictest2296133-21/usr/sbin/munin10:40:121
2223268993217,10cyclictest2319720-21grep11:45:231
2223268993216,13cyclictest2330436-21idleruntime-cro12:20:001
2223268993216,13cyclictest2320873-21/usr/sbin/munin11:50:191
2223268993215,14cyclictest2262723-21cut09:00:241
2223268993215,14cyclictest2236283-21if_eth007:45:171
2223268993215,13cyclictest2232905-21/usr/sbin/munin07:35:181
2223268993215,13cyclictest2228918-21cron07:25:001
2223268993214,15cyclictest2295166-21sensors_temp10:35:241
2223268993212,15cyclictest2229734-21sh07:25:221
222326499324,4cyclictest131rcu_preempt09:00:120
2223273993125,4cyclictest2320185-21sh11:50:002
2223273993121,6cyclictest0-21swapper/212:30:162
2223268993124,4cyclictest2313595-21apt-get11:30:111
2223268993120,8cyclictest2253390-21fschecks_count08:35:181
2223268993119,8cyclictest2252088-21/usr/sbin/munin08:30:191
2223268993119,7cyclictest2249601-21cron08:25:001
2223268993118,9cyclictest2299092-21grep10:45:251
2223268993118,10cyclictest2288733-21taskset10:16:151
2223268993117,11cyclictest2289914-21/usr/sbin/munin10:20:211
2223268993117,10cyclictest2312435-21ntpq11:25:191
2223268993115,12cyclictest2299740-21munin-node10:50:111
2223268993115,12cyclictest2246583-21sort08:15:161
2223268993115,12cyclictest2246583-21sort08:15:151
2223268993115,12cyclictest2244721-21/usr/sbin/munin08:10:101
2223268993115,12cyclictest2231482-21ps07:30:211
2223264993123,3cyclictest0-21swapper/011:15:250
2223264993118,8cyclictest0-21swapper/009:20:010
2223273993023,4cyclictest0-21swapper/212:00:002
2223273993022,5cyclictest2228461-21grep07:20:262
2223268993019,8cyclictest2234622-21/usr/sbin/munin07:40:181
2223268993019,7cyclictest2324287-21meminfo12:00:201
2223268993017,10cyclictest2267798-21gzip09:15:231
2223268993017,10cyclictest2255177-21taskset08:40:091
2223268993017,10cyclictest2255177-21taskset08:40:091
2223264993023,5cyclictest2206968-21kworker/u8:0+events_unbound07:24:390
2223264993023,4cyclictest2282236-21munin-plugin-st10:00:000
2223264993023,4cyclictest0-21swapper/012:20:000
2223264993023,4cyclictest0-21swapper/008:05:020
2223264993022,6cyclictest2224528-21kworker/u8:2+events_unbound07:14:370
2223264993022,6cyclictest2224528-21kworker/u8:2+events_unbound07:14:370
2223264993021,5cyclictest13550irq/42-30be0000.ethernet09:40:010
2223264993020,6cyclictest0-21swapper/012:10:240
222327399295,3cyclictest23219012basename11:55:002
2223273992921,5cyclictest0-21swapper/209:15:162
2223273992921,4cyclictest0-21swapper/211:40:262
2223273992919,7cyclictest311ktimers/208:05:062
2223273992919,6cyclictest0-21swapper/207:45:022
2223268992917,8cyclictest2279112-21cpu09:50:141
2223268992916,10cyclictest2284702-21/usr/sbin/munin10:05:191
2223268992916,10cyclictest2264299-21open_files09:05:231
2223264992922,5cyclictest2294023-21kworker/u8:1+events_unbound10:40:150
2223264992921,4cyclictest0-21swapper/012:30:160
2223264992919,6cyclictest2271999-21cron09:30:000
222326499291,5cyclictest131rcu_preempt07:40:140
2223273992821,4cyclictest311ktimers/209:28:012
2223273992821,3cyclictest0-21swapper/207:50:252
2223273992819,6cyclictest0-21swapper/208:25:162
2223273992818,7cyclictest311ktimers/210:20:122
2223273992815,9cyclictest0-21swapper/208:15:152
2223273992815,9cyclictest0-21swapper/208:15:152
2223264992820,5cyclictest2254680-21kworker/u8:3+events_unbound08:45:200
2223264992820,5cyclictest2254680-21kworker/u8:3+events_unbound08:45:190
2223264992819,5cyclictest2230177-21grep07:25:250
2223264992817,7cyclictest0-21swapper/011:45:240
222326499281,5cyclictest131rcu_preempt12:35:150
2223273992721,4cyclictest2252839-21kworker/u8:0+events_unbound08:44:532
2223273992721,4cyclictest2252839-21kworker/u8:0+events_unbound08:44:532
2223273992721,3cyclictest0-21swapper/210:35:162
2223273992718,6cyclictest0-21swapper/208:40:022
2223273992718,6cyclictest0-21swapper/207:20:002
2223273992716,6cyclictest0-21swapper/211:25:242
2223264992712,11cyclictest2226735-21unixbench_multi07:15:260
222326499271,15cyclictest0-21swapper/009:48:070
2223273992618,4cyclictest0-21swapper/208:49:522
2223273992618,4cyclictest0-21swapper/208:49:522
2223273992617,6cyclictest0-21swapper/209:40:252
2223273992616,6cyclictest0-21swapper/212:39:592
2223273992616,6cyclictest0-21swapper/209:45:252
2223273992615,6cyclictest0-21swapper/212:10:252
2223264992619,4cyclictest2289050-21munin-plugin-st10:20:000
2223264992618,4cyclictest22410542sleep008:00:010
2223264992618,3cyclictest0-21swapper/007:35:160
2223264992617,4cyclictest0-21swapper/009:15:020
2223264992616,6cyclictest0-21swapper/009:45:000
222326499261,4cyclictest131rcu_preempt11:35:120
222326499261,3cyclictest2247484-21unixbench_singl08:15:250
222326499261,3cyclictest2247484-21unixbench_singl08:15:250
2223273992518,3cyclictest0-21swapper/212:15:152
2223273992515,5cyclictest0-21swapper/208:55:282
2223273992514,6cyclictest0-21swapper/211:05:252
2223273992514,6cyclictest0-21swapper/211:05:242
2223273992514,6cyclictest0-21swapper/209:05:262
2223273992512,10cyclictest2223257-21cyclictest09:35:122
2223264992521,2cyclictest13550irq/42-30be0000.ethernet09:50:170
2223264992518,5cyclictest2319873-21kworker/u8:0+events_unbound11:50:150
2223264992518,3cyclictest0-21swapper/011:00:200
2223264992518,3cyclictest0-21swapper/011:00:200
2223264992517,4cyclictest2309895-21kworker/u8:3+events_unbound11:40:260
2223264992517,4cyclictest0-21swapper/011:30:240
2223264992515,6cyclictest0-21swapper/011:00:000
2223264992515,3cyclictest0-21swapper/012:05:430
2223264992514,6cyclictest0-21swapper/008:10:240
222326499251,20cyclictest0-21swapper/010:50:050
222326499250,4cyclictest131rcu_preempt08:05:120
2223273992418,3cyclictest0-21swapper/208:50:162
2223273992417,3cyclictest0-21swapper/211:10:242
2223273992417,3cyclictest0-21swapper/207:55:252
2223273992416,6cyclictest145-21jbd2/mmcblk1p2-809:31:072
2223273992416,5cyclictest0-21swapper/207:50:012
2223264992418,4cyclictest2333993-21latency_hist12:30:000
2223264992417,5cyclictest22527502chrt08:31:590
2223264992415,4cyclictest2292014-21unixbench_multi10:25:230
222326499241,21cyclictest0-21swapper/008:25:130
222326499241,19cyclictest0-21swapper/008:22:510
2223273992315,4cyclictest0-21swapper/209:50:262
2223273992312,7cyclictest204-21dbus-daemon10:30:032
2223273992312,7cyclictest0-21swapper/212:05:252
2223273992312,6cyclictest2232794-21tune2fs07:35:162
222327399231,12cyclictest0-21swapper/210:57:142
222326499231,9cyclictest2287356-21awk10:15:000
222326499231,9cyclictest2287356-21awk10:15:000
2223264992317,3cyclictest13850irq/36-mmc111:25:010
2223264992316,3cyclictest0-21swapper/010:05:240
2223264992316,3cyclictest0-21swapper/008:41:010
2223264992316,3cyclictest0-21swapper/008:41:010
222326499231,18cyclictest0-21swapper/008:53:590
222326499231,12cyclictest0-21swapper/009:31:000
222326499230,19cyclictest0-21swapper/011:29:270
222327399221,7cyclictest2231906-21grep07:30:242
2223273992216,3cyclictest0-21swapper/207:10:192
2223273992216,3cyclictest0-21swapper/207:10:192
2223273992215,4cyclictest22654212chrt09:10:142
2223273992214,4cyclictest0-21swapper/210:25:232
2223273992211,8cyclictest2316259-21sed11:35:242
2223273992210,9cyclictest0-21swapper/210:05:192
2223264992216,4cyclictest2230242-21kworker/u8:1+events_unbound07:45:200
2223273992114,3cyclictest0-21swapper/211:20:232
2223273992113,5cyclictest0-21swapper/207:25:162
2223273992014,3cyclictest0-21swapper/209:20:192
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional