You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-03 - 15:09

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Sun May 03, 2026 12:44:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
216631699540,3cyclictest0-21swapper/011:45:130
2166330994833,11cyclictest391ktimers/311:35:123
2166321994840,4cyclictest2190934-21munin-run08:20:011
2166330994739,4cyclictest0-21swapper/308:55:013
2166325994637,5cyclictest2167935-21cron07:15:012
2166316994635,8cyclictest121ktimers/012:15:120
2166316994627,16cyclictest2270649-21idleruntime-cro12:10:010
2166316994620,22cyclictest0-21swapper/011:40:000
2166325994537,6cyclictest311ktimers/210:15:132
2166316994513,27cyclictest0-21swapper/009:00:250
2166325994436,5cyclictest2244206-21cron10:55:002
2166321994414,3cyclictest2235922-21/usr/sbin/munin10:30:201
2166330994336,5cyclictest2177082-21cut07:40:013
2166325994334,6cyclictest311ktimers/208:40:112
2166321994335,4cyclictest0-21swapper/107:30:011
2166321994330,9cyclictest2226765-21grep10:00:261
2166321994324,15cyclictest0-21swapper/110:00:001
2166316994316,24cyclictest2254104-21find11:20:220
216632199429,5cyclictest2228172-21/usr/sbin/munin10:05:251
216632199422,11cyclictest2220351-21cron09:45:001
2166321994221,17cyclictest0-21swapper/111:00:261
2166321994217,21cyclictest0-21swapper/111:20:251
2166316994223,15cyclictest0-21swapper/009:59:590
216631699421,9cyclictest2276367-21/usr/sbin/munin12:25:190
2166316994211,4cyclictest2201563-21cat08:50:010
2166325994134,4cyclictest2280876-21idleruntime-cro12:40:002
216632199418,7cyclictest2242851-21df10:50:131
2166321994132,5cyclictest0-21swapper/111:45:261
216631699414,10cyclictest13550irq/42-30be0000.ethernet09:35:120
216631699411,9cyclictest2209273-21/usr/sbin/munin09:10:220
216631699411,9cyclictest2194088-21cron08:27:010
216631699411,10cyclictest2214216-21/usr/sbin/munin09:25:200
216632199409,5cyclictest0-21swapper/111:00:001
2166321994014,3cyclictest0-21swapper/109:35:231
2166321994012,3cyclictest0-21swapper/108:05:391
216632199401,13cyclictest164-21systemd-journal12:05:321
2166316994014,22cyclictest2227388-1kworker/0:2H+mmc_complete12:15:010
216631699401,36cyclictest2188934-21sshd08:14:110
2166330993932,5cyclictest2192492-21kworker/u8:0+events_unbound08:24:423
2166330993931,4cyclictest0-21swapper/311:25:213
2166330993930,6cyclictest2252490-21grep11:15:253
2166325993929,6cyclictest0-21swapper/212:00:002
216632199399,6cyclictest2213558-21basename09:25:001
2166321993917,17cyclictest0-21swapper/110:10:151
2166321993915,3cyclictest2239347-21/usr/sbin/munin10:40:231
216632199391,10cyclictest2268270-21unixbench_multi12:00:251
216631699395,9cyclictest2210581-21grep09:15:160
216631699391,8cyclictest2181266-21/usr/sbin/munin07:50:210
216631699391,3cyclictest2240859-21latency_hist10:45:010
2166316993912,23cyclictest0-21swapper/012:20:240
2166316993911,3cyclictest2229255-21fschecks_count10:10:150
2166316993910,26cyclictest0-21swapper/007:59:370
2166330993828,7cyclictest2276992-21grep12:25:253
216632199388,4cyclictest2273611-21unixbench_singl12:15:251
2166321993825,9cyclictest231ktimers/109:10:111
2166321993814,3cyclictest0-21swapper/107:20:161
2166321993812,3cyclictest2234238-21/usr/sbin/munin10:25:191
216631699387,5cyclictest2223640-21taskset09:53:430
216631699387,5cyclictest2223640-21taskset09:53:430
216631699381,9cyclictest2186379-21/usr/sbin/munin08:05:200
216631699381,8cyclictest2238660-21unixbench_multi10:35:270
216631699381,8cyclictest2204811-21lockfile-create09:00:000
216631699381,8cyclictest2180487-21sh07:50:000
2166316993816,19cyclictest13550irq/42-30be0000.ethernet09:05:240
216631699381,11cyclictest2278737-21unixbench_singl12:30:250
216631699381,10cyclictest629-21snmpd08:20:190
2166316993810,2cyclictest0-21swapper/012:00:180
2166330993727,8cyclictest2245908-21cron11:00:003
2166325993729,5cyclictest2268938-21latency_hist12:05:002
2166316993729,4cyclictest0-21swapper/011:20:010
216631699371,8cyclictest2267011-21munin-plugin-st12:00:000
216631699371,8cyclictest2171962-21cron07:25:010
216631699371,3cyclictest0-21swapper/008:30:030
216631699371,2cyclictest0-21swapper/011:50:120
2166316993712,2cyclictest0-21swapper/008:18:590
216631699371,10cyclictest2241191-21/usr/sbin/munin10:45:150
216631699371,10cyclictest2177662-21irqstats07:40:170
216631699371,10cyclictest2177662-21irqstats07:40:170
2166316993710,3cyclictest0-21swapper/010:00:240
2166316993710,24cyclictest0-21swapper/007:20:000
216632199369,5cyclictest2277997-21if_eth112:30:161
216632199366,7cyclictest2204925-21cat09:00:001
2166321993629,4cyclictest2267002-21cron12:00:001
2166321993616,17cyclictest0-21swapper/107:30:251
2166321993612,3cyclictest2206947-21/usr/sbin/munin09:05:241
216631699365,5cyclictest2166570-21/usr/sbin/munin07:10:140
216631699363,6cyclictest2184598-21memory08:00:190
216631699362,9cyclictest0-21swapper/009:30:230
216631699361,9cyclictest2250391-21/usr/sbin/munin11:10:220
216631699361,9cyclictest2246283-21taskset11:00:140
216631699361,8cyclictest2255558-21meminfo11:25:170
2166316993613,5cyclictest121ktimers/007:25:210
2166316993613,3cyclictest2248368-21if_eth011:05:170
216631699361,11cyclictest2174006-21/usr/sbin/munin07:30:160
2166316993610,3cyclictest2196895-21latency08:35:180
216631699360,2cyclictest0-21swapper/011:30:170
2166330993527,4cyclictest0-21swapper/310:50:253
2166330993526,5cyclictest0-21swapper/311:20:213
2166330993524,8cyclictest2224842-21timerandwakeup09:55:253
2166325993528,4cyclictest2252956-21munin-run11:20:012
2166325993528,3cyclictest0-21swapper/209:40:002
2166325993526,4cyclictest0-21swapper/208:20:002
2166321993523,8cyclictest2206243-21grep09:00:251
216632199352,13cyclictest2199674-21cron08:45:011
2166321993512,5cyclictest231ktimers/111:15:211
2166321993512,3cyclictest2220769-21fschecks_count09:45:161
216632199351,11cyclictest2280394-21tail12:35:251
216632199351,11cyclictest2178783-21cron07:45:011
216632199351,11cyclictest2178783-21cron07:45:011
216631699357,6cyclictest2235602-21taskset10:28:580
216631699352,6cyclictest2219953-21unixbench_singl09:40:260
216631699351,8cyclictest2279536-21fschecks_count12:35:170
216631699351,6cyclictest2233986-21cron10:25:010
2166316993511,2cyclictest0-21swapper/010:50:250
216631699351,10cyclictest2232289-21idleruntime-cro10:20:010
2166330993427,4cyclictest2209502-21runrttasks09:10:243
2166330993427,4cyclictest0-21swapper/309:35:013
2166330993426,4cyclictest0-21swapper/308:05:013
2166330993425,6cyclictest0-21swapper/312:05:013
2166330993425,5cyclictest2246457-21if_err_eth111:00:163
2166325993425,6cyclictest2270201-21grep12:05:242
2166325993424,6cyclictest0-21swapper/210:10:012
2166325993423,6cyclictest0-21swapper/210:35:262
2166325993421,9cyclictest2201388-21munin-plugin-st08:50:002
2166321993427,3cyclictest0-21swapper/111:40:001
2166321993412,5cyclictest231ktimers/110:20:111
2166321993411,5cyclictest231ktimers/112:20:121
2166321993410,5cyclictest0-21swapper/111:40:181
216631699341,9cyclictest2202294-21gunzip08:50:230
216631699341,8cyclictest2220777-21cut09:45:160
2166316993412,4cyclictest645-21runrttasks10:06:550
2166316993411,2cyclictest0-21swapper/010:30:240
216631699341,11cyclictest21771062awk07:40:010
216631699341,10cyclictest2260518-21/usr/sbin/munin11:40:180
216631699341,10cyclictest2198571-21sed08:40:190
2166330993326,4cyclictest2197960-21auditctl08:40:003
2166330993325,4cyclictest0-21swapper/309:40:153
2166330993324,5cyclictest0-21swapper/308:35:013
2166325993325,4cyclictest0-21swapper/211:50:252
2166325993325,4cyclictest0-21swapper/207:15:272
2166325993323,6cyclictest0-21swapper/211:34:592
2166325993323,6cyclictest0-21swapper/209:30:012
216632199339,5cyclictest0-21swapper/108:25:221
2166321993323,7cyclictest231ktimers/109:50:121
2166321993323,7cyclictest231ktimers/109:50:111
2166321993313,4cyclictest231ktimers/108:05:021
216632199331,10cyclictest2239091-21cron10:40:011
2166321993310,5cyclictest0-21swapper/107:35:221
216631699331,9cyclictest2212278-21grep09:20:160
2166330993224,5cyclictest2193905-21grep08:25:273
2166330993222,6cyclictest0-21swapper/310:40:003
2166325993225,4cyclictest0-21swapper/211:10:242
2166325993224,4cyclictest0-21swapper/208:40:012
2166325993223,6cyclictest2181769-21grep07:50:252
2166325993222,7cyclictest311ktimers/207:40:122
2166325993222,7cyclictest311ktimers/207:40:122
2166321993224,4cyclictest0-21swapper/108:45:271
216632199321,10cyclictest2249536-21cron11:10:011
2166316993213,17cyclictest2244632-21fschecks_time10:55:150
2166330993124,4cyclictest0-21swapper/310:10:243
2166330993121,6cyclictest0-21swapper/307:20:003
2166325993124,5cyclictest2182055-21kworker/u8:2+events_unbound08:29:432
2166325993124,4cyclictest0-21swapper/208:05:262
2166325993123,4cyclictest0-21swapper/211:40:262
2166325993122,6cyclictest0-21swapper/209:00:002
2166325993118,9cyclictest2211835-21ls09:20:002
2166330993023,5cyclictest2251008-21kworker/u8:0+events_unbound11:45:273
2166330993022,4cyclictest0-21swapper/307:45:273
2166330993020,5cyclictest2249078-21grep11:05:263
2166325993022,4cyclictest0-21swapper/211:50:002
2166325993019,7cyclictest2229638-21grep10:10:182
2166321993022,4cyclictest0-21swapper/107:55:161
2166330992921,4cyclictest0-21swapper/308:20:013
2166330992920,4cyclictest0-21swapper/307:15:013
2166330992919,6cyclictest0-21swapper/312:05:243
2166325992921,4cyclictest0-21swapper/210:20:152
2166325992920,6cyclictest0-21swapper/211:05:012
2166325992920,6cyclictest0-21swapper/209:10:192
2166325992919,6cyclictest2171501-21grep07:20:252
2166325992917,8cyclictest1-21systemd09:34:552
2166321992923,4cyclictest2237293-21kworker/u8:0+events_unbound10:45:161
2166321992923,3cyclictest0-21swapper/111:10:161
2166321992922,4cyclictest2170279-21idleruntime-cro07:20:011
2166330992820,5cyclictest2237397-21kthreadd10:35:003
2166330992819,6cyclictest0-21swapper/307:50:263
2166330992818,7cyclictest2271853-21grep12:10:243
2166325992821,3cyclictest0-21swapper/211:20:252
2166325992820,4cyclictest0-21swapper/212:20:252
2166325992819,5cyclictest0-21swapper/211:05:252
2166325992817,7cyclictest438-21cron07:50:002
2166321992819,4cyclictest0-21swapper/112:25:371
2166330992721,3cyclictest0-21swapper/311:30:243
2166330992721,3cyclictest0-21swapper/309:35:253
2166330992720,4cyclictest2228876-21latency_hist10:10:003
2166330992720,4cyclictest0-21swapper/312:30:243
2166330992720,3cyclictest0-21swapper/312:35:243
2166330992718,6cyclictest0-21swapper/309:25:013
2166330992718,5cyclictest438-21cron09:05:013
2166330992718,5cyclictest0-21swapper/307:25:273
2166330992716,6cyclictest0-21swapper/311:40:263
2166325992720,4cyclictest2213540-21debian-sa109:25:012
2166325992720,3cyclictest0-21swapper/208:00:262
2166325992719,5cyclictest0-21swapper/209:55:252
2166325992719,4cyclictest0-21swapper/209:05:272
2166321992720,4cyclictest53-21kcompactd011:30:241
2166321992719,4cyclictest2189014-21auditctl08:15:001
2166321992717,7cyclictest231ktimers/109:15:131
2166330992619,4cyclictest0-21swapper/312:20:013
2166325992620,3cyclictest0-21swapper/210:30:122
2166325992618,5cyclictest0-21swapper/212:15:252
2166325992618,5cyclictest0-21swapper/207:30:222
2166325992617,5cyclictest0-21swapper/208:20:182
2166325992616,6cyclictest0-21swapper/209:50:202
2166325992616,6cyclictest0-21swapper/209:50:192
216633099253,10cyclictest2240359-21unixbench_multi10:40:263
2166330992518,4cyclictest0-21swapper/310:50:003
2166330992517,4cyclictest0-21swapper/312:20:243
2166330992515,7cyclictest2233527-21grep10:20:253
2166330992515,7cyclictest0-21swapper/309:05:213
2166330992515,6cyclictest0-21swapper/307:55:263
2166330992512,9cyclictest0-21swapper/309:00:013
2166325992518,4cyclictest2189222-21latency_hist08:15:012
2166325992517,4cyclictest0-21swapper/210:40:252
2166325992516,5cyclictest0-21swapper/209:50:002
2166325992515,7cyclictest2241513-21grep10:45:182
2166321992518,5cyclictest145-21jbd2/mmcblk1p2-808:35:231
2166321992518,4cyclictest2232281-21munin-plugin-st10:20:011
2166321992518,4cyclictest0-21swapper/107:50:261
2166321992517,4cyclictest0-21swapper/111:50:281
2166330992418,3cyclictest0-21swapper/311:55:273
2166330992418,3cyclictest0-21swapper/308:45:163
2166330992417,4cyclictest0-21swapper/311:50:243
2166330992415,6cyclictest2245873-21kworker/u8:2+events_unbound11:10:203
2166330992415,6cyclictest2189042-21gpgv08:15:003
2166330992414,7cyclictest2220775-21tune2fs09:45:163
2166330992412,8cyclictest2211819-21sh09:20:013
2166325992418,3cyclictest0-21swapper/207:25:232
2166325992416,6cyclictest311ktimers/208:50:232
2166325992416,4cyclictest0-21swapper/212:15:012
2166325992414,6cyclictest0-21swapper/211:30:002
2166321992416,5cyclictest0-21swapper/107:10:151
2166330992317,4cyclictest0-21swapper/308:40:263
2166330992317,3cyclictest0-21swapper/310:00:183
2166330992317,3cyclictest0-21swapper/309:50:253
2166330992317,3cyclictest0-21swapper/309:50:253
2166330992313,7cyclictest2174472-21ntp_states07:30:233
2166330992313,5cyclictest0-21swapper/307:24:343
2166325992314,6cyclictest0-21swapper/209:40:182
2166325992314,5cyclictest0-21swapper/211:35:232
2166325992314,5cyclictest0-21swapper/210:00:212
2166325992314,4cyclictest0-21swapper/212:25:152
2166321992317,3cyclictest0-21swapper/108:20:261
2166321992317,3cyclictest0-21swapper/107:45:241
2166321992315,5cyclictest0-21swapper/108:50:231
216633099222,15cyclictest2231837-21unixbench_multi10:15:253
2166330992216,3cyclictest0-21swapper/310:25:273
2166325992213,6cyclictest0-21swapper/212:30:142
2166321992213,6cyclictest2272346-21basename12:15:001
2166325992115,3cyclictest0-21swapper/210:55:242
2166325992015,3cyclictest2234529-21if_eth010:25:192
2166325992013,5cyclictest53-21kcompactd009:00:132
2166325992013,5cyclictest0-21swapper/208:30:232
2166325992013,4cyclictest2182993-21ntp_states07:55:222
2166321992012,5cyclictest2195006-21cut08:30:161
2166321991911,5cyclictest0-21swapper/109:30:261
2166321991812,3cyclictest0-21swapper/109:25:171
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional