You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-18 - 18:32

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Tue Aug 18, 2026 12:43:39)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2075324530,4sleep120629-21ls07:10:071
20859991144,81cyclictest22043-21ssh10:55:270
1642421140,4sleep316421-21grep09:30:213
208599911389,11cyclictest0-21swapper/009:45:210
208609910947,36cyclictest5444-21ssh09:55:341
20859991096,85cyclictest5462-21chrt09:55:340
208609910424,61cyclictest0-21swapper/109:45:211
208609910036,24cyclictest4338-21ssh09:15:281
208609910036,24cyclictest4338-21ssh09:15:281
2085999983,72cyclictest10500-21grep10:40:370
2085999945,63cyclictest0-21swapper/012:30:350
2085999924,20cyclictest4338-21ssh09:15:270
2085999924,20cyclictest4338-21ssh09:15:270
20860999154,22cyclictest27084-21/usr/sbin/munin11:00:371
2085999913,14cyclictest27007-21ssh11:00:360
20860998735,32cyclictest21703-21/usr/sbin/munin10:55:261
20860998735,21cyclictest7950irq/56-dwc_otg_09:40:201
2085999874,57cyclictest0-21swapper/009:40:180
20860998637,29cyclictest1191-21snmpd08:10:171
2036428324,14sleep00-21swapper/007:07:200
2086299823,54cyclictest5474-21ls09:55:343
20860998253,23cyclictest10620-21grep10:40:381
20860998252,24cyclictest4245-21grep12:30:361
313912750,2sleep2301ktimersoftd/209:48:072
20861997537,19cyclictest301ktimersoftd/209:55:332
20860997545,10cyclictest24764-21apt-get08:50:181
2085999759,30cyclictest0-21swapper/008:15:190
20860997433,13cyclictest27281-21/usr/sbin/munin07:25:331
324522730,6sleep32086299cyclictest09:10:243
20860997339,12cyclictest27612-21ls08:55:351
233152720,2sleep022953-21/usr/sbin/munin08:45:260
2085999722,5cyclictest2753-21apt07:50:070
20860997134,13cyclictest28910-21ntp_states07:30:311
20860997130,22cyclictest18126-21ssh12:09:271
20860997031,20cyclictest6413-21apt-get11:55:181
2086199693,21cyclictest10613-21head10:40:382
20860996943,9cyclictest22967-21apt-get08:45:191
20860996931,18cyclictest23591-21ls12:15:271
20860996834,15cyclictest4322-21ssh10:34:121
2086199678,42cyclictest27115-21ssh11:00:372
20860996732,11cyclictest1545-21ssh11:10:111
20859996713,5cyclictest9450irq/48-DMA08:56:170
108582670,2sleep20-21swapper/212:00:252
2086299662,40cyclictest7950irq/56-dwc_otg_10:40:383
20861996622,10cyclictest4329-21grep12:30:372
20860996631,16cyclictest25409-21ssh10:20:241
20860996626,22cyclictest28154-21sh11:41:171
20860996614,14cyclictest5175-21ssh10:35:191
2085999662,34cyclictest0-21swapper/011:40:180
2085999662,24cyclictest0-21swapper/011:35:200
2085999662,24cyclictest0-21swapper/011:35:200
20860996541,14cyclictest24084-21ssh09:39:491
20860996538,20cyclictest24637-21/usr/sbin/munin07:20:201
20860996532,13cyclictest25364-21ssh11:38:461
20860996532,13cyclictest25364-21ssh11:38:461
20860996531,16cyclictest22617-21ssh12:15:061
20860996529,14cyclictest13112-21sed08:15:341
20860996526,20cyclictest1191-21snmpd12:29:371
20859996536,5cyclictest7950irq/56-dwc_otg_12:15:360
20862996432,5cyclictest14051-21ssh11:25:193
20860996434,21cyclictest30013-21rm12:23:181
20860996433,16cyclictest24763-21ssh10:20:031
20860996425,26cyclictest11676-21ssh10:03:481
20859996422,26cyclictest18271-21aten_rbpower_vo11:30:210
20859996412,27cyclictest0-21swapper/009:10:210
2086199637,39cyclictest4374-21cat09:15:282
2086199637,39cyclictest4374-21cat09:15:282
20861996320,24cyclictest20338-21kworker/2:210:55:262
20860996335,12cyclictest4839-21rm11:52:521
20860996330,16cyclictest2660-21ssh09:52:191
20860996330,13cyclictest32390-21ssh11:07:411
20860996328,18cyclictest31750-21diskmemload10:08:581
20860996327,23cyclictest12294-21ssh12:01:211
20860996325,12cyclictest11059-21latency_hist12:40:071
2085999632,30cyclictest7280-21tr12:35:210
2085999631,7cyclictest2057-21wc11:50:070
2085999631,3cyclictest0-21swapper/010:50:060
20862996219,20cyclictest4348-21ls09:15:273
20862996219,20cyclictest4348-21ls09:15:273
20860996234,12cyclictest15869-21ssh10:47:391
20860996232,13cyclictest1158-21/usr/sbin/munin07:45:351
20860996230,21cyclictest337-21ssh11:47:141
20860996230,11cyclictest18347-21ntp_states10:50:301
20860996227,14cyclictest15573-21latency_hist08:25:071
20860996225,22cyclictest16344-21runrttasks11:27:251
2085999621,34cyclictest8172-21ssh09:20:210
2085999621,15cyclictest24662-21aten_rbpower_en07:20:200
147612620,2sleep00-21swapper/008:20:340
20860996134,9cyclictest30066-21ntp_states10:25:321
20860996128,16cyclictest24048-21taskset07:17:361
20860996128,16cyclictest24048-21taskset07:17:361
20860996127,21cyclictest1679-21ssh09:11:491
20860996126,12cyclictest12425-21ssh09:25:231
2085999618,24cyclictest0-21swapper/008:55:190
2085999613,30cyclictest0-21swapper/010:30:250
2085999612,30cyclictest0-21swapper/008:25:370
2086299603,10cyclictest0-21swapper/311:00:373
20862996014,27cyclictest7950irq/56-dwc_otg_10:55:393
20860996028,13cyclictest8713-21sh11:18:341
20860996027,11cyclictest19194-21ssh09:33:281
20860996026,10cyclictest0-21swapper/109:03:401
2085999605,39cyclictest0-21swapper/007:10:200
2085999601,23cyclictest0-21swapper/010:05:200
2086299597,28cyclictest28884-21cpu09:45:233
20860995930,12cyclictest20295-21ssh10:14:281
20860995928,18cyclictest11675-21ssh11:21:261
20860995926,12cyclictest18918-21chrt08:34:161
20860995925,15cyclictest8524-21wget08:05:211
2085999597,20cyclictest0-21swapper/008:00:210
2085999597,20cyclictest0-21swapper/008:00:210
20859995942,6cyclictest101ktimersoftd/009:55:070
20859995926,15cyclictest101ktimersoftd/009:25:190
2085999591,29cyclictest0-21swapper/012:00:180
2086299587,31cyclictest7950irq/56-dwc_otg_12:30:373
20860995830,17cyclictest18106-21ssh11:30:141
20860995828,15cyclictest20568-21taskset08:37:141
20860995826,24cyclictest10682-21ssh09:22:591
2085999585,33cyclictest13-21rcuc/010:25:270
2085999583,23cyclictest0-21swapper/010:00:210
20859995810,28cyclictest9-21ksoftirqd/011:10:220
2085999572,31cyclictest17860-21grep10:50:240
2086199563,24cyclictest24590-21ssh09:40:182
20860995627,13cyclictest4514-21taskset07:54:451
20860995623,11cyclictest7950irq/56-dwc_otg_08:00:081
2085999551,33cyclictest22128-21unixbench-2d08:40:360
2086299545,5cyclictest0-21swapper/307:25:213
20860995427,15cyclictest16552-21threads08:25:351
2085999548,31cyclictest9-21ksoftirqd/007:30:250
20859995430,5cyclictest7950irq/56-dwc_otg_12:05:240
2085999542,29cyclictest4915-21grep07:55:220
75382530,1sleep30-21swapper/311:55:353
20860995323,12cyclictest0-21swapper/108:02:391
20860995323,12cyclictest0-21swapper/108:02:391
20860995320,21cyclictest7750irq/56-dwc_otg07:41:351
2085999534,27cyclictest8536-21kworker/0:010:17:090
20859995337,5cyclictest101ktimersoftd/011:55:180
2085999533,30cyclictest8536-21kworker/0:010:11:110
20859995331,5cyclictest7850irq/56-dwc_otg_11:05:340
20859995311,4cyclictest9-21ksoftirqd/009:30:350
20860995227,13cyclictest0-21swapper/107:36:101
20860995226,11cyclictest22375-21taskset08:42:171
20860995219,21cyclictest0-21swapper/109:06:451
2085999524,24cyclictest21107-21missed_timers09:35:300
20859995233,4cyclictest31752-21cron09:10:070
2085999521,22cyclictest5288-21aten_rbpower_po10:35:220
20859995210,9cyclictest2312-21rm11:50:200
20860995136,12cyclictest21795-21ls07:10:321
2085999519,9cyclictest0-21swapper/012:10:250
20859995130,4cyclictest28486-21aten_rbpower_vo09:00:210
20862995013,23cyclictest7950irq/56-dwc_otg_09:40:203
2086199501,7cyclictest22992-21ssh12:15:212
2085999502,7cyclictest9574-21munin-run11:20:060
20859995025,5cyclictest0-21swapper/008:35:160
2085999501,40cyclictest0-21swapper/011:28:440
2086299497,28cyclictest0-21swapper/307:20:123
20859994923,10cyclictest0-21swapper/007:40:320
2085999491,12cyclictest0-21swapper/007:25:240
2086199483,26cyclictest0-21swapper/211:55:182
20859994822,5cyclictest25161-21ssh10:20:200
20859994818,14cyclictest24501-21apt-config07:20:080
20859994818,14cyclictest24501-21apt-config07:20:080
2086299477,25cyclictest0-21swapper/307:10:203
20859994717,6cyclictest10215-21kworker/u8:012:20:140
2085999471,26cyclictest0-21swapper/008:30:250
204692473,38sleep30-21swapper/307:08:373
2086299468,25cyclictest0-21swapper/308:05:203
2086199463,15cyclictest0-21swapper/207:40:192
20859994624,11cyclictest0-21swapper/008:10:340
2086299457,24cyclictest0-21swapper/307:55:213
2085999459,5cyclictest0-21swapper/007:50:360
20859994513,22cyclictest0-21swapper/008:50:120
178252450,2sleep20-21swapper/209:30:562
2086199446,23cyclictest22311-21ssh11:35:182
2086199446,23cyclictest22311-21ssh11:35:182
2086199443,23cyclictest11-21rcu_preempt10:45:212
2086199442,21cyclictest0-21swapper/208:15:172
2085999447,21cyclictest0-21swapper/012:25:280
2086299437,23cyclictest0-21swapper/307:40:203
2086299433,5cyclictest7950irq/56-dwc_otg_07:15:183
2086299433,5cyclictest7950irq/56-dwc_otg_07:15:183
2086199437,23cyclictest0-21swapper/208:25:222
20861994322,5cyclictest29786-21idleruntime-cro07:35:062
20861994315,6cyclictest7950irq/56-dwc_otg_10:00:212
20859994317,12cyclictest0-21swapper/011:20:300
2085999431,19cyclictest30021-21/usr/sbin/munin07:35:180
20862994217,5cyclictest2361-21users07:45:363
2086199427,25cyclictest0-21swapper/208:20:212
2086199427,24cyclictest0-21swapper/208:45:122
2086199425,13cyclictest12760-21ssh10:05:202
20861994221,5cyclictest1095-21aten_rbpower_cu10:30:212
2086299412,3cyclictest0-21swapper/309:50:163
2086199415,8cyclictest0-21swapper/210:25:202
2086299404,15cyclictest39-21ksoftirqd/310:50:193
2086199408,14cyclictest352-21ssh09:50:162
2086199403,8cyclictest0-21swapper/208:55:192
2086199393,8cyclictest0-21swapper/209:00:172
20861993921,4cyclictest32203-21sh12:25:312
20861993915,6cyclictest30665-21/usr/sbin/munin11:05:282
121782390,2sleep30-21swapper/311:22:213
2086299383,6cyclictest7850irq/56-dwc_otg_10:20:183
2086299382,25cyclictest2034-21ssh11:10:263
2086199385,19cyclictest7750irq/56-dwc_otg09:25:322
2086199382,21cyclictest7850irq/56-dwc_otg_11:30:072
20861993811,22cyclictest0-21swapper/207:20:192
2086299377,24cyclictest0-21swapper/309:00:203
2086299373,14cyclictest12753-21ssh10:05:193
20862993715,4cyclictest8666-21aten_rbpower_cu10:00:213
2086199377,20cyclictest7850irq/56-dwc_otg_08:35:332
2086199376,23cyclictest0-21swapper/211:20:212
2086199374,24cyclictest32119-21ssh09:10:202
2086199373,10cyclictest26445-21ssh11:40:182
20861993716,5cyclictest22807-21/usr/sbin/munin07:15:212
20861993716,5cyclictest22807-21/usr/sbin/munin07:15:212
2086199371,25cyclictest24840-21ls10:20:072
2086299368,18cyclictest39-21ksoftirqd/311:45:033
2086299365,17cyclictest0-21swapper/309:36:523
2086299365,12cyclictest7950irq/56-dwc_otg_09:05:363
2086299362,22cyclictest0-21swapper/311:40:083
2086299362,22cyclictest0-21swapper/311:40:083
2086199365,11cyclictest0-21swapper/210:20:202
2086199364,8cyclictest7950irq/56-dwc_otg_07:25:352
2086199364,23cyclictest31039-21ls07:35:342
20861993618,6cyclictest31-21ksoftirqd/211:15:342
20862993522,5cyclictest0-21swapper/310:14:133
2086299351,9cyclictest0-21swapper/312:10:193
2086299351,5cyclictest0-21swapper/311:45:223
2086199358,5cyclictest7850irq/56-dwc_otg_11:45:362
20861993519,4cyclictest31-21ksoftirqd/208:10:062
2086199351,5cyclictest7950irq/56-dwc_otg_07:50:172
20861993510,13cyclictest11966-21sort09:25:072
20862993416,14cyclictest0-21swapper/310:45:363
2086299341,22cyclictest606-21apt-get10:30:073
2086299341,20cyclictest22621-21latency_hist08:45:083
20862993411,12cyclictest7950irq/56-dwc_otg_10:15:303
2086199348,5cyclictest7850irq/56-dwc_otg_10:50:242
2086199343,18cyclictest7750irq/56-dwc_otg08:35:002
2086199342,5cyclictest5197-21ssh10:35:212
20861993413,4cyclictest0-21swapper/211:10:322
2086199341,22cyclictest27530-21uniq12:20:242
2086199341,22cyclictest0-21swapper/210:14:512
2086299334,6cyclictest7183-21kworker/3:211:15:273
2086299334,5cyclictest7850irq/56-dwc_otg_12:30:063
2086299334,24cyclictest7950irq/56-dwc_otg_08:20:193
2086299333,15cyclictest7850irq/56-dwc_otg_08:15:073
20862993315,5cyclictest2982-21/usr/sbin/munin07:50:253
20862993315,5cyclictest15845-21df08:25:243
20861993325,5cyclictest10968-21latency_hist12:40:072
163922330,2sleep30-21swapper/312:06:173
2086299328,4cyclictest0-21swapper/309:20:353
2086299324,4cyclictest9084-21latency_hist10:40:073
2086299322,8cyclictest13595-21apt08:20:063
2086299321,26cyclictest27420-21ls08:55:333
20862993210,10cyclictest0-21swapper/312:00:183
2086199324,24cyclictest7950irq/56-dwc_otg_11:50:202
2086199323,6cyclictest7950irq/56-dwc_otg_07:10:242
2086199321,6cyclictest2820-21latency_hist07:50:072
2086199321,5cyclictest7950irq/56-dwc_otg_12:05:242
2086199321,17cyclictest0-21swapper/212:12:402
2086299312,6cyclictest7750irq/56-dwc_otg08:00:303
2086299312,6cyclictest7750irq/56-dwc_otg08:00:303
2086299312,4cyclictest7950irq/56-dwc_otg_08:30:193
2086299312,22cyclictest0-21swapper/308:37:323
2086299311,9cyclictest1678-21grep10:30:283
2086299311,23cyclictest0-21swapper/312:20:323
2086299311,22cyclictest28809-21missed_timers07:30:293
20862993111,5cyclictest7750irq/56-dwc_otg11:05:223
2086199315,20cyclictest7850irq/56-dwc_otg_09:35:222
20861993124,5cyclictest31728-21cron09:10:072
2086199311,4cyclictest18160-21apt-get11:30:202
20861993112,13cyclictest0-21swapper/208:50:282
192572318,13sleep20-21swapper/207:05:242
2086299308,3cyclictest0-21swapper/312:37:203
2086299307,4cyclictest0-21swapper/311:50:263
2086299307,14cyclictest0-21swapper/307:35:203
2086299306,10cyclictest7850irq/56-dwc_otg_12:15:233
2086299301,20cyclictest12499-21cut09:25:253
2086299301,12cyclictest7750irq/56-dwc_otg08:50:203
2086199306,11cyclictest7850irq/56-dwc_otg_08:40:222
2086199303,16cyclictest6916-21fschecks_time08:00:242
2086199303,16cyclictest6916-21fschecks_time08:00:242
20861993024,4cyclictest10300-21aten_rbpower_po08:10:202
2086199302,19cyclictest0-21swapper/207:59:012
2086299294,8cyclictest7950irq/56-dwc_otg_11:31:233
2086299262,15cyclictest23759-21cut08:45:323
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional