You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-07 - 15:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack7slot3s.osadl.org (updated Wed Jan 07, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
114421480,5sleep30-21swapper/307:05:423
86962910,2sleep10-21swapper/111:55:361
178599903,68cyclictest0-21swapper/007:10:170
280102870,4sleep339-21ksoftirqd/311:20:323
150132850,2sleep00-21swapper/009:15:310
178599822,44cyclictest0-21swapper/009:35:260
272842780,6sleep0178599cyclictest08:20:290
1786997858,16cyclictest1784-21cyclictest07:10:171
1785997717,35cyclictest20348-21latency_hist11:00:150
183532760,3sleep218356-21latency_hist09:25:152
178599756,59cyclictest0-21swapper/012:30:270
178599751,59cyclictest0-21swapper/007:45:260
1786997141,17cyclictest15623-21ls10:45:361
178599707,56cyclictest0-21swapper/009:30:280
178599703,54cyclictest0-21swapper/011:50:260
1786996922,18cyclictest1507-21/usr/sbin/munin11:35:351
1786996922,18cyclictest1507-21/usr/sbin/munin11:35:351
1786996734,15cyclictest24113-21apt-get11:10:271
1786996730,26cyclictest21190-21chrt08:01:541
1786996727,25cyclictest9151-21aten_rbpower_po07:30:301
178599673,49cyclictest0-21swapper/009:20:310
178599671,48cyclictest18280-21unixbench_singl12:20:430
178599671,48cyclictest18280-21unixbench_singl12:20:430
1786996633,20cyclictest10158-21grep12:00:321
320542650,1sleep10-21swapper/111:30:371
178699658,28cyclictest0-21swapper/108:20:291
1786996532,21cyclictest4925-21unixbench-2d08:45:411
1786996522,17cyclictest27370-21awk09:50:141
178599655,36cyclictest9-21ksoftirqd/010:50:430
178599651,49cyclictest0-21swapper/008:15:430
1786996429,13cyclictest22761-21/usr/sbin/munin12:35:301
178599641,47cyclictest0-21swapper/012:15:150
1786996335,9cyclictest18459-21apt-get09:25:271
1786996332,12cyclictest6655-21ls08:50:411
1786996325,14cyclictest6063-21cut10:20:291
1786996324,24cyclictest20732-21/usr/sbin/munin12:30:311
178599632,48cyclictest0-21swapper/008:45:410
178599622,45cyclictest11300-21aten_rbpower_vo09:05:290
1786996127,11cyclictest12143-21/usr/sbin/munin12:05:341
1786996126,13cyclictest14813-21cron10:45:151
1786996123,22cyclictest6876-21chrt07:23:381
178599617,21cyclictest0-21swapper/007:50:290
178599611,48cyclictest27572-21latency_hist11:20:150
1786996027,13cyclictest10194-21grep10:30:361
178599602,42cyclictest3776-21tail11:40:400
1785996020,24cyclictest0-21swapper/007:25:420
178699593,9cyclictest0-21swapper/109:50:271
1786995923,13cyclictest30832-21taskset09:58:371
1786995920,21cyclictest9068-21modprobe09:00:151
178599592,39cyclictest9-21ksoftirqd/007:20:360
178599592,39cyclictest0-21swapper/008:30:290
178599591,45cyclictest5931-21fschecks_count08:50:310
1786995819,22cyclictest7850irq/56-dwc_otg_11:43:401
178599586,39cyclictest9-21ksoftirqd/012:05:290
178599581,44cyclictest9268-21latency_hist09:00:160
324922570,28sleep032496-21aten_rbpower_po07:05:270
1786995728,11cyclictest8630-21/usr/sbin/munin10:25:401
1786995726,10cyclictest4305-21/usr/sbin/munin07:15:371
1786995722,15cyclictest2043-21seq08:40:211
178599576,39cyclictest13-21rcuc/010:31:450
178599572,45cyclictest12766-21aten_rbpower_po07:40:300
178599572,45cyclictest12766-21aten_rbpower_po07:40:300
178599571,44cyclictest21975-21fschecks_count08:05:300
178599571,43cyclictest0-21swapper/009:00:400
1786995633,7cyclictest13654-21ls09:10:371
1786995629,8cyclictest16657-21apt-get09:20:261
1786995626,20cyclictest18453-21taskset12:22:191
1786995626,20cyclictest18453-21taskset12:22:191
1786995625,21cyclictest23210-21taskset08:09:301
1786995624,15cyclictest14934-21taskset12:13:421
1785995624,22cyclictest1784-21cyclictest07:55:280
178599561,44cyclictest0-21swapper/011:55:370
1785995614,22cyclictest8990-21unixbench_singl10:25:440
178599561,41cyclictest0-21swapper/008:10:370
1785995610,5cyclictest0-21swapper/011:10:140
1786995529,11cyclictest32462-21chrt10:01:251
1786995524,10cyclictest0-21swapper/110:54:001
1786995516,15cyclictest0-21swapper/111:24:351
178599552,33cyclictest0-21swapper/012:25:370
178599551,46cyclictest10928-21tr07:35:300
178599551,37cyclictest0-21swapper/008:40:280
178799543,8cyclictest0-21swapper/212:25:282
1786995421,14cyclictest5704-21taskset11:46:201
1786995419,14cyclictest12483-21latency_hist07:40:151
178599544,34cyclictest20023-21cut08:00:300
178599544,33cyclictest9-21ksoftirqd/007:15:290
178599541,40cyclictest0-21swapper/009:45:230
178599541,35cyclictest16091-21timerwakeupswit10:45:420
13122543,44sleep20-21swapper/207:07:412
1786995324,11cyclictest3707-21chrt10:12:161
1786995324,11cyclictest3707-21chrt10:12:161
1786995318,11cyclictest0-21swapper/109:20:051
1786995317,15cyclictest17556-21taskset07:51:411
1786995317,12cyclictest1124-21snmpd09:04:001
178599532,43cyclictest0-21swapper/011:45:260
1786995222,13cyclictest16595-21run-parts12:16:491
1786995222,11cyclictest23882-21grep09:40:151
1786995222,10cyclictest0-21swapper/110:40:071
1786995219,10cyclictest0-21swapper/112:27:221
1785995228,13cyclictest101ktimersoftd/011:35:150
178599522,39cyclictest0-21swapper/007:30:160
178599521,41cyclictest0-21swapper/011:25:140
178599521,39cyclictest0-21swapper/010:43:500
178599521,32cyclictest0-21swapper/010:00:210
178899517,25cyclictest0-21swapper/309:05:283
1787995121,7cyclictest11482-21latency_hist12:05:152
1786995126,11cyclictest21562-21chrt09:30:461
1786995122,11cyclictest1877-21taskset10:06:581
1786995121,18cyclictest15922-21runrttasks07:48:511
1785995131,6cyclictest7850irq/56-dwc_otg_12:40:140
178599512,40cyclictest0-21swapper/010:11:280
178599512,40cyclictest0-21swapper/010:11:280
178599512,39cyclictest0-21swapper/009:29:540
178599512,37cyclictest1125-21runrttasks12:02:440
178599512,36cyclictest0-21swapper/008:40:150
178599511,40cyclictest686-21tr10:05:320
1785995111,27cyclictest0-21swapper/010:35:280
178799501,11cyclictest7850irq/56-dwc_otg_08:35:412
1786995024,10cyclictest5567-21taskset10:17:441
1786995021,19cyclictest31067-21seq11:29:471
1786995017,11cyclictest0-21swapper/111:18:421
178599501,42cyclictest7152-21tail10:20:430
178599501,41cyclictest0-21swapper/011:35:300
178599501,41cyclictest0-21swapper/011:35:300
178599501,37cyclictest0-21swapper/009:55:330
178599501,36cyclictest0-21swapper/009:43:100
178599501,36cyclictest0-21swapper/008:25:260
1786994929,12cyclictest25480-21taskset09:44:271
1786994920,12cyclictest19580-21taskset07:59:211
1786994919,9cyclictest0-21swapper/108:37:271
1786994917,14cyclictest22616-21perl11:05:321
178599492,36cyclictest0-21swapper/011:28:190
1786994818,8cyclictest0-21swapper/111:51:521
1786994818,11cyclictest1125-21runrttasks07:28:201
1786994817,13cyclictest0-21swapper/108:27:241
1786994817,12cyclictest32445-21latency_hist08:35:151
178599482,34cyclictest28678-21unixbench-2d09:50:420
178599481,35cyclictest15343-21wget12:15:280
178599481,34cyclictest0-21swapper/009:10:200
1785994811,20cyclictest13-21rcuc/011:10:150
178899478,25cyclictest0-21swapper/307:50:293
178899477,26cyclictest0-21swapper/309:55:293
178799473,19cyclictest7950irq/56-dwc_otg_07:10:172
1788994624,5cyclictest39-21ksoftirqd/310:20:423
178799461,32cyclictest7950irq/56-dwc_otg_09:25:312
1786994620,15cyclictest1124-21snmpd07:43:451
1786994620,15cyclictest1124-21snmpd07:43:451
1786994617,12cyclictest19928-21runrttasks10:56:261
178599462,35cyclictest0-21swapper/011:00:480
178599462,35cyclictest0-21swapper/011:00:480
178599461,30cyclictest0-21swapper/010:15:350
178899457,26cyclictest0-21swapper/308:45:273
178899457,24cyclictest0-21swapper/310:35:283
178899457,24cyclictest0-21swapper/310:30:293
178899457,24cyclictest0-21swapper/309:40:283
178799457,24cyclictest0-21swapper/210:10:282
178799457,24cyclictest0-21swapper/210:10:282
178799457,24cyclictest0-21swapper/208:30:272
178799455,8cyclictest7750irq/56-dwc_otg08:05:252
1786994528,12cyclictest21050-21/usr/sbin/munin11:00:351
1786994528,12cyclictest21050-21/usr/sbin/munin11:00:351
1786994526,15cyclictest11896-21ntp_states09:05:381
178899447,22cyclictest0-21swapper/309:00:203
178899442,8cyclictest7850irq/56-dwc_otg_08:20:273
178799445,25cyclictest0-21swapper/207:35:292
1786994416,18cyclictest0-21swapper/108:16:571
178799437,24cyclictest0-21swapper/211:15:272
178799437,24cyclictest0-21swapper/208:10:282
1786994318,15cyclictest25009-21seq08:14:211
178899427,25cyclictest0-21swapper/312:00:283
178899417,24cyclictest0-21swapper/311:10:293
178799417,24cyclictest0-21swapper/208:40:292
178799417,22cyclictest0-21swapper/212:05:282
1787994121,5cyclictest1123250wget09:05:292
178799407,24cyclictest0-21swapper/208:20:202
206382390,2sleep30-21swapper/308:00:393
178899397,21cyclictest0-21swapper/310:50:283
178899391,25cyclictest13669-21ls12:10:283
178799397,22cyclictest0-21swapper/211:10:292
178799396,15cyclictest7850irq/56-dwc_otg_07:25:332
178799394,8cyclictest0-21swapper/207:20:252
178799391,4cyclictest7950irq/56-dwc_otg_10:10:152
203712381,33sleep220367-21apt-get09:30:282
178899389,4cyclictest37-21rcuc/310:15:153
178899389,4cyclictest37-21rcuc/310:15:153
1788993815,5cyclictest15162-21aten_rbpower_vo10:45:303
1788993815,4cyclictest14524-21basename07:45:263
178899381,24cyclictest27508-21latency_hist11:20:153
1787993825,4cyclictest31-21ksoftirqd/212:35:292
178799382,16cyclictest7850irq/56-dwc_otg_12:35:152
178799381,5cyclictest0-21swapper/211:25:262
178899371,22cyclictest24313-21ls12:40:153
178799377,25cyclictest0-21swapper/209:45:262
178899365,12cyclictest7850irq/56-dwc_otg_10:45:153
178799361,24cyclictest0-21swapper/210:00:322
178799361,20cyclictest24267-21cut09:40:322
178899358,12cyclictest39-21ksoftirqd/307:20:403
178899357,15cyclictest0-21swapper/307:15:293
178899351,22cyclictest4660-21cpuspeed11:45:303
178799357,8cyclictest7950irq/56-dwc_otg_07:55:432
178799357,21cyclictest0-21swapper/212:15:282
178799357,15cyclictest0-21swapper/209:00:282
178799351,24cyclictest15427-21ls10:45:332
178799351,23cyclictest4107-21cut08:45:302
178899347,15cyclictest0-21swapper/310:05:313
178899346,15cyclictest0-21swapper/311:25:293
1788993424,7cyclictest13263-21munin-plugin-st12:10:153
178799348,6cyclictest7850irq/56-dwc_otg_09:10:442
178799348,14cyclictest0-21swapper/212:10:342
178799347,14cyclictest0-21swapper/208:50:282
178799344,13cyclictest7950irq/56-dwc_otg_11:05:432
178799341,6cyclictest26501-21sed08:15:442
178899337,3cyclictest7750irq/56-dwc_otg10:00:283
178899337,14cyclictest0-21swapper/309:20:283
178899337,14cyclictest0-21swapper/308:15:303
178899337,13cyclictest0-21swapper/309:10:293
178899333,19cyclictest37-21rcuc/309:25:443
178799338,5cyclictest7750irq/56-dwc_otg07:33:432
178799336,14cyclictest0-21swapper/211:45:292
178799334,6cyclictest7750irq/56-dwc_otg08:55:332
178799332,5cyclictest7850irq/56-dwc_otg_10:00:152
178899327,14cyclictest0-21swapper/307:25:283
178899326,14cyclictest0-21swapper/312:30:273
178899326,14cyclictest0-21swapper/307:55:283
178899325,17cyclictest39-21ksoftirqd/308:50:413
178899324,6cyclictest7850irq/56-dwc_otg_08:45:143
178899321,3cyclictest7850irq/56-dwc_otg_08:05:263
1788993210,8cyclictest39-21ksoftirqd/311:35:163
178799327,13cyclictest0-21swapper/207:45:262
178799325,5cyclictest7850irq/56-dwc_otg_10:30:442
178799322,16cyclictest7950irq/56-dwc_otg_09:40:152
178799321,6cyclictest2913-21fschecks_count11:40:292
178899319,5cyclictest7950irq/56-dwc_otg_08:30:403
178899316,16cyclictest0-21swapper/309:30:213
178899315,17cyclictest7950irq/56-dwc_otg_08:55:273
178899313,14cyclictest24197-21ntpq08:10:373
1788993115,5cyclictest20264-21idleruntime-cro11:00:153
1788993115,11cyclictest0-21swapper/310:25:293
178799315,6cyclictest19754-21grep10:55:442
178799314,7cyclictest7950irq/56-dwc_otg_10:25:142
178799313,7cyclictest1399-21grep11:35:342
178799313,7cyclictest1399-21grep11:35:342
178799313,4cyclictest7950irq/56-dwc_otg_10:20:142
178799313,16cyclictest7850irq/56-dwc_otg_10:35:412
178799311,28cyclictest20836-21ls11:00:322
178799311,28cyclictest20836-21ls11:00:322
178799311,25cyclictest20919-21timerwakeupswit08:00:422
178899309,5cyclictest7850irq/56-dwc_otg_09:45:283
178899307,8cyclictest7950irq/56-dwc_otg_07:35:153
178899303,12cyclictest0-21swapper/307:10:173
178899302,6cyclictest7950irq/56-dwc_otg_11:55:293
178899302,6cyclictest7950irq/56-dwc_otg_09:55:153
178899302,6cyclictest7950irq/56-dwc_otg_07:40:373
178899302,6cyclictest7950irq/56-dwc_otg_07:40:373
1788993023,5cyclictest15300-21/usr/sbin/munin12:15:303
178899301,4cyclictest7950irq/56-dwc_otg_07:35:313
178899301,15cyclictest23740-21latency_hist09:40:153
178799307,5cyclictest17332-21resolvconf10:50:342
178799305,11cyclictest7950irq/56-dwc_otg_07:20:152
178799304,5cyclictest7850irq/56-dwc_otg_10:25:332
178799304,13cyclictest7950irq/56-dwc_otg_09:15:342
178799301,4cyclictest7950irq/56-dwc_otg_10:40:422
1787993012,5cyclictest16832-21cat07:50:362
6492295,15sleep1682-21/usr/sbin/munin07:05:371
178899291,4cyclictest7950irq/56-dwc_otg_09:20:053
178899291,18cyclictest1015-21cpuspeed11:35:273
178899291,18cyclictest1015-21cpuspeed11:35:273
178799297,6cyclictest7850irq/56-dwc_otg_11:55:282
178799296,4cyclictest7950irq/56-dwc_otg_12:25:152
178799296,4cyclictest7950irq/56-dwc_otg_12:25:152
178799293,5cyclictest7850irq/56-dwc_otg_11:30:372
178799291,15cyclictest7950irq/56-dwc_otg_11:20:412
178899288,4cyclictest7950irq/56-dwc_otg_08:25:293
178899287,8cyclictest37-21rcuc/312:24:343
178899287,8cyclictest37-21rcuc/312:24:343
178899283,3cyclictest7850irq/56-dwc_otg_10:15:273
1788992821,5cyclictest39-21ksoftirqd/311:50:313
178899281,5cyclictest7750irq/56-dwc_otg12:25:433
1788992815,4cyclictest3495-21swap11:40:383
178799283,5cyclictest7850irq/56-dwc_otg_11:50:302
1787992811,10cyclictest30721-21latency_hist08:30:152
178899279,4cyclictest21258-21processes11:00:393
178899279,4cyclictest21258-21processes11:00:393
178899275,8cyclictest22330-21wget11:05:293
178899271,4cyclictest7950irq/56-dwc_otg_08:35:433
178799271,13cyclictest7950irq/56-dwc_otg_07:41:432
178799271,13cyclictest7950irq/56-dwc_otg_07:41:432
178799261,4cyclictest7850irq/56-dwc_otg_09:50:342
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional