You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-30 - 01:36

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Aug 29, 2026 12:43:42)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
696322640,2sleep20-21swapper/207:05:342
1508921330,4sleep3819999cyclictest11:02:043
8196991226,81cyclictest13-21rcuc/009:50:370
81989910420,19cyclictest7750irq/56-dwc_otg12:00:282
819699994,79cyclictest0-21swapper/009:20:180
819699994,79cyclictest0-21swapper/009:20:180
8196998727,44cyclictest30490-21diskstats12:00:290
40052860,3sleep20-21swapper/210:10:132
819799842,55cyclictest20690-21ls09:50:331
8198998341,9cyclictest20663-21kernelversion09:50:332
103372800,2sleep30-21swapper/309:38:013
238042790,2sleep30-21swapper/311:12:553
238042790,2sleep30-21swapper/311:12:553
819899763,38cyclictest0-21swapper/209:45:392
819699755,17cyclictest0-21swapper/012:15:450
8199997321,23cyclictest20871-21ssh09:50:383
819699735,39cyclictest0-21swapper/009:45:390
8199997215,36cyclictest30473-21ssh12:00:273
8197997211,33cyclictest30482-21df_inode12:00:281
8198997140,9cyclictest7750irq/56-dwc_otg09:20:342
8198997140,9cyclictest7750irq/56-dwc_otg09:20:342
8197997015,36cyclictest0-21swapper/109:20:341
8197997015,36cyclictest0-21swapper/109:20:341
819699706,48cyclictest0-21swapper/007:10:260
8196997036,16cyclictest0-21swapper/009:13:090
163582700,2sleep30-21swapper/312:22:033
819699697,50cyclictest22903-21ssh12:30:310
819699682,51cyclictest21094-21latency_hist11:10:130
8198996610,25cyclictest7950irq/56-dwc_otg_11:25:232
87792650,1sleep20-21swapper/212:13:162
8199996419,19cyclictest0-21swapper/309:20:183
8199996419,19cyclictest0-21swapper/309:20:183
819699641,51cyclictest21168-21ssh12:28:170
819699641,51cyclictest21168-21ssh12:28:170
8196996412,41cyclictest20397-21modprobe10:30:120
249312640,2sleep30-21swapper/309:15:433
8196996310,38cyclictest0-21swapper/011:25:230
8197996210,37cyclictest0-21swapper/109:13:101
819699621,15cyclictest23731-21aten_rbpower_po09:15:280
819699619,42cyclictest30272-21grep08:10:300
819699613,15cyclictest0-21swapper/008:00:250
8196996113,4cyclictest4493-21fschecks_count10:10:280
8196996110,38cyclictest17546-21aten_rbpower_cu09:05:270
8196996110,38cyclictest17546-21aten_rbpower_cu09:05:270
819999606,8cyclictest0-21swapper/308:45:253
8196996022,11cyclictest0-21swapper/010:00:250
819999594,13cyclictest16902-21gzip09:45:393
8197995917,23cyclictest16843-21ssh09:45:381
819699594,38cyclictest13-21rcuc/011:20:240
8196995915,26cyclictest10130-21latency_hist08:45:130
819699588,7cyclictest0-21swapper/009:25:240
819699571,40cyclictest13144-21sed09:40:400
819899563,37cyclictest0-21swapper/212:15:442
8196995650,4cyclictest101ktimersoftd/010:55:250
819699561,7cyclictest29813-21apt-get12:00:130
819699560,43cyclictest8012-21kworker/0:211:34:300
819899553,12cyclictest0-21swapper/211:30:262
8198995524,8cyclictest7750irq/56-dwc_otg09:13:102
819799553,38cyclictest0-21swapper/112:15:431
8196995526,6cyclictest3221-21unixbench_singl12:05:410
819699552,5cyclictest0-21swapper/011:03:560
8196995512,23cyclictest0-21swapper/007:20:250
8196995512,23cyclictest0-21swapper/007:20:250
819899541,11cyclictest0-21swapper/209:25:252
819699549,35cyclictest0-21swapper/010:35:450
819699544,23cyclictest7950irq/56-dwc_otg_10:50:250
8196995428,11cyclictest7950irq/56-dwc_otg_08:20:120
8196995426,5cyclictest7950irq/56-dwc_otg_07:50:120
8196995423,23cyclictest7850irq/56-dwc_otg_10:25:120
819699542,29cyclictest21918-21ssh11:50:250
8196995420,14cyclictest7950irq/56-dwc_otg_11:35:420
8199995324,23cyclictest11505-21users12:15:433
819699534,27cyclictest0-21swapper/008:05:420
8196995328,4cyclictest13198-21grep08:50:420
8196995316,18cyclictest16028-21fschecks_time09:00:310
819999523,32cyclictest0-21swapper/309:13:083
819799527,26cyclictest0-21swapper/108:50:171
819699523,41cyclictest19658-21kworker/0:010:32:500
819699522,37cyclictest0-21swapper/011:43:360
8196995223,4cyclictest30458-21ssh12:40:120
819699522,26cyclictest0-21swapper/007:15:520
819699522,25cyclictest0-21swapper/008:55:370
819699521,41cyclictest8142-21ssh12:12:070
819699521,26cyclictest8626-21wc09:35:380
819999513,7cyclictest7950irq/56-dwc_otg_08:05:273
819699512,8cyclictest0-21swapper/008:25:360
819699503,5cyclictest9-21ksoftirqd/010:15:340
819699502,25cyclictest0-21swapper/010:40:260
819699502,25cyclictest0-21swapper/010:40:260
819699501,8cyclictest10510-21cut08:45:310
819699501,3cyclictest0-21swapper/008:30:240
819699501,25cyclictest24732-21grep07:55:300
8199994926,5cyclictest7950irq/56-dwc_otg_10:10:123
819699497,28cyclictest2281-21unixbench_multi08:20:410
819699492,5cyclictest0-21swapper/007:50:410
8196994925,4cyclictest21277-21/usr/sbin/munin11:10:340
8196994925,4cyclictest21277-21/usr/sbin/munin11:10:340
8196994913,25cyclictest0-21swapper/009:30:350
819999484,7cyclictest7950irq/56-dwc_otg_11:24:403
819899487,26cyclictest0-21swapper/208:55:262
8196994830,4cyclictest7750irq/56-dwc_otg11:46:090
8196994816,22cyclictest7950irq/56-dwc_otg_10:05:270
8196994814,8cyclictest0-21swapper/008:40:130
8196994814,8cyclictest0-21swapper/008:40:130
8196994811,22cyclictest0-21swapper/007:30:250
76412482,13sleep00-21swapper/007:06:300
819999473,11cyclictest0-21swapper/311:40:243
819999472,19cyclictest7850irq/56-dwc_otg_11:25:343
8199994717,12cyclictest7950irq/56-dwc_otg_12:25:423
8199994717,12cyclictest7950irq/56-dwc_otg_12:25:423
8196994725,5cyclictest19818-21grep07:40:380
819999467,25cyclictest0-21swapper/307:10:263
8199994612,15cyclictest7950irq/56-dwc_otg_10:40:373
8199994612,15cyclictest7950irq/56-dwc_otg_10:40:373
819899467,25cyclictest0-21swapper/210:40:262
819899467,25cyclictest0-21swapper/210:40:262
819899464,12cyclictest7850irq/56-dwc_otg_11:55:262
819699467,19cyclictest0-21swapper/012:20:390
8196994626,12cyclictest29304-21cat11:20:130
819699461,23cyclictest0-21swapper/010:48:460
819999456,24cyclictest0-21swapper/308:00:273
819999451,29cyclictest7750irq/56-dwc_otg10:35:343
819899453,5cyclictest0-21swapper/207:55:242
819999447,24cyclictest0-21swapper/308:10:183
819999445,7cyclictest7950irq/56-dwc_otg_11:05:243
819899447,25cyclictest0-21swapper/207:35:262
819899446,12cyclictest7850irq/56-dwc_otg_08:00:242
819799441,19cyclictest16436-21ls10:25:131
819699442,32cyclictest0-21swapper/007:35:390
819999437,23cyclictest0-21swapper/308:50:273
8199994313,8cyclictest4782-21apt-get08:30:243
8199994310,15cyclictest7950irq/56-dwc_otg_09:42:233
819899437,24cyclictest0-21swapper/208:30:262
819799437,24cyclictest0-21swapper/107:25:271
819799436,10cyclictest7850irq/56-dwc_otg_10:00:251
819799435,35cyclictest7950irq/56-dwc_otg_07:55:241
8196994324,4cyclictest7950irq/56-dwc_otg_09:55:190
819999422,6cyclictest6042-21ssh12:10:243
8199994220,15cyclictest7850irq/56-dwc_otg_10:24:373
819899421,12cyclictest0-21swapper/209:30:232
8199994119,6cyclictest15450-21/usr/sbin/munin07:30:403
819899415,3cyclictest7950irq/56-dwc_otg_10:10:242
8198994114,6cyclictest24354-21aten_rbpower_vo09:55:282
819799416,23cyclictest0-21swapper/108:20:261
226562410,1sleep30-21swapper/311:50:353
819999408,12cyclictest0-21swapper/311:48:563
819999403,4cyclictest0-21swapper/310:45:403
819899402,18cyclictest0-21swapper/210:00:242
819799409,21cyclictest7750irq/56-dwc_otg09:58:521
8197994024,9cyclictest16344-21ssh11:04:221
8197994017,4cyclictest2479-21unixbench_multi11:25:411
299232400,5sleep2819899cyclictest11:20:302
141792400,1sleep10-21swapper/109:42:301
8199993924,8cyclictest7950irq/56-dwc_otg_11:34:443
8199993920,8cyclictest7850irq/56-dwc_otg_09:30:493
8199993917,8cyclictest7850irq/56-dwc_otg_11:37:373
819899397,23cyclictest0-21swapper/207:50:262
819899391,26cyclictest18081-21ssh11:45:302
819799397,22cyclictest0-21swapper/111:50:261
8197993910,4cyclictest0-21swapper/112:20:301
819999389,15cyclictest7950irq/56-dwc_otg_10:27:063
819999386,6cyclictest7850irq/56-dwc_otg_07:55:123
819999384,11cyclictest11496-21ssh10:58:003
8199993820,8cyclictest7850irq/56-dwc_otg_10:04:543
8199993813,8cyclictest7950irq/56-dwc_otg_12:09:063
8199993813,6cyclictest7850irq/56-dwc_otg_07:15:523
819899381,5cyclictest7850irq/56-dwc_otg_09:00:282
819899381,28cyclictest12266-21ls09:40:302
819799383,11cyclictest7950irq/56-dwc_otg_11:55:241
8197993817,10cyclictest9288-21fschecks_time10:55:311
819699382,23cyclictest0-21swapper/007:25:170
819999377,7cyclictest4817-21ls10:10:323
819999376,17cyclictest24687-21/usr/sbin/munin07:55:293
8199993714,12cyclictest15464-21cron09:00:123
8199993712,5cyclictest381ktimersoftd/310:18:353
819999371,10cyclictest7950irq/56-dwc_otg_07:50:123
8198993714,6cyclictest301ktimersoftd/210:17:272
819799379,17cyclictest10860-21grep08:45:351
819799377,17cyclictest7750irq/56-dwc_otg12:11:311
819799376,6cyclictest0-21swapper/109:35:241
819799376,21cyclictest7750irq/56-dwc_otg09:15:191
819799373,22cyclictest0-21swapper/107:20:261
819799373,22cyclictest0-21swapper/107:20:261
819799371,32cyclictest26776-21ls08:00:331
819799371,24cyclictest14251-21ls08:55:311
8197993712,4cyclictest0-21swapper/110:40:301
8197993712,4cyclictest0-21swapper/110:40:301
819799371,16cyclictest7989-21kworker/u8:110:45:251
70422370,3sleep33599migration/307:05:353
308372370,5sleep1819799cyclictest11:20:421
819999369,11cyclictest27264-21ssh09:58:523
819999369,10cyclictest7950irq/56-dwc_otg_09:00:363
819999361,8cyclictest27245-21tail11:55:413
8199993612,5cyclictest20784-21aten_rbpower_cu10:30:263
819899368,12cyclictest7950irq/56-dwc_otg_08:10:132
819899367,25cyclictest0-21swapper/208:20:262
819899365,16cyclictest0-21swapper/212:35:122
8198993617,5cyclictest19322-21fschecks_count07:40:302
819899361,23cyclictest30505-21ls12:40:122
8198993611,15cyclictest14283-21/usr/sbin/munin12:20:282
819799366,20cyclictest7750irq/56-dwc_otg10:50:391
819799364,5cyclictest971-21latency_hist08:20:131
8197993616,4cyclictest2716-21sh12:05:361
8197993616,4cyclictest1180-21runrttasks10:10:141
819799361,24cyclictest21147-21ls10:30:301
8197993612,18cyclictest0-21swapper/107:30:251
819999357,9cyclictest18635-21/usr/sbin/munin09:05:423
819999357,9cyclictest18635-21/usr/sbin/munin09:05:423
819999353,11cyclictest25747-21ssh12:34:093
8199993517,8cyclictest7950irq/56-dwc_otg_10:52:433
819999351,6cyclictest8454-21grep08:40:283
8199993516,8cyclictest7750irq/56-dwc_otg12:40:123
819899356,5cyclictest7950irq/56-dwc_otg_08:25:282
819899351,28cyclictest19119-21ls09:10:132
819899351,28cyclictest19119-21ls09:10:132
819899351,23cyclictest9724-21ls11:35:282
819799355,5cyclictest7950irq/56-dwc_otg_12:25:291
819799355,5cyclictest7950irq/56-dwc_otg_12:25:291
8197993523,4cyclictest7750irq/56-dwc_otg11:31:281
8197993515,4cyclictest16052-21/usr/sbin/munin09:00:311
8197993514,4cyclictest28641-21ssh12:36:531
8197993510,6cyclictest7750irq/56-dwc_otg11:40:131
103352350,2sleep10-21swapper/110:16:561
8199993414,8cyclictest7850irq/56-dwc_otg_09:25:333
819999341,3cyclictest7950irq/56-dwc_otg_08:15:233
8199993413,6cyclictest381ktimersoftd/307:20:423
8199993413,6cyclictest381ktimersoftd/307:20:423
819899349,13cyclictest7950irq/56-dwc_otg_10:20:332
819899348,6cyclictest7950irq/56-dwc_otg_11:45:132
819899348,5cyclictest7950irq/56-dwc_otg_10:35:132
819899347,6cyclictest7750irq/56-dwc_otg09:35:312
8198993426,5cyclictest301ktimersoftd/210:45:252
819899342,18cyclictest0-21swapper/211:05:232
8198993416,4cyclictest16706-21aten_rbpower_en10:25:272
819799348,23cyclictest0-21swapper/107:40:271
819799345,20cyclictest23157-21latency07:50:321
819799344,17cyclictest23-21ksoftirqd/110:10:121
819799343,8cyclictest0-21swapper/111:40:411
8197993415,5cyclictest19082-21diskmemload09:30:331
8197993412,12cyclictest23841-21head12:30:421
819999336,15cyclictest0-21swapper/308:25:283
819999332,19cyclictest2759-21latency_hist08:25:133
819899339,8cyclictest26187-21unixbench_singl10:35:442
819899337,14cyclictest0-21swapper/212:07:152
819899335,13cyclictest7950irq/56-dwc_otg_11:10:422
819899335,13cyclictest7950irq/56-dwc_otg_11:10:422
819899332,14cyclictest7950irq/56-dwc_otg_07:25:132
819899332,14cyclictest7950irq/56-dwc_otg_07:25:132
8198993314,6cyclictest12910-21latency_hist11:00:132
8198993313,10cyclictest19082-21diskmemload11:02:442
819899331,24cyclictest21364-21ls07:45:322
819799339,14cyclictest0-21swapper/111:12:591
819799339,14cyclictest0-21swapper/111:12:591
819799339,13cyclictest17580-21basename09:05:271
819799339,13cyclictest17580-21basename09:05:271
819799336,19cyclictest7850irq/56-dwc_otg_07:10:281
819799332,7cyclictest0-21swapper/107:15:511
819799332,20cyclictest0-21swapper/108:25:251
819799331,6cyclictest3194950ssh09:25:241
8197993312,9cyclictest18330-21ssh11:05:411
819799331,23cyclictest0-21swapper/111:15:401
8197993310,4cyclictest0-21swapper/110:25:261
819999324,6cyclictest7950irq/56-dwc_otg_07:35:303
819999324,20cyclictest6910-21cut08:35:313
819999324,20cyclictest6910-21cut08:35:313
819899327,20cyclictest0-21swapper/207:25:272
819899327,15cyclictest0-21swapper/211:50:262
819899324,14cyclictest22297-21latency_hist12:30:132
819899324,14cyclictest22297-21latency_hist12:30:132
819899321,16cyclictest0-21swapper/208:15:352
819799325,4cyclictest7950irq/56-dwc_otg_08:10:331
819799325,18cyclictest7750irq/56-dwc_otg10:35:271
819799325,14cyclictest7950irq/56-dwc_otg_07:50:121
819799324,20cyclictest28421-21fschecks_time08:05:311
819799322,8cyclictest21768-21latency_hist11:50:131
8197993215,5cyclictest5791-21timerwakeupswit08:30:401
8199993111,8cyclictest7950irq/56-dwc_otg_11:15:213
819799313,5cyclictest7636-21grep08:35:421
819799313,5cyclictest7636-21grep08:35:421
819999304,15cyclictest13729-21aten_rbpower_po07:25:273
819899307,14cyclictest0-21swapper/207:15:242
819899307,12cyclictest0-21swapper/211:19:242
819899307,12cyclictest0-21swapper/209:16:562
819899306,4cyclictest7750irq/56-dwc_otg08:35:262
819899306,4cyclictest7750irq/56-dwc_otg08:35:262
819899305,6cyclictest8822-21grep07:10:342
819899301,5cyclictest7750irq/56-dwc_otg10:55:122
819799307,12cyclictest23-21ksoftirqd/108:43:591
65992308,12sleep10-21swapper/107:05:301
819899299,4cyclictest0-21swapper/208:40:282
819899295,5cyclictest15747-21fschecks_time07:30:292
819899295,4cyclictest31546-21modprobe08:15:122
819899292,8cyclictest11077-21switchtime08:45:392
8198992910,4cyclictest0-21swapper/208:50:322
8199992816,8cyclictest20179-21unixbench_multi07:40:413
819799283,16cyclictest18412-21grep07:35:411
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional