You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-20 - 17:42

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot3s.osadl.org (updated Wed May 20, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2483321060,2sleep00-21swapper/009:55:130
2843121020,4sleep228430-21perl09:20:172
2843121020,4sleep228430-21perl09:20:172
11382960,2sleep10-21swapper/110:44:291
87532930,2sleep10-21swapper/111:31:231
87532930,2sleep10-21swapper/111:31:231
845299932,48cyclictest0-21swapper/012:25:270
845299921,35cyclictest2136-21fschecks_time10:45:180
245302920,2sleep20-21swapper/212:30:142
64332880,2sleep30-21swapper/311:29:443
845299793,51cyclictest21746-21sshd10:30:110
845299791,60cyclictest13-21rcuc/008:40:290
94892760,6sleep3846799cyclictest07:10:293
135192760,3sleep3381ktimersoftd/312:15:503
845299742,56cyclictest12082-21grep12:15:140
845299722,52cyclictest0-21swapper/008:40:000
110372720,2sleep00-21swapper/007:15:250
845299712,54cyclictest3626-21modprobe09:30:000
845299711,56cyclictest16572-21unixbench_multi11:40:290
845299702,54cyclictest30178-21runrttasks08:10:120
845899694,16cyclictest25903-21ssh10:35:122
845899694,16cyclictest25903-21ssh10:35:122
845299695,43cyclictest19181-21latency_hist07:40:010
845299688,49cyclictest23858-21kworker/u8:011:05:000
845299673,52cyclictest0-21swapper/011:10:140
82712670,2sleep20-21swapper/210:52:192
285812670,5sleep1845699cyclictest09:59:571
845899656,24cyclictest0-21swapper/207:10:062
845299652,52cyclictest0-21swapper/007:15:010
845299652,51cyclictest0-21swapper/009:15:250
845299651,52cyclictest11456-21grep08:45:280
845299643,46cyclictest29281-21unixbench_multi09:20:270
845299643,46cyclictest29281-21unixbench_multi09:20:270
845299641,47cyclictest3508-21fschecks_time08:25:190
845299641,47cyclictest3508-21fschecks_time08:25:190
845899635,9cyclictest0-21swapper/211:45:102
845299631,51cyclictest2368-21apt-get11:25:010
845299631,47cyclictest19188-21diskmemload10:35:260
845299631,47cyclictest19188-21diskmemload10:35:260
845299622,40cyclictest0-21swapper/010:15:170
845299621,37cyclictest0-21swapper/010:55:120
8458996115,15cyclictest8050irq/56-dwc_otg_11:15:132
8452996117,32cyclictest7789-21dpkg09:35:000
845899603,8cyclictest0-21swapper/212:35:142
8456996013,11cyclictest0-21swapper/108:50:121
845299608,40cyclictest16829-21wc12:20:210
8452996028,19cyclictest30070-21timerwakeupswit10:00:270
845299602,47cyclictest0-21swapper/007:55:190
845299601,50cyclictest21398-21fschecks_count07:45:180
845299594,43cyclictest0-21swapper/008:30:120
845899581,13cyclictest7850irq/56-dwc_otg07:30:122
845299581,45cyclictest7025-21sh11:30:140
845299581,45cyclictest7025-21sh11:30:140
845899576,12cyclictest7950irq/56-dwc_otg_08:50:122
845299572,48cyclictest0-21swapper/009:47:530
845299572,46cyclictest0-21swapper/008:20:280
845299572,25cyclictest6332-21kworker/u8:212:00:080
845299571,4cyclictest28638-21rm11:55:260
845299571,43cyclictest11948-21grep11:35:230
845299571,43cyclictest11948-21grep11:35:230
845299571,41cyclictest30656-21apt11:20:010
8456995622,11cyclictest23-21ksoftirqd/112:35:141
845299562,42cyclictest0-21swapper/012:37:560
8452995622,4cyclictest0-21swapper/009:50:110
845299561,45cyclictest0-21swapper/007:25:230
845299561,41cyclictest12777-21missed_timers08:50:220
845299558,32cyclictest28964-21missed_timers08:05:220
845299551,33cyclictest0-21swapper/007:20:110
268942550,1sleep10-21swapper/111:54:021
845299547,37cyclictest0-21swapper/010:40:230
845299542,39cyclictest0-21swapper/009:35:030
845899531,8cyclictest0-21swapper/209:40:122
845899531,8cyclictest0-21swapper/209:40:122
8456995311,25cyclictest23-21ksoftirqd/110:20:131
845899526,22cyclictest0-21swapper/210:25:072
845299524,38cyclictest2925-21aten_rbpower_vo11:25:150
845299522,21cyclictest9-21ksoftirqd/010:20:300
846799516,8cyclictest7950irq/56-dwc_otg_09:50:113
8452995126,5cyclictest8050irq/56-dwc_otg_09:10:010
845299512,25cyclictest0-21swapper/010:10:110
845299502,38cyclictest0-21swapper/011:46:110
845299502,36cyclictest0-21swapper/011:50:100
8452995022,6cyclictest3863-21wget12:05:150
845299501,38cyclictest0-21swapper/008:55:160
8467994926,20cyclictest8050irq/56-dwc_otg_12:25:123
845899493,8cyclictest26570-21sshd08:00:112
845699498,21cyclictest7850irq/56-dwc_otg10:10:121
8452994928,5cyclictest7950irq/56-dwc_otg_10:05:240
845299491,26cyclictest25720-21grep12:30:280
846799489,23cyclictest0-21swapper/312:05:113
846799487,26cyclictest23838-21ssh09:15:073
845699487,24cyclictest0-21swapper/108:30:141
845699482,18cyclictest7850irq/56-dwc_otg10:25:121
845299481,35cyclictest141-21systemd-journal07:40:020
845299481,35cyclictest141-21systemd-journal07:40:020
845699477,24cyclictest0-21swapper/109:05:141
845299476,15cyclictest16084-21chrt07:30:180
8452994726,3cyclictest0-21swapper/011:05:200
845299472,37cyclictest0-21swapper/012:13:300
845299472,37cyclictest0-21swapper/012:13:300
845299472,22cyclictest0-21swapper/008:00:110
845299471,37cyclictest0-21swapper/010:26:060
80042473,12sleep00-21swapper/007:08:290
845899467,25cyclictest0-21swapper/207:55:152
845899464,9cyclictest0-21swapper/210:20:132
8452994616,6cyclictest20688-21timerwakeupswit09:10:270
8452994611,5cyclictest13768-21taskset09:40:400
8452994611,5cyclictest13768-21taskset09:40:400
845699456,25cyclictest0-21swapper/107:10:071
845699451,9cyclictest7850irq/56-dwc_otg08:40:141
845299451,5cyclictest6306-21fschecks_time10:50:180
203532450,5sleep220345-21ssh12:25:152
846799447,23cyclictest13269-21ssh10:20:063
845899447,23cyclictest0-21swapper/208:35:122
845899447,23cyclictest0-21swapper/208:15:142
8456994412,19cyclictest21-21rcuc/109:10:121
846799437,24cyclictest0-21swapper/309:55:143
845899438,16cyclictest29-21rcuc/212:05:212
845899437,22cyclictest0-21swapper/208:10:142
845699437,23cyclictest0-21swapper/107:50:141
845699433,27cyclictest0-21swapper/108:35:051
845299431,31cyclictest0-21swapper/009:00:110
846799421,3cyclictest8050irq/56-dwc_otg_09:00:143
845899425,18cyclictest7950irq/56-dwc_otg_11:25:272
845699425,5cyclictest7850irq/56-dwc_otg11:45:191
8456994226,12cyclictest0-21swapper/107:25:121
845699422,24cyclictest0-21swapper/109:30:291
8456994216,7cyclictest7850irq/56-dwc_otg12:25:011
8452994213,8cyclictest0-21swapper/007:50:190
8456994112,15cyclictest0-21swapper/109:40:121
8456994112,15cyclictest0-21swapper/109:40:121
846799406,20cyclictest23641-21ssh11:50:133
8467994016,13cyclictest37-21rcuc/307:35:273
845899407,23cyclictest0-21swapper/208:55:152
845899406,22cyclictest23858-21kworker/u8:009:35:072
845899405,23cyclictest0-21swapper/210:00:132
845899405,13cyclictest29-21rcuc/209:50:272
8456994018,5cyclictest17416-21latency_hist09:05:011
845699401,5cyclictest0-21swapper/107:20:141
8467993914,7cyclictest16614-21grep11:40:293
845899393,22cyclictest0-21swapper/207:50:142
845699397,24cyclictest0-21swapper/110:00:131
845699397,23cyclictest0-21swapper/111:00:161
845699396,19cyclictest7850irq/56-dwc_otg11:35:071
845699396,19cyclictest7850irq/56-dwc_otg11:35:071
845699395,3cyclictest8050irq/56-dwc_otg_11:25:211
845699395,24cyclictest32046-21ssh12:00:141
8456993914,21cyclictest0-21swapper/112:05:141
845299391,27cyclictest0-21swapper/008:15:050
317632390,2sleep30-21swapper/309:24:493
317632390,2sleep30-21swapper/309:24:493
846799387,24cyclictest0-21swapper/308:00:133
846799381,25cyclictest31920-21ls08:15:023
845899389,4cyclictest8050irq/56-dwc_otg_12:10:132
845899389,4cyclictest8050irq/56-dwc_otg_12:10:132
845899385,20cyclictest9012-21ssh10:15:072
845899383,6cyclictest31-21ksoftirqd/209:56:332
845899383,18cyclictest8050irq/56-dwc_otg_08:50:012
8458993818,8cyclictest8050irq/56-dwc_otg_10:57:082
845899381,26cyclictest14276-21cut07:25:182
8458993811,5cyclictest6090-21unixbench_singl10:10:282
845699386,22cyclictest6332-21kworker/u8:209:15:081
8456993820,5cyclictest23-21ksoftirqd/109:25:281
8456993814,7cyclictest1133-21runrttasks08:10:121
324122380,1sleep20-21swapper/211:20:422
846799375,4cyclictest0-21swapper/310:43:463
846799374,12cyclictest7950irq/56-dwc_otg_09:50:013
846799372,18cyclictest20119-21ssh11:45:203
8467993718,5cyclictest17825-21sh10:25:153
845899374,6cyclictest29-21rcuc/209:45:172
8458993717,9cyclictest21982-21sh11:09:212
8458993714,5cyclictest8050irq/56-dwc_otg_12:00:132
845699374,9cyclictest0-21swapper/110:35:111
845699374,9cyclictest0-21swapper/110:35:111
8456993716,13cyclictest221ktimersoftd/109:37:491
194632370,1sleep20-21swapper/212:24:062
846799365,27cyclictest31009-21ssh11:20:143
846799362,15cyclictest19514-21ssh09:10:113
8467993620,4cyclictest0-21swapper/310:45:223
846799361,23cyclictest19555-21ls07:40:153
846799361,23cyclictest19555-21ls07:40:153
846799361,23cyclictest10567-21cpuspeed08:45:153
845899368,5cyclictest31-21ksoftirqd/210:45:302
845899367,17cyclictest31-21ksoftirqd/209:16:552
845899363,5cyclictest7850irq/56-dwc_otg09:30:192
845899363,4cyclictest0-21swapper/210:40:252
845699368,4cyclictest7950irq/56-dwc_otg_07:35:021
845699368,14cyclictest8050irq/56-dwc_otg_10:55:261
845699363,8cyclictest0-21swapper/110:30:121
845699361,25cyclictest0-21swapper/110:45:141
8456993610,5cyclictest0-21swapper/112:29:131
8456993610,15cyclictest0-21swapper/109:50:141
183002360,1sleep20-21swapper/209:05:232
8467993515,5cyclictest28782-21if_eth008:05:193
846799351,22cyclictest26355-21ls08:00:013
845899359,7cyclictest16911-21unixbench_multi09:00:312
845899358,13cyclictest7950irq/56-dwc_otg_11:40:152
845899356,10cyclictest7850irq/56-dwc_otg09:25:212
845899355,13cyclictest29-21rcuc/210:08:012
8458993522,7cyclictest11022-21latency_hist11:35:022
8458993520,4cyclictest11986-21/usr/sbin/munin12:15:162
8458993513,5cyclictest24015-21/usr/sbin/munin11:50:172
845899351,20cyclictest30037-21ls08:10:012
845699353,15cyclictest1038-21fschecks_time10:05:171
8456993518,5cyclictest221ktimersoftd/112:15:111
8456993515,5cyclictest0-21swapper/111:24:291
8456993515,4cyclictest14024-21cut08:55:151
182292350,3sleep10-21swapper/107:35:221
846799346,7cyclictest8050irq/56-dwc_otg_12:05:013
846799345,12cyclictest7950irq/56-dwc_otg_11:10:013
8467993415,5cyclictest319-21idleruntime-cro10:05:013
845899349,6cyclictest0-21swapper/211:55:292
845899347,17cyclictest8050irq/56-dwc_otg_09:10:172
845899344,8cyclictest301ktimersoftd/210:30:342
845899341,5cyclictest11127-21apt-get11:35:072
845899341,5cyclictest11127-21apt-get11:35:072
8456993416,4cyclictest19129-21sh09:47:511
845699341,4cyclictest0-21swapper/110:51:391
8456993413,4cyclictest13041-21latency_hist10:20:011
8456993412,5cyclictest27375-21latency11:15:201
846799339,5cyclictest0-21swapper/311:15:013
846799337,4cyclictest8050irq/56-dwc_otg_08:40:013
8467993321,10cyclictest8050irq/56-dwc_otg_10:34:153
846799331,19cyclictest7850irq/56-dwc_otg11:20:023
846799331,13cyclictest0-21swapper/310:09:233
845899337,5cyclictest7850irq/56-dwc_otg07:15:202
845899332,2cyclictest0-21swapper/207:35:122
8458993313,10cyclictest19188-21diskmemload11:33:102
845899331,15cyclictest8050irq/56-dwc_otg_08:33:432
845699339,5cyclictest0-21swapper/111:05:261
845699337,14cyclictest0-21swapper/108:05:141
845699334,4cyclictest0-21swapper/108:20:271
8456993319,5cyclictest27909-21ssh12:34:231
845699331,23cyclictest25713-21ls07:55:281
8456993312,15cyclictest0-21swapper/112:10:381
8456993312,15cyclictest0-21swapper/112:10:381
8467993219,4cyclictest10243-21sh12:12:233
8467993219,4cyclictest10243-21sh12:12:233
846799321,6cyclictest21415-21fschecks_count07:45:183
846799321,14cyclictest0-21swapper/311:00:213
845899327,19cyclictest0-21swapper/208:20:132
845899325,6cyclictest31-21ksoftirqd/207:24:312
8458993211,10cyclictest301ktimersoftd/211:14:032
845699327,19cyclictest23-21ksoftirqd/107:45:141
845699323,4cyclictest0-21swapper/107:15:151
845699322,6cyclictest0-21swapper/111:45:011
8456993225,5cyclictest23-21ksoftirqd/108:15:121
312962320,4sleep337-21rcuc/312:38:003
846799313,5cyclictest8050irq/56-dwc_otg_11:30:183
846799313,5cyclictest8050irq/56-dwc_otg_11:30:183
846799312,9cyclictest0-21swapper/307:54:033
846799312,8cyclictest39-21ksoftirqd/307:20:263
846799311,5cyclictest7789-21apt-get09:35:003
8467993115,4cyclictest3666-21latency_hist09:30:013
8467993113,9cyclictest18424-21/usr/sbin/munin09:05:263
846799311,21cyclictest0-21swapper/307:26:153
846799311,10cyclictest28413-21ssh11:55:223
845899317,22cyclictest0-21swapper/208:25:152
845899317,22cyclictest0-21swapper/208:25:152
845899313,5cyclictest17024-21ssh11:02:532
845899311,19cyclictest0-21swapper/207:45:242
846799309,4cyclictest0-21swapper/309:43:393
846799309,4cyclictest0-21swapper/309:43:393
846799309,3cyclictest0-21swapper/310:50:153
846799309,10cyclictest0-21swapper/312:33:423
846799308,13cyclictest11929-21latency_hist07:20:013
846799302,19cyclictest0-21swapper/310:35:133
846799302,19cyclictest0-21swapper/310:35:133
846799302,15cyclictest0-21swapper/308:19:553
8467993019,7cyclictest5248-21fschecks_time08:30:183
846799301,6cyclictest9427-21fschecks_time10:15:183
846799301,6cyclictest2425-21unixbench-2d08:20:283
846799301,20cyclictest19188-21diskmemload11:35:543
846799301,20cyclictest19188-21diskmemload11:35:543
8467993011,6cyclictest7192-21sh10:12:243
845899304,6cyclictest7950irq/56-dwc_otg_08:40:182
845899303,14cyclictest7950irq/56-dwc_otg_07:40:202
845899303,14cyclictest7950irq/56-dwc_otg_07:40:202
845699306,5cyclictest22665-21/usr/sbin/munin11:10:271
845699306,15cyclictest0-21swapper/109:20:131
845699306,15cyclictest0-21swapper/109:20:131
845699302,6cyclictest27890-21aten_rbpower_po11:55:151
845699302,14cyclictest0-21swapper/108:25:531
845699302,14cyclictest0-21swapper/108:25:531
846799299,11cyclictest3519-21ls08:25:203
846799299,11cyclictest3519-21ls08:25:203
846799297,11cyclictest7950irq/56-dwc_otg_09:35:263
846799293,8cyclictest8050irq/56-dwc_otg_10:59:513
846799292,4cyclictest0-21swapper/312:20:153
846799291,3cyclictest12209-21apt-get08:50:133
846799291,13cyclictest8050irq/56-dwc_otg_08:40:233
845699294,11cyclictest8050irq/56-dwc_otg_08:00:181
846799281,8cyclictest0-21swapper/307:31:253
846799281,18cyclictest0-21swapper/308:56:563
845699285,8cyclictest0-21swapper/108:49:151
8456992813,8cyclictest1133-21runrttasks07:41:051
8456992813,8cyclictest1133-21runrttasks07:41:051
73782285,15sleep10-21swapper/107:05:261
78612273,15sleep30-21swapper/307:06:383
77762263,14sleep20-21swapper/207:05:312
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional