You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-27 - 04:30

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Wed May 27, 2026 00:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
193372760,2sleep121-21rcuc/123:48:121
5956997310,14cyclictest0-21swapper/000:00:160
5956997310,14cyclictest0-21swapper/000:00:160
5956997131,23cyclictest0-21swapper/020:55:160
97872700,2sleep10-21swapper/122:57:191
595699681,30cyclictest0-21swapper/023:30:140
595699661,33cyclictest0-21swapper/019:15:150
263642660,2sleep30-21swapper/320:05:233
5956996415,27cyclictest4221-21processes22:50:310
595699633,25cyclictest0-21swapper/023:45:140
595699606,28cyclictest9553-21latency_hist21:40:050
595699601,37cyclictest0-21swapper/000:20:270
595699601,32cyclictest15560-21wc23:05:050
313182600,1sleep20-21swapper/200:02:232
313182600,1sleep20-21swapper/200:02:232
5956995935,5cyclictest8050irq/56-dwc_otg_23:50:180
5956995918,38cyclictest101ktimersoftd/022:30:160
595699585,37cyclictest0-21swapper/021:45:290
5956995815,24cyclictest24890-21aten_rbpower_cu23:55:180
5956995811,29cyclictest8205-21fschecks_count20:45:210
5956995811,29cyclictest8205-21fschecks_count20:45:210
157662580,2sleep015762-21ssh23:05:150
157662580,2sleep015762-21ssh23:05:150
595699574,28cyclictest29816-21fschecks_count20:15:210
5956995724,13cyclictest7950irq/56-dwc_otg_20:20:340
595699572,31cyclictest18680-21aten_rbpower_en19:45:160
595699572,26cyclictest22367-21aten_rbpower_cu19:55:160
595699571,33cyclictest25368-21latency_hist21:20:050
595699571,33cyclictest25368-21latency_hist21:20:050
139312570,2sleep30-21swapper/322:23:553
5956995631,7cyclictest7850irq/56-dwc_otg22:00:190
595699562,35cyclictest3621-21unixbench_singl22:10:320
5956995623,21cyclictest0-21swapper/019:40:170
595699561,25cyclictest26940-21ls20:05:320
595699561,21cyclictest116550snmpd21:40:210
175092560,3sleep2301ktimersoftd/221:49:402
595999553,6cyclictest0-21swapper/320:40:163
595699554,42cyclictest32467-21kworker/0:200:18:000
5956995523,16cyclictest7950irq/56-dwc_otg_21:30:340
595699551,9cyclictest13669-21grep21:00:220
5956995514,24cyclictest5146-21fschecks_count00:10:220
5956995511,18cyclictest23878-21missed_timers22:35:250
595699546,5cyclictest0-21swapper/020:40:040
5956995429,6cyclictest7950irq/56-dwc_otg_22:05:270
595699542,48cyclictest0-21swapper/019:35:150
595699542,48cyclictest0-21swapper/019:35:150
595699542,29cyclictest29775-21ssh21:25:180
595699541,32cyclictest0-21swapper/019:50:160
595699541,25cyclictest0-21swapper/000:25:240
595699541,25cyclictest0-21swapper/000:25:240
5956995412,21cyclictest27751-21fschecks_time22:40:210
319702540,3sleep0595699cyclictest23:24:560
595899538,16cyclictest0-21swapper/221:35:162
595899535,17cyclictest8050irq/56-dwc_otg_22:50:192
595699534,30cyclictest0-21swapper/023:00:040
5956995318,20cyclictest21421-21/usr/sbin/munin00:30:250
5956995316,20cyclictest0-21swapper/019:20:150
595699531,28cyclictest0-21swapper/000:35:290
66132520,2sleep20-21swapper/223:32:432
595899525,18cyclictest7950irq/56-dwc_otg_21:20:102
5956995231,13cyclictest16777-21idleruntime-cro21:10:040
595699522,30cyclictest13209-21awk19:30:140
595699521,26cyclictest6069-21aten_rbpower_po19:10:180
595699517,25cyclictest0-21swapper/022:20:260
5956995134,6cyclictest7746-21unixbench_singl22:15:320
595899502,7cyclictest7850irq/56-dwc_otg22:20:182
5958995021,11cyclictest8050irq/56-dwc_otg_23:05:302
5958995021,11cyclictest8050irq/56-dwc_otg_23:05:302
595799506,9cyclictest19966-21ssh23:10:191
595699505,20cyclictest18099-21ssh21:50:180
5956995025,6cyclictest7950irq/56-dwc_otg_20:05:030
5956995025,6cyclictest7950irq/56-dwc_otg_20:05:030
595699501,30cyclictest810-21/usr/sbin/munin00:05:210
5956995010,21cyclictest0-21swapper/021:20:250
595699492,35cyclictest0-21swapper/020:50:330
595699492,25cyclictest0-21swapper/023:40:310
595699491,32cyclictest0-21swapper/022:25:160
595699491,32cyclictest0-21swapper/022:25:160
595899483,10cyclictest0-21swapper/219:25:172
5957994825,5cyclictest14479-21latency21:45:241
595699484,30cyclictest0-21swapper/021:12:340
5956994826,5cyclictest8245-21chrt23:35:150
595699481,26cyclictest0-21swapper/022:45:290
5956994718,4cyclictest0-21swapper/023:15:150
53512473,35sleep00-21swapper/019:05:490
5958994622,8cyclictest8050irq/56-dwc_otg_21:11:462
5958994616,4cyclictest7950irq/56-dwc_otg_20:05:212
5956994631,3cyclictest7950irq/56-dwc_otg_23:30:050
595699462,38cyclictest12877-21kworker/0:119:29:030
5956994616,16cyclictest2570-21wget20:30:190
595999457,24cyclictest0-21swapper/320:00:183
595999457,24cyclictest0-21swapper/320:00:183
595999453,5cyclictest8050irq/56-dwc_otg_23:00:143
595899454,19cyclictest0-21swapper/221:55:162
5958994530,4cyclictest7850irq/56-dwc_otg22:46:082
5958994525,4cyclictest7950irq/56-dwc_otg_23:11:052
5958994514,14cyclictest8050irq/56-dwc_otg_20:25:292
595699451,16cyclictest21927-21rm23:11:470
595899445,9cyclictest7850irq/56-dwc_otg20:50:172
5958994411,11cyclictest8050irq/56-dwc_otg_00:12:452
595799447,23cyclictest0-21swapper/120:55:181
5956994418,16cyclictest1133-21runrttasks20:42:280
595699441,30cyclictest0-21swapper/020:11:550
595699441,12cyclictest0-21swapper/021:58:200
5959994320,4cyclictest21400-21/usr/sbin/munin21:15:183
5959994320,4cyclictest21400-21/usr/sbin/munin21:15:183
595899437,23cyclictest0-21swapper/200:20:182
595899434,5cyclictest0-21swapper/223:20:172
595899432,6cyclictest0-21swapper/221:30:182
5958994321,8cyclictest7850irq/56-dwc_otg22:00:382
5958994321,8cyclictest7850irq/56-dwc_otg00:34:402
5958994310,16cyclictest7950irq/56-dwc_otg_23:53:122
595799438,23cyclictest0-21swapper/122:05:161
595799436,9cyclictest8050irq/56-dwc_otg_22:15:151
5957994320,21cyclictest0-21swapper/123:15:171
5957994311,22cyclictest0-21swapper/121:00:181
595899426,24cyclictest0-21swapper/223:15:172
595899422,7cyclictest0-21swapper/222:10:152
5958994214,12cyclictest7950irq/56-dwc_otg_22:06:412
5958994213,9cyclictest8050irq/56-dwc_otg_00:15:322
595799424,5cyclictest1460-21ssh21:30:161
5957994216,7cyclictest221ktimersoftd/100:15:301
5958994123,4cyclictest7950irq/56-dwc_otg_21:17:332
5958994123,4cyclictest7950irq/56-dwc_otg_21:17:332
5958994017,9cyclictest7950irq/56-dwc_otg_19:40:202
595899401,29cyclictest14067-21ls19:30:292
595799407,23cyclictest0-21swapper/123:55:171
5957994022,8cyclictest221ktimersoftd/121:55:181
595799402,19cyclictest0-21swapper/119:45:301
595999396,6cyclictest7950irq/56-dwc_otg_19:10:263
5959993916,4cyclictest15832-21aten_rbpower_cu23:05:183
5959993916,4cyclictest15832-21aten_rbpower_cu23:05:183
595899396,14cyclictest8224-21if_wlan019:15:222
595899395,18cyclictest26213-21ssh23:55:392
5958993918,4cyclictest7850irq/56-dwc_otg22:40:312
5958993913,5cyclictest301ktimersoftd/223:47:142
5958993911,12cyclictest10498-21sed19:20:302
595799397,22cyclictest0-21swapper/121:40:171
595799394,22cyclictest0-21swapper/119:55:091
595799392,25cyclictest0-21swapper/123:00:141
595799391,25cyclictest1165-21snmpd20:41:051
5957993912,11cyclictest23-21ksoftirqd/123:50:221
275592390,2sleep30-21swapper/300:36:463
595999388,21cyclictest8050irq/56-dwc_otg_00:10:043
595999383,5cyclictest8050irq/56-dwc_otg_00:15:223
595899387,21cyclictest0-21swapper/221:00:182
595899384,17cyclictest8050irq/56-dwc_otg_23:25:212
5958993819,8cyclictest8050irq/56-dwc_otg_23:44:282
5958993817,8cyclictest8050irq/56-dwc_otg_21:52:062
595799387,21cyclictest0-21swapper/122:50:101
595799386,23cyclictest0-21swapper/122:20:101
595799384,5cyclictest23-21ksoftirqd/120:25:261
595799383,21cyclictest0-21swapper/100:15:051
595799381,26cyclictest5766-21ssh21:35:201
595699381,23cyclictest0-21swapper/020:27:450
279992381,34sleep328005-21ssh23:58:543
595999371,22cyclictest10403-21ssh21:40:243
5958993713,10cyclictest7850irq/56-dwc_otg22:17:432
595899371,18cyclictest0-21swapper/222:37:542
595799379,14cyclictest7850irq/56-dwc_otg23:39:071
595799376,4cyclictest8050irq/56-dwc_otg_23:32:401
595799373,6cyclictest0-21swapper/122:45:171
595799373,22cyclictest0-21swapper/100:24:401
5957993721,6cyclictest8050irq/56-dwc_otg_22:40:051
595799371,18cyclictest0-21swapper/119:20:251
5957993710,4cyclictest0-21swapper/100:25:191
5957993710,4cyclictest0-21swapper/100:25:191
152152370,2sleep10-21swapper/121:05:191
595999362,21cyclictest7950irq/56-dwc_otg_23:20:213
5959993618,5cyclictest8050irq/56-dwc_otg_23:25:173
595899368,14cyclictest2980-21ssh00:07:192
595899367,12cyclictest7850irq/56-dwc_otg21:43:322
595899362,18cyclictest20741-21ssh00:29:252
595899362,18cyclictest20741-21ssh00:29:252
5958993617,5cyclictest8050irq/56-dwc_otg_22:55:192
595799369,12cyclictest21-21rcuc/122:40:231
595799367,12cyclictest0-21swapper/100:35:041
595799365,16cyclictest8050irq/56-dwc_otg_00:05:351
5957993624,4cyclictest8050irq/56-dwc_otg_23:05:211
5957993624,4cyclictest8050irq/56-dwc_otg_23:05:211
5957993618,5cyclictest262450wget20:30:191
595799361,20cyclictest0-21swapper/119:35:281
595799361,20cyclictest0-21swapper/119:35:281
595799361,13cyclictest221ktimersoftd/119:15:201
595999358,15cyclictest16759-21diskmemload00:12:443
595999358,13cyclictest0-21swapper/321:20:283
595999355,17cyclictest8050irq/56-dwc_otg_21:25:293
595999354,5cyclictest7850irq/56-dwc_otg21:00:333
595999351,3cyclictest0-21swapper/322:00:183
595899358,12cyclictest8050irq/56-dwc_otg_22:29:192
595899358,12cyclictest8050irq/56-dwc_otg_22:29:192
595899357,6cyclictest0-21swapper/219:45:152
595899357,23cyclictest0-21swapper/220:15:172
595899354,15cyclictest8050irq/56-dwc_otg_23:36:082
5958993519,4cyclictest19416-21fschecks_time22:30:212
5958993510,11cyclictest301ktimersoftd/200:37:482
595799357,11cyclictest221ktimersoftd/120:05:191
595799355,8cyclictest21-21rcuc/121:20:221
595799354,6cyclictest8050irq/56-dwc_otg_21:10:301
595799354,22cyclictest21-21rcuc/123:24:581
5957993516,8cyclictest221ktimersoftd/119:40:231
58482350,2sleep30-21swapper/321:35:203
171772351,2sleep30-21swapper/323:45:263
595999345,20cyclictest20720-21ssh23:50:183
595999343,16cyclictest8050irq/56-dwc_otg_23:15:213
5959993416,9cyclictest1165-21snmpd20:10:593
595999341,23cyclictest4742-21sh23:30:243
595899347,19cyclictest0-21swapper/220:10:172
595899345,20cyclictest11650-21ssh23:00:172
5958993419,7cyclictest8050irq/56-dwc_otg_21:26:092
595899341,16cyclictest8050irq/56-dwc_otg_20:40:152
595799349,4cyclictest15257-21ssh22:25:221
595799349,4cyclictest15257-21ssh22:25:221
595799344,6cyclictest21-21rcuc/122:00:351
595799344,15cyclictest7850irq/56-dwc_otg21:25:331
595799343,19cyclictest0-21swapper/122:34:281
595799343,12cyclictest8050irq/56-dwc_otg_23:25:151
595799341,26cyclictest0-21swapper/100:01:051
595799341,26cyclictest0-21swapper/100:01:051
5957993411,7cyclictest21-21rcuc/121:17:281
5957993411,7cyclictest21-21rcuc/121:17:281
595999336,15cyclictest0-21swapper/320:25:183
595999335,5cyclictest7850irq/56-dwc_otg20:15:323
595999333,15cyclictest7950irq/56-dwc_otg_23:40:053
5959993315,4cyclictest1133-21runrttasks20:38:283
5959993310,5cyclictest0-21swapper/321:30:183
595899337,22cyclictest0-21swapper/219:55:102
595799332,5cyclictest22173-21ls19:55:051
5957993314,4cyclictest24427-21fschecks_time20:00:221
5957993314,4cyclictest24427-21fschecks_time20:00:221
595799331,15cyclictest0-21swapper/100:35:261
5957993310,14cyclictest23-21ksoftirqd/122:15:051
595999326,11cyclictest8050irq/56-dwc_otg_20:55:223
595999323,8cyclictest8050irq/56-dwc_otg_00:21:443
595999322,19cyclictest0-21swapper/322:10:073
595999321,5cyclictest17781-21ssh00:25:213
595999321,5cyclictest17781-21ssh00:25:213
595999321,4cyclictest18162-21wc21:10:323
5959993210,15cyclictest0-21swapper/321:56:513
595899324,15cyclictest8050irq/56-dwc_otg_19:15:042
595799326,6cyclictest8050irq/56-dwc_otg_19:10:321
595799321,24cyclictest16346-21ssh23:45:051
157212320,7sleep2595899cyclictest19:35:272
157212320,7sleep2595899cyclictest19:35:272
595999316,5cyclictest30270-21sed00:00:353
595999316,5cyclictest30270-21sed00:00:353
595999316,4cyclictest7850irq/56-dwc_otg21:55:053
595999315,5cyclictest8050irq/56-dwc_otg_22:35:323
595999315,5cyclictest8050irq/56-dwc_otg_19:20:213
595999312,7cyclictest15692-21ssh22:25:283
595999312,7cyclictest15692-21ssh22:25:283
5959993124,4cyclictest18939-21fschecks_time19:45:193
5959993122,6cyclictest39-21ksoftirqd/319:30:173
595999312,20cyclictest0-21swapper/300:34:313
595999311,8cyclictest8257-21/usr/sbin/munin19:15:233
595999311,17cyclictest0-21swapper/320:32:063
5959993110,8cyclictest0-21swapper/321:45:193
595899315,13cyclictest8050irq/56-dwc_otg_21:05:192
5958993121,7cyclictest5936-21latency_hist20:40:052
5958993116,5cyclictest8050irq/56-dwc_otg_20:22:332
5958993113,8cyclictest8050irq/56-dwc_otg_20:48:372
5958993113,8cyclictest8050irq/56-dwc_otg_20:48:372
595799317,8cyclictest221ktimersoftd/121:52:061
595799317,6cyclictest291212chrt20:12:501
595799312,11cyclictest0-21swapper/120:45:211
595799312,11cyclictest0-21swapper/120:45:211
595799311,27cyclictest13408-21ls19:30:181
595799311,15cyclictest0-21swapper/120:17:061
49552313,15sleep35051-21ls19:05:323
595999308,4cyclictest0-21swapper/322:16:363
595999308,12cyclictest8050irq/56-dwc_otg_22:42:143
595999306,7cyclictest7950irq/56-dwc_otg_23:40:233
595999304,6cyclictest7850irq/56-dwc_otg19:25:213
595999304,12cyclictest8050irq/56-dwc_otg_22:55:313
595999303,16cyclictest8050irq/56-dwc_otg_22:54:033
595999301,5cyclictest7850irq/56-dwc_otg22:30:283
5959993013,9cyclictest627-21kworker/3:222:46:483
595999301,25cyclictest20776-21ls19:50:233
595899306,7cyclictest8050irq/56-dwc_otg_19:50:332
595899301,18cyclictest3549-21timerwakeupswit20:30:332
595799308,5cyclictest7850irq/56-dwc_otg20:54:161
595999294,14cyclictest8050irq/56-dwc_otg_20:45:323
595999294,14cyclictest8050irq/56-dwc_otg_20:45:323
5959992924,3cyclictest199532sleep323:10:193
5959992923,4cyclictest16182-21ls21:05:323
595999292,20cyclictest0-21swapper/319:35:433
595999292,20cyclictest0-21swapper/319:35:433
595999291,9cyclictest0-21swapper/320:20:473
595999291,8cyclictest31821-21users22:05:323
595999291,19cyclictest0-21swapper/319:44:493
5959992821,4cyclictest23885-21cron20:00:043
595899285,13cyclictest8050irq/56-dwc_otg_20:05:042
595899285,13cyclictest8050irq/56-dwc_otg_20:05:042
595799287,5cyclictest8050irq/56-dwc_otg_19:25:261
595799282,8cyclictest479-21munin-run20:25:041
5957992812,5cyclictest7850irq/56-dwc_otg20:35:241
595999274,15cyclictest0-21swapper/320:51:393
595899271,4cyclictest11795-21diskstats20:55:212
53472274,15sleep10-21swapper/119:05:461
48742275,10sleep20-21swapper/219:05:312
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional