You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-13 - 08:06

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Jun 13, 2026 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
30167999947,28cyclictest0-21swapper/023:45:140
65052960,4sleep36504-21ntp_states23:00:243
226692900,2sleep20-21swapper/222:03:512
93542890,4sleep33017099cyclictest23:41:263
3016799883,70cyclictest0-21swapper/019:10:040
3016799876,53cyclictest0-21swapper/000:35:130
30170998634,11cyclictest7950irq/56-dwc_otg_21:40:123
30167998628,11cyclictest0-21swapper/023:10:110
3016899838,26cyclictest0-21swapper/120:10:071
10932800,2sleep00-21swapper/021:38:200
10932800,2sleep00-21swapper/021:38:200
16202760,1sleep20-21swapper/221:39:152
16202760,1sleep20-21swapper/221:39:152
140282760,2sleep10-21swapper/100:25:241
310912750,2sleep00-21swapper/022:50:430
274752730,11sleep00-21swapper/022:46:520
30167997123,5cyclictest0-21swapper/019:55:130
3016999707,19cyclictest0-21swapper/223:45:142
3016799709,8cyclictest0-21swapper/019:50:130
243572700,3sleep33017099cyclictest23:20:573
185102700,9sleep3381ktimersoftd/321:59:003
185082700,6sleep33017099cyclictest23:52:333
185082700,6sleep33017099cyclictest23:52:333
30167996951,7cyclictest101ktimersoftd/023:35:020
30167996920,18cyclictest8050irq/56-dwc_otg_00:00:180
30167996819,4cyclictest0-21swapper/021:30:140
217672680,5sleep03016799cyclictest22:02:160
30167996619,27cyclictest20658-21fschecks_time23:55:190
30167996549,5cyclictest101ktimersoftd/022:15:240
3016799652,36cyclictest8835-21diskmemload23:20:120
30167996518,4cyclictest0-21swapper/000:20:120
292582654,9sleep00-21swapper/019:05:270
3016999639,8cyclictest0-21swapper/223:10:112
3016899636,42cyclictest7850irq/56-dwc_otg21:50:141
30167996312,7cyclictest0-21swapper/019:40:130
276102630,2sleep00-21swapper/023:25:210
30167996239,14cyclictest101ktimersoftd/023:35:080
30167996217,9cyclictest0-21swapper/019:35:130
30167996217,9cyclictest0-21swapper/019:35:130
3016899617,39cyclictest0-21swapper/119:10:041
3016799616,51cyclictest101ktimersoftd/023:15:110
3016799614,31cyclictest16032-21rm23:50:140
3016799614,31cyclictest16032-21rm23:50:140
3016799612,40cyclictest32698-21modprobe00:10:010
3016799611,49cyclictest0-21swapper/022:05:170
3016799609,39cyclictest0-21swapper/000:30:290
30167996040,13cyclictest101ktimersoftd/021:30:020
205982600,2sleep10-21swapper/122:00:271
30167995941,11cyclictest101ktimersoftd/021:15:230
30167995939,13cyclictest101ktimersoftd/020:41:280
3016799591,41cyclictest101ktimersoftd/019:20:140
30167995831,5cyclictest4720-21unixbench-2d20:55:290
30167995826,7cyclictest1838-21fschecks_time22:55:190
30167995820,9cyclictest15533-21fschecks_time21:55:200
296222583,12sleep20-21swapper/219:06:342
3017099576,35cyclictest0-21swapper/319:10:033
3017099575,20cyclictest9034-21ssh00:20:073
3017099571,4cyclictest0-21swapper/322:15:133
3016799574,34cyclictest0-21swapper/021:00:290
3016799573,8cyclictest7936-21grep21:45:280
3016799571,6cyclictest21608-21ssh21:25:010
30170995619,24cyclictest0-21swapper/320:30:143
3016899564,15cyclictest7850irq/56-dwc_otg20:45:131
30167995639,9cyclictest7374-21ssh22:23:580
30167995633,5cyclictest101ktimersoftd/019:45:150
30167995625,16cyclictest0-21swapper/019:30:140
3016799561,9cyclictest24910-21apt20:25:010
3016999554,13cyclictest0-21swapper/219:10:032
3016899551,7cyclictest0-21swapper/121:45:131
3016799555,22cyclictest13-21rcuc/020:35:010
30167995525,7cyclictest125-21systemd-journal23:10:020
30167995525,7cyclictest125-21systemd-journal23:10:020
30167995523,7cyclictest7950irq/56-dwc_otg_00:25:150
30167995520,9cyclictest0-21swapper/020:35:110
30167995517,25cyclictest32276-21tune2fs19:15:170
30167995517,23cyclictest17839-21aten_rbpower_vo20:05:160
30170995428,6cyclictest8050irq/56-dwc_otg_23:05:153
30170995428,6cyclictest8050irq/56-dwc_otg_23:05:153
30169995413,9cyclictest7950irq/56-dwc_otg_19:55:132
30167995427,9cyclictest31901-21ssh22:15:010
30167995426,15cyclictest8050irq/56-dwc_otg_21:10:140
3016799541,4cyclictest16873-21aten_rbpower_cu22:35:130
3016799541,4cyclictest16873-21aten_rbpower_cu22:35:130
3016899538,12cyclictest0-21swapper/123:55:121
30168995310,26cyclictest0-21swapper/122:05:141
30167995333,13cyclictest0-21swapper/020:52:410
30167995333,13cyclictest0-21swapper/020:52:410
3016799533,30cyclictest0-21swapper/022:40:220
30167995323,9cyclictest3209-21wget19:25:150
3016799532,27cyclictest0-21swapper/020:45:170
3016899522,4cyclictest0-21swapper/122:25:151
3016899522,25cyclictest23-21ksoftirqd/122:55:131
30168995210,12cyclictest0-21swapper/120:55:141
3016799527,16cyclictest13-21rcuc/021:10:010
30167995229,4cyclictest101ktimersoftd/020:10:280
30167995227,4cyclictest6465-21ntpq23:00:230
3016799521,21cyclictest9295-21ssh22:25:270
59202510,1sleep00-21swapper/000:15:290
59202510,1sleep00-21swapper/000:15:290
3016899516,30cyclictest0-21swapper/119:40:131
3016799511,25cyclictest3148-21ssh21:40:230
3016899505,4cyclictest0-21swapper/121:35:131
3016899505,4cyclictest0-21swapper/121:35:131
3016799507,24cyclictest9-21ksoftirqd/020:05:020
3016799507,24cyclictest9-21ksoftirqd/020:05:020
3016999491,8cyclictest8050irq/56-dwc_otg_22:50:142
30169994918,9cyclictest0-21swapper/219:50:132
3016899494,7cyclictest7950irq/56-dwc_otg_23:15:131
3016899492,7cyclictest0-21swapper/119:50:131
3016799491,3cyclictest0-21swapper/020:15:110
3016799491,3cyclictest0-21swapper/020:15:110
3016799491,22cyclictest8956-21ssh23:40:440
3016899485,9cyclictest7950irq/56-dwc_otg_23:50:121
3016899485,9cyclictest7950irq/56-dwc_otg_23:50:121
3016999476,9cyclictest7950irq/56-dwc_otg_19:35:132
3016999476,9cyclictest7950irq/56-dwc_otg_19:35:132
30167994717,14cyclictest1468650ssh22:31:500
3017099464,9cyclictest7950irq/56-dwc_otg_20:15:133
3017099464,9cyclictest7950irq/56-dwc_otg_20:15:133
3017099464,4cyclictest0-21swapper/322:50:133
3016999467,24cyclictest0-21swapper/220:15:062
3016999467,24cyclictest0-21swapper/220:15:062
3016899468,32cyclictest8050irq/56-dwc_otg_00:20:071
3016899467,24cyclictest0-21swapper/119:25:141
3016799466,37cyclictest101ktimersoftd/021:52:200
30167994626,4cyclictest4259-21rm00:14:350
3017099457,24cyclictest0-21swapper/319:55:153
3017099451,22cyclictest26260-21ssh21:30:083
3016999457,24cyclictest0-21swapper/220:00:142
3016999457,24cyclictest0-21swapper/220:00:142
3016999451,18cyclictest5690-21cut21:00:182
3016899457,25cyclictest0-21swapper/122:15:131
30167994523,9cyclictest0-21swapper/020:27:230
3017099447,8cyclictest8050irq/56-dwc_otg_23:25:133
30170994418,5cyclictest25315-21sh00:40:023
258962440,5sleep13016899cyclictest00:00:361
40122430,2sleep20-21swapper/219:25:272
30170994326,6cyclictest8050irq/56-dwc_otg_22:10:273
3017099432,18cyclictest31313-21ssh23:30:133
30170994313,7cyclictest8050irq/56-dwc_otg_00:05:193
3016999437,23cyclictest0-21swapper/219:40:132
3016999436,25cyclictest0-21swapper/221:45:142
3016999436,23cyclictest0-21swapper/220:45:132
30169994328,6cyclictest2399-21ssh21:40:122
3016999432,13cyclictest0-21swapper/221:30:132
3016899432,10cyclictest7950irq/56-dwc_otg_19:45:131
30168994317,16cyclictest505-21cron20:10:011
30170994215,4cyclictest24007-21fschecks_count22:05:173
30170994214,7cyclictest7950irq/56-dwc_otg_00:35:023
30170994211,6cyclictest0-21swapper/323:15:153
30169994215,14cyclictest8050irq/56-dwc_otg_23:35:072
3016899427,26cyclictest0-21swapper/100:10:151
3017099418,23cyclictest0-21swapper/320:05:153
3017099417,24cyclictest0-21swapper/320:10:143
3016999416,23cyclictest0-21swapper/200:10:152
3016899417,25cyclictest0-21swapper/119:35:141
3016899417,25cyclictest0-21swapper/119:35:141
3016899417,25cyclictest0-21swapper/119:30:141
3016899416,10cyclictest0-21swapper/120:15:071
3016899416,10cyclictest0-21swapper/120:15:071
3016899411,26cyclictest7850irq/56-dwc_otg23:40:021
3017099401,10cyclictest0-21swapper/322:00:113
3016999406,26cyclictest0-21swapper/222:20:352
3016899404,23cyclictest17375-21ssh00:30:121
3016899403,22cyclictest0-21swapper/121:30:141
30168994017,6cyclictest8351-21grep21:05:301
3017099391,27cyclictest4124-21timerandwakeup19:25:283
30170993912,5cyclictest0-21swapper/321:25:153
3017099391,15cyclictest0-21swapper/320:45:013
30169993930,6cyclictest301ktimersoftd/220:55:142
3016999392,3cyclictest7850irq/56-dwc_otg00:25:142
3016999392,17cyclictest0-21swapper/222:05:162
3016899394,4cyclictest0-21swapper/120:20:121
30168993918,5cyclictest11528-21latency_hist23:45:021
30168993911,15cyclictest0-21swapper/121:55:191
6782381,4sleep3712-21ntp_states20:45:233
3017099385,13cyclictest8050irq/56-dwc_otg_22:30:273
3017099384,5cyclictest29897-21unixbench_singl20:35:283
30170993813,20cyclictest8050irq/56-dwc_otg_23:55:123
3017099381,24cyclictest0-21swapper/321:00:143
3016999384,14cyclictest7950irq/56-dwc_otg_00:00:262
30169993822,7cyclictest31-21ksoftirqd/221:29:562
30168993818,12cyclictest0-21swapper/121:40:161
3017099379,6cyclictest7950irq/56-dwc_otg_19:40:273
3017099373,18cyclictest0-21swapper/323:50:023
3017099371,22cyclictest4081-21ssh22:20:153
3016999379,12cyclictest31-21ksoftirqd/222:55:132
3016999372,8cyclictest2279450ssh23:20:142
30169993720,10cyclictest301ktimersoftd/220:05:112
30169993715,4cyclictest32191-21latency_hist20:45:022
30168993723,4cyclictest0-21swapper/123:45:141
3016899371,7cyclictest14662-21ssh21:15:321
30168993713,5cyclictest16630-21/usr/sbin/munin20:00:251
30168993713,5cyclictest16630-21/usr/sbin/munin20:00:251
3017099366,22cyclictest0-21swapper/322:55:153
3017099366,21cyclictest30606-21ssh21:35:143
3017099366,21cyclictest30606-21ssh21:35:143
3017099366,13cyclictest7950irq/56-dwc_otg_21:20:143
3017099365,5cyclictest8050irq/56-dwc_otg_22:45:153
3017099361,8cyclictest8699-21http00:20:023
3017099361,8cyclictest8699-21http00:20:023
3016999367,24cyclictest0-21swapper/200:35:132
30169993617,5cyclictest31-21ksoftirqd/220:10:172
30169993614,5cyclictest26658-21grep22:45:302
3016899369,12cyclictest7950irq/56-dwc_otg_23:32:041
30168993618,5cyclictest25496-21aten_rbpower_vo22:45:161
30168993615,6cyclictest21222-21aten_rbpower_vo22:40:151
30168993610,15cyclictest0-21swapper/100:05:411
3017099357,14cyclictest0-21swapper/321:17:573
3017099355,14cyclictest7950irq/56-dwc_otg_20:05:033
3017099355,14cyclictest7950irq/56-dwc_otg_20:05:033
3016999357,23cyclictest0-21swapper/220:20:122
3016999355,12cyclictest7950irq/56-dwc_otg_23:35:022
3016999354,7cyclictest32686-21cron00:10:012
3016999351,7cyclictest0-21swapper/222:15:022
30169993513,6cyclictest0-21swapper/221:24:122
3016999351,22cyclictest0-21swapper/220:33:502
30169993512,11cyclictest29-21rcuc/221:09:592
3016999351,15cyclictest8050irq/56-dwc_otg_22:45:012
3016899356,16cyclictest0-21swapper/120:35:141
3016899352,9cyclictest0-21swapper/119:55:131
30168993527,5cyclictest221ktimersoftd/123:00:121
30168993513,4cyclictest29857-21/usr/sbin/munin22:50:161
3017099344,6cyclictest7850irq/56-dwc_otg19:35:293
3017099344,6cyclictest7850irq/56-dwc_otg19:35:293
3017099344,12cyclictest7950irq/56-dwc_otg_00:00:233
3017099342,6cyclictest0-21swapper/300:10:203
3017099341,5cyclictest11569-21ssh21:50:233
3016999347,14cyclictest0-21swapper/219:30:142
3016999345,14cyclictest8050irq/56-dwc_otg_21:10:142
3016999344,6cyclictest8050irq/56-dwc_otg_00:20:132
30169993415,10cyclictest301ktimersoftd/220:26:402
30169993414,5cyclictest19318-21sh23:15:252
30169993411,6cyclictest29-21rcuc/222:35:132
30169993411,6cyclictest29-21rcuc/222:35:132
30169993411,4cyclictest0-21swapper/221:50:152
30169993410,6cyclictest32288-21aten_rbpower_en22:15:142
3016899343,9cyclictest27158-21aten_rbpower_vo23:25:151
3016899342,9cyclictest26163-21cat20:25:261
3016899342,4cyclictest14240-21ssh23:10:121
3016899341,22cyclictest28065-21sh22:10:161
3017099336,14cyclictest13160-21wc19:50:263
3017099331,23cyclictest13540-21uniq00:25:183
3016999338,14cyclictest7950irq/56-dwc_otg_23:45:012
3016999338,13cyclictest29-21rcuc/219:17:272
3016999335,13cyclictest29-21rcuc/223:52:052
3016999335,13cyclictest29-21rcuc/223:52:052
3016999334,17cyclictest29-21rcuc/220:36:082
3016999333,14cyclictest8050irq/56-dwc_otg_19:45:152
30169993326,5cyclictest7624-21ssh23:01:302
30169993322,4cyclictest20890-21sh23:55:222
30169993317,4cyclictest31-21ksoftirqd/221:15:222
30169993310,4cyclictest0-21swapper/200:30:272
3016899337,6cyclictest7850irq/56-dwc_otg21:10:161
3016899333,5cyclictest7850irq/56-dwc_otg00:20:021
3016899333,5cyclictest7850irq/56-dwc_otg00:20:021
3016899331,7cyclictest7850irq/56-dwc_otg22:20:191
30168993313,5cyclictest12490-21sh23:07:331
30168993313,5cyclictest12490-21sh23:07:331
3016899331,10cyclictest18753-21ssh21:20:281
3017099329,12cyclictest0-21swapper/321:49:263
3017099327,14cyclictest0-21swapper/322:40:143
3017099326,14cyclictest0-21swapper/322:35:133
3017099326,14cyclictest0-21swapper/322:35:133
3017099324,23cyclictest8050irq/56-dwc_otg_20:50:113
3017099324,23cyclictest8050irq/56-dwc_otg_20:50:113
3017099323,4cyclictest7930-21ntp_kernel_pll_21:05:243
30170993214,4cyclictest7850irq/56-dwc_otg19:20:213
3017099321,20cyclictest5211-21latency_hist21:00:013
30169993214,6cyclictest31-21ksoftirqd/219:20:222
3016999321,16cyclictest0-21swapper/221:56:432
30169993210,10cyclictest301ktimersoftd/222:27:152
3016899329,4cyclictest0-21swapper/121:29:081
3016899326,16cyclictest8050irq/56-dwc_otg_23:25:021
3016899324,18cyclictest0-21swapper/120:30:121
3017099317,5cyclictest7950irq/56-dwc_otg_23:35:193
3017099317,13cyclictest7950irq/56-dwc_otg_23:10:203
3017099316,14cyclictest10894-21ssh22:27:413
3017099311,23cyclictest32322-21uniq19:15:183
3017099311,14cyclictest7950irq/56-dwc_otg_19:45:263
3016999317,5cyclictest0-21swapper/223:25:132
3016999314,11cyclictest7950irq/56-dwc_otg_23:05:162
3016999314,11cyclictest7950irq/56-dwc_otg_23:05:162
30169993121,4cyclictest7850irq/56-dwc_otg00:15:402
30169993121,4cyclictest7850irq/56-dwc_otg00:15:402
3016999311,6cyclictest13873-21sh22:30:272
3016899317,5cyclictest8050irq/56-dwc_otg_20:40:281
3016899313,14cyclictest8050irq/56-dwc_otg_21:05:011
3016899312,6cyclictest13359-21ssh22:30:221
3016899312,21cyclictest0-21swapper/100:36:051
30168993112,5cyclictest8050irq/56-dwc_otg_19:20:141
123412310,4sleep337-21rcuc/321:13:433
3017099306,12cyclictest8050irq/56-dwc_otg_20:25:133
30168993016,4cyclictest19436-21sh22:37:411
30168993016,4cyclictest19436-21sh22:37:411
3017099296,5cyclictest8050irq/56-dwc_otg_20:20:153
3016899292,3cyclictest8050irq/56-dwc_otg_19:15:111
286052293,15sleep3750-21snmpd19:05:183
3016999284,14cyclictest31-21ksoftirqd/220:50:142
3016999284,14cyclictest31-21ksoftirqd/220:50:142
283282283,17sleep10-21swapper/119:05:081
3017099262,4cyclictest5324-21runrttasks19:30:183
3016899263,14cyclictest8050irq/56-dwc_otg_20:50:481
3016899263,14cyclictest8050irq/56-dwc_otg_20:50:481
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional