You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-20 - 06:52

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Fri Mar 20, 2026 00:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3022499951,60cyclictest0-21swapper/019:35:180
3022499951,60cyclictest0-21swapper/019:35:180
3022499951,35cyclictest23454-21wget20:20:200
3022499866,61cyclictest0-21swapper/020:05:190
3022499864,35cyclictest0-21swapper/021:10:170
3022499861,26cyclictest21183-21unixbench-2d23:20:330
3022499861,26cyclictest21183-21unixbench-2d23:20:330
3022499807,7cyclictest0-21swapper/000:25:180
3022499794,15cyclictest0-21swapper/022:58:010
3022499792,25cyclictest0-21swapper/021:35:260
3022499791,37cyclictest0-21swapper/022:00:170
30224997545,18cyclictest7950irq/56-dwc_otg_23:50:190
3022499751,27cyclictest8747-21aten_rbpower_en19:40:190
3022499751,27cyclictest8747-21aten_rbpower_en19:40:190
3022499741,28cyclictest20063-21/usr/sbin/munin22:40:280
3022499741,19cyclictest0-21swapper/000:30:120
3022499741,19cyclictest0-21swapper/000:30:120
30224997321,5cyclictest0-21swapper/021:45:180
3022499731,23cyclictest27187-21fschecks_time22:10:230
30224997226,11cyclictest0-21swapper/023:19:320
3022499722,27cyclictest0-21swapper/020:55:320
3022499722,27cyclictest0-21swapper/020:55:320
30224997214,5cyclictest4250-21aten_rbpower_vo23:40:200
140532720,6sleep33022799cyclictest21:54:583
3022499711,26cyclictest0-21swapper/022:16:200
3022499706,35cyclictest0-21swapper/021:05:200
30224997017,3cyclictest0-21swapper/022:35:390
3022499701,27cyclictest10752-21grep19:45:230
3022499699,19cyclictest0-21swapper/021:50:180
30224996821,9cyclictest0-21swapper/021:01:010
3022499662,24cyclictest0-21swapper/019:19:040
3022499662,23cyclictest0-21swapper/023:14:570
30224996612,9cyclictest0-21swapper/019:55:170
3022499652,23cyclictest0-21swapper/020:36:480
3022499652,20cyclictest0-21swapper/023:00:230
30224996518,36cyclictest0-21swapper/020:30:200
3022499642,18cyclictest0-21swapper/000:15:180
3022499641,27cyclictest22971-21ssh00:02:240
3022499632,18cyclictest0-21swapper/023:05:230
30224996312,14cyclictest0-21swapper/023:30:270
3022499624,36cyclictest0-21swapper/019:50:160
3022499611,35cyclictest32362-21latency_hist20:45:070
3022499601,48cyclictest24536-21ls23:25:240
3022499601,39cyclictest17607-21fschecks_time00:35:240
3022499591,20cyclictest26124-21sh00:05:370
30224995837,6cyclictest7850irq/56-dwc_otg_20:15:310
30224995827,2cyclictest0-21swapper/021:40:170
3022499578,26cyclictest8292-21aten_rbpower_cu23:45:200
3022499572,33cyclictest12340-21tail22:30:340
3022499572,24cyclictest19989-21rm21:22:170
3022499571,28cyclictest22778-21grep22:05:200
30224995521,3cyclictest0-21swapper/022:50:190
30224995521,3cyclictest0-21swapper/022:50:190
30224995511,23cyclictest17275-21ntp_kernel_pll_23:55:300
255042540,2sleep30-21swapper/322:46:523
3022499531,32cyclictest2930-21grep20:50:350
30224995310,28cyclictest8808-21diskmemload00:20:340
30227995212,26cyclictest0-21swapper/319:20:183
3022499523,27cyclictest31350-21grep19:10:330
30224995212,5cyclictest0-21swapper/019:30:170
3022499511,24cyclictest25910-21latency_hist21:30:070
3022499511,24cyclictest25910-21latency_hist21:30:070
30224995027,5cyclictest7850irq/56-dwc_otg_20:50:060
3022499502,20cyclictest0-21swapper/022:23:460
3022499502,20cyclictest0-21swapper/022:23:460
3022499501,26cyclictest3769-21cat19:25:260
3022499496,10cyclictest0-21swapper/022:45:170
30224994928,12cyclictest18366-21ssh22:00:070
30224994928,12cyclictest18366-21ssh22:00:070
30225994820,16cyclictest25657-21ssh22:47:091
3022499483,22cyclictest0-21swapper/022:25:300
30224994827,3cyclictest0-21swapper/021:30:420
30224994826,5cyclictest32747-21basename00:15:060
3022499482,31cyclictest0-21swapper/021:15:330
3022799477,23cyclictest0-21swapper/319:30:183
3022699477,25cyclictest0-21swapper/220:20:112
3022599477,29cyclictest0-21swapper/120:25:121
3022699467,25cyclictest0-21swapper/223:00:192
30226994623,6cyclictest6532-21apt-get22:25:062
30226994623,6cyclictest6532-21apt-get22:25:062
3022599467,24cyclictest0-21swapper/119:30:181
30225994625,5cyclictest28792-21latency_hist20:35:071
3022499465,7cyclictest8808-21diskmemload23:40:070
30224994624,5cyclictest7750irq/56-dwc_otg20:00:320
279982460,2sleep10-21swapper/121:31:251
169852460,6sleep116989-21unixbench_multi20:00:351
3022599455,6cyclictest23-21ksoftirqd/122:35:281
3022599452,7cyclictest7950irq/56-dwc_otg_23:00:171
3022499451,4cyclictest0-21swapper/020:10:260
297512452,35sleep00-21swapper/019:07:290
3022799447,23cyclictest0-21swapper/320:15:213
30224994428,4cyclictest7950irq/56-dwc_otg_20:25:120
30224994421,12cyclictest908-21runrttasks19:24:250
30225994319,5cyclictest23105-21fschecks_time22:05:241
30225994313,8cyclictest1796-21latency_hist21:40:061
3022799427,27cyclictest20690-21ssh00:00:213
30227994215,5cyclictest39-21ksoftirqd/320:20:083
3022699427,25cyclictest0-21swapper/220:35:182
30225994222,4cyclictest13151-21ls19:50:301
245072420,3sleep231-21ksoftirqd/223:25:232
30227994120,5cyclictest30639-21sh22:53:413
30227994120,5cyclictest30639-21sh22:53:413
30225994118,4cyclictest221ktimersoftd/123:20:231
30225994118,4cyclictest221ktimersoftd/123:20:231
30225994116,6cyclictest1946-21aten_rbpower_vo20:50:211
30225994114,5cyclictest7750irq/56-dwc_otg00:25:061
3022599411,26cyclictest0-21swapper/121:55:341
3022599411,26cyclictest0-21swapper/121:55:341
4682400,6sleep23022699cyclictest00:15:072
30227994019,4cyclictest6334-21sh23:42:143
3022699406,24cyclictest0-21swapper/223:05:192
3022699405,22cyclictest15242-21ssh22:35:192
30226994015,5cyclictest1730-21apt21:40:062
30226994014,4cyclictest30957-21fschecks_time20:40:242
3022599403,8cyclictest7750irq/56-dwc_otg20:35:171
30225994029,7cyclictest221ktimersoftd/120:20:171
30225994018,14cyclictest2769250wget22:50:191
30225994018,14cyclictest2769250wget22:50:191
30225994012,6cyclictest7750irq/56-dwc_otg23:37:371
30225994012,6cyclictest7750irq/56-dwc_otg21:20:211
95922390,4sleep121-21rcuc/123:06:501
3022799396,9cyclictest7950irq/56-dwc_otg_22:40:193
30227993927,5cyclictest7950irq/56-dwc_otg_21:35:193
30227993911,10cyclictest39-21ksoftirqd/300:00:063
3022699397,23cyclictest0-21swapper/221:10:202
3022699396,25cyclictest0-21swapper/220:25:202
3022699391,34cyclictest32417-21ssh23:35:172
3022599399,5cyclictest23-21ksoftirqd/122:27:241
3022599397,4cyclictest7950irq/56-dwc_otg_00:10:171
3022599397,20cyclictest0-21swapper/100:15:201
3022599395,11cyclictest7950irq/56-dwc_otg_22:30:161
30225993915,5cyclictest23-21ksoftirqd/122:00:331
30225993914,4cyclictest7750irq/56-dwc_otg23:40:281
30225993912,10cyclictest0-21swapper/121:45:181
30225993910,7cyclictest7850irq/56-dwc_otg_00:30:071
30225993910,11cyclictest7850irq/56-dwc_otg_21:10:171
254102390,2sleep30-21swapper/300:05:263
3022799386,21cyclictest39-21ksoftirqd/323:20:193
3022799386,21cyclictest39-21ksoftirqd/323:20:193
3022799385,3cyclictest7950irq/56-dwc_otg_00:10:283
30227993831,5cyclictest7950irq/56-dwc_otg_21:10:173
3022699387,20cyclictest0-21swapper/221:40:432
3022599387,9cyclictest23-21ksoftirqd/100:05:281
3022599385,5cyclictest21-21rcuc/119:40:261
3022599385,5cyclictest21-21rcuc/119:40:261
3022599383,11cyclictest7750irq/56-dwc_otg22:15:171
30225993815,8cyclictest23-21ksoftirqd/120:50:061
3022599381,4cyclictest0-21swapper/123:55:201
30225993813,5cyclictest23-21ksoftirqd/121:20:071
3022799373,28cyclictest7950irq/56-dwc_otg_23:25:173
3022799373,14cyclictest7950irq/56-dwc_otg_00:19:543
30227993726,4cyclictest7950irq/56-dwc_otg_23:15:043
30227993714,10cyclictest37-21rcuc/322:30:063
30227993712,5cyclictest39-21ksoftirqd/300:25:063
30227993711,18cyclictest0-21swapper/322:14:453
3022699377,26cyclictest0-21swapper/220:15:212
3022699373,7cyclictest7750irq/56-dwc_otg23:55:362
30226993717,12cyclictest0-21swapper/221:15:162
30226993716,6cyclictest3268-21/usr/sbin/munin19:25:252
3022699371,4cyclictest7750irq/56-dwc_otg00:30:172
3022699371,4cyclictest7750irq/56-dwc_otg00:30:172
3022699371,11cyclictest9646-21grep00:25:292
30226993710,4cyclictest7950irq/56-dwc_otg_23:40:332
3022599378,12cyclictest221ktimersoftd/121:50:341
3022599375,8cyclictest7850irq/56-dwc_otg_21:25:361
3022599375,8cyclictest7850irq/56-dwc_otg_21:25:361
3022599372,15cyclictest23-21ksoftirqd/100:02:391
30225993719,5cyclictest21-21rcuc/123:51:381
3022599371,7cyclictest23-21ksoftirqd/122:55:331
30225993713,4cyclictest221ktimersoftd/119:45:291
209842370,1sleep20-21swapper/221:24:012
3022799368,13cyclictest7950irq/56-dwc_otg_00:40:063
30227993619,4cyclictest13243-21aten_rbpower_vo00:30:213
30227993619,4cyclictest13243-21aten_rbpower_vo00:30:213
3022799361,14cyclictest7950irq/56-dwc_otg_21:15:233
3022699368,18cyclictest0-21swapper/222:25:262
3022699365,15cyclictest7950irq/56-dwc_otg_00:35:322
3022699364,4cyclictest7750irq/56-dwc_otg23:15:222
3022599368,4cyclictest0-21swapper/123:15:351
3022599367,25cyclictest0-21swapper/119:10:191
3022599365,15cyclictest7950irq/56-dwc_otg_21:10:071
30225993615,5cyclictest908-21runrttasks20:15:361
234432360,5sleep23022699cyclictest00:03:162
127872361,4sleep212795-21ssh22:31:172
30227993519,4cyclictest3650-21sh21:41:033
30227993518,4cyclictest15259-21basename22:35:193
3022799351,21cyclictest7850irq/56-dwc_otg_21:00:163
30227993511,4cyclictest0-21swapper/321:30:233
3022699358,13cyclictest7950irq/56-dwc_otg_21:45:272
3022699357,5cyclictest7950irq/56-dwc_otg_20:05:332
3022699357,25cyclictest0-21swapper/219:15:192
30226993522,9cyclictest28740-21wc00:10:072
30226993516,12cyclictest301ktimersoftd/222:50:152
30226993516,12cyclictest301ktimersoftd/222:50:152
30226993515,5cyclictest31527-21sh22:15:252
3022599357,5cyclictest21-21rcuc/100:30:101
3022599357,5cyclictest21-21rcuc/100:30:101
3022599354,19cyclictest21086-21latency_hist00:40:061
3022599354,10cyclictest23-21ksoftirqd/123:14:471
3022599352,12cyclictest7750irq/56-dwc_otg22:41:081
30225993516,4cyclictest7850irq/56-dwc_otg_22:20:171
30225993516,4cyclictest7850irq/56-dwc_otg_22:20:171
30225993514,6cyclictest23-21ksoftirqd/122:10:291
30225993512,4cyclictest0-21swapper/121:40:231
218402350,1sleep20-21swapper/222:42:442
303272340,1sleep10-21swapper/123:31:541
3022799342,7cyclictest7950irq/56-dwc_otg_19:50:173
3022799341,5cyclictest7950irq/56-dwc_otg_19:15:173
3022699348,15cyclictest0-21swapper/221:25:182
3022699348,15cyclictest0-21swapper/221:25:182
30226993417,5cyclictest28163-21sh23:30:072
3022699341,25cyclictest3540-21ls20:55:072
3022599348,5cyclictest4158-21switchtime19:25:321
3022599346,14cyclictest7950irq/56-dwc_otg_20:55:211
3022599346,14cyclictest7950irq/56-dwc_otg_20:55:211
3022599342,5cyclictest0-21swapper/119:15:181
3022599341,5cyclictest0-21swapper/120:40:311
208732340,3sleep3381ktimersoftd/321:23:503
3022799337,18cyclictest7950irq/56-dwc_otg_20:05:063
3022799337,15cyclictest381ktimersoftd/322:05:073
3022799334,19cyclictest39-21ksoftirqd/323:40:073
3022799334,18cyclictest39-21ksoftirqd/320:15:063
3022799334,12cyclictest39-21ksoftirqd/319:45:243
3022799331,7cyclictest14843-21sh21:55:243
3022799331,7cyclictest14843-21sh21:55:243
30227993317,4cyclictest37-21rcuc/320:28:303
30227993311,13cyclictest37-21rcuc/322:08:073
3022699338,5cyclictest7950irq/56-dwc_otg_20:15:062
3022699338,12cyclictest7950irq/56-dwc_otg_21:55:282
3022699338,12cyclictest7950irq/56-dwc_otg_21:55:282
3022699336,6cyclictest7850irq/56-dwc_otg_00:20:282
3022699335,3cyclictest0-21swapper/222:55:352
30226993316,5cyclictest3852-21sh00:19:052
30226993316,10cyclictest908-21runrttasks21:05:222
30226993315,5cyclictest31-21ksoftirqd/223:20:322
30226993315,5cyclictest31-21ksoftirqd/223:20:322
30226993310,5cyclictest0-21swapper/222:00:262
30226993310,4cyclictest0-21swapper/223:54:592
3022599338,4cyclictest0-21swapper/123:45:321
3022599331,7cyclictest24146-21ssh23:25:181
3022599331,5cyclictest0-21swapper/121:00:161
3022799328,12cyclictest0-21swapper/322:30:283
3022799326,16cyclictest0-21swapper/323:00:433
3022799326,10cyclictest7950irq/56-dwc_otg_21:25:093
3022799326,10cyclictest7950irq/56-dwc_otg_21:25:093
3022799325,12cyclictest7850irq/56-dwc_otg_22:15:173
30227993220,8cyclictest0-21swapper/320:30:363
30227993215,5cyclictest37-21rcuc/323:54:073
3022799321,4cyclictest7750irq/56-dwc_otg21:10:073
3022799321,11cyclictest0-21swapper/319:10:193
3022699329,17cyclictest0-21swapper/222:46:202
3022699329,11cyclictest24001-21unixbench_singl22:05:352
3022699327,22cyclictest0-21swapper/220:45:192
3022699326,6cyclictest7750irq/56-dwc_otg19:40:332
3022699326,6cyclictest7750irq/56-dwc_otg19:40:332
3022699324,6cyclictest7750irq/56-dwc_otg19:15:062
30226993214,5cyclictest8354-21/usr/sbin/munin23:45:212
3022699321,22cyclictest0-21swapper/221:30:202
3022699321,17cyclictest0-21swapper/219:22:512
3022599326,5cyclictest7850irq/56-dwc_otg_19:55:331
3022599325,13cyclictest7850irq/56-dwc_otg_19:40:081
3022599322,5cyclictest20791-21users20:10:371
30225993213,4cyclictest18176-21sed20:05:251
3022799318,6cyclictest7950irq/56-dwc_otg_22:20:193
3022799318,6cyclictest7950irq/56-dwc_otg_22:20:193
3022799318,12cyclictest0-21swapper/323:45:183
3022799311,5cyclictest39-21ksoftirqd/319:40:073
3022799311,5cyclictest39-21ksoftirqd/319:40:073
30227993115,5cyclictest37-21rcuc/300:25:203
30227993114,9cyclictest19166-21ssh23:19:123
30227993114,8cyclictest37-21rcuc/319:40:263
30227993114,8cyclictest37-21rcuc/319:40:263
3022699314,6cyclictest7950irq/56-dwc_otg_20:35:072
3022699314,6cyclictest7850irq/56-dwc_otg_19:45:202
3022699312,8cyclictest7850irq/56-dwc_otg_19:35:162
3022699312,8cyclictest7850irq/56-dwc_otg_19:35:162
30226993119,4cyclictest3624-21/usr/sbin/munin20:55:312
30226993119,4cyclictest3624-21/usr/sbin/munin20:55:312
3022699311,20cyclictest14327-21cut19:55:222
298852314,18sleep30-21swapper/319:09:143
3022799307,11cyclictest37-21rcuc/320:55:413
3022799307,11cyclictest37-21rcuc/320:55:413
3022799306,18cyclictest37-21rcuc/321:45:223
3022799303,16cyclictest7950irq/56-dwc_otg_19:55:323
30227993017,3cyclictest8651-21ssh23:05:333
30227993016,4cyclictest39-21ksoftirqd/322:55:263
30226993024,4cyclictest5760-21fschecks_time21:00:222
3022699301,3cyclictest0-21swapper/223:10:112
30225993011,4cyclictest7084-21df19:35:201
3022799293,18cyclictest29850-21ssh23:31:033
30227992913,4cyclictest31425-21/usr/sbin/munin20:40:323
3022699296,4cyclictest7850irq/56-dwc_otg_20:00:342
3022699296,14cyclictest0-21swapper/222:10:192
3022699295,16cyclictest0-21swapper/221:53:122
3022599292,12cyclictest7950irq/56-dwc_otg_19:20:181
296792297,15sleep20-21swapper/219:06:342
3022799286,11cyclictest29206-21idleruntime20:35:233
3022799285,10cyclictest7950irq/56-dwc_otg_19:25:203
30227992818,8cyclictest39-21ksoftirqd/320:50:363
30227992812,5cyclictest569-21taskset20:45:263
3022799281,19cyclictest18223-21latency20:05:253
3022699283,4cyclictest7950irq/56-dwc_otg_19:30:282
296192289,11sleep10-21swapper/119:05:521
3022699261,17cyclictest0-21swapper/219:50:072
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional