You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-19 - 07:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Sep 19, 2026 00:43:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1185025250,5sleep10-21swapper/119:10:241
400321150,2sleep10-21swapper/100:12:221
120469911064,30cyclictest0-21swapper/020:30:360
12046991048,18cyclictest0-21swapper/021:30:360
218122980,2sleep10-21swapper/119:35:501
1204699922,9cyclictest17631-21aten_rbpower_cu00:30:370
1204699922,9cyclictest17631-21aten_rbpower_cu00:30:370
1204699912,38cyclictest0-21swapper/020:35:350
12046999023,40cyclictest26062-21sort22:35:530
12046999023,40cyclictest26062-21sort22:35:530
12046999015,62cyclictest22819-21diskmemload23:10:510
240892890,6sleep01204699cyclictest23:15:390
227202870,5sleep318802-21kworker/3:119:40:233
122062870,4sleep11204799cyclictest00:23:061
122062870,4sleep11204799cyclictest00:23:061
1204699878,5cyclictest17178-21basename22:25:370
1204699871,7cyclictest18441-21ls23:50:230
12046998712,56cyclictest0-21swapper/019:20:230
111022870,4sleep30-21swapper/319:05:483
1204699867,66cyclictest10795-21latency_hist23:40:240
1204699852,8cyclictest7507-21grep20:25:480
1204699852,7cyclictest10519-21ssh22:57:520
12046998431,37cyclictest7950irq/56-dwc_otg_22:07:200
1204699841,67cyclictest0-21swapper/021:46:270
1204699837,72cyclictest290042chrt23:20:550
12046998335,29cyclictest0-21swapper/019:10:260
1204699832,8cyclictest11178-21diskstats23:40:400
12046998320,48cyclictest16017-21tr23:05:340
12046998312,50cyclictest28698-21ssh00:02:290
1204699821,71cyclictest27754-21ssh21:56:410
1204699821,71cyclictest27754-21ssh21:56:410
1204699821,56cyclictest24810-21seq21:11:340
256502810,6sleep11204799cyclictest21:55:161
1204699816,47cyclictest19114-21idleruntime-cro21:00:240
12046998111,51cyclictest26270-21latency_hist00:00:240
1204699802,9cyclictest14015-21tr20:45:380
1204699802,9cyclictest0-21swapper/000:10:240
1204699801,67cyclictest15894-21ssh22:23:400
12046998010,53cyclictest0-21swapper/023:50:390
1204699792,8cyclictest9824-21ls22:15:450
12046997914,52cyclictest1868-21rm22:46:260
12046997913,51cyclictest28259-21unixbench-2d21:15:520
1204699791,10cyclictest0-21swapper/019:20:430
12046997821,34cyclictest16203-21systemd-journal00:20:230
1204699781,8cyclictest32236-21tail21:20:530
1204699781,49cyclictest0-21swapper/023:32:530
1204699772,7cyclictest28219-21latency_hist19:55:240
1204699771,10cyclictest0-21swapper/021:29:000
1204699762,8cyclictest0-21swapper/021:41:420
1204699761,8cyclictest0-21swapper/023:27:230
1204699761,63cyclictest22819-21diskmemload21:51:100
1204699761,51cyclictest10867-21ssh21:35:440
12046997613,53cyclictest6702-21ssh22:53:150
12046997613,41cyclictest0-21swapper/022:11:460
12046997613,41cyclictest0-21swapper/022:11:460
12046997612,50cyclictest14011-21ssh23:02:010
1204699752,13cyclictest0-21swapper/000:20:370
1204699752,13cyclictest0-21swapper/000:20:370
12046997518,47cyclictest0-21swapper/019:55:360
12046997516,46cyclictest22819-21diskmemload22:34:300
1204699751,56cyclictest3931-21ssh00:12:130
1204699746,48cyclictest30223-21sshd22:41:030
1204699741,7cyclictest19786-21ls21:00:410
1204699741,61cyclictest0-21swapper/000:36:550
12046997413,47cyclictest32513-21/usr/sbin/munin20:05:450
270562730,2sleep20-21swapper/222:37:322
270562730,2sleep20-21swapper/222:37:322
242062730,2sleep10-21swapper/121:10:511
1204699732,5cyclictest0-21swapper/020:18:170
161682720,6sleep11204799cyclictest23:45:541
1204699722,4cyclictest0-21swapper/019:50:080
210632710,2sleep30-21swapper/300:35:093
210632710,2sleep30-21swapper/300:35:093
207382710,2sleep20-21swapper/223:52:122
1204699712,5cyclictest0-21swapper/020:04:590
1204699712,5cyclictest0-21swapper/020:04:590
272712700,3sleep127275-21sed00:00:451
204732700,5sleep312045-21cyclictest19:30:523
12048997019,18cyclictest0-21swapper/221:15:362
1204699701,7cyclictest0-21swapper/020:24:510
1204699701,57cyclictest0-21swapper/020:11:390
1204699701,56cyclictest15338-21ssh00:26:330
12046997014,31cyclictest7750irq/56-dwc_otg20:40:380
1204699701,10cyclictest0-21swapper/022:00:430
1204699692,7cyclictest22989-21latency_hist21:10:240
1204799687,21cyclictest7950irq/56-dwc_otg_21:15:361
1204699682,10cyclictest0-21swapper/020:52:530
12046996712,44cyclictest22444-21chrt19:37:500
12046996612,42cyclictest18879-21taskset19:28:240
12046996612,42cyclictest18879-21taskset19:28:240
12048996411,7cyclictest7950irq/56-dwc_otg_22:10:362
12048996411,7cyclictest7950irq/56-dwc_otg_22:10:362
1204699642,49cyclictest0-21swapper/019:43:510
12046996315,30cyclictest0-21swapper/019:30:510
1204899607,28cyclictest0-21swapper/223:00:362
1204899602,35cyclictest0-21swapper/200:20:342
1204899602,35cyclictest0-21swapper/200:20:342
9642590,1sleep30-21swapper/320:09:493
1204899588,33cyclictest0-21swapper/220:00:372
1204899588,33cyclictest0-21swapper/220:00:372
1204899578,28cyclictest0-21swapper/222:40:392
43802530,2sleep20-21swapper/200:13:072
1204799538,27cyclictest0-21swapper/120:10:371
1204799532,4cyclictest7950irq/56-dwc_otg_00:05:351
12049995210,24cyclictest0-21swapper/321:45:453
192412500,8sleep219227-21apt-config21:00:242
137232503,6sleep30-21swapper/300:25:393
117122503,12sleep00-21swapper/019:09:350
323112490,5sleep337-21rcuc/323:25:453
12792490,2sleep20-21swapper/223:27:212
1204899498,22cyclictest0-21swapper/221:00:302
1204799499,25cyclictest0-21swapper/120:00:371
1204799499,25cyclictest0-21swapper/120:00:371
12047994812,23cyclictest0-21swapper/122:45:401
1204899477,27cyclictest17623-21sh00:30:362
1204899477,27cyclictest17623-21sh00:30:362
1204899473,7cyclictest7850irq/56-dwc_otg_19:20:342
1204999468,28cyclictest0-21swapper/319:55:363
1204799462,12cyclictest7381-21uniq23:35:431
1204799453,30cyclictest0-21swapper/121:31:061
12047994520,6cyclictest14151-21fschecks_time19:15:401
12047994520,11cyclictest20976-21/usr/sbin/munin22:30:371
12047994515,8cyclictest19988-21wget23:10:381
12047994510,21cyclictest0-21swapper/121:05:371
216252441,39sleep221643-21apt-get00:35:372
12049994419,15cyclictest1180-21runrttasks20:20:243
1204899448,33cyclictest0-21swapper/200:25:372
1204799448,29cyclictest0-21swapper/100:25:371
12048994327,8cyclictest7850irq/56-dwc_otg_23:24:262
12048994325,9cyclictest7950irq/56-dwc_otg_23:40:502
12048994320,15cyclictest18403-21sh23:50:202
1204799436,3cyclictest0-21swapper/100:35:371
1204799436,27cyclictest28866-21ssh22:40:391
1204799432,20cyclictest0-21swapper/119:40:401
12047994319,5cyclictest14392-21aten_rbpower_en21:40:381
12049994218,15cyclictest37-21rcuc/323:10:543
1204999421,27cyclictest19689-21ls23:10:233
1204899428,20cyclictest0-21swapper/223:55:372
1204899426,20cyclictest7950irq/56-dwc_otg_23:35:432
1204799426,22cyclictest16052-21ssh23:05:371
1204799424,5cyclictest0-21swapper/121:00:301
287472410,2sleep20-21swapper/221:58:392
287472410,2sleep20-21swapper/221:58:392
12049994118,5cyclictest509-21cron23:25:233
1204899418,18cyclictest0-21swapper/221:05:372
1204899416,14cyclictest7850irq/56-dwc_otg_20:20:232
1204899414,24cyclictest7950irq/56-dwc_otg_22:05:522
1204899412,26cyclictest14978-21grep19:15:522
1204899411,23cyclictest22457-21grep21:50:402
12048994110,16cyclictest7950irq/56-dwc_otg_22:50:492
1204799419,18cyclictest0-21swapper/123:30:371
1204799418,6cyclictest7850irq/56-dwc_otg_23:50:541
12047994122,7cyclictest18749-21seq22:26:341
1204799411,20cyclictest7950irq/56-dwc_otg_23:40:521
12047994110,22cyclictest0-21swapper/119:25:341
12047994110,22cyclictest0-21swapper/119:25:341
1204999402,25cyclictest0-21swapper/300:05:543
1204999401,9cyclictest7750irq/56-dwc_otg20:40:343
12049994019,8cyclictest26318-21cut21:55:403
12049994019,8cyclictest26318-21cut21:55:403
12049994015,6cyclictest509-21cron21:35:233
12048994017,15cyclictest301ktimersoftd/222:32:462
12048994015,14cyclictest26648-21ssh00:00:372
1204799406,6cyclictest7750irq/56-dwc_otg00:35:231
1204799406,6cyclictest7750irq/56-dwc_otg00:35:231
12047994019,11cyclictest1180-21runrttasks22:10:491
12047994019,11cyclictest1180-21runrttasks22:10:491
1204799401,24cyclictest12644-21ls20:40:431
12047994010,19cyclictest0-21swapper/120:06:551
232842390,2sleep20-21swapper/223:14:562
223702390,2sleep30-21swapper/323:55:233
1204999398,16cyclictest0-21swapper/322:00:373
1204999392,6cyclictest7850irq/56-dwc_otg_21:25:233
12049993915,11cyclictest22819-21diskmemload22:21:173
1204899397,17cyclictest7950irq/56-dwc_otg_23:20:232
1204899392,17cyclictest28972-21ntpq19:55:462
12048993920,12cyclictest17072-21/usr/sbin/munin22:25:382
12048993911,16cyclictest7950irq/56-dwc_otg_22:25:242
1204799398,17cyclictest0-21swapper/120:20:361
1204799397,17cyclictest0-21swapper/120:45:381
1204799392,9cyclictest5985-21basename00:15:391
1204799392,7cyclictest7850irq/56-dwc_otg_22:25:241
107912396,20sleep20-21swapper/219:05:442
174982380,6sleep31204999cyclictest19:25:373
174982380,6sleep31204999cyclictest19:25:373
1204999382,9cyclictest0-21swapper/322:25:353
12049993816,5cyclictest1759250wget20:55:383
12049993816,12cyclictest1180-21runrttasks23:31:443
1204899387,20cyclictest7950irq/56-dwc_otg_21:25:362
1204899384,5cyclictest7950irq/56-dwc_otg_22:00:362
12048993820,5cyclictest13981-21latency_hist21:40:232
12048993817,13cyclictest301ktimersoftd/223:07:582
12048993815,5cyclictest0-21swapper/220:30:442
12048993815,12cyclictest9741-21ssh21:34:452
12048993814,10cyclictest301ktimersoftd/223:32:472
12048993812,12cyclictest7850irq/56-dwc_otg_00:15:502
1204799387,23cyclictest0-21swapper/122:36:451
1204799387,23cyclictest0-21swapper/122:36:451
1204799385,5cyclictest7950irq/56-dwc_otg_23:00:411
1204799383,28cyclictest0-21swapper/122:54:401
1204799383,24cyclictest0-21swapper/119:10:261
1204799382,7cyclictest11872-21cron20:40:231
12047993817,5cyclictest1180-21runrttasks22:05:021
12047993811,12cyclictest7950irq/56-dwc_otg_23:20:531
12047993810,17cyclictest0-21swapper/122:05:371
1204999376,5cyclictest0-21swapper/320:20:343
1204999373,3cyclictest0-21swapper/323:55:383
12049993716,7cyclictest1549-21aten_rbpower_vo22:05:393
12049993710,9cyclictest39-21ksoftirqd/321:55:233
1204899378,6cyclictest7850irq/56-dwc_otg_19:25:532
1204899378,6cyclictest7850irq/56-dwc_otg_19:25:532
1204899378,16cyclictest0-21swapper/220:10:372
1204899376,6cyclictest31059-21aten_rbpower_en21:20:372
1204899376,5cyclictest7950irq/56-dwc_otg_19:31:492
1204899371,5cyclictest30708-21cpuspeed00:05:392
1204899371,26cyclictest0-21swapper/221:40:542
12048993710,6cyclictest0-21swapper/221:10:332
1204799378,18cyclictest0-21swapper/123:55:371
1204799373,6cyclictest7850irq/56-dwc_otg_20:26:291
12047993718,6cyclictest221ktimersoftd/123:15:361
1204799371,6cyclictest2588-21cut21:25:351
1204799371,4cyclictest7950irq/56-dwc_otg_22:55:391
12047993713,14cyclictest0-21swapper/120:50:391
1204799371,22cyclictest3440-21ls20:15:411
12047993712,17cyclictest27418-1kworker/u9:021:58:051
12047993712,17cyclictest27418-1kworker/u9:021:58:051
12047993710,12cyclictest7950irq/56-dwc_otg_23:30:241
282102361,3sleep30-21swapper/322:39:523
282102361,3sleep30-21swapper/322:39:523
1204999367,16cyclictest7950irq/56-dwc_otg_21:42:443
1204999367,15cyclictest0-21swapper/323:00:493
1204999362,4cyclictest7950irq/56-dwc_otg_23:45:353
1204999361,21cyclictest28083-21ssh21:15:513
1204899369,18cyclictest0-21swapper/222:45:552
1204899367,5cyclictest15093-21head20:45:542
1204899364,6cyclictest7950irq/56-dwc_otg_19:35:402
1204899362,7cyclictest7850irq/56-dwc_otg_19:40:412
12048993619,4cyclictest9757-21if_wlan022:15:442
12048993614,11cyclictest19621-21sh21:46:042
1204799368,14cyclictest0-21swapper/122:19:141
1204799362,17cyclictest7950irq/56-dwc_otg_21:20:441
1204799361,6cyclictest18571-21fschecks_time21:45:421
1204799361,16cyclictest7950irq/56-dwc_otg_19:20:371
1204999358,16cyclictest0-21swapper/319:40:363
1204999357,6cyclictest7750irq/56-dwc_otg00:00:413
1204999355,7cyclictest7750irq/56-dwc_otg22:50:533
1204999354,12cyclictest7850irq/56-dwc_otg_21:00:383
1204999352,25cyclictest0-21swapper/322:43:333
12049993517,11cyclictest8162-21ssh22:13:543
12049993517,11cyclictest8162-21ssh22:13:543
1204999351,21cyclictest20320-1kworker/u9:022:55:503
1204999351,15cyclictest4657-21ssh00:13:403
12049993511,12cyclictest12612-21ssh22:19:553
1204899351,5cyclictest8284-21grep22:55:372
12047993512,8cyclictest0-21swapper/121:37:081
1204999347,8cyclictest381ktimersoftd/300:35:263
12049993414,6cyclictest11929-21latency_hist20:40:243
1204999341,26cyclictest0-21swapper/322:48:073
1204999341,18cyclictest7750irq/56-dwc_otg21:39:503
12049993410,4cyclictest7950irq/56-dwc_otg_22:30:383
1204899347,17cyclictest0-21swapper/220:20:362
1204899345,5cyclictest7850irq/56-dwc_otg_20:55:232
12048993414,5cyclictest1180-21runrttasks20:39:072
1204799343,8cyclictest7850irq/56-dwc_otg_19:55:521
1204799343,7cyclictest27613-21unixbench_multi19:50:511
1204799342,14cyclictest7950irq/56-dwc_otg_20:55:261
1204999339,5cyclictest0-21swapper/300:15:413
1204999339,10cyclictest22819-21diskmemload21:14:073
1204999338,8cyclictest7850irq/56-dwc_otg_21:25:523
1204999334,6cyclictest28212-21latency_hist19:55:243
1204999331,17cyclictest7950irq/56-dwc_otg_19:20:403
1204899331,19cyclictest24881-21ls19:45:382
12048993310,15cyclictest301ktimersoftd/219:50:502
1204799331,22cyclictest19547-21cut19:30:401
1204799331,19cyclictest0-21swapper/120:30:431
259782321,5sleep10-21swapper/119:46:511
1204999329,16cyclictest0-21swapper/320:30:413
1204999322,22cyclictest0-21swapper/300:21:133
1204999322,22cyclictest0-21swapper/300:21:133
1204999321,5cyclictest7750irq/56-dwc_otg21:05:533
12049993214,6cyclictest23934-21aten_rbpower_po23:15:363
12049993213,4cyclictest381ktimersoftd/320:13:323
12049993210,4cyclictest0-21swapper/323:39:513
1204899324,14cyclictest7950irq/56-dwc_otg_20:43:292
1204999317,11cyclictest0-21swapper/323:42:063
1204999314,12cyclictest7850irq/56-dwc_otg_19:15:373
1204899311,6cyclictest8360-21latency_hist20:30:232
1204999307,5cyclictest0-21swapper/320:45:423
1204999304,20cyclictest0-21swapper/319:10:263
1204999302,18cyclictest0-21swapper/320:54:003
12049993012,7cyclictest8136-21taskset20:28:593
1204899303,8cyclictest7950irq/56-dwc_otg_19:10:262
1204999292,4cyclictest7950irq/56-dwc_otg_20:00:343
1204999292,4cyclictest7950irq/56-dwc_otg_20:00:343
1204899292,16cyclictest0-21swapper/220:10:022
1204999281,14cyclictest7950irq/56-dwc_otg_19:45:333
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional