You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-25 - 09:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Tue Aug 25, 2026 00:43:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
768923170,4sleep07296-21/usr/sbin/munin19:05:280
901222170,3sleep10-21swapper/119:10:111
91229912914,82cyclictest2568-21taskset22:45:420
91229912914,82cyclictest2568-21taskset22:45:420
9123991163,66cyclictest30914-21unixbench-2d22:40:381
9122991164,83cyclictest0-21swapper/021:40:290
9123991136,64cyclictest7750irq/56-dwc_otg21:35:391
91229911310,95cyclictest849-21grep21:25:260
91229910910,79cyclictest0-21swapper/021:35:400
2745121070,5sleep2912499cyclictest00:40:102
9122991034,77cyclictest0-21swapper/022:10:400
91229910313,66cyclictest5825-21timerwakeupswit21:30:420
9122991025,74cyclictest0-21swapper/022:40:410
9123991013,76cyclictest905-21tune2fs21:25:271
9122991015,74cyclictest0-21swapper/023:00:310
9122991003,9cyclictest7950irq/56-dwc_otg_22:30:230
912399916,78cyclictest2042-21grep22:45:321
912399916,78cyclictest2042-21grep22:45:321
912399906,78cyclictest6277-21sed22:10:391
912399873,78cyclictest5848-21sed21:30:421
912399863,75cyclictest13308-21grep21:40:301
912399833,71cyclictest14265-21ssh23:00:311
912299822,67cyclictest0-21swapper/000:00:190
912299822,67cyclictest0-21swapper/000:00:190
9124998152,9cyclictest7750irq/56-dwc_otg22:30:232
912299817,28cyclictest0-21swapper/020:30:240
912399804,70cyclictest21519-21apt-get22:30:251
83882770,3sleep20-21swapper/219:05:382
264782770,4sleep326477-21grep23:15:293
264782770,4sleep326477-21grep23:15:293
246192750,1sleep30-21swapper/322:33:583
9125997331,14cyclictest7950irq/56-dwc_otg_22:40:403
9124997234,22cyclictest13301-21fschecks_time21:40:302
9124997220,32cyclictest0-21swapper/222:45:432
9124997220,32cyclictest0-21swapper/222:45:432
912399726,38cyclictest1121750ssh00:20:171
199162710,2sleep30-21swapper/323:07:003
912399694,44cyclictest0-21swapper/123:12:121
9122996954,5cyclictest31517-21systemd-journal00:15:100
912399685,45cyclictest9550irq/80-mmc023:30:161
912399685,45cyclictest9550irq/80-mmc023:30:161
912299681,48cyclictest0-21swapper/019:30:220
9122996812,37cyclictest8742-21unixbench_multi20:35:390
9125996734,17cyclictest381ktimersoftd/321:30:293
9125996715,32cyclictest7950irq/56-dwc_otg_22:45:363
9125996715,32cyclictest7950irq/56-dwc_otg_22:45:363
912299672,51cyclictest0-21swapper/023:55:180
912499664,9cyclictest7750irq/56-dwc_otg21:20:242
912499664,9cyclictest7750irq/56-dwc_otg21:20:242
912299661,53cyclictest0-21swapper/020:00:230
912399655,48cyclictest20117-21diskmemload23:54:021
912599644,33cyclictest13297-21grep21:40:303
912499643,34cyclictest0-21swapper/221:30:402
912399641,48cyclictest7750irq/56-dwc_otg22:10:081
912499634,36cyclictest5072-21/usr/sbin/munin22:10:262
9124996333,9cyclictest301ktimersoftd/221:35:402
9124996318,30cyclictest301ktimersoftd/221:25:262
912299631,48cyclictest10022-21fschecks_time22:55:280
912299631,32cyclictest0-21swapper/020:10:230
912399625,42cyclictest7750irq/56-dwc_otg21:55:301
912299623,45cyclictest0-21swapper/022:15:400
9122996234,13cyclictest0-21swapper/000:40:110
912299622,44cyclictest13258-21wget20:50:250
9124996111,33cyclictest0-21swapper/223:00:312
912399616,36cyclictest27472-21apt-key00:40:101
912399611,8cyclictest21835-21cat23:10:111
912399611,7cyclictest17593-21unixbench_multi19:30:371
912399611,6cyclictest19880-21modprobe19:40:101
912399611,41cyclictest12906-21idleruntime-cro20:50:101
912399611,41cyclictest12906-21idleruntime-cro20:50:101
9122996131,18cyclictest0-21swapper/022:40:100
912299612,41cyclictest351-21wget20:15:250
912299611,50cyclictest17389-21tune2fs21:45:310
912299611,47cyclictest9962-21ls23:35:110
912299611,47cyclictest9962-21ls23:35:110
9125996027,13cyclictest381ktimersoftd/321:35:393
912399602,45cyclictest11798-21ssh23:36:081
9122996036,9cyclictest0-21swapper/020:55:270
9122996035,5cyclictest7850irq/56-dwc_otg_22:30:100
912299603,33cyclictest0-21swapper/020:50:110
912299603,33cyclictest0-21swapper/020:50:110
9122996032,10cyclictest4061-21basename20:25:250
912299601,42cyclictest14411-21cut23:40:260
912399594,3cyclictest7750irq/56-dwc_otg23:18:511
912399594,3cyclictest7750irq/56-dwc_otg23:18:511
912399593,40cyclictest7950irq/56-dwc_otg_20:33:401
912399592,4cyclictest0-21swapper/120:55:301
912399591,5cyclictest19537-21rm23:47:271
912399591,50cyclictest7318-21ssh22:51:291
912399591,3cyclictest0-21swapper/120:25:281
912299594,41cyclictest21154-21aten_rbpower_en21:50:230
912299594,41cyclictest21154-21aten_rbpower_en21:50:230
912299591,43cyclictest0-21swapper/022:20:390
912299591,43cyclictest0-21swapper/022:20:390
912299591,40cyclictest310-21ssh21:25:110
912299591,40cyclictest310-21ssh21:25:110
912299591,38cyclictest9813-21grep19:10:320
9125995812,9cyclictest27709-21kworker/3:021:25:243
9125995811,20cyclictest0-21swapper/322:10:373
912399583,3cyclictest0-21swapper/122:25:121
912399582,4cyclictest0-21swapper/119:20:391
912399581,6cyclictest25021-21ssh23:56:091
912399581,5cyclictest17568-21/usr/sbin/munin21:00:361
912399581,41cyclictest28552-21latency_hist21:20:101
912299582,41cyclictest0-21swapper/019:55:220
912299581,50cyclictest0-21swapper/021:55:540
912399574,4cyclictest7850irq/56-dwc_otg_19:50:261
9123995720,34cyclictest13470-21latency_hist23:00:101
9123995716,38cyclictest5699-21latency_hist23:30:101
912399571,5cyclictest21403-21fschecks_count21:50:261
912399571,5cyclictest21403-21fschecks_count21:50:261
912399571,4cyclictest7850irq/56-dwc_otg_19:55:321
912399571,4cyclictest26523-21sensors22:35:341
912399571,44cyclictest0-21swapper/121:11:571
912299579,25cyclictest0-21swapper/020:40:230
912299576,9cyclictest7750irq/56-dwc_otg23:15:230
912299576,9cyclictest7750irq/56-dwc_otg23:15:230
9122995734,10cyclictest101ktimersoftd/019:20:100
912299571,41cyclictest2144-21wget20:20:240
912299571,41cyclictest15439-21proc_pri19:25:370
912399567,38cyclictest0-21swapper/122:03:251
912399562,41cyclictest0-21swapper/100:26:221
912399562,3cyclictest7750irq/56-dwc_otg23:43:071
912399561,5cyclictest11246-21ssh22:17:011
912399561,40cyclictest7750irq/56-dwc_otg00:00:501
912399561,40cyclictest7750irq/56-dwc_otg00:00:501
9122995634,10cyclictest101ktimersoftd/023:05:380
912399551,42cyclictest20117-21diskmemload00:15:341
912399551,41cyclictest7750irq/56-dwc_otg21:20:321
912399551,41cyclictest7750irq/56-dwc_otg21:20:321
912299554,5cyclictest7850irq/56-dwc_otg_21:00:230
912299554,40cyclictest13-21rcuc/000:28:110
9122995541,5cyclictest22649-21rm23:52:470
912299553,40cyclictest0-21swapper/022:01:080
9122995529,10cyclictest9675-21taskset00:17:550
912299551,45cyclictest0-21swapper/023:20:270
912399547,41cyclictest2088-21taskset20:20:171
912399546,45cyclictest0-21swapper/123:20:221
912399543,4cyclictest7750irq/56-dwc_otg20:50:241
912399542,6cyclictest0-21swapper/121:45:371
912399542,39cyclictest15750-21grep19:25:411
912399541,5cyclictest0-21swapper/100:05:521
912399541,3cyclictest0-21swapper/100:11:561
9122995439,3cyclictest0-21swapper/019:20:360
9122995433,9cyclictest4489-21ssh23:28:000
9122995430,7cyclictest20765-21grep00:30:400
9122995425,12cyclictest7850irq/56-dwc_otg_21:15:390
912299542,40cyclictest0-21swapper/000:05:260
9122995423,14cyclictest7850irq/56-dwc_otg_19:40:100
912399535,37cyclictest0-21swapper/122:23:351
912399535,37cyclictest0-21swapper/122:23:351
912399531,9cyclictest30179-21grep20:05:391
9122995339,6cyclictest101ktimersoftd/021:14:320
9122995326,7cyclictest7850irq/56-dwc_otg_21:10:100
912299531,40cyclictest0-21swapper/023:10:240
103482530,2sleep30-21swapper/300:19:103
912599528,23cyclictest20117-21diskmemload23:00:303
912599526,27cyclictest0-21swapper/321:05:233
9124995210,20cyclictest31-21ksoftirqd/222:40:382
912399521,45cyclictest9435-21fschecks_time19:10:271
912399521,39cyclictest21652-21kworker/u8:300:31:491
912299522,35cyclictest0-21swapper/019:50:280
912299521,42cyclictest0-21swapper/023:35:320
912299521,40cyclictest0-21swapper/000:20:240
912599517,26cyclictest0-21swapper/319:35:243
912399512,6cyclictest1427-21grep20:15:401
912399512,4cyclictest0-21swapper/120:40:211
912399512,45cyclictest7659-21grep20:35:241
912399511,8cyclictest28881-21latency_hist20:05:101
912399511,6cyclictest11445-21kernelversion19:15:301
9122995134,9cyclictest0-21swapper/022:09:420
9122995133,9cyclictest216052sleep019:44:350
912299511,31cyclictest6331-21taskset22:50:330
912399501,8cyclictest18813-21tune2fs21:05:271
9122995038,3cyclictest0-21swapper/020:06:190
9122995015,16cyclictest20934-21ssh23:50:020
912399491,5cyclictest21994-21aten_rbpower_po19:45:251
912399491,5cyclictest21994-21aten_rbpower_po19:45:251
912399491,3cyclictest7750irq/56-dwc_otg19:40:341
912599488,24cyclictest6116-21ssh23:30:233
912599488,24cyclictest6116-21ssh23:30:233
912499487,26cyclictest0-21swapper/220:45:152
912499487,26cyclictest0-21swapper/220:45:152
912399482,3cyclictest0-21swapper/120:10:221
912599477,25cyclictest0-21swapper/321:50:223
912599477,25cyclictest0-21swapper/321:50:223
9122994736,4cyclictest7950irq/56-dwc_otg_19:45:360
9122994736,4cyclictest7950irq/56-dwc_otg_19:45:360
912599467,25cyclictest0-21swapper/320:25:163
912599454,7cyclictest7850irq/56-dwc_otg_22:00:233
912599447,22cyclictest0-21swapper/321:00:243
912599446,24cyclictest0-21swapper/319:45:243
912599446,24cyclictest0-21swapper/319:45:243
912499447,26cyclictest1905-21ssh23:25:232
912499441,16cyclictest21110-21missed_timers21:10:312
9125994319,8cyclictest7950irq/56-dwc_otg_20:50:213
912499437,24cyclictest0-21swapper/219:25:242
912599424,24cyclictest0-21swapper/323:55:203
9125994234,5cyclictest381ktimersoftd/320:35:223
912499428,7cyclictest7750irq/56-dwc_otg23:30:392
912499428,7cyclictest7750irq/56-dwc_otg23:30:392
912599417,23cyclictest0-21swapper/320:30:243
912599417,20cyclictest0-21swapper/319:55:253
912599416,25cyclictest0-21swapper/319:25:163
912599414,25cyclictest0-21swapper/319:10:233
9125994111,6cyclictest7750irq/56-dwc_otg23:25:103
912499417,22cyclictest0-21swapper/220:25:242
912599407,20cyclictest7950irq/56-dwc_otg_22:54:353
912599406,22cyclictest0-21swapper/321:15:263
912599401,9cyclictest39-21ksoftirqd/320:03:563
912499401,4cyclictest7850irq/56-dwc_otg_00:05:252
912599397,23cyclictest0-21swapper/300:05:263
9125993913,8cyclictest7950irq/56-dwc_otg_22:57:003
912599391,22cyclictest20299-21ls19:40:263
912499396,18cyclictest7850irq/56-dwc_otg_00:21:332
912599385,3cyclictest0-21swapper/300:20:173
912499387,23cyclictest0-21swapper/219:40:242
912499386,23cyclictest0-21swapper/222:15:242
912499384,25cyclictest0-21swapper/222:55:242
912499382,20cyclictest0-21swapper/220:45:112
912499382,11cyclictest0-21swapper/220:15:242
912499381,21cyclictest30827-21ls20:10:112
912599376,4cyclictest29643-21ls20:05:313
9125993716,7cyclictest7750irq/56-dwc_otg23:36:243
9125993711,8cyclictest7950irq/56-dwc_otg_22:15:373
9125993711,5cyclictest7750irq/56-dwc_otg00:15:103
912499375,10cyclictest7850irq/56-dwc_otg_19:50:382
9124993721,3cyclictest301ktimersoftd/219:35:592
912599365,10cyclictest381ktimersoftd/319:20:333
912599364,16cyclictest7950irq/56-dwc_otg_21:23:133
912599364,16cyclictest7950irq/56-dwc_otg_21:23:133
9125993611,14cyclictest23804-21ssh00:35:243
912499365,5cyclictest0-21swapper/220:30:232
912499365,4cyclictest7950irq/56-dwc_otg_21:05:382
9124993615,5cyclictest17033-21grep21:00:282
912499361,19cyclictest18670-21ssh23:05:352
912599357,15cyclictest0-21swapper/322:35:223
912599356,3cyclictest7850irq/56-dwc_otg_23:25:113
912499356,6cyclictest7750irq/56-dwc_otg22:50:272
912499354,18cyclictest0-21swapper/200:33:212
912599347,6cyclictest7950irq/56-dwc_otg_22:25:233
912599345,7cyclictest7750irq/56-dwc_otg23:47:133
9125993419,6cyclictest16959-21ssh22:24:583
9125993419,6cyclictest16959-21ssh22:24:583
9125993414,4cyclictest37-21rcuc/321:58:333
9125993414,10cyclictest23196-21ssh00:35:063
9125993411,7cyclictest12702-1kworker/u9:021:10:393
9125993410,9cyclictest7750irq/56-dwc_otg00:26:173
912499345,5cyclictest7850irq/56-dwc_otg_20:00:392
912499344,3cyclictest7950irq/56-dwc_otg_22:00:242
912499344,14cyclictest7950irq/56-dwc_otg_19:25:102
9124993417,5cyclictest14817-21sh22:20:592
9124993417,5cyclictest14817-21sh22:20:592
9124993417,4cyclictest22125-21sh21:50:362
9124993417,4cyclictest22125-21sh21:50:362
912499341,22cyclictest25743-21cut19:55:282
912499341,22cyclictest25622-21ls21:55:292
912499341,13cyclictest7850irq/56-dwc_otg_20:10:282
912599337,7cyclictest7850irq/56-dwc_otg_21:45:283
912599337,22cyclictest0-21swapper/320:45:163
912599337,22cyclictest0-21swapper/320:45:163
912499339,6cyclictest4193-21/usr/sbin/munin00:10:222
912499336,4cyclictest7750irq/56-dwc_otg23:10:272
912499336,11cyclictest7950irq/56-dwc_otg_00:05:112
912499336,11cyclictest7950irq/56-dwc_otg_00:05:112
9124993316,4cyclictest1180-21runrttasks19:15:262
912499331,5cyclictest30920-21ls23:20:312
912499331,5cyclictest17090-21wget21:45:272
912499331,3cyclictest7950irq/56-dwc_otg_23:40:302
912499331,18cyclictest31-21ksoftirqd/221:20:102
912499331,18cyclictest1180-21runrttasks00:25:592
912499331,13cyclictest0-21swapper/222:37:472
912599328,4cyclictest0-21swapper/322:06:333
9125993213,10cyclictest7850irq/56-dwc_otg_23:40:293
912599321,10cyclictest39-21ksoftirqd/320:44:293
912499326,6cyclictest7850irq/56-dwc_otg_23:15:402
912499326,6cyclictest7850irq/56-dwc_otg_23:15:402
912499325,7cyclictest7850irq/56-dwc_otg_19:45:242
912499325,7cyclictest7850irq/56-dwc_otg_19:45:242
912499322,20cyclictest0-21swapper/223:49:202
912499322,20cyclictest0-21swapper/222:25:282
912499321,5cyclictest2174-21cut20:20:242
912499321,21cyclictest1284-21cut22:05:292
912599319,6cyclictest7750irq/56-dwc_otg23:53:083
912599314,7cyclictest7850irq/56-dwc_otg_20:20:283
912599314,13cyclictest7750irq/56-dwc_otg00:01:343
912599314,13cyclictest7750irq/56-dwc_otg00:01:343
912599311,16cyclictest0-21swapper/320:55:263
9125993111,4cyclictest0-21swapper/323:10:343
912599311,12cyclictest7950irq/56-dwc_otg_19:50:243
912499314,4cyclictest0-21swapper/223:50:212
912499312,5cyclictest0-21swapper/223:55:472
9124993114,5cyclictest10129-21sh00:18:452
912499311,21cyclictest8469-21switchtime20:35:362
912499309,6cyclictest7850irq/56-dwc_otg_19:15:102
912499301,10cyclictest7950irq/56-dwc_otg_19:30:372
76152305,16sleep30-21swapper/319:05:283
912599293,9cyclictest7850irq/56-dwc_otg_19:15:353
9125992911,9cyclictest7850irq/56-dwc_otg_20:17:193
912499295,9cyclictest0-21swapper/220:55:272
912499292,17cyclictest0-21swapper/223:35:352
9124992811,5cyclictest14605-21taskset20:54:022
9125992719,5cyclictest509-21cron19:35:103
912599271,15cyclictest0-21swapper/320:10:323
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional