You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-08 - 04:08

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Tue Sep 08, 2026 00:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
109159913440,78cyclictest12987-21ssh23:35:330
109159913440,78cyclictest12987-21ssh23:35:330
10918991218,79cyclictest13024-21fschecks_count23:35:343
10918991218,79cyclictest13024-21fschecks_count23:35:343
10915998915,60cyclictest18479-21ssh00:20:440
10915998420,49cyclictest23680-21grep21:50:340
10915998420,49cyclictest23680-21grep21:50:340
10915998414,57cyclictest20492-21fschecks_count21:05:370
1091599836,60cyclictest0-21swapper/020:50:290
10915998314,52cyclictest28867-21modprobe23:55:170
3822820,3sleep20-21swapper/200:00:032
1091599808,49cyclictest18903-21apt21:45:170
217612780,3sleep10-21swapper/122:26:581
10915997811,54cyclictest28309-21unixbench_multi19:55:460
10915997810,55cyclictest12290-21ssh22:55:330
10915997714,48cyclictest2120-21apt21:25:170
1091599768,13cyclictest7103-21ssh22:10:170
10915997411,50cyclictest18738-21/usr/sbin/munin19:30:400
10917997235,17cyclictest7850irq/56-dwc_otg_23:35:362
10917997235,17cyclictest7850irq/56-dwc_otg_23:35:362
1091599725,58cyclictest24843-21sh00:29:150
10915997214,43cyclictest11095-21aten_rbpower_po20:40:320
10915997212,56cyclictest25149-21basename19:50:170
236522710,2sleep30-21swapper/323:48:163
1091599717,47cyclictest0-21swapper/000:15:320
10915997119,4cyclictest0-21swapper/022:50:330
10915997116,52cyclictest18334-21ssh23:41:030
10915997113,47cyclictest29590-21fschecks_time23:55:350
1091599708,48cyclictest0-21swapper/019:42:140
10915997018,48cyclictest29053-21ls22:35:440
10915997016,51cyclictest3206-21ntp_kernel_pll_21:25:390
10915997011,43cyclictest12583-21latency_hist23:35:180
1091599689,56cyclictest34002chrt23:23:570
1091599683,34cyclictest0-21swapper/000:35:310
10915996817,27cyclictest21645-21unixbench_multi23:05:460
10915996810,12cyclictest0-21swapper/020:20:290
1091599679,48cyclictest0-21swapper/023:01:130
1091599675,54cyclictest0-21swapper/020:00:340
10915996710,49cyclictest28603-21ssh23:15:230
10915996615,37cyclictest26761-21taskset19:53:050
10915996615,37cyclictest17425-21ssh22:21:340
10915996615,37cyclictest17425-21ssh22:21:340
10915996610,38cyclictest7005-21/usr/sbin/munin21:30:370
197492650,2sleep30-21swapper/300:22:263
1091599659,52cyclictest0-21swapper/022:27:190
1091599656,44cyclictest0-21swapper/023:15:010
1091599653,11cyclictest0-21swapper/021:45:290
10915996517,31cyclictest7919-21ssh23:29:410
10915996516,38cyclictest12717-21ssh21:36:330
10915996516,30cyclictest7362-21ssh22:10:250
10915996512,50cyclictest5006-21grep22:45:460
10915996511,45cyclictest0-21swapper/021:55:370
10915996511,41cyclictest1739-21idleruntime-cro20:15:180
10915996511,37cyclictest2280-21rm00:00:540
1091799647,25cyclictest0-21swapper/223:50:352
1091699648,18cyclictest7750irq/56-dwc_otg19:15:301
10916996430,8cyclictest7750irq/56-dwc_otg23:35:351
10916996430,8cyclictest7750irq/56-dwc_otg23:35:351
1091599646,47cyclictest0-21swapper/023:49:390
1091599642,42cyclictest0-21swapper/021:00:390
1091599639,38cyclictest0-21swapper/000:15:070
1091599636,45cyclictest0-21swapper/021:19:440
1091599636,45cyclictest0-21swapper/021:19:440
10915996312,48cyclictest16400-21hostname19:25:310
10915996312,48cyclictest16400-21hostname19:25:310
10915996311,43cyclictest23751-21ssh21:11:140
1091899621,16cyclictest24401-21ssh23:10:183
1091599619,41cyclictest0-21swapper/022:19:140
1091599616,32cyclictest2677-21/usr/sbin/munin20:15:420
10915996117,26cyclictest1487-21sh22:41:410
10915996110,40cyclictest29551-21idleruntime-cro00:35:170
10918996019,5cyclictest17057-21ntp_offset19:25:403
10918996019,5cyclictest17057-21ntp_offset19:25:403
1091599596,40cyclictest9089-21sed20:35:180
63162580,4sleep121-21rcuc/122:08:541
1091599587,30cyclictest0-21swapper/022:30:440
1091599585,36cyclictest14286-21runrttasks20:49:180
1091599581,31cyclictest2954-21sh22:05:170
10915995812,33cyclictest6878-21rm00:06:350
302442560,2sleep30-21swapper/323:16:153
1091899562,11cyclictest7750irq/56-dwc_otg22:00:273
10915995610,29cyclictest14284-21chrt19:19:540
147892550,2sleep30-21swapper/320:50:303
10917995518,8cyclictest7950irq/56-dwc_otg_00:35:312
1091699543,15cyclictest7750irq/56-dwc_otg23:25:311
1091599538,42cyclictest161032sleep019:25:060
10915995315,5cyclictest16783-21fschecks_count20:55:330
10915995312,6cyclictest0-21swapper/020:35:320
1091599528,32cyclictest0-21swapper/020:05:370
10915995214,24cyclictest0-21swapper/019:11:350
1091899512,19cyclictest0-21swapper/321:11:493
1091599512,33cyclictest0-21swapper/019:36:410
99222500,1sleep30-21swapper/322:12:593
10918995016,22cyclictest10997-21ssh21:35:323
1091899501,15cyclictest0-21swapper/300:12:513
1091699505,11cyclictest7750irq/56-dwc_otg00:30:341
1091599505,32cyclictest0-21swapper/020:29:230
1091899491,22cyclictest7750irq/56-dwc_otg22:30:383
1091699492,6cyclictest0-21swapper/123:40:301
1091699484,10cyclictest7950irq/56-dwc_otg_22:55:181
1091799479,25cyclictest21810-21diskmemload21:45:312
1091699472,9cyclictest7750irq/56-dwc_otg19:50:301
1091899461,6cyclictest31806-21timerwakeupswit21:20:473
1091899461,14cyclictest0-21swapper/322:50:423
1091799465,10cyclictest0-21swapper/221:50:292
1091799465,10cyclictest0-21swapper/221:50:292
1091799464,15cyclictest15682-21ssh22:20:292
1091799464,15cyclictest15682-21ssh22:20:292
1091799457,24cyclictest0-21swapper/219:45:312
1091799457,24cyclictest0-21swapper/219:25:312
1091799457,24cyclictest0-21swapper/219:25:312
1091699455,7cyclictest7850irq/56-dwc_otg_21:35:471
1091799447,19cyclictest7850irq/56-dwc_otg_22:50:182
1091799444,22cyclictest0-21swapper/223:10:332
1091799443,20cyclictest29-21rcuc/222:10:422
1091799441,11cyclictest0-21swapper/200:10:322
1091699443,5cyclictest7850irq/56-dwc_otg_00:25:301
1091699442,8cyclictest7750irq/56-dwc_otg21:30:331
104242443,34sleep00-21swapper/019:07:260
1091899436,23cyclictest2915-21timerandwakeup20:15:453
1091799437,24cyclictest0-21swapper/220:45:302
1091799437,24cyclictest0-21swapper/200:05:302
1091799436,23cyclictest0-21swapper/223:45:312
10917994318,5cyclictest28804-21/usr/sbin/munin22:35:412
36792420,2sleep20-21swapper/200:03:292
319972420,15sleep17950irq/56-dwc_otg_22:40:181
309402420,5sleep11091699cyclictest23:17:301
288132420,3sleep20-21swapper/220:00:182
1091899427,21cyclictest0-21swapper/320:25:313
1091799427,25cyclictest0-21swapper/221:25:302
1091799427,11cyclictest7850irq/56-dwc_otg_19:30:422
1091799426,25cyclictest0-21swapper/219:50:322
10917994218,10cyclictest301ktimersoftd/223:15:292
1091699424,6cyclictest7950irq/56-dwc_otg_20:05:301
1091699421,7cyclictest26515-21grep21:15:321
1091699421,7cyclictest26515-21grep21:15:321
10918994113,15cyclictest37-21rcuc/323:25:453
1091799417,24cyclictest0-21swapper/221:15:312
1091799417,24cyclictest0-21swapper/221:15:312
1091799416,24cyclictest31246-21kworker/u8:023:00:242
1091799416,18cyclictest29-21rcuc/222:16:042
1091799415,5cyclictest7850irq/56-dwc_otg_00:15:412
1091699414,25cyclictest7438-21ssh22:10:321
10916994121,5cyclictest2402950wget22:30:321
10916994118,5cyclictest16002-21fschecks_time22:20:341
10916994118,5cyclictest16002-21fschecks_time22:20:341
1091799407,21cyclictest0-21swapper/223:40:312
1091799405,22cyclictest301ktimersoftd/222:53:062
1091799402,6cyclictest7750irq/56-dwc_otg21:40:292
10917994024,6cyclictest31246-21kworker/u8:023:20:312
1091799402,29cyclictest7950irq/56-dwc_otg_21:10:442
1091699407,2cyclictest0-21swapper/120:50:231
1091699405,6cyclictest0-21swapper/123:00:281
10916994016,4cyclictest0-21swapper/119:30:301
1091899396,20cyclictest16228-21ssh23:00:233
1091899391,23cyclictest0-21swapper/320:55:303
1091799399,13cyclictest7850irq/56-dwc_otg_23:07:162
1091799397,7cyclictest29-21rcuc/200:20:452
1091799396,22cyclictest0-21swapper/222:00:292
1091699398,23cyclictest0-21swapper/121:40:311
1091699397,24cyclictest0-21swapper/119:20:291
1091699397,23cyclictest0-21swapper/119:55:311
1091699397,22cyclictest0-21swapper/120:35:321
1091699393,5cyclictest7750irq/56-dwc_otg00:10:331
1091899382,25cyclictest0-21swapper/319:35:313
1091799387,16cyclictest7750irq/56-dwc_otg22:07:322
1091799382,20cyclictest0-21swapper/219:35:402
1091699387,6cyclictest7750irq/56-dwc_otg23:05:341
1091699387,25cyclictest0-21swapper/100:00:311
1091699387,15cyclictest7950irq/56-dwc_otg_21:20:371
1091699381,8cyclictest0-21swapper/119:35:291
10916993817,6cyclictest4489-21cat22:45:391
10916993810,5cyclictest7850irq/56-dwc_otg_22:20:171
1091799377,15cyclictest301ktimersoftd/200:32:312
1091799377,10cyclictest31-21ksoftirqd/221:05:382
10917993716,5cyclictest6753-21ssh21:30:332
1091699376,25cyclictest21-21rcuc/119:25:301
1091699376,25cyclictest21-21rcuc/119:25:301
1091699376,21cyclictest0-21swapper/123:50:351
1091699371,26cyclictest2472-21chrt20:15:381
10916993710,5cyclictest0-21swapper/100:10:181
1091799369,8cyclictest7750irq/56-dwc_otg22:33:172
1091799369,8cyclictest29-21rcuc/220:24:092
1091799368,6cyclictest31-21ksoftirqd/219:10:382
1091799368,11cyclictest7750irq/56-dwc_otg20:35:182
1091799367,16cyclictest0-21swapper/220:40:312
1091799366,24cyclictest0-21swapper/220:50:292
1091799366,20cyclictest7850irq/56-dwc_otg_21:25:172
1091799364,21cyclictest7850irq/56-dwc_otg_19:40:432
1091799362,11cyclictest29-21rcuc/223:29:402
10917993613,4cyclictest32373-21latency_hist20:10:172
10917993611,15cyclictest0-21swapper/222:41:442
1091699366,20cyclictest31834-21entropy22:00:321
1091699363,3cyclictest7850irq/56-dwc_otg_21:55:291
10916993627,6cyclictest21-21rcuc/100:15:291
10916993616,5cyclictest7750irq/56-dwc_otg23:30:341
1091899356,8cyclictest7750irq/56-dwc_otg21:45:443
10918993516,10cyclictest11484-21ssh23:33:373
1091799357,9cyclictest29-21rcuc/221:56:402
1091799357,5cyclictest31-21ksoftirqd/222:55:312
1091799351,9cyclictest18720-21fschecks_time21:00:372
10917993510,10cyclictest7750irq/56-dwc_otg20:15:462
1091699359,4cyclictest0-21swapper/122:59:011
1091699357,14cyclictest7850irq/56-dwc_otg_21:00:481
10916993515,10cyclictest21810-21diskmemload00:00:071
123122341,29sleep30-21swapper/320:42:183
1091899344,4cyclictest0-21swapper/322:06:453
1091799345,12cyclictest29-21rcuc/200:26:442
10917993410,4cyclictest0-21swapper/221:35:382
1091699347,11cyclictest7950irq/56-dwc_otg_21:10:311
1091699345,14cyclictest7850irq/56-dwc_otg_23:20:401
1091699344,7cyclictest7750irq/56-dwc_otg00:20:351
1091699341,6cyclictest32666-21aten_rbpower_en20:10:311
10916993415,4cyclictest29258-21fschecks_count20:00:341
10916993410,14cyclictest0-21swapper/121:50:391
10916993410,14cyclictest0-21swapper/121:50:391
1091899338,4cyclictest0-21swapper/300:00:183
1091899337,16cyclictest16203-21systemd-journal23:51:233
1091899337,14cyclictest0-21swapper/320:20:303
1091899337,11cyclictest7950irq/56-dwc_otg_22:20:423
1091899337,11cyclictest7950irq/56-dwc_otg_22:20:423
1091899336,6cyclictest15842-21ssh23:00:183
1091899335,7cyclictest29888-21ssh00:35:303
1091899335,4cyclictest0-21swapper/321:17:113
1091899335,4cyclictest0-21swapper/321:17:113
1091899334,11cyclictest7950irq/56-dwc_otg_22:35:463
10918993310,6cyclictest2920-1kworker/u9:000:25:313
1091799336,5cyclictest9776-21ssh23:30:452
1091799331,7cyclictest0-21swapper/220:35:322
1091799331,6cyclictest0-21swapper/222:25:322
10917993314,5cyclictest642-21kernelversion20:10:372
1091699338,5cyclictest7750irq/56-dwc_otg23:10:411
1091699335,20cyclictest21018-21ssh23:45:311
1091699332,8cyclictest0-21swapper/121:25:441
1091699331,16cyclictest0-21swapper/122:40:351
55992321,2sleep20-21swapper/220:25:302
1091899322,12cyclictest7950irq/56-dwc_otg_20:05:183
10918993215,9cyclictest7950irq/56-dwc_otg_22:30:033
1091899321,23cyclictest25141-21latency_hist19:50:183
1091799321,7cyclictest15245-21grep19:20:382
1091699328,13cyclictest20204-21sed21:45:441
1091699327,15cyclictest0-21swapper/121:05:331
1091699323,13cyclictest8187-21uname20:30:421
10916993219,10cyclictest0-21swapper/119:10:361
1091699321,14cyclictest20188-21snmpd19:40:311
256092310,2sleep30-21swapper/321:52:293
256092310,2sleep30-21swapper/321:52:293
1091899318,4cyclictest0-21swapper/323:40:453
1091899317,21cyclictest0-21swapper/319:40:293
1091899317,14cyclictest0-21swapper/300:05:243
1091899315,6cyclictest7750irq/56-dwc_otg20:10:343
1091899315,5cyclictest7850irq/56-dwc_otg_00:30:373
1091899315,5cyclictest7750irq/56-dwc_otg22:50:173
1091899312,5cyclictest0-21swapper/321:32:193
10918993115,5cyclictest969-21basename00:00:313
10918993113,4cyclictest27282-21wget19:55:323
10918993113,4cyclictest18059-21sh21:43:473
1091899311,17cyclictest0-21swapper/319:30:353
1091799317,6cyclictest29307-21tune2fs20:00:342
1091699317,5cyclictest7850irq/56-dwc_otg_19:45:341
1091699314,6cyclictest7750irq/56-dwc_otg20:20:451
1091699311,18cyclictest5899-21fschecks_time20:25:351
90902303,19sleep10-21swapper/119:05:251
1091899307,5cyclictest7950irq/56-dwc_otg_20:35:413
1091899306,14cyclictest0-21swapper/319:10:323
1091899304,16cyclictest7950irq/56-dwc_otg_19:15:453
10918993023,4cyclictest16132-21sh19:25:173
1091899301,7cyclictest1153-21ssh22:41:063
10918993015,5cyclictest14333-21seq20:49:553
1091899301,23cyclictest13756-21uniq00:15:353
1091899301,17cyclictest26954-21latency_hist19:55:183
1091899301,11cyclictest6513-21grep21:30:183
1091799304,13cyclictest0-21swapper/220:55:352
1091799301,5cyclictest13346-21grep19:15:382
1091699306,14cyclictest0-21swapper/100:35:311
1091899295,5cyclictest7950irq/56-dwc_otg_23:10:353
1091899295,4cyclictest7950irq/56-dwc_otg_23:25:183
97172285,14sleep30-21swapper/319:05:393
1091899287,4cyclictest0-21swapper/322:18:173
1091899281,9cyclictest0-21swapper/321:05:403
1091899281,18cyclictest0-21swapper/320:06:363
10918992811,5cyclictest21810-21diskmemload21:55:373
1091899281,13cyclictest7950irq/56-dwc_otg_20:30:443
1091699282,5cyclictest17655-21head20:55:441
1091699273,13cyclictest7950irq/56-dwc_otg_20:40:391
1091699271,6cyclictest7750irq/56-dwc_otg20:45:411
90862253,13sleep20-21swapper/219:05:222
10918992519,4cyclictest18600-21/usr/sbin/munin21:00:343
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional