You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-03 - 05:40

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Mon Aug 03, 2026 00:43:41)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3036822140,8sleep130372-21kworker/u8:319:10:291
48921520,6sleep33039099cyclictest23:40:473
30387991144,81cyclictest0-21swapper/000:05:300
30387991135,80cyclictest0-21swapper/000:05:300
30387991135,80cyclictest0-21swapper/000:05:300
303879910215,67cyclictest0-21swapper/019:10:300
3038799943,70cyclictest0-21swapper/023:45:470
3038799893,69cyclictest1532-1kworker/0:2H23:25:420
3038799864,69cyclictest0-21swapper/020:50:390
3038799831,68cyclictest12118-21runrttasks23:55:410
266652800,1sleep00-21swapper/020:30:280
3038999788,33cyclictest0-21swapper/223:15:422
124782780,2sleep10-21swapper/123:15:441
323832770,2sleep032349-21ssh23:00:280
3038799767,30cyclictest0-21swapper/021:25:450
3038999752,48cyclictest20142-21ssh00:05:312
177702750,7sleep23038999cyclictest00:01:292
177702750,7sleep23038999cyclictest00:01:292
30390997433,14cyclictest7850irq/56-dwc_otg00:05:313
30387997447,12cyclictest101ktimersoftd/022:35:280
30387997447,12cyclictest101ktimersoftd/022:35:280
3038799734,61cyclictest0-21swapper/020:15:390
30387997215,41cyclictest0-21swapper/022:10:470
113372710,2sleep20-21swapper/221:53:142
30387997049,10cyclictest7850irq/56-dwc_otg23:20:420
30387997049,10cyclictest7850irq/56-dwc_otg23:20:420
3038799692,55cyclictest15984-21apt-get23:20:280
3038799692,48cyclictest0-21swapper/021:40:460
3038799684,49cyclictest9-21ksoftirqd/021:15:280
30387996819,25cyclictest25546-21/usr/sbin/munin21:30:460
30387996819,25cyclictest25546-21/usr/sbin/munin21:30:460
3038799668,27cyclictest0-21swapper/021:45:420
3038799668,27cyclictest0-21swapper/021:45:420
3038799666,50cyclictest9-21ksoftirqd/022:00:460
30387996648,11cyclictest101ktimersoftd/022:40:490
30387996647,5cyclictest0-21swapper/020:35:410
30387996644,4cyclictest0-21swapper/000:25:510
3038799662,49cyclictest0-21swapper/000:36:310
3038799661,52cyclictest24753-21fschecks_count23:30:450
3038799656,24cyclictest24718-21ssh22:50:410
30387996544,5cyclictest101ktimersoftd/022:27:290
3038799652,55cyclictest0-21swapper/022:20:510
3038799652,43cyclictest8050irq/56-dwc_otg_00:20:390
166042650,2sleep30-21swapper/321:20:083
166042650,2sleep30-21swapper/321:20:083
57642640,3sleep05767-21load19:30:490
57642640,3sleep05767-21load19:30:490
30388996419,22cyclictest7850irq/56-dwc_otg23:05:421
30387996438,7cyclictest101ktimersoftd/021:55:270
3038799642,42cyclictest0-21swapper/022:05:350
3038799641,53cyclictest13055-21fschecks_time22:35:460
3038799641,44cyclictest0-21swapper/021:20:350
3038899633,14cyclictest20459-21ssh23:25:421
3038899633,10cyclictest0-21swapper/120:55:421
3038799638,24cyclictest0-21swapper/023:35:430
30387996340,11cyclictest0-21swapper/023:00:490
30387996340,11cyclictest0-21swapper/023:00:490
3038799631,50cyclictest0-21swapper/020:20:530
3038799622,52cyclictest0-21swapper/023:55:290
3038799621,52cyclictest13550-21unixbench_singl19:50:560
3038899618,35cyclictest0-21swapper/122:10:411
3038899612,21cyclictest8050irq/56-dwc_otg_22:40:411
30387996147,5cyclictest11926-21cron23:15:280
30387996141,10cyclictest0-21swapper/021:55:470
30387996130,18cyclictest0-21swapper/023:05:420
3038799612,49cyclictest0-21swapper/019:40:460
3038799612,49cyclictest0-21swapper/000:11:530
3038799612,45cyclictest0-21swapper/000:30:590
300912613,14sleep10-21swapper/119:10:101
3039099608,22cyclictest20443-21ssh23:25:393
30387996021,17cyclictest17591-21latency_hist20:05:280
3038799601,49cyclictest505-21cron19:20:280
3038799601,48cyclictest0-21swapper/021:35:430
30388995917,30cyclictest0-21swapper/121:45:421
30388995917,30cyclictest0-21swapper/121:45:421
30388995910,12cyclictest19869-21http00:05:281
30388995910,12cyclictest19869-21http00:05:281
3039099587,16cyclictest0-21swapper/323:05:423
30387995842,5cyclictest8050irq/56-dwc_otg_23:40:510
3038799582,37cyclictest0-21swapper/000:15:480
3038799582,17cyclictest0-21swapper/019:45:470
3038799581,40cyclictest0-21swapper/022:45:470
3038899579,31cyclictest0-21swapper/120:25:421
3038899572,9cyclictest7850irq/56-dwc_otg23:10:421
3038799573,44cyclictest0-21swapper/021:00:560
3038799573,44cyclictest0-21swapper/021:00:560
3038799571,49cyclictest0-21swapper/019:56:560
3038799571,45cyclictest7097-21aten_rbpower_po19:35:410
3039099569,9cyclictest8050irq/56-dwc_otg_00:05:283
3039099569,9cyclictest8050irq/56-dwc_otg_00:05:283
3039099568,39cyclictest0-21swapper/320:25:423
3038999563,44cyclictest25370-21cut20:25:462
3038899567,31cyclictest0-21swapper/120:45:431
3038899567,25cyclictest0-21swapper/119:30:421
3038899567,25cyclictest0-21swapper/119:30:421
3038899563,23cyclictest0-21swapper/123:45:471
30387995634,9cyclictest0-21swapper/021:05:430
30387995631,15cyclictest101ktimersoftd/020:45:520
3038799562,42cyclictest0-21swapper/022:18:230
3038799561,45cyclictest0-21swapper/021:15:560
3038799561,45cyclictest0-21swapper/021:15:560
30390995512,8cyclictest7950irq/56-dwc_otg_23:45:473
3038999553,31cyclictest727-21runrttasks23:25:402
3038899559,33cyclictest0-21swapper/100:05:371
3038899558,31cyclictest29314-21ssh21:35:421
30387995514,33cyclictest21370-21latency_hist20:15:290
3039099548,33cyclictest0-21swapper/321:35:423
3039099548,29cyclictest0-21swapper/320:50:343
3039099548,29cyclictest0-21swapper/300:15:433
3038999545,9cyclictest4393-21ssh23:45:482
3038899549,26cyclictest21329-21ssh21:25:451
3038899548,31cyclictest0-21swapper/100:25:421
3038799531,7cyclictest0-21swapper/020:05:400
3039099528,30cyclictest0-21swapper/321:25:453
3038899528,30cyclictest0-21swapper/123:30:411
3038999518,27cyclictest0-21swapper/222:00:342
3038999513,8cyclictest0-21swapper/221:45:392
3038999513,8cyclictest0-21swapper/221:45:392
3038799512,33cyclictest27280-21if_wlan020:30:480
3039099507,31cyclictest0-21swapper/300:25:423
3039099507,26cyclictest4870-21ssh21:45:423
3039099507,26cyclictest4870-21ssh21:45:423
30387995024,19cyclictest30774-21fschecks_time20:40:450
3039099497,24cyclictest0-21swapper/320:15:413
3039099497,21cyclictest0-21swapper/322:20:423
30387994929,9cyclictest0-21swapper/019:20:290
3039099488,33cyclictest0-21swapper/320:30:433
3039099486,26cyclictest28931-21ssh22:15:413
30390994818,15cyclictest0-21swapper/321:30:433
30390994818,15cyclictest0-21swapper/321:30:433
3038999483,32cyclictest0-21swapper/219:10:302
3038899487,26cyclictest0-21swapper/119:15:421
30388994817,9cyclictest0-21swapper/123:55:281
3038799481,36cyclictest0-21swapper/020:55:490
3039099471,19cyclictest1393750ssh21:55:583
3038999478,26cyclictest16352-21ssh23:20:362
3038999478,26cyclictest16352-21ssh23:20:362
30389994723,5cyclictest9036-21sensors_temp23:50:562
3038899475,10cyclictest0-21swapper/100:10:411
3038899474,9cyclictest32696-21ssh23:00:401
3038899474,9cyclictest32696-21ssh23:00:401
30388994711,24cyclictest0-21swapper/119:25:421
30387994711,25cyclictest0-21swapper/019:25:420
3039099463,12cyclictest0-21swapper/323:00:403
3039099463,12cyclictest0-21swapper/323:00:403
30389994619,5cyclictest17060-21apt-config21:20:292
30389994619,5cyclictest17060-21apt-config21:20:292
3038899466,24cyclictest16970-21ssh22:00:431
30388994639,5cyclictest221ktimersoftd/120:05:391
30388994617,5cyclictest23-21ksoftirqd/121:20:301
3512450,7sleep13038899cyclictest23:40:451
30390994534,8cyclictest381ktimersoftd/320:55:423
3039099452,11cyclictest0-21swapper/322:48:043
3038899452,7cyclictest7850irq/56-dwc_otg23:35:391
108812450,2sleep30-21swapper/319:45:463
3038999447,24cyclictest0-21swapper/220:00:432
30389994416,13cyclictest8739-21diskmemload22:18:122
3038899449,8cyclictest221ktimersoftd/122:35:551
3038899447,22cyclictest0-21swapper/120:15:411
3038899443,15cyclictest7950irq/56-dwc_otg_23:56:441
3038899442,5cyclictest0-21swapper/100:20:401
30388994417,7cyclictest221ktimersoftd/119:35:491
300552443,32sleep00-21swapper/019:09:400
3039099436,23cyclictest0-21swapper/319:15:423
30390994314,8cyclictest39-21ksoftirqd/322:35:393
3038999432,24cyclictest0-21swapper/221:45:282
3038999431,25cyclictest3722-21cpuspeed20:55:452
3038899436,23cyclictest500-21ssh22:20:421
3038899432,4cyclictest8050irq/56-dwc_otg_21:50:461
30388994320,6cyclictest25340-21wget21:30:431
30388994320,6cyclictest25340-21wget21:30:431
3038999422,12cyclictest24955-21runrttasks00:10:492
3038899429,5cyclictest7950irq/56-dwc_otg_00:40:281
3038899428,6cyclictest7950irq/56-dwc_otg_00:30:421
3038899422,6cyclictest0-21swapper/122:05:401
30388994220,6cyclictest29140-21sh22:15:431
30388994215,7cyclictest221ktimersoftd/121:55:491
30388994211,6cyclictest23-21ksoftirqd/123:20:471
30388994211,6cyclictest23-21ksoftirqd/123:20:471
3038899421,12cyclictest221ktimersoftd/121:17:561
3038899421,12cyclictest221ktimersoftd/121:17:561
3039099417,22cyclictest0-21swapper/322:25:433
3039099416,23cyclictest16878-21ssh22:00:353
3039099413,8cyclictest0-21swapper/320:35:413
30390994122,6cyclictest30698-21fschecks_time19:10:463
30390994110,16cyclictest0-21swapper/323:30:473
3038999413,5cyclictest30544-21sed21:35:592
30389994117,5cyclictest1296250wget21:55:442
3038899417,6cyclictest8050irq/56-dwc_otg_21:40:381
30388994113,5cyclictest9892-21open_files21:10:521
3039099408,17cyclictest0-21swapper/322:10:413
3039099407,18cyclictest0-21swapper/321:20:353
30390994014,7cyclictest39-21ksoftirqd/321:55:273
3038999402,4cyclictest0-21swapper/222:40:392
3038999402,10cyclictest15708-21ls00:40:282
3038899402,8cyclictest0-21swapper/120:30:411
30388994014,5cyclictest11186-21missed_timers19:45:501
3039099396,24cyclictest8129-21ssh23:50:433
3039099392,5cyclictest0-21swapper/321:43:303
30390993920,9cyclictest30357-21ssh23:37:063
3039099391,8cyclictest12263-21awk22:35:283
3039099391,8cyclictest12263-21awk22:35:283
30390993916,13cyclictest25762-21cat22:50:563
30390993916,10cyclictest8739-21diskmemload23:13:473
3038999398,16cyclictest0-21swapper/221:00:422
3038999398,16cyclictest0-21swapper/221:00:422
3038999398,13cyclictest8050irq/56-dwc_otg_20:25:282
3038999392,27cyclictest0-21swapper/200:17:152
30389993913,11cyclictest7950irq/56-dwc_otg_23:35:552
3038899398,5cyclictest0-21swapper/100:15:541
30388993914,10cyclictest5249-21nfs4_client22:25:521
3038899391,27cyclictest0-21swapper/120:50:341
3039099382,7cyclictest7850irq/56-dwc_otg22:10:273
30390993811,9cyclictest8050irq/56-dwc_otg_23:20:493
30390993811,9cyclictest8050irq/56-dwc_otg_23:20:493
3039099381,15cyclictest37-21rcuc/319:35:473
3038999387,18cyclictest0-21swapper/222:45:382
3038999385,11cyclictest17205-21/usr/sbin/munin21:20:422
3038999383,16cyclictest8050irq/56-dwc_otg_21:35:292
3038999383,16cyclictest8050irq/56-dwc_otg_21:35:292
3038999381,8cyclictest1412-21latency_hist19:20:282
30389993813,6cyclictest7950irq/56-dwc_otg_00:30:592
30389993812,14cyclictest0-21swapper/200:20:552
3038999381,10cyclictest12757-21ssh21:15:272
3038899383,7cyclictest0-21swapper/120:00:421
30388993813,6cyclictest221ktimersoftd/119:55:481
3039099379,5cyclictest0-21swapper/323:15:393
3039099374,22cyclictest39-21ksoftirqd/321:15:143
3039099372,6cyclictest7850irq/56-dwc_otg00:30:423
30390993723,10cyclictest0-21swapper/319:40:433
30390993717,11cyclictest39-21ksoftirqd/319:50:543
30389993730,5cyclictest1064-21ls22:20:492
3038999372,9cyclictest24742-21aten_rbpower_cu22:50:422
3038999372,7cyclictest25263-21fschecks_time22:10:452
3038999372,22cyclictest0-21swapper/223:33:232
30389993717,6cyclictest727-21runrttasks23:02:442
30389993717,6cyclictest727-21runrttasks23:02:442
30389993717,5cyclictest727-21runrttasks23:10:552
3038899378,7cyclictest7950irq/56-dwc_otg_19:40:511
3038899375,6cyclictest21-21rcuc/122:45:491
3038899375,5cyclictest21-21rcuc/122:59:301
3038899371,25cyclictest24886-21ssh22:50:431
290872376,21sleep329134-21/usr/sbin/munin19:05:513
3039099369,13cyclictest39-21ksoftirqd/323:57:593
3039099368,17cyclictest0-21swapper/322:40:413
3039099364,24cyclictest24281-21ssh00:10:413
3039099364,23cyclictest0-21swapper/300:39:063
30390993615,13cyclictest3651-21fschecks_count19:25:463
3039099361,24cyclictest0-21swapper/300:25:103
30390993611,5cyclictest37-21rcuc/320:00:583
3038999369,12cyclictest7950irq/56-dwc_otg_00:25:412
3038999367,7cyclictest8050irq/56-dwc_otg_22:05:472
3038999367,14cyclictest7950irq/56-dwc_otg_20:35:282
3038999361,9cyclictest30014-21ssh22:56:012
30389993614,3cyclictest0-21swapper/220:50:432
3039099356,14cyclictest0-21swapper/320:10:413
30390993516,4cyclictest381ktimersoftd/319:55:523
30390993510,7cyclictest318272chrt20:43:033
3038999357,6cyclictest7950irq/56-dwc_otg_22:25:442
3038999356,13cyclictest8050irq/56-dwc_otg_19:45:432
3038999355,15cyclictest7950irq/56-dwc_otg_22:35:502
30389993523,8cyclictest0-21swapper/223:55:402
3038999351,15cyclictest7950irq/56-dwc_otg_23:40:422
30389993510,5cyclictest7950irq/56-dwc_otg_23:05:452
3038899358,18cyclictest7950irq/56-dwc_otg_20:20:451
3038899357,4cyclictest23-21ksoftirqd/120:40:531
3038899356,9cyclictest21-21rcuc/121:04:221
3038899356,9cyclictest21-21rcuc/121:04:221
3038899356,6cyclictest0-21swapper/122:30:491
3038899356,6cyclictest0-21swapper/122:30:491
301142359,14sleep230151-21munin-run19:10:272
3039099347,15cyclictest0-21swapper/320:45:433
3039099346,4cyclictest8050irq/56-dwc_otg_22:55:443
3038999348,15cyclictest7950irq/56-dwc_otg_21:25:462
3038999346,8cyclictest7229-21aten_rbpower_po21:05:432
3038999345,14cyclictest7950irq/56-dwc_otg_19:35:442
3038999342,9cyclictest125-21systemd-journal20:15:282
3038899342,8cyclictest1795-21taskset19:20:431
3039099333,13cyclictest23238-21/usr/sbin/munin20:20:533
3038999337,5cyclictest7850irq/56-dwc_otg19:30:282
3038999336,11cyclictest8050irq/56-dwc_otg_22:30:532
3038999336,11cyclictest8050irq/56-dwc_otg_22:30:532
3038999332,10cyclictest9366-21latency19:40:462
3038999331,9cyclictest29804-21unixbench_singl20:35:572
3039099321,14cyclictest0-21swapper/321:05:543
30389993216,5cyclictest32268-21/usr/sbin/munin20:45:512
3038899322,5cyclictest221ktimersoftd/119:50:421
30390993113,7cyclictest8050irq/56-dwc_otg_19:20:423
3038999313,16cyclictest8050irq/56-dwc_otg_20:07:282
3038999312,17cyclictest0-21swapper/219:21:512
3038999311,7cyclictest30727-21tune2fs20:40:452
3038999311,5cyclictest0-21swapper/220:20:282
3038899317,14cyclictest0-21swapper/120:10:411
3038899316,11cyclictest7495-21fschecks_time21:05:461
30388993111,4cyclictest221ktimersoftd/120:40:281
3039099306,8cyclictest8050irq/56-dwc_otg_19:30:463
3039099306,8cyclictest8050irq/56-dwc_otg_19:30:463
3039099301,13cyclictest8050irq/56-dwc_otg_21:02:353
3039099301,13cyclictest8050irq/56-dwc_otg_21:02:353
3038999301,14cyclictest0-21swapper/219:55:552
3039099299,11cyclictest37-21rcuc/320:06:413
3038999297,4cyclictest8050irq/56-dwc_otg_19:30:402
3038999297,4cyclictest8050irq/56-dwc_otg_19:30:402
3038999296,14cyclictest0-21swapper/219:50:412
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional