You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-28 - 07:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Thu May 28, 2026 00:45:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
59052299861932861927,4cyclictest0-21swapper/612
59052699861821861816,4cyclictest0-21swapper/713
59051899849591849583,6cyclictest0-21swapper/511
59052699814828814817,9cyclictest3714971-21CPU13
59051899809009808998,9cyclictest3714971-21CPU11
59055399796981796975,4cyclictest181rcu_preempt6
59049699790527790521,5cyclictest0-21swapper/00
59054699761985761977,5cyclictest181rcu_preempt4
59054699752986752979,4cyclictest181rcu_preempt4
59050399702726702715,9cyclictest3714971-21CPU8
59050399702726702715,9cyclictest3714971-21CPU8
59052699698000697988,8cyclictest3714970-21CPU13
59051399677052677041,9cyclictest3714971-21CPU10
59051899668179668174,4cyclictest0-21swapper/511
59052299642919642910,6cyclictest181rcu_preempt12
59053699635503635492,9cyclictest3714972-21CPU2
59050099632973632959,9cyclictest3714967-21CPU1
59050099632973632959,9cyclictest3714967-21CPU1
59050099612978612972,5cyclictest0-21swapper/11
59054699610635610625,8cyclictest3714971-21CPU4
59052999558903558891,7cyclictest3714969-21CPU14
59050699542948542933,10cyclictest3714974-21CPU9
59053699541976541968,5cyclictest181rcu_preempt2
59054699524706524701,4cyclictest0-21swapper/124
59052299500912500905,4cyclictest181rcu_preempt12
59050699499946499934,8cyclictest3714973-21CPU9
59050699491947491942,3cyclictest181rcu_preempt9
59054099483975483968,4cyclictest181rcu_preempt3
59052699464580464575,4cyclictest0-21swapper/713
59054099458975458963,8cyclictest3714973-21CPU3
59050399456847456836,8cyclictest0-21swapper/28
59052999455662455656,5cyclictest0-21swapper/814
59053499453916453911,4cyclictest0-21swapper/915
59052299448355448347,7cyclictest3714973-21CPU12
59055799448016448006,8cyclictest3714974-21CPU7
59050699441979441971,6cyclictest3714968-21CPU9
59055799437004436998,5cyclictest0-21swapper/157
59055399436832436820,10cyclictest3714973-21CPU6
59055399434979434972,4cyclictest181rcu_preempt6
59054099434977434966,7cyclictest3714973-21CPU3
59050699433843433838,4cyclictest0-21swapper/39
59051899432124432113,9cyclictest3714973-21CPU11
59050099423232423222,8cyclictest3714975-21CPU1
59055799421725421718,6cyclictest0-21swapper/157
59052999419903419889,9cyclictest3714973-21CPU14
59054099414800414795,4cyclictest0-21swapper/113
59054699408981408969,8cyclictest3714975-21CPU4
59054699406993406987,5cyclictest0-21swapper/124
59051899406526406521,4cyclictest0-21swapper/511
59049699381034381029,4cyclictest0-21swapper/00
59055799378965378960,4cyclictest0-21swapper/157
59053699378355378350,4cyclictest0-21swapper/102
59052299370912370899,9cyclictest3714967-21CPU12
59054099369296369285,9cyclictest0-21swapper/113
59055799366614366607,6cyclictest0-21swapper/157
59054099365978365964,9cyclictest3714970-21CPU3
59051899365890365885,4cyclictest0-21swapper/511
59055799362088362082,5cyclictest0-21swapper/157
59055799362088362082,5cyclictest0-21swapper/157
59053499361821361816,4cyclictest0-21swapper/915
59052999361157361152,4cyclictest0-21swapper/814
59052299360814360810,3cyclictest0-21swapper/612
59051899360425360420,4cyclictest0-21swapper/511
59055799359558359553,4cyclictest0-21swapper/157
59054699359495359490,4cyclictest0-21swapper/124
59050099357950357943,4cyclictest0-21swapper/11
59053699357935357930,4cyclictest0-21swapper/102
59053499357509357504,4cyclictest0-21swapper/915
59055399357370357365,4cyclictest0-21swapper/146
59049699357116357111,4cyclictest0-21swapper/00
59052999356568356563,4cyclictest0-21swapper/814
59052999356568356563,4cyclictest0-21swapper/814
59055799356412356407,4cyclictest0-21swapper/157
59055399356326356321,4cyclictest0-21swapper/146
59050699356037356033,3cyclictest0-21swapper/39
59051899355178355173,4cyclictest0-21swapper/511
59054699355066355061,4cyclictest0-21swapper/124
59052699353980353973,4cyclictest0-21swapper/713
59053499353821353816,4cyclictest0-21swapper/915
59052999352903352897,3cyclictest181rcu_preempt14
59054099352859352854,4cyclictest0-21swapper/113
59050699352697352692,4cyclictest0-21swapper/39
59055799352558352553,4cyclictest0-21swapper/157
59054099352527352521,5cyclictest0-21swapper/113
59050099352329352324,4cyclictest0-21swapper/11
59055399352242352233,8cyclictest0-21swapper/146
59051399351672351667,4cyclictest0-21swapper/410
59054699351287351282,4cyclictest0-21swapper/124
59055399351073351068,4cyclictest0-21swapper/146
59051899349998349990,6cyclictest0-21swapper/511
59051899348365348360,4cyclictest0-21swapper/511
59049699347763347759,3cyclictest0-21swapper/00
59051899344969344958,9cyclictest3714970-21CPU11
59055799341890341882,5cyclictest181rcu_preempt7
59052699336006335995,8cyclictest181rcu_preempt13
59054099335976335963,8cyclictest3714973-21CPU3
59053499332096332091,4cyclictest0-21swapper/915
59054699331890331885,4cyclictest0-21swapper/124
59052299329553329546,6cyclictest3714968-21CPU12
59050099316718316712,5cyclictest0-21swapper/11
59055799316002315997,4cyclictest0-21swapper/157
59052299306762306751,9cyclictest3714974-21CPU12
59050099306532306528,3cyclictest0-21swapper/11
59052699303854303842,10cyclictest3714965-21CPU13
59053699302031302022,8cyclictest3714975-21CPU2
59054699295730295726,3cyclictest0-21swapper/124
59053699293478293473,4cyclictest0-21swapper/102
59052299290460290455,4cyclictest0-21swapper/612
59054699288874288870,3cyclictest0-21swapper/124
59053699286975286969,4cyclictest181rcu_preempt2
59050699284944284939,3cyclictest181rcu_preempt9
59052299282692282682,8cyclictest3714971-21CPU12
59054699281985281977,5cyclictest181rcu_preempt4
59054099280979280972,4cyclictest181rcu_preempt3
59052299276946276934,10cyclictest3714974-21CPU12
59051899271703271698,4cyclictest0-21swapper/511
59054699271177271170,6cyclictest3714966-21CPU4
59051399268140268135,4cyclictest0-21swapper/410
59052299266650266645,4cyclictest0-21swapper/612
59054699266342266334,7cyclictest3714972-21CPU4
59053499266276266271,4cyclictest0-21swapper/915
59051399265003264998,3cyclictest181rcu_preempt10
59052999263887263878,8cyclictest3714973-21CPU14
59050399254709254699,8cyclictest3714971-21CPU8
59052299253106253097,7cyclictest3714975-21CPU12
59053499252804252799,4cyclictest0-21swapper/915
59050399250629250624,4cyclictest0-21swapper/28
59053499248324248313,9cyclictest3714975-21CPU15
59055399244858244845,11cyclictest3714973-21CPU6
59055399241980241967,8cyclictest3714974-21CPU6
59049699240812240800,10cyclictest3714974-21CPU0
59050699237948237941,4cyclictest181rcu_preempt9
59051899234501234491,8cyclictest3714968-21CPU11
59051899234501234491,8cyclictest3714968-21CPU11
59050099230718230707,9cyclictest3714966-21CPU1
59051899223957223947,8cyclictest3714972-21CPU11
59051899223237223227,8cyclictest3714972-21CPU11
59050699221093221088,4cyclictest0-21swapper/39
59050399221043221038,4cyclictest0-21swapper/28
59053499220805220799,5cyclictest0-21swapper/915
59052699219860219850,8cyclictest3714966-21CPU13
59051399215665215654,9cyclictest3714971-21CPU10
59052299213566213557,7cyclictest3714965-21CPU12
59052299213566213557,7cyclictest3714965-21CPU12
59049699213120213111,7cyclictest3714973-21CPU0
59055799211884211872,8cyclictest3714970-21CPU7
59055399210980210967,9cyclictest3714966-21CPU6
59055399210980210967,9cyclictest3714966-21CPU6
59053699201471201462,8cyclictest3714971-21CPU2
59050399199956199949,6cyclictest3714971-21CPU8
59051899199291199284,6cyclictest3714974-21CPU11
59052999198966198959,4cyclictest181rcu_preempt14
59049699196920196915,4cyclictest0-21swapper/00
59052699195530195524,5cyclictest0-21swapper/713
59051899193297193287,8cyclictest3714966-21CPU11
59051899192362192357,4cyclictest0-21swapper/511
59051899191128191123,4cyclictest0-21swapper/511
59051899189168189163,4cyclictest0-21swapper/511
59054699189014189003,9cyclictest3714973-21CPU4
59050399185128185124,3cyclictest0-21swapper/28
59052699179924179920,3cyclictest0-21swapper/713
59052999178904178896,5cyclictest181rcu_preempt14
59054099177981177974,4cyclictest181rcu_preempt3
59050399175388175384,3cyclictest0-21swapper/28
59049699175184175180,3cyclictest0-21swapper/00
59054099174664174654,8cyclictest3714971-21CPU3
59050399173259173250,7cyclictest3714971-21CPU8
59050099169971169964,4cyclictest181rcu_preempt1
59051399166477166467,8cyclictest3714972-21CPU10
59051399164281164271,8cyclictest3714975-21CPU10
59050399163915163908,4cyclictest181rcu_preempt8
59050699162981162971,8cyclictest3714971-21CPU9
59049699160755160744,9cyclictest3714973-21CPU0
59049699158594158583,9cyclictest3714974-21CPU0
59052999158045158041,3cyclictest0-21swapper/814
59051899155653155648,4cyclictest0-21swapper/511
59050699153139153135,3cyclictest0-21swapper/39
59055799151886151881,4cyclictest0-21swapper/157
59055399146219146209,8cyclictest3714974-21CPU6
59054699144843144834,7cyclictest3714965-21CPU4
59052999144493144488,4cyclictest0-21swapper/814
59049699144126144119,6cyclictest3714972-21CPU0
59052699143591143586,4cyclictest0-21swapper/713
59052699143591143586,4cyclictest0-21swapper/713
59052999143534143529,4cyclictest0-21swapper/814
59053699143400143396,3cyclictest0-21swapper/102
59052999143262143257,4cyclictest0-21swapper/814
59050699143214143210,3cyclictest0-21swapper/39
59049699142671142666,4cyclictest0-21swapper/00
59053699142651142646,4cyclictest0-21swapper/102
59055399142399142393,5cyclictest0-21swapper/146
59052999142090142084,5cyclictest0-21swapper/814
59055799142077142071,5cyclictest0-21swapper/157
59053499142033142028,4cyclictest0-21swapper/915
59053499141821141816,4cyclictest0-21swapper/915
59054699141745141740,4cyclictest0-21swapper/124
59052299141478141473,4cyclictest0-21swapper/612
59052699141474141464,8cyclictest0-21swapper/713
59050699141360141355,4cyclictest0-21swapper/39
59054099141231141221,8cyclictest3714966-21CPU3
59051399141037141027,8cyclictest3714973-21CPU10
59054099140927140922,4cyclictest0-21swapper/113
59055399140772140763,7cyclictest3714971-21CPU6
59055799140593140588,4cyclictest0-21swapper/157
59050399140523140518,4cyclictest0-21swapper/28
59052699140182140177,4cyclictest0-21swapper/713
59055799140156140151,4cyclictest0-21swapper/157
59053699139741139736,4cyclictest0-21swapper/102
59052299139741139733,7cyclictest3714972-21CPU12
59051399139733139727,5cyclictest0-21swapper/410
59054699139604139598,5cyclictest0-21swapper/124
59053699139400139390,8cyclictest0-21swapper/102
59052999139200139195,4cyclictest0-21swapper/814
59054699138546138541,4cyclictest0-21swapper/124
59054699138546138541,4cyclictest0-21swapper/124
59052299138353138349,3cyclictest0-21swapper/612
59054099138030138025,4cyclictest0-21swapper/113
59055799138027138023,3cyclictest0-21swapper/157
59052699137723137713,8cyclictest3714968-21CPU13
59051399137366137361,4cyclictest0-21swapper/410
59051399137056137051,4cyclictest0-21swapper/410
59051899136992136987,4cyclictest0-21swapper/511
59051899136557136552,4cyclictest0-21swapper/511
59054099136194136188,5cyclictest0-21swapper/113
59050399136025136020,4cyclictest0-21swapper/28
59052299134628134617,9cyclictest3714975-21CPU12
59050699134532134528,3cyclictest0-21swapper/39
59054699133679133674,4cyclictest0-21swapper/124
59050399133579133567,10cyclictest3714967-21CPU8
59050399133579133567,10cyclictest3714967-21CPU8
59051899133367133358,7cyclictest3714965-21CPU11
59051399132006131992,10cyclictest3714975-21CPU10
59053699131977131969,4cyclictest181rcu_preempt2
59050699131383131379,3cyclictest0-21swapper/39
59050399131374131369,4cyclictest0-21swapper/28
59050699127948127940,4cyclictest181rcu_preempt9
59050399127775127771,3cyclictest0-21swapper/28
59054099122806122801,4cyclictest0-21swapper/113
59049699120888120881,4cyclictest181rcu_preempt0
59054099119656119652,3cyclictest0-21swapper/113
59054099118414118410,3cyclictest0-21swapper/113
59054099116240116236,3cyclictest0-21swapper/113
59051399115071115066,4cyclictest0-21swapper/410
59050099114975114962,8cyclictest3714971-21CPU1
59050099114972114959,8cyclictest3714975-21CPU1
59054099111596111591,4cyclictest0-21swapper/113
59051399108596108587,7cyclictest3714973-21CPU10
59052999104531104523,6cyclictest3714971-21CPU14
59055399103981103968,8cyclictest3714969-21CPU6
59053699103973103968,2cyclictest181rcu_preempt2
59050699103948103935,9cyclictest3714966-21CPU9
59050699103391103383,6cyclictest3714975-21CPU9
59054099102978102970,5cyclictest181rcu_preempt3
59050699101612101608,3cyclictest0-21swapper/39
59049699101233101222,9cyclictest3714973-21CPU0
590496999830498295,7cyclictest3714974-21CPU0
590540999748497476,6cyclictest3714974-21CPU3
590546999655496549,4cyclictest0-21swapper/124
590536999597395968,3cyclictest181rcu_preempt2
590553998998189974,4cyclictest181rcu_preempt6
590529998990689899,4cyclictest181rcu_preempt14
590500998959389588,4cyclictest0-21swapper/11
590503998837288362,8cyclictest3714973-21CPU8
590549998830088295,4cyclictest0-21swapper/135
590536998797387961,8cyclictest3714973-21CPU2
590496998666086649,9cyclictest3714972-21CPU0
590546998611686105,9cyclictest3714973-21CPU4
590540998455884549,7cyclictest3714971-21CPU3
590540998418284177,4cyclictest0-21swapper/113
590503998324683241,4cyclictest0-21swapper/28
590513998288382877,5cyclictest0-21swapper/410
590503998284782841,5cyclictest3714967-21CPU8
590540998222682221,4cyclictest0-21swapper/113
590518998198981984,4cyclictest0-21swapper/511
590526998002780022,4cyclictest0-21swapper/713
590513997986879863,4cyclictest0-21swapper/410
590529997959979595,3cyclictest0-21swapper/814
590553997893778926,8cyclictest0-21swapper/146
590506997788077875,4cyclictest0-21swapper/39
590506997725477249,4cyclictest0-21swapper/39
590536997700276998,3cyclictest0-21swapper/102
590536997693476929,4cyclictest0-21swapper/102
590496997684076835,4cyclictest0-21swapper/00
590518997545875454,3cyclictest0-21swapper/511
590500997540875399,8cyclictest3714973-21CPU1
590496997528675276,8cyclictest3714974-21CPU0
590540997497774970,4cyclictest181rcu_preempt3
590518997436274357,4cyclictest0-21swapper/511
590553997323873233,4cyclictest0-21swapper/146
590534997316073154,5cyclictest0-21swapper/915
590529997312173117,3cyclictest0-21swapper/814
590503997191671909,4cyclictest181rcu_preempt8
590557996952069511,7cyclictest3714974-21CPU7
590540996863668630,5cyclictest0-21swapper/113
590529996390363895,4cyclictest181rcu_preempt14
590553996202162013,6cyclictest3714971-21CPU6
590500996192661914,10cyclictest3714965-21CPU1
590503995939959395,3cyclictest0-21swapper/28
590513995900258996,5cyclictest0-21swapper/410
590546995821458206,6cyclictest3714972-21CPU4
590513995771157705,5cyclictest0-21swapper/410
590522995713357128,4cyclictest0-21swapper/612
590506995642256417,4cyclictest0-21swapper/39
590536995282352819,3cyclictest0-21swapper/102
590522995214252138,3cyclictest0-21swapper/612
590496995212852124,3cyclictest0-21swapper/00
590496995212852124,3cyclictest0-21swapper/00
590496995211352109,3cyclictest0-21swapper/00
590506995191451910,3cyclictest0-21swapper/39
590518995180551800,4cyclictest0-21swapper/511
590534995153951534,4cyclictest0-21swapper/915
590553995137051366,3cyclictest0-21swapper/146
590557995134351339,3cyclictest0-21swapper/157
590534995131151307,3cyclictest0-21swapper/915
590503995093350929,3cyclictest0-21swapper/28
590546995069350685,3cyclictest0-21swapper/124
590518995047650472,3cyclictest0-21swapper/511
590553995045850448,8cyclictest3714968-21CPU6
590534994999049985,4cyclictest0-21swapper/915
590500994972749722,4cyclictest0-21swapper/11
590534994807848070,7cyclictest3714971-21CPU15
590529994490244898,3cyclictest0-21swapper/814
590557994489044877,8cyclictest3714975-21CPU7
590529994446044454,5cyclictest0-21swapper/814
590529994413444129,4cyclictest0-21swapper/814
590529994413444129,4cyclictest0-21swapper/814
590500994362943624,4cyclictest0-21swapper/11
590526994361343603,8cyclictest3714975-21CPU13
590522994216442159,4cyclictest0-21swapper/612
590522994206242052,8cyclictest3714965-21CPU12
590522994191241907,3cyclictest181rcu_preempt12
590506994100740998,7cyclictest3714973-21CPU9
590546994082540821,3cyclictest0-21swapper/124
590534994055140546,4cyclictest0-21swapper/915
590536993997439968,3cyclictest181rcu_preempt2
590500993997439968,4cyclictest181rcu_preempt1
590557993983639832,3cyclictest0-21swapper/157
590557993954039534,5cyclictest0-21swapper/157
590529993911539109,5cyclictest0-21swapper/814
590529993896038956,3cyclictest0-21swapper/814
590534993885538846,8cyclictest3714969-21CPU15
590503993880638802,3cyclictest0-21swapper/28
590534993858138577,3cyclictest0-21swapper/915
590526993854738542,4cyclictest0-21swapper/713
590546993831938315,3cyclictest0-21swapper/124
590534993803038025,4cyclictest0-21swapper/915
590534993800538000,4cyclictest0-21swapper/915
590536993799137987,3cyclictest0-21swapper/102
590529993796737962,4cyclictest0-21swapper/814
590557993796637955,10cyclictest0-21swapper/157
590534993781737812,4cyclictest0-21swapper/915
590496993781537810,4cyclictest0-21swapper/00
590553993776437760,3cyclictest0-21swapper/146
590522993774237738,3cyclictest0-21swapper/612
590529993772737722,4cyclictest0-21swapper/814
590513993769037685,4cyclictest0-21swapper/410
590553993765137646,4cyclictest0-21swapper/146
590536993764737637,8cyclictest0-21swapper/102
590540993757137566,4cyclictest0-21swapper/113
590557993756537559,5cyclictest0-21swapper/157
590557993755937554,4cyclictest0-21swapper/157
590529993755937554,4cyclictest0-21swapper/814
590496993755637552,3cyclictest0-21swapper/00
590496993754437540,3cyclictest0-21swapper/00
590529993750137496,4cyclictest0-21swapper/814
590553993746937464,4cyclictest0-21swapper/146
590526993746137457,3cyclictest0-21swapper/713
590500993741537410,4cyclictest0-21swapper/11
590518993739037385,4cyclictest0-21swapper/511
590529993738037376,3cyclictest0-21swapper/814
590529993738037376,3cyclictest0-21swapper/814
590522993736437360,3cyclictest0-21swapper/612
590534993734137336,4cyclictest0-21swapper/915
590500993730437300,3cyclictest0-21swapper/11
590557993728337279,3cyclictest0-21swapper/157
590506993728337279,3cyclictest0-21swapper/39
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional