You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-11 - 22:54

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Fri Sep 11, 2026 12:43:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2678421150,2sleep10-21swapper/111:55:191
8515999131,27cyclictest27663-21sh12:35:310
851599891,63cyclictest6152-21grep10:10:480
8515998722,45cyclictest31996-21idleruntime-cro08:15:190
28872840,2sleep00-21swapper/011:25:390
851599826,35cyclictest0-21swapper/008:45:320
851599821,64cyclictest0-21swapper/009:45:320
8515998011,53cyclictest7750-21ssh11:30:550
851599782,59cyclictest22167-21ssh10:30:380
165732780,5sleep0851599cyclictest12:20:550
851599771,63cyclictest16203-21systemd-journal09:00:190
236642770,5sleep3851899cyclictest11:50:423
8515997620,46cyclictest0-21swapper/007:45:430
8515997620,46cyclictest0-21swapper/007:45:430
851599761,61cyclictest8963-21aten_rbpower_po09:35:330
239152760,6sleep1851699cyclictest09:15:001
8515997533,7cyclictest7950irq/56-dwc_otg_11:35:330
851599752,37cyclictest0-21swapper/008:20:320
8515997430,13cyclictest60-21kswapd010:20:300
8515997423,34cyclictest7950irq/56-dwc_otg_11:15:310
851599741,9cyclictest0-21swapper/010:05:200
851599741,22cyclictest31574-21runrttasks09:23:210
851599741,21cyclictest23708-21ssh11:50:430
851599731,53cyclictest11663-21sh10:56:360
851599731,17cyclictest30612-21ssh10:40:400
8515997212,47cyclictest0-21swapper/011:05:370
851599711,19cyclictest0-21swapper/009:28:550
8516997027,11cyclictest5288-21apt-get10:10:371
851599702,51cyclictest29058-21ssh10:39:160
8515997022,29cyclictest0-21swapper/010:15:370
851599701,19cyclictest0-21swapper/009:50:420
851599696,38cyclictest0-21swapper/012:15:320
851599693,15cyclictest0-21swapper/009:34:190
8515996926,27cyclictest7850irq/56-dwc_otg_08:03:500
851599691,56cyclictest0-21swapper/012:29:550
8516996815,27cyclictest0-21swapper/110:55:321
851599689,13cyclictest0-21swapper/010:05:300
851599682,18cyclictest5767-21/usr/sbin/munin10:50:460
8515996813,47cyclictest0-21swapper/012:32:410
8515996723,29cyclictest7750irq/56-dwc_otg07:13:400
8515996715,39cyclictest0-21swapper/008:50:290
851599671,34cyclictest0-21swapper/009:40:320
8515996713,44cyclictest0-21swapper/010:45:270
851599671,20cyclictest0-21swapper/008:15:370
851599671,20cyclictest0-21swapper/007:40:410
851599668,5cyclictest3112-21fschecks_time12:05:350
8515996612,9cyclictest0-21swapper/012:13:010
851799651,11cyclictest0-21swapper/209:15:252
8516996521,15cyclictest0-21swapper/109:45:321
8515996512,9cyclictest0-21swapper/011:22:250
851599651,18cyclictest28614-21ssh11:56:220
851599651,18cyclictest0-21swapper/011:05:140
851599651,18cyclictest0-21swapper/011:05:140
851599651,18cyclictest0-21swapper/007:16:520
8516996430,8cyclictest8514-21cyclictest07:10:201
8515996419,4cyclictest20033-21ssh10:27:490
8515996419,4cyclictest20033-21ssh10:27:490
8515996410,31cyclictest13286-21unixbench_multi07:20:460
8516996323,20cyclictest15652-21ssh10:22:201
851599634,19cyclictest14646-21ssh11:40:320
8515996312,42cyclictest0-21swapper/012:02:220
8516996223,26cyclictest28731-21ssh09:59:381
851599622,47cyclictest1180-21runrttasks08:34:130
8515996213,9cyclictest25297-21ssh11:13:500
851599621,14cyclictest9-21ksoftirqd/009:13:370
8515996210,40cyclictest19854-21diskmemload09:56:540
8516996122,23cyclictest19485-21latency_hist07:40:201
8516996122,12cyclictest10630-21munin-run08:45:191
851599611,52cyclictest0-21swapper/009:09:340
8516996026,20cyclictest13851-21ls08:50:451
8516996022,21cyclictest28286-21/usr/sbin/munin12:35:391
8515996014,38cyclictest0-21swapper/009:18:110
851599601,17cyclictest0-21swapper/011:48:180
851599601,17cyclictest0-21swapper/011:48:180
48372600,2sleep20-21swapper/212:07:082
8516995923,22cyclictest18397-21ssh12:24:161
8516995922,20cyclictest7077-21/usr/sbin/munin11:30:471
8516995922,20cyclictest17586-21sed07:35:191
851599595,18cyclictest60-21kswapd007:25:250
8515995931,6cyclictest7850irq/56-dwc_otg_09:00:480
851599592,4cyclictest0-21swapper/007:40:200
8516995822,12cyclictest558-21/usr/sbin/munin09:25:411
8516995815,22cyclictest3597-21ssh10:07:551
8516995724,18cyclictest28979-21ssh10:39:071
8516995716,23cyclictest18309-21/usr/sbin/munin11:05:331
8516995712,28cyclictest0-21swapper/108:10:321
851599578,25cyclictest0-21swapper/008:40:320
851599571,12cyclictest0-21swapper/008:35:350
8516995625,13cyclictest8147-21sh09:34:401
8516995625,12cyclictest23086-21ssh10:30:511
8516995623,13cyclictest15460-21ssh09:42:581
8516995620,12cyclictest22983-21ssh12:30:081
851599561,4cyclictest7850irq/56-dwc_otg_08:10:190
851599561,15cyclictest0-21swapper/007:32:430
8516995521,22cyclictest21386-21ssh11:48:121
8516995521,22cyclictest21386-21ssh11:48:121
8516995520,20cyclictest338-21ssh11:22:281
8516995519,19cyclictest28920-21aten_rbpower_vo09:20:331
8516995519,12cyclictest6501-21ssh10:50:421
8516995518,12cyclictest29964-21irqstats10:00:381
8516995511,30cyclictest19854-21diskmemload11:14:081
851599551,30cyclictest23237-21aten_rbpower_cu07:50:320
851599551,12cyclictest0-21swapper/007:56:470
851899542,7cyclictest7850irq/56-dwc_otg_11:05:313
8516995423,13cyclictest1733-21aten_rbpower_cu08:20:331
8516995422,12cyclictest1402-21cut10:45:191
8516995420,23cyclictest16885-21ssh11:42:321
8516995419,18cyclictest9751-21ssh12:13:351
8516995418,21cyclictest0-21swapper/111:16:541
8516995417,17cyclictest7750irq/56-dwc_otg09:35:451
8516995414,21cyclictest30064-21chrt11:59:021
851599542,17cyclictest0-21swapper/008:29:080
8516995320,19cyclictest7750irq/56-dwc_otg12:32:381
8516995317,19cyclictest22617-21ssh09:50:571
8516995315,18cyclictest12583-21cat08:50:191
851899526,14cyclictest2266-21ssh11:25:313
8516995225,12cyclictest13978-21ssh12:18:441
8516995223,11cyclictest2323-21wget11:25:321
8516995218,12cyclictest5038-21ssh12:07:301
8516995216,26cyclictest7850irq/56-dwc_otg_08:00:381
8516995215,23cyclictest24109-21apt-get09:15:221
851899511,41cyclictest19853-21cut07:40:363
8516995123,12cyclictest15846-21/usr/sbin/munin08:55:461
8516995121,11cyclictest16301-21sh11:02:351
8516995121,11cyclictest16301-21sh11:02:351
8516995118,21cyclictest26458-21chrt07:59:051
8516995118,15cyclictest21705-21perl07:45:351
8516995118,15cyclictest21705-21perl07:45:351
8516995113,23cyclictest12382-21ssh10:18:531
8516995020,14cyclictest535-21ssh12:01:491
8516995020,11cyclictest12185-21ssh11:36:271
8516995019,20cyclictest19483-21taskset10:26:481
8516995019,20cyclictest19483-21taskset10:26:481
8516995016,13cyclictest13609-21sshd07:23:541
8516995014,16cyclictest0-21swapper/109:06:451
8516994915,13cyclictest32497-21chrt08:15:351
851699482,11cyclictest0-21swapper/107:40:311
250022480,2sleep20-21swapper/209:55:192
851899477,25cyclictest0-21swapper/308:10:323
8516994719,12cyclictest4282-21ssh10:48:111
8516994712,10cyclictest16203-21systemd-journal07:53:431
851899467,25cyclictest0-21swapper/307:30:243
851899467,24cyclictest0-21swapper/308:25:253
8518994626,16cyclictest7950irq/56-dwc_otg_12:35:303
851799466,25cyclictest0-21swapper/207:25:242
82392463,36sleep00-21swapper/007:10:140
851799458,5cyclictest31-21ksoftirqd/211:30:442
8517994526,5cyclictest31-21ksoftirqd/210:50:332
8516994515,11cyclictest0-21swapper/107:27:221
8516994514,13cyclictest11619-21chrt07:16:501
851899446,22cyclictest29468-21ssh10:00:323
8517994411,11cyclictest7850irq/56-dwc_otg_10:45:302
851699443,4cyclictest0-21swapper/109:00:321
8516994429,11cyclictest4255-21ls08:25:401
851899433,25cyclictest0-21swapper/308:50:243
851899430,14cyclictest7950irq/56-dwc_otg_08:35:323
851799437,25cyclictest0-21swapper/208:30:332
851799434,24cyclictest0-21swapper/209:00:332
8516994315,13cyclictest8514-21cyclictest08:31:221
851799427,22cyclictest0-21swapper/209:30:352
8517994222,5cyclictest31-21ksoftirqd/209:45:312
8517994213,17cyclictest4381-21kworker/u8:410:05:302
8516994217,12cyclictest8764-21chrt08:39:501
8516994212,10cyclictest30164-21chrt08:10:121
851899417,24cyclictest0-21swapper/308:45:263
851799417,24cyclictest0-21swapper/208:25:322
8517994119,6cyclictest31-21ksoftirqd/209:45:192
8517994115,5cyclictest22492-21sh11:50:152
8517994115,5cyclictest22492-21sh11:50:152
851799402,7cyclictest0-21swapper/212:30:382
8517994022,5cyclictest31-21ksoftirqd/210:30:422
279002400,2sleep227899-21df_inode12:35:342
851899396,19cyclictest7750irq/56-dwc_otg10:20:423
851799394,6cyclictest7950irq/56-dwc_otg_09:25:302
8517993916,6cyclictest29-21rcuc/212:21:442
851899383,25cyclictest7950irq/56-dwc_otg_12:20:313
851799382,5cyclictest7750irq/56-dwc_otg08:50:302
8517993820,5cyclictest1180-21runrttasks12:01:112
851799381,9cyclictest0-21swapper/209:10:312
851799381,16cyclictest31-21ksoftirqd/207:40:092
8517993811,10cyclictest31-21ksoftirqd/208:50:202
851899378,8cyclictest0-21swapper/307:35:483
851899377,25cyclictest0-21swapper/307:15:323
851899376,20cyclictest14962-21cut08:55:353
851899376,14cyclictest7950irq/56-dwc_otg_07:55:373
851899374,4cyclictest0-21swapper/310:40:363
8517993717,4cyclictest26841-21cat11:55:202
851799371,24cyclictest0-21swapper/207:30:312
851899365,4cyclictest7950irq/56-dwc_otg_12:05:383
851899362,16cyclictest0-21swapper/312:15:413
8518993615,4cyclictest22030-21fschecks_count10:30:363
8518993612,8cyclictest22666-21fschecks_time11:10:353
851799363,5cyclictest0-21swapper/208:20:332
851799361,26cyclictest0-21swapper/209:40:192
251232360,5sleep3851899cyclictest09:15:393
220082360,3sleep339-21ksoftirqd/309:11:403
851899357,7cyclictest7950irq/56-dwc_otg_08:45:203
851899357,18cyclictest0-21swapper/309:30:353
851899356,15cyclictest0-21swapper/308:30:333
851899353,3cyclictest7950irq/56-dwc_otg_09:55:443
851899353,23cyclictest11290-21ntp_states11:35:433
851799355,20cyclictest18154-21ssh11:05:322
851799352,5cyclictest10781-21latency_hist12:15:202
851799352,17cyclictest301ktimersoftd/211:56:322
851799351,4cyclictest7850irq/56-dwc_otg_10:15:312
851799351,24cyclictest24225-21ls07:50:452
851799351,23cyclictest779-21latency_hist10:05:192
851899349,12cyclictest7950irq/56-dwc_otg_11:55:303
851899342,6cyclictest0-21swapper/311:30:373
8518993426,6cyclictest15579-21ssh11:01:153
8518993426,6cyclictest15579-21ssh11:01:153
8518993426,6cyclictest12031-21ssh10:18:143
851899342,21cyclictest8803-21cut07:10:363
8518993410,4cyclictest0-21swapper/310:50:403
8518993410,13cyclictest7950irq/56-dwc_otg_10:30:193
8518993410,13cyclictest7950irq/56-dwc_otg_10:30:193
851799349,5cyclictest7750irq/56-dwc_otg11:10:452
851799348,5cyclictest7850irq/56-dwc_otg_10:10:412
851799346,4cyclictest7750irq/56-dwc_otg11:20:372
851799344,19cyclictest7850irq/56-dwc_otg_08:55:322
8517993413,4cyclictest29-21rcuc/209:06:572
8517993412,6cyclictest12234-21basename07:20:322
8517993412,15cyclictest31-21ksoftirqd/209:20:442
32952340,2sleep3851899cyclictest08:25:193
851899339,8cyclictest22391-21ssh12:29:023
851899339,10cyclictest9281-21if_err_eth009:35:373
851899337,6cyclictest0-21swapper/310:12:103
851899337,13cyclictest0-21swapper/307:20:323
851899334,20cyclictest7950irq/56-dwc_otg_10:35:313
8518993312,5cyclictest7950irq/56-dwc_otg_11:00:203
851899331,16cyclictest24269-21grep07:50:463
8518993310,4cyclictest0-21swapper/309:20:333
851799332,7cyclictest0-21swapper/207:40:312
851799332,26cyclictest6242-21ls11:30:202
8517993313,6cyclictest29-21rcuc/208:18:092
8517993310,11cyclictest7850irq/56-dwc_otg_11:36:572
67092339,13sleep10-21swapper/107:05:341
851899328,6cyclictest18573-21latency_hist11:45:203
851899327,7cyclictest7750irq/56-dwc_otg12:00:333
851899327,7cyclictest16203-21systemd-journal12:30:263
851899324,13cyclictest7750irq/56-dwc_otg12:10:423
851899322,20cyclictest0-21swapper/309:06:293
851899322,15cyclictest0-21swapper/311:15:313
851799326,10cyclictest31-21ksoftirqd/207:45:352
851799326,10cyclictest31-21ksoftirqd/207:45:352
851799325,12cyclictest7850irq/56-dwc_otg_10:40:302
8517993215,5cyclictest1180-21runrttasks10:22:272
8517993214,4cyclictest7850irq/56-dwc_otg_11:15:412
8517993210,10cyclictest7641-21cat08:35:372
851799320,20cyclictest7850irq/56-dwc_otg_12:30:192
851899318,4cyclictest0-21swapper/309:25:463
851899317,14cyclictest7950irq/56-dwc_otg_08:16:583
851899316,17cyclictest4300-21kworker/u8:307:25:253
851899314,13cyclictest7950irq/56-dwc_otg_08:05:193
851899312,5cyclictest20188-21snmpd11:24:323
851799316,22cyclictest0-21swapper/212:15:322
851799313,14cyclictest29-21rcuc/211:00:322
851799313,14cyclictest29-21rcuc/211:00:322
851799312,6cyclictest9058-21apt-get08:40:322
8517993124,5cyclictest28019-21rm10:37:212
8517993114,4cyclictest29-21rcuc/210:56:472
851899307,13cyclictest0-21swapper/310:48:283
851899305,13cyclictest0-21swapper/309:42:063
8518993019,9cyclictest7950irq/56-dwc_otg_10:05:333
851799307,5cyclictest31-21ksoftirqd/209:56:432
851799307,12cyclictest7750irq/56-dwc_otg11:42:142
851799301,6cyclictest0-21swapper/207:55:442
8517993014,5cyclictest29-21rcuc/208:12:452
77272300,3sleep30-21swapper/307:05:473
851899298,10cyclictest0-21swapper/309:51:353
851899295,7cyclictest7950irq/56-dwc_otg_09:45:483
851899293,3cyclictest7950irq/56-dwc_otg_11:45:423
851899293,3cyclictest7950irq/56-dwc_otg_11:45:423
851799291,6cyclictest7750irq/56-dwc_otg10:25:432
851799291,6cyclictest7750irq/56-dwc_otg10:25:432
851799291,15cyclictest7850irq/56-dwc_otg_08:00:352
851799291,13cyclictest7950irq/56-dwc_otg_08:05:472
82412294,16sleep20-21swapper/207:10:162
8518992811,4cyclictest22091-21ntpq07:45:413
8518992811,4cyclictest22091-21ntpq07:45:413
851799281,7cyclictest8858-21fschecks_time07:10:372
851799276,14cyclictest7950irq/56-dwc_otg_07:15:402
851899263,10cyclictest7850irq/56-dwc_otg_09:05:113
851899251,5cyclictest7750irq/56-dwc_otg08:05:393
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional