You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-30 - 12:08

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot3s.osadl.org (updated Sun Aug 30, 2026 00:43:43)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
24196991233,40cyclictest0-21swapper/121:35:141
241969912312,14cyclictest0-21swapper/122:10:371
24196991153,10cyclictest0-21swapper/122:45:381
1191221110,9sleep12419699cyclictest21:20:351
24197991083,8cyclictest0-21swapper/221:10:362
24195991049,64cyclictest16465-21ssh22:05:340
241959910019,61cyclictest23234-21latency_hist21:35:130
2419599903,14cyclictest31241-21ls00:20:400
2419599902,80cyclictest0-21swapper/021:15:300
2419599895,56cyclictest0-21swapper/022:45:380
111752890,6sleep22419799cyclictest23:17:402
2419599884,14cyclictest11936-21ssh21:20:360
2419599873,61cyclictest0-21swapper/023:30:350
2419599873,12cyclictest5440-21ntp_states23:10:360
24195998311,12cyclictest0-21swapper/023:28:250
2419699823,10cyclictest5818-21sed23:10:411
2419599796,6cyclictest0-21swapper/021:10:360
132612780,2sleep30-21swapper/322:01:033
2419699766,53cyclictest0-21swapper/123:30:341
265482730,1sleep30-21swapper/300:15:343
2419699733,24cyclictest23-21ksoftirqd/122:05:361
24195997234,17cyclictest7850irq/56-dwc_otg_22:10:370
24197997110,16cyclictest19840-21ssh23:28:242
183292710,2sleep30-21swapper/323:25:423
2419799703,15cyclictest31308-21kworker/u8:023:10:372
2419799703,14cyclictest21928-21ssh23:30:362
2419699704,9cyclictest31170-21ssh00:20:391
2419899693,14cyclictest7364-21diskstats21:15:303
2419699693,11cyclictest19838-21ssh23:28:231
25662680,2sleep22564-21ssh00:25:362
2419799689,15cyclictest28264-21kworker/2:200:20:412
2419699687,31cyclictest0-21swapper/121:15:301
2419699682,13cyclictest3649-21ssh21:10:351
24195996817,19cyclictest0-21swapper/020:25:260
24195996817,19cyclictest0-21swapper/020:25:260
2419799679,18cyclictest29-21rcuc/222:45:412
24197996717,16cyclictest20775-21ntp_states22:10:382
24197996712,32cyclictest7347-21sh21:15:292
2419599671,49cyclictest14696-21grep00:00:420
133532670,2sleep0101ktimersoftd/023:20:320
2419799669,29cyclictest11857-21ssh21:20:352
2419799664,10cyclictest16411-21ssh22:05:332
2419799663,8cyclictest0-21swapper/221:35:132
2419599662,52cyclictest0-21swapper/000:11:270
184832650,1sleep10-21swapper/121:29:041
2419599621,9cyclictest5299-21grep19:45:370
2419599618,14cyclictest7750irq/56-dwc_otg21:35:160
2419599616,11cyclictest0-21swapper/020:40:250
24195996111,28cyclictest28985-21unixbench_singl21:40:430
2419899603,32cyclictest5815-21seq23:10:413
2419599602,36cyclictest0-21swapper/020:15:410
2419599601,5cyclictest8047-21wc19:55:130
2419599601,21cyclictest4310-21uniq22:30:300
2419599591,45cyclictest29594-21tr23:00:340
2419599591,39cyclictest25905-21acpi00:15:240
25362580,2sleep00-21swapper/022:28:060
2419599581,9cyclictest32047-21fschecks_time21:00:300
2419599581,42cyclictest25093-21fschecks_time22:55:310
2419599581,39cyclictest26120-21grep23:35:370
2419599572,8cyclictest29628-21latency_hist19:25:140
2419599571,42cyclictest6700-21tr00:30:360
2419599571,38cyclictest23696-21unixbench_multi20:35:390
24195995711,33cyclictest12073-21fschecks_time20:05:300
2419899563,11cyclictest16473-21latency22:05:343
2419699566,31cyclictest0-21swapper/120:55:251
2419599562,38cyclictest0-21swapper/020:50:300
24195995614,5cyclictest9450irq/48-DMA08:56:170
2419899552,21cyclictest7750irq/56-dwc_otg22:45:373
2419799556,15cyclictest0-21swapper/221:35:162
2419599556,32cyclictest0-21swapper/019:15:410
2419599552,5cyclictest0-21swapper/022:35:400
2419599551,42cyclictest17775-21grep20:20:330
2419599551,42cyclictest0-21swapper/000:25:330
2419599551,37cyclictest8199-21kworker/0:122:42:070
2419599551,29cyclictest11982-21sh22:00:280
2419599551,28cyclictest5368-21ls23:50:260
2419599544,27cyclictest25394-21sh22:15:430
2419599544,27cyclictest25394-21sh22:15:430
2419599541,41cyclictest0-21swapper/023:15:430
2419599541,37cyclictest0-21swapper/021:30:130
24195995327,11cyclictest7950irq/56-dwc_otg_00:35:420
24195995327,11cyclictest7950irq/56-dwc_otg_00:35:420
2419599532,37cyclictest0-21swapper/019:35:270
2419599531,4cyclictest9671-21fschecks_time23:55:320
2419599531,4cyclictest9671-21fschecks_time23:55:320
2419599531,33cyclictest31806-21/usr/sbin/munin21:45:250
2419899524,24cyclictest11901-21ls21:20:353
2419899523,8cyclictest7950irq/56-dwc_otg_23:30:363
2419599522,40cyclictest0-21swapper/022:52:170
21742520,6sleep12419699cyclictest23:45:411
2419899516,22cyclictest20774-21ssh22:10:383
2419599512,26cyclictest0-21swapper/000:05:230
227532512,7sleep00-21swapper/019:05:320
2419699506,8cyclictest7750irq/56-dwc_otg21:35:151
2419599509,26cyclictest0-21swapper/022:23:000
24195995022,9cyclictest7950irq/56-dwc_otg_20:50:130
24195995015,7cyclictest1088-21ssh23:45:270
2419599492,32cyclictest0-21swapper/020:55:370
214042490,3sleep339-21ksoftirqd/321:31:523
2419599481,37cyclictest1105-21tr21:05:270
2419599481,37cyclictest1105-21tr21:05:270
24198994712,9cyclictest7850irq/56-dwc_otg_21:10:343
2419599471,5cyclictest0-21swapper/019:56:200
2419799466,25cyclictest0-21swapper/220:55:252
2419799465,25cyclictest28865-21chrt23:00:252
2419599461,35cyclictest29815-21/usr/sbin/munin23:40:310
24198994511,9cyclictest7850irq/56-dwc_otg_00:20:393
24197994522,17cyclictest0-21swapper/222:50:262
24195994536,6cyclictest8798-21unixbench-2d21:55:410
24195994513,20cyclictest51650ssh23:05:230
2419799443,27cyclictest0-21swapper/200:10:182
24196994412,17cyclictest7750irq/56-dwc_otg22:35:271
24195994421,5cyclictest15125-21cron20:15:130
24195994412,15cyclictest31595-21aten_rbpower_cu19:30:280
24197994315,19cyclictest7850irq/56-dwc_otg_20:00:252
2419699439,20cyclictest7750irq/56-dwc_otg21:50:131
2419699437,25cyclictest25570-21kworker/u8:300:15:261
2419699437,25cyclictest0-21swapper/122:00:261
2419699437,23cyclictest0-21swapper/120:45:181
2419599432,30cyclictest0-21swapper/019:25:170
2419599431,13cyclictest0-21swapper/019:10:310
60752421,4sleep16128-21/usr/sbin/munin23:50:371
24198994219,6cyclictest26143-21aten_rbpower_vo19:15:283
2419799427,25cyclictest0-21swapper/222:00:262
2419699426,27cyclictest27706-21ssh21:40:271
24196994212,18cyclictest7750irq/56-dwc_otg21:08:101
24196994212,18cyclictest7750irq/56-dwc_otg21:08:101
3472410,3sleep2349-21diskmemload21:45:402
24197994116,5cyclictest12017-21latency_hist22:40:132
2419699412,19cyclictest0-21swapper/122:55:241
2419699411,24cyclictest0-21swapper/120:20:231
2419799404,28cyclictest0-21swapper/223:52:432
2419799403,21cyclictest29005-21ssh21:40:442
2419699404,21cyclictest23-21ksoftirqd/123:20:301
2419699403,29cyclictest7850irq/56-dwc_otg_21:58:231
2419699401,7cyclictest9085-21fschecks_count23:15:311
24196994014,16cyclictest7750irq/56-dwc_otg23:00:331
2419699401,27cyclictest7750irq/56-dwc_otg19:20:261
24195994024,7cyclictest0-21swapper/020:01:010
2419599401,30cyclictest0-21swapper/019:40:170
2419599401,30cyclictest0-21swapper/019:40:170
2419599401,27cyclictest0-21swapper/020:30:340
2419899397,17cyclictest7950irq/56-dwc_otg_23:45:383
24198993933,4cyclictest29567-21latency_hist19:25:143
2419799399,4cyclictest0-21swapper/200:35:362
2419799399,4cyclictest0-21swapper/200:35:362
2419799397,20cyclictest14658-21grep20:10:402
2419799394,23cyclictest0-21swapper/220:45:182
24197993920,4cyclictest1705-21ssh23:45:352
24197993914,7cyclictest24940-21proc_pri22:15:382
24197993914,7cyclictest24940-21proc_pri22:15:382
2419799391,26cyclictest0-21swapper/219:30:372
2419699398,19cyclictest7750irq/56-dwc_otg20:40:271
2419699394,5cyclictest7750irq/56-dwc_otg20:15:411
24196993918,5cyclictest6253-21fschecks_count00:30:311
24196993918,11cyclictest7750irq/56-dwc_otg19:35:131
2419699391,5cyclictest7850irq/56-dwc_otg_00:00:421
24196993912,16cyclictest7750irq/56-dwc_otg19:45:371
24196993910,16cyclictest7750irq/56-dwc_otg22:29:581
157722390,3sleep2301ktimersoftd/221:25:312
2419899382,8cyclictest7950irq/56-dwc_otg_21:35:153
2419799385,19cyclictest7850irq/56-dwc_otg_00:15:222
24197993822,5cyclictest9308-21/usr/sbin/munin23:55:312
24197993822,5cyclictest9308-21/usr/sbin/munin23:55:312
2419799382,24cyclictest7750irq/56-dwc_otg22:30:322
24197993817,10cyclictest7850irq/56-dwc_otg_00:00:282
24197993814,13cyclictest0-21swapper/223:40:412
24197993813,7cyclictest28723-21ssh22:20:322
2419699388,18cyclictest0-21swapper/100:10:241
2419699382,5cyclictest7750irq/56-dwc_otg19:35:261
24196993812,8cyclictest21893-21unixbench_singl22:50:421
226682385,20sleep322368-21/usr/sbin/munin19:05:313
63442370,2sleep25925-21/usr/sbin/munin00:30:312
24198993714,8cyclictest381ktimersoftd/323:01:423
2419799375,20cyclictest7850irq/56-dwc_otg_23:05:312
2419799374,22cyclictest0-21swapper/223:39:372
24197993718,9cyclictest840-21idleruntime-cro21:05:132
2419699373,4cyclictest7750irq/56-dwc_otg23:35:351
24196993715,4cyclictest26606-21sh22:17:531
24196993715,4cyclictest26606-21sh22:17:531
2419699371,24cyclictest7278-21latency_hist21:55:131
2419699371,18cyclictest0-21swapper/100:10:131
24198993620,5cyclictest7304-21latency_hist21:55:123
2419799365,19cyclictest3514-21ssh21:50:262
2419699367,19cyclictest7750irq/56-dwc_otg23:55:331
2419699367,19cyclictest7750irq/56-dwc_otg23:55:331
2419699365,19cyclictest7750irq/56-dwc_otg21:05:131
2419699364,22cyclictest0-21swapper/119:50:591
2419699363,23cyclictest7750irq/56-dwc_otg23:05:311
2419699362,13cyclictest13540-21ssh22:40:431
2419699361,6cyclictest27127-21unixbench_multi19:15:411
24196993613,13cyclictest7750irq/56-dwc_otg23:40:301
24196993610,12cyclictest1107-21dhclient22:33:251
24198993513,5cyclictest0-21swapper/323:55:323
24198993513,5cyclictest0-21swapper/323:55:323
24198993513,12cyclictest0-21swapper/323:37:193
2419799357,5cyclictest7850irq/56-dwc_otg_23:20:422
2419799351,25cyclictest0-21swapper/219:44:242
2419799351,25cyclictest0-21swapper/219:44:242
24197993512,4cyclictest15431-21aten_rbpower_po20:15:262
2419799351,10cyclictest1180-21runrttasks21:08:302
2419799351,10cyclictest1180-21runrttasks21:08:302
2419699359,8cyclictest2082050wget20:30:261
2419699353,22cyclictest7750irq/56-dwc_otg22:20:371
2419699352,5cyclictest10941-21processes00:35:381
2419699352,5cyclictest10941-21processes00:35:381
2419699351,5cyclictest7750irq/56-dwc_otg00:25:311
24198993413,11cyclictest31993-21sh22:25:123
2419799345,6cyclictest17745-21missed_timers20:20:332
2419799342,19cyclictest0-21swapper/222:40:332
24197993421,4cyclictest17680-21basename00:05:282
24197993418,7cyclictest7750irq/56-dwc_otg19:50:272
2419699346,18cyclictest7750irq/56-dwc_otg20:35:341
2419699342,21cyclictest0-21swapper/120:28:381
2419699342,21cyclictest0-21swapper/120:28:381
24196993413,12cyclictest7750irq/56-dwc_otg20:50:411
97342330,7sleep12419699cyclictest20:00:131
2419899338,5cyclictest7950irq/56-dwc_otg_00:40:133
2419899338,5cyclictest7950irq/56-dwc_otg_00:40:133
24198993323,5cyclictest9220-21cat22:35:403
2419899332,18cyclictest2659-21diskmemload22:40:443
24198993320,5cyclictest22974-21grep00:10:393
24198993315,10cyclictest22470-21ssh22:51:423
2419799339,5cyclictest11424-21ssh22:00:122
2419799336,5cyclictest20532-21cron20:30:132
2419799336,5cyclictest20532-21cron20:30:132
24197993318,9cyclictest7850irq/56-dwc_otg_20:40:282
24196993312,11cyclictest3293-21/usr/sbin/munin19:40:341
24196993312,11cyclictest3293-21/usr/sbin/munin19:40:341
24196993310,14cyclictest7750irq/56-dwc_otg20:00:251
2419899328,13cyclictest7950irq/56-dwc_otg_21:44:483
2419899326,5cyclictest7850irq/56-dwc_otg_19:10:233
2419899326,4cyclictest4750irq/17-3f00b88023:15:433
2419899323,14cyclictest14725-21grep20:10:403
24198993219,4cyclictest32249-21ntp_offset19:30:363
24198993214,11cyclictest1180-21runrttasks23:53:513
24198993212,13cyclictest2659-21diskmemload22:32:383
24198993211,13cyclictest59352chrt19:48:193
2419799324,5cyclictest1001-21aten_rbpower_vo19:35:262
2419799324,20cyclictest7850irq/56-dwc_otg_19:15:282
2419799321,25cyclictest7950irq/56-dwc_otg_22:55:242
24197993212,11cyclictest29542-21rm19:25:142
2419899318,5cyclictest7950irq/56-dwc_otg_20:55:393
2419899318,12cyclictest1213-21lldpd22:15:413
2419899318,12cyclictest1213-21lldpd22:15:413
2419899317,5cyclictest7750irq/56-dwc_otg00:00:433
2419899315,5cyclictest7950irq/56-dwc_otg_21:25:413
2419899315,4cyclictest7950irq/56-dwc_otg_19:50:303
2419899313,12cyclictest7850irq/56-dwc_otg_20:00:133
2419899312,12cyclictest39-21ksoftirqd/320:45:413
2419799317,13cyclictest0-21swapper/222:25:412
2419799311,6cyclictest11842-21grep20:05:272
2419799311,6cyclictest0-21swapper/220:50:302
24197993112,5cyclictest25039-21cat19:10:372
24197993110,12cyclictest23293-21ntpq20:35:342
2419699314,18cyclictest0-21swapper/119:26:401
2419699311,5cyclictest11827-21/usr/sbin/munin20:05:271
24196993115,10cyclictest7750irq/56-dwc_otg20:11:541
2419899308,13cyclictest6679-21ssh00:30:353
2419899308,12cyclictest0-21swapper/300:07:173
2419899302,6cyclictest7950irq/56-dwc_otg_20:40:223
2419799307,4cyclictest7850irq/56-dwc_otg_19:25:302
24196993012,8cyclictest7750irq/56-dwc_otg19:15:061
2419899299,4cyclictest0-21swapper/323:40:563
2419899297,3cyclictest0-21swapper/320:15:293
2419899296,11cyclictest7950irq/56-dwc_otg_19:35:293
2419899294,11cyclictest7850irq/56-dwc_otg_19:25:183
24198992921,6cyclictest13440-21ssh23:20:333
24198992920,7cyclictest7950irq/56-dwc_otg_21:50:073
24198992912,6cyclictest2150-21grep00:25:313
2419899291,17cyclictest0-21swapper/322:28:423
24198992911,10cyclictest28447-21cut20:50:303
24198992910,6cyclictest8017-21idleruntime21:55:313
2419799291,7cyclictest29-21rcuc/219:45:352
24197992914,7cyclictest7850irq/56-dwc_otg_20:30:312
2419899286,5cyclictest7850irq/56-dwc_otg_21:00:353
2419899286,4cyclictest7950irq/56-dwc_otg_20:25:133
2419899284,4cyclictest0-21swapper/322:55:423
2419899283,9cyclictest7950irq/56-dwc_otg_23:05:343
2419899281,13cyclictest10233-21fschecks_time20:00:283
2419799281,4cyclictest8213-21basename19:55:262
2419899274,10cyclictest7850irq/56-dwc_otg_20:05:303
2419899271,13cyclictest7950irq/56-dwc_otg_21:08:033
2419899271,13cyclictest7950irq/56-dwc_otg_21:08:033
235842273,15sleep20-21swapper/219:05:542
2419899268,6cyclictest7850irq/56-dwc_otg_20:30:363
24198992618,5cyclictest20124-21unixbench_singl20:25:523
24198992618,5cyclictest20124-21unixbench_singl20:25:523
237302263,14sleep10-21swapper/119:07:391
2419899258,5cyclictest22757-21cpuspeed20:35:253
24198992512,4cyclictest1180-21runrttasks19:43:183
24198992512,4cyclictest1180-21runrttasks19:43:183
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional