You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-31 - 09:56

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Fri Jul 31, 2026 00:43:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2682021160,4sleep013-21rcuc/022:34:120
110419911651,24cyclictest4162-21timerwakeupswit22:05:560
110429911116,61cyclictest0-21swapper/123:25:421
110419910953,14cyclictest101ktimersoftd/021:25:480
110449910412,16cyclictest7850irq/56-dwc_otg21:25:493
110419910447,22cyclictest0-21swapper/023:35:510
11041991043,14cyclictest8050irq/56-dwc_otg_22:40:430
110419910010,70cyclictest21113-21ls23:05:530
18142990,5sleep31104499cyclictest20:15:063
1104499993,24cyclictest0-21swapper/321:50:493
1104499993,24cyclictest0-21swapper/321:50:493
1104499993,10cyclictest18780-21sh00:20:563
1104199994,55cyclictest23627-21unixbench_multi21:10:570
1104199994,55cyclictest23627-21unixbench_multi21:10:570
11041999862,19cyclictest11-21rcu_preempt00:00:480
11041999832,46cyclictest9-21ksoftirqd/023:25:420
11041999812,43cyclictest17607-21/usr/sbin/munin00:20:560
228322970,2sleep322833-21ssh22:29:283
1104199968,53cyclictest0-21swapper/022:45:540
1104199968,53cyclictest0-21swapper/022:45:540
1104499944,18cyclictest7950irq/56-dwc_otg_22:55:323
326262930,5sleep132591-21ssh23:20:271
11042999333,37cyclictest221ktimersoftd/122:55:331
221202910,2sleep30-21swapper/321:49:143
1104499893,10cyclictest1428-21fschecks_count00:00:473
11044998911,48cyclictest12755-21ssh23:35:333
11041998943,18cyclictest11580-21apt-get22:55:330
1104499886,17cyclictest7850irq/56-dwc_otg23:40:463
11043998837,29cyclictest7850irq/56-dwc_otg22:40:432
1104499879,6cyclictest8050irq/56-dwc_otg_19:45:383
11044998611,10cyclictest7850irq/56-dwc_otg21:30:503
11043998621,34cyclictest17436-21/usr/sbin/munin23:40:472
11041998650,13cyclictest7850irq/56-dwc_otg21:50:490
11041998650,13cyclictest7850irq/56-dwc_otg21:50:490
321662830,3sleep1221ktimersoftd/100:37:301
1104299827,12cyclictest23-21ksoftirqd/121:25:481
11041998217,49cyclictest0-21swapper/000:25:420
161602810,4sleep10-21swapper/123:39:401
11043998019,23cyclictest18817-21rm00:20:572
11041998027,33cyclictest9-21ksoftirqd/021:30:500
1104199801,39cyclictest0-21swapper/023:40:390
11041997917,42cyclictest0-21swapper/022:25:530
11043997821,23cyclictest0-21swapper/223:25:432
1104299787,46cyclictest1393-21uniq00:00:471
11041997857,7cyclictest0-21swapper/023:50:490
1104399773,58cyclictest0-21swapper/223:35:332
1104499764,8cyclictest0-21swapper/322:40:463
11043997521,43cyclictest7850irq/56-dwc_otg22:55:322
11043997513,24cyclictest23770-21memory21:50:492
11043997513,24cyclictest23770-21memory21:50:492
1104299735,11cyclictest0-21swapper/100:20:581
1104399713,24cyclictest7046-21ssh21:30:472
11043997132,18cyclictest8050irq/56-dwc_otg_00:00:382
1104199716,39cyclictest0-21swapper/019:45:390
1104199706,34cyclictest0-21swapper/020:10:390
266812690,3sleep20-21swapper/221:15:432
11042996920,26cyclictest221ktimersoftd/122:40:441
11043996810,12cyclictest4218-21grep22:05:562
11042996836,8cyclictest7850irq/56-dwc_otg21:10:571
11042996836,8cyclictest7850irq/56-dwc_otg21:10:571
1104199686,50cyclictest0-21swapper/023:45:320
11044996722,30cyclictest0-21swapper/323:05:513
11043996720,19cyclictest3011-21ssh21:25:492
1104299679,11cyclictest0-21swapper/100:25:421
11042996722,24cyclictest221ktimersoftd/123:40:461
1104499663,38cyclictest0-21swapper/323:25:423
11044996619,31cyclictest7950irq/56-dwc_otg_21:10:563
11044996619,31cyclictest7950irq/56-dwc_otg_21:10:563
11043996619,23cyclictest21737-21apt-get00:25:402
11041996530,13cyclictest0-21swapper/023:20:390
11041996530,13cyclictest0-21swapper/023:20:390
1104199651,32cyclictest0-21swapper/019:20:370
1104299634,16cyclictest4183-21timerwakeupswit22:05:561
1104299632,10cyclictest0-21swapper/122:20:371
11043996246,9cyclictest21044-21missed_timers23:05:522
1104299618,12cyclictest21-21rcuc/121:50:511
1104299618,12cyclictest21-21rcuc/121:50:511
1104299614,34cyclictest20390-21ssh22:25:521
1104499603,33cyclictest4512-21proc_pri22:45:533
1104499603,33cyclictest4512-21proc_pri22:45:533
1104399609,21cyclictest0-21swapper/222:45:542
1104399609,21cyclictest0-21swapper/222:45:542
1104299607,22cyclictest23-21ksoftirqd/123:05:511
1104299602,13cyclictest7850irq/56-dwc_otg19:45:371
11042996011,27cyclictest8050irq/56-dwc_otg_23:50:481
11041996036,4cyclictest7950irq/56-dwc_otg_00:15:270
11041996036,4cyclictest7950irq/56-dwc_otg_00:15:270
1104199591,33cyclictest9793-21ssh23:30:560
1104299586,20cyclictest7090-21latency21:30:481
11041995844,4cyclictest7950irq/56-dwc_otg_23:15:540
11041995842,3cyclictest7950irq/56-dwc_otg_22:35:520
1104199581,43cyclictest0-21swapper/023:00:490
1104199581,22cyclictest23481-21latency_hist19:45:260
11041995810,5cyclictest9198-21sh20:35:260
1104499572,33cyclictest7950irq/56-dwc_otg_22:05:543
1104399576,15cyclictest0-21swapper/221:40:332
11041995734,5cyclictest13981-21unixbench_multi19:15:560
1104199572,31cyclictest22096-21ssh21:10:270
11041995711,21cyclictest0-21swapper/021:45:370
167512560,4sleep015415-21/usr/sbin/munin22:20:550
11044995612,23cyclictest0-21swapper/323:50:473
1104299564,13cyclictest7850irq/56-dwc_otg22:45:391
1104299564,13cyclictest7850irq/56-dwc_otg22:45:391
1104199565,40cyclictest0-21swapper/020:55:410
1104199562,32cyclictest0-21swapper/020:20:260
1104399559,23cyclictest25256-21/usr/sbin/munin23:50:472
1104399551,12cyclictest0-21swapper/221:10:412
1104399551,12cyclictest0-21swapper/221:10:412
1104299553,10cyclictest7850irq/56-dwc_otg20:35:381
1104299553,10cyclictest7850irq/56-dwc_otg20:35:381
1104199552,46cyclictest8741-21kworker/0:022:11:390
11041995518,23cyclictest505-21cron22:20:260
11041995518,23cyclictest505-21cron22:20:260
1104199542,32cyclictest11514-21proc_pri21:35:520
1104199542,32cyclictest11514-21proc_pri21:35:520
1104199541,30cyclictest21849-21latency_hist19:40:270
1104499533,23cyclictest7950irq/56-dwc_otg_00:25:403
1104199538,19cyclictest0-21swapper/021:55:380
11041995321,18cyclictest12273-21cat20:40:510
11043995220,25cyclictest20404-21/usr/sbin/munin22:25:512
1104199522,28cyclictest0-21swapper/020:50:430
1104199512,27cyclictest27645-21fschecks_time19:55:440
1104199511,31cyclictest750-21snmpd20:25:490
313032500,2sleep00-21swapper/022:00:340
11041995029,5cyclictest7850irq/56-dwc_otg20:20:470
11041995025,4cyclictest5512-21fschecks_count00:05:450
1104199501,33cyclictest27472-21ssh21:15:550
1104199501,26cyclictest0-21swapper/020:05:500
1104399498,25cyclictest0-21swapper/219:15:412
1104199497,28cyclictest0-21swapper/000:30:520
1104199495,23cyclictest31911-21unixbench_multi21:20:560
11041994931,6cyclictest7850irq/56-dwc_otg23:15:260
11041994927,7cyclictest7950irq/56-dwc_otg_22:50:400
11044994816,5cyclictest7950irq/56-dwc_otg_22:15:373
11044994816,5cyclictest7950irq/56-dwc_otg_22:15:373
1104399487,26cyclictest0-21swapper/220:45:392
11043994820,18cyclictest28135-21fschecks_count22:35:432
11041994825,4cyclictest15799-21/usr/sbin/munin21:40:520
1104199476,26cyclictest0-21swapper/021:00:410
1104199472,25cyclictest11502-21if_wlan019:10:440
1104199472,25cyclictest11502-21if_wlan019:10:440
1104199471,30cyclictest0-21swapper/020:38:100
1104199471,30cyclictest0-21swapper/020:38:100
1104199471,22cyclictest13-21rcuc/023:56:330
1104399467,25cyclictest0-21swapper/220:50:312
1104299467,25cyclictest0-21swapper/120:25:321
1104399457,25cyclictest0-21swapper/221:55:402
1104399457,24cyclictest0-21swapper/220:35:392
1104399457,24cyclictest0-21swapper/220:35:392
1104399457,24cyclictest0-21swapper/219:10:392
1104399457,24cyclictest0-21swapper/219:10:392
11043994522,9cyclictest8050irq/56-dwc_otg_00:35:412
11043994515,17cyclictest7950irq/56-dwc_otg_20:25:512
11041994522,11cyclictest0-21swapper/000:38:490
1104199451,28cyclictest13823-21ntp_kernel_err20:45:470
1104499447,22cyclictest0-21swapper/321:05:383
11043994423,8cyclictest7850irq/56-dwc_otg22:15:372
11043994423,8cyclictest7850irq/56-dwc_otg22:15:372
1104299443,6cyclictest14226-21grep20:45:531
1104299441,11cyclictest0-21swapper/120:50:391
1104199442,23cyclictest0-21swapper/019:27:240
1104399437,24cyclictest0-21swapper/219:35:402
1104399434,10cyclictest8050irq/56-dwc_otg_21:20:382
11043994322,8cyclictest8050irq/56-dwc_otg_22:12:562
11043994320,9cyclictest8050irq/56-dwc_otg_23:57:302
11043994318,9cyclictest7950irq/56-dwc_otg_23:00:572
1104299436,26cyclictest11040-21cyclictest21:55:381
1104299432,6cyclictest7850irq/56-dwc_otg22:30:381
11042994319,8cyclictest221ktimersoftd/123:50:261
1104199432,25cyclictest0-21swapper/000:19:590
105472433,33sleep00-21swapper/019:07:360
1104399427,25cyclictest0-21swapper/220:55:412
11043994219,6cyclictest7850irq/56-dwc_otg19:50:432
1104399421,8cyclictest8775-21grep20:30:542
1104299427,24cyclictest0-21swapper/120:55:411
1104199421,22cyclictest19582-21dhclient-script19:32:060
11044994118,5cyclictest8430-21missed_timers22:50:493
11044994116,14cyclictest733-21ssh00:00:253
11043994125,3cyclictest8050irq/56-dwc_otg_00:14:362
11043994125,3cyclictest8050irq/56-dwc_otg_00:14:362
1104399412,2cyclictest0-21swapper/222:30:442
11043994115,9cyclictest8050irq/56-dwc_otg_21:00:522
11043994113,9cyclictest8050irq/56-dwc_otg_23:11:542
1104399411,2cyclictest0-21swapper/222:00:392
1104399411,22cyclictest24270-21ls19:45:462
1104299416,10cyclictest0-21swapper/100:12:191
1104299416,10cyclictest0-21swapper/100:12:191
1104299414,23cyclictest7850irq/56-dwc_otg23:20:431
1104299414,23cyclictest7850irq/56-dwc_otg23:20:431
11041994117,12cyclictest0-21swapper/020:02:090
11041994117,12cyclictest0-21swapper/020:02:090
207622400,3sleep123-21ksoftirqd/121:46:461
187742400,1sleep10-21swapper/119:30:481
1104499402,26cyclictest15017-21grep19:20:443
11044994016,6cyclictest23824-21aten_rbpower_po22:30:403
11044994011,5cyclictest0-21swapper/320:35:403
11044994011,5cyclictest0-21swapper/320:35:403
11043994030,6cyclictest24947-21sh23:50:262
11043994018,9cyclictest675-21fschecks_time23:20:442
11043994018,9cyclictest675-21fschecks_time23:20:442
11042994017,6cyclictest21-21rcuc/123:00:411
11041994018,11cyclictest0-21swapper/019:55:140
288282390,1sleep30-21swapper/300:33:573
1104499394,15cyclictest7950irq/56-dwc_otg_23:10:433
1104499391,25cyclictest2363-21grep20:15:433
1104399399,15cyclictest7950irq/56-dwc_otg_22:21:182
11043993910,6cyclictest301ktimersoftd/200:05:422
1104299397,22cyclictest0-21swapper/119:35:401
1104299395,21cyclictest29434-21ssh23:55:401
11042993915,4cyclictest0-21swapper/122:35:541
11044993818,5cyclictest1141450wget20:40:393
1104499381,25cyclictest21815-21ls19:40:273
1104399382,18cyclictest16821-21ssh00:19:372
1104399381,28cyclictest0-21swapper/222:52:552
11043993812,13cyclictest7850irq/56-dwc_otg21:39:272
11043993812,13cyclictest7850irq/56-dwc_otg21:39:272
11043993811,14cyclictest8050irq/56-dwc_otg_23:31:502
11044993722,5cyclictest26770-21ssh21:15:443
11044993722,13cyclictest1552250ssh21:40:483
1104399379,15cyclictest8050irq/56-dwc_otg_19:45:272
1104399371,26cyclictest26916-21timerandwakeup00:30:542
11043993710,11cyclictest8050irq/56-dwc_otg_19:21:572
11042993725,8cyclictest221ktimersoftd/122:15:371
11042993725,8cyclictest221ktimersoftd/122:15:371
11042993713,5cyclictest22043-21diskmemload21:18:311
1104499364,14cyclictest7950irq/56-dwc_otg_20:05:463
1104499362,16cyclictest7950irq/56-dwc_otg_22:40:273
1104499361,11cyclictest0-21swapper/300:11:353
1104499361,11cyclictest0-21swapper/300:11:353
1104399367,23cyclictest0-21swapper/221:05:382
1104399367,23cyclictest0-21swapper/220:40:392
1104399367,12cyclictest8050irq/56-dwc_otg_23:17:332
11043993616,5cyclictest18591-21fschecks_time19:30:452
1104299367,15cyclictest0-21swapper/119:25:401
1104299367,14cyclictest8050irq/56-dwc_otg_19:50:531
1104299362,6cyclictest0-21swapper/119:55:401
1104299361,4cyclictest0-21swapper/121:21:001
1104499355,15cyclictest8050irq/56-dwc_otg_21:55:453
1104499351,24cyclictest16842-21ls23:00:513
1104399357,24cyclictest0-21swapper/221:45:402
1104399353,24cyclictest5604-21apt-config20:25:272
1104299356,6cyclictest8050irq/56-dwc_otg_23:10:551
1104299353,5cyclictest0-21swapper/122:14:371
1104299351,22cyclictest0-21swapper/123:30:271
1104499345,16cyclictest8050irq/56-dwc_otg_19:55:553
11044993416,4cyclictest31542-21sh00:36:213
11044993412,5cyclictest19851-21cron19:35:263
11044993410,12cyclictest0-21swapper/320:35:273
1104299349,6cyclictest8050irq/56-dwc_otg_19:20:441
11042993421,7cyclictest31979-21/usr/sbin/munin20:05:541
11042993419,4cyclictest22754-21switchtime19:40:511
11042993414,6cyclictest0-21swapper/121:42:201
11042993411,12cyclictest0-21swapper/100:30:571
1104499336,18cyclictest0-21swapper/323:30:403
1104499336,16cyclictest39-21ksoftirqd/322:00:393
1104499333,18cyclictest8050irq/56-dwc_otg_00:15:443
11044993314,5cyclictest727-21runrttasks23:20:283
11044993314,5cyclictest727-21runrttasks23:20:283
1104399337,14cyclictest0-21swapper/220:00:402
1104399337,14cyclictest0-21swapper/220:00:402
11043993323,7cyclictest508-21fschecks_count20:10:432
1104399331,6cyclictest7950irq/56-dwc_otg_20:10:262
1104299337,5cyclictest8050irq/56-dwc_otg_21:05:261
1104299335,13cyclictest8050irq/56-dwc_otg_19:10:391
1104299335,13cyclictest8050irq/56-dwc_otg_19:10:391
1104299333,14cyclictest8050irq/56-dwc_otg_20:15:431
11042993316,8cyclictest7591-21ssh00:07:531
1104299331,2cyclictest0-21swapper/121:38:581
1104299331,2cyclictest0-21swapper/121:38:581
11042993310,4cyclictest0-21swapper/122:54:221
1104499326,14cyclictest0-21swapper/320:25:313
11044993225,4cyclictest381ktimersoftd/320:45:373
1104499321,4cyclictest8050irq/56-dwc_otg_19:25:373
11044993214,5cyclictest28920-21fschecks_count23:15:443
11044993211,6cyclictest4662-21proc_pri20:20:513
11044993210,5cyclictest37-21rcuc/322:20:473
1104399322,16cyclictest0-21swapper/220:15:492
1104299327,4cyclictest0-21swapper/120:30:441
1104299323,11cyclictest8050irq/56-dwc_otg_20:40:451
1104299322,21cyclictest12858-21/usr/sbin/munin19:15:501
1104299322,16cyclictest0-21swapper/120:20:531
1104499318,5cyclictest7850irq/56-dwc_otg23:45:413
11044993112,5cyclictest10956-21fschecks_count21:35:453
11044993112,5cyclictest10956-21fschecks_count21:35:453
1104499311,15cyclictest0-21swapper/300:05:573
11043993117,7cyclictest8050irq/56-dwc_otg_19:55:592
1104299318,4cyclictest0-21swapper/122:00:401
1104299315,6cyclictest968-21/usr/sbin/munin20:10:481
1104299311,6cyclictest13998-21irqstats00:15:461
1104499306,20cyclictest13192-21uniq19:15:453
1104499301,5cyclictest8050irq/56-dwc_otg_20:55:263
1104499301,21cyclictest22076-21cpuspeed19:40:403
1104499301,20cyclictest31643-21switchtime21:20:543
1104499301,15cyclictest7850irq/56-dwc_otg22:12:533
1104499301,12cyclictest8050irq/56-dwc_otg_21:00:543
1104299305,6cyclictest7850irq/56-dwc_otg21:10:261
1104299302,10cyclictest7950irq/56-dwc_otg_20:00:391
1104299302,10cyclictest7950irq/56-dwc_otg_20:00:391
105082307,15sleep10-21swapper/119:07:041
95092294,16sleep29607-21/usr/sbin/munin19:05:432
11044992912,8cyclictest0-21swapper/319:50:383
1104499291,18cyclictest0-21swapper/320:04:423
1104499291,18cyclictest0-21swapper/320:04:423
1104399291,7cyclictest0-21swapper/219:25:452
1104499274,6cyclictest7850irq/56-dwc_otg19:10:493
1104499274,6cyclictest7850irq/56-dwc_otg19:10:493
11044992715,5cyclictest381ktimersoftd/320:59:493
105722264,14sleep30-21swapper/319:07:553
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional