You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-28 - 09:42

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sun Dec 28, 2025 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1271022210,1sleep30-21swapper/319:05:263
1271022210,1sleep30-21swapper/319:05:263
841121120,5sleep11448199cyclictest23:20:301
14480991031,90cyclictest28314-21grep19:45:400
1448099982,80cyclictest27316-21munin-run22:45:090
1448099982,79cyclictest0-21swapper/019:40:280
1448099982,79cyclictest0-21swapper/019:40:280
1448099982,76cyclictest0-21swapper/000:25:330
1448099961,73cyclictest22245-21latency_hist00:00:100
1448099951,82cyclictest19597-21sed22:20:400
1448099951,78cyclictest32664-21cron21:30:090
1448099911,77cyclictest0-21swapper/023:40:350
1448099891,73cyclictest6036-21cut23:15:240
1448099862,71cyclictest27539-21/usr/sbin/munin22:45:280
1448099852,55cyclictest0-21swapper/022:40:050
14480998523,44cyclictest7850irq/56-dwc_otg_19:35:220
14480998523,44cyclictest7850irq/56-dwc_otg_19:35:220
1448099851,70cyclictest0-21swapper/019:32:450
1448099845,67cyclictest10762-21taskset21:56:410
1448099832,75cyclictest14479-21cyclictest19:10:120
1448099832,65cyclictest0-21swapper/022:50:300
1448099832,65cyclictest0-21swapper/019:20:090
1448099831,4cyclictest17226-21grep20:45:330
1448099821,5cyclictest21588-21sh19:30:090
1448099811,5cyclictest0-21swapper/021:01:120
1448099811,57cyclictest12946-21aten_rbpower_vo20:35:250
1448099781,65cyclictest12652-21latency_hist20:35:090
1448099781,40cyclictest0-21swapper/023:00:190
1448099781,40cyclictest0-21swapper/023:00:190
1448099781,25cyclictest0-21swapper/021:30:220
14480997727,23cyclictest0-21swapper/021:40:210
1448099772,57cyclictest0-21swapper/023:10:090
1448099772,56cyclictest0-21swapper/021:35:300
1448099772,3cyclictest0-21swapper/000:40:090
1448099771,3cyclictest23074-21ntp_states00:00:330
1448099771,3cyclictest23074-21ntp_states00:00:330
1448099761,61cyclictest0-21swapper/022:07:350
1448099758,48cyclictest14786-21aten_rbpower_en20:40:230
1448099752,53cyclictest0-21swapper/021:19:380
1448099752,53cyclictest0-21swapper/021:19:380
1448099752,3cyclictest0-21swapper/000:08:360
1448099741,4cyclictest16708-21apt-get22:15:200
1448099732,53cyclictest0-21swapper/023:35:200
1448099732,53cyclictest0-21swapper/019:55:590
1448099712,55cyclictest0-21swapper/021:06:300
1448099712,50cyclictest0-21swapper/020:30:100
1448099712,50cyclictest0-21swapper/020:30:100
107402700,2sleep10-21swapper/123:25:411
1448099686,51cyclictest837-21netstat20:00:340
1448099681,51cyclictest0-21swapper/000:11:500
1448099681,50cyclictest9242-21apt21:55:090
1448099671,4cyclictest290942sleep000:17:040
1448099671,4cyclictest18205-21chrt23:46:090
1448099662,47cyclictest0-21swapper/000:30:240
1448099651,6cyclictest128-21systemd-journal23:23:490
1448099651,61cyclictest0-21swapper/021:10:200
1448099651,4cyclictest7850irq/56-dwc_otg_23:35:090
1448099651,43cyclictest2242-21fschecks_count20:05:290
1448099651,3cyclictest126162sleep022:02:200
1448099642,35cyclictest0-21swapper/022:25:210
1448099641,7cyclictest0-21swapper/020:17:090
1448099641,51cyclictest19558-21chrt20:50:520
1448099641,4cyclictest4632-21/usr/sbin/munin20:10:360
1448099641,4cyclictest10918-21chrt23:26:370
1448099641,4cyclictest0-21swapper/020:24:380
1448099641,46cyclictest0-21swapper/023:12:560
1448099637,45cyclictest7318-21runrttasks21:48:490
1448099631,4cyclictest203012sleep023:54:540
1448099631,4cyclictest0-21swapper/020:55:590
1448099631,47cyclictest0-21swapper/000:20:190
1448099621,5cyclictest30485-21mv19:53:460
1448099621,5cyclictest0-21swapper/022:58:410
1448099621,4cyclictest162572sleep022:12:390
1448099621,4cyclictest162572sleep022:12:390
1448099621,3cyclictest306212sleep021:22:150
1448099621,3cyclictest234012sleep022:31:300
1448099621,3cyclictest0-21swapper/019:20:100
1448199602,10cyclictest0-21swapper/121:45:221
14482995024,5cyclictest20091-21latency_hist20:55:102
1448299494,15cyclictest7950irq/56-dwc_otg_19:20:372
14483994727,6cyclictest1125-21runrttasks20:10:223
1448299477,30cyclictest0-21swapper/222:30:222
14482994711,25cyclictest0-21swapper/222:55:232
1448199477,25cyclictest0-21swapper/120:05:261
140892473,37sleep20-21swapper/219:08:382
140892473,37sleep20-21swapper/219:08:382
1448399463,28cyclictest0-21swapper/319:10:123
1448399461,8cyclictest7750irq/56-dwc_otg21:15:213
1448399461,8cyclictest7750irq/56-dwc_otg21:15:213
1448199468,24cyclictest0-21swapper/100:15:221
1448199467,25cyclictest0-21swapper/120:45:241
1448199467,22cyclictest0-21swapper/122:00:251
14481994636,7cyclictest221ktimersoftd/121:30:211
139362463,36sleep00-21swapper/019:06:380
139362463,36sleep00-21swapper/019:06:380
1448299457,26cyclictest0-21swapper/223:15:152
1448299456,25cyclictest27557-21chrt22:45:212
1448299456,25cyclictest0-21swapper/219:50:232
1448299455,25cyclictest0-21swapper/200:25:242
14482994520,5cyclictest9333-21aten_rbpower_vo20:25:262
14482994520,5cyclictest9333-21aten_rbpower_vo20:25:262
1448199453,12cyclictest0-21swapper/119:10:121
1448399447,23cyclictest0-21swapper/321:00:233
1448399447,22cyclictest0-21swapper/300:00:233
1448399447,22cyclictest0-21swapper/300:00:233
1448299447,22cyclictest0-21swapper/220:05:262
1448199447,26cyclictest0-21swapper/123:55:241
1448199447,25cyclictest0-21swapper/100:25:241
1448199436,23cyclictest0-21swapper/119:50:231
14481994312,22cyclictest0-21swapper/121:50:251
1448299427,23cyclictest0-21swapper/221:10:222
1448199425,8cyclictest0-21swapper/100:35:221
165152411,5sleep216525-21diskstats19:15:272
1448299417,20cyclictest0-21swapper/222:00:252
1448299411,5cyclictest9273-21ls21:55:092
1448299411,5cyclictest7850irq/56-dwc_otg_21:55:232
1448199418,5cyclictest0-21swapper/119:20:211
1448199417,25cyclictest0-21swapper/123:15:141
1448199416,25cyclictest0-21swapper/121:10:221
1448199416,25cyclictest0-21swapper/119:35:231
1448199416,25cyclictest0-21swapper/119:35:231
1448399407,25cyclictest0-21swapper/321:50:253
1448399407,23cyclictest0-21swapper/300:20:223
1448299407,25cyclictest0-21swapper/200:30:232
1448299407,19cyclictest0-21swapper/220:15:232
1448299401,22cyclictest0-21swapper/223:00:202
1448299401,22cyclictest0-21swapper/223:00:202
1448299401,17cyclictest27529-21cron00:15:092
1448199407,21cyclictest0-21swapper/123:35:151
1448199406,17cyclictest7850irq/56-dwc_otg_20:00:271
1448399397,24cyclictest0-21swapper/300:10:243
1448299398,17cyclictest0-21swapper/223:55:242
1448199399,24cyclictest0-21swapper/122:55:231
1448199397,25cyclictest0-21swapper/119:25:221
1448199397,22cyclictest0-21swapper/100:20:221
1448199391,30cyclictest128-21systemd-journal20:21:321
1448399387,23cyclictest0-21swapper/320:35:243
1448399384,27cyclictest0-21swapper/321:40:223
1448299381,26cyclictest14015-21timerandwakeup22:05:372
1448199387,16cyclictest0-21swapper/123:05:231
1448199381,20cyclictest0-21swapper/122:20:251
1448399374,6cyclictest7850irq/56-dwc_otg_20:25:233
1448399374,6cyclictest7850irq/56-dwc_otg_20:25:233
1448399371,26cyclictest26247-21ls22:40:303
1448299377,20cyclictest0-21swapper/200:20:222
1448299376,19cyclictest0-21swapper/220:45:242
1448299374,26cyclictest30910-21latency_hist22:55:102
14482993722,5cyclictest22414-21cut00:00:232
14482993722,5cyclictest22414-21cut00:00:232
14482993717,5cyclictest28614-21unixbench_singl21:15:372
14482993717,5cyclictest28614-21unixbench_singl21:15:372
1448199376,16cyclictest0-21swapper/122:30:221
14481993718,5cyclictest15969-21rt-features23:40:341
169912361,29sleep117007-21ntp_states19:15:341
1448399367,14cyclictest7950irq/56-dwc_otg_00:35:343
1448399364,22cyclictest7950irq/56-dwc_otg_22:55:213
1448399361,5cyclictest0-21swapper/319:25:213
1448299367,5cyclictest7850irq/56-dwc_otg_21:20:272
1448299367,20cyclictest0-21swapper/219:35:232
1448299367,20cyclictest0-21swapper/219:35:232
1448299366,11cyclictest7850irq/56-dwc_otg_22:35:372
14482993616,5cyclictest24958-21vmstat21:05:382
14482993612,5cyclictest20440-21fschecks_time20:55:282
1448199367,17cyclictest0-21swapper/120:15:231
14481993623,5cyclictest27650-21aten_rbpower_vo22:45:221
1448399357,18cyclictest0-21swapper/319:20:153
1448399357,13cyclictest7850irq/56-dwc_otg_23:35:253
1448299357,14cyclictest0-21swapper/223:05:232
14482993514,4cyclictest26999-21idleruntime-cro19:45:082
14482993514,4cyclictest26999-21idleruntime-cro19:45:082
1448199358,13cyclictest7950irq/56-dwc_otg_22:35:371
1448199356,15cyclictest0-21swapper/119:55:231
1448199356,14cyclictest7950irq/56-dwc_otg_22:05:241
14481993525,8cyclictest5767-21latency_hist23:15:091
14481993521,11cyclictest0-21swapper/123:30:271
142612357,14sleep10-21swapper/119:10:111
142612357,14sleep10-21swapper/119:10:111
185122341,26sleep10-21swapper/120:50:251
1448399347,14cyclictest0-21swapper/320:20:233
1448399346,14cyclictest39-21ksoftirqd/320:05:233
14482993427,4cyclictest18810-21aten_rbpower_cu23:50:222
14482993419,10cyclictest29-21rcuc/219:10:122
1448299341,26cyclictest14351-21ls23:35:362
1448299341,22cyclictest5638-21latency_hist21:45:092
1448199347,17cyclictest7950irq/56-dwc_otg_19:46:241
1448199342,20cyclictest0-21swapper/120:25:251
1448199342,20cyclictest0-21swapper/120:25:251
14481993416,5cyclictest4102-21wget21:40:221
1448199341,4cyclictest7850irq/56-dwc_otg_20:10:221
14481993412,12cyclictest21-21rcuc/122:50:361
1448399338,7cyclictest7750irq/56-dwc_otg22:15:093
1448399338,7cyclictest7750irq/56-dwc_otg22:15:093
1448399336,15cyclictest0-21swapper/320:45:243
1448399335,6cyclictest39-21ksoftirqd/322:20:333
1448399332,18cyclictest510-21aten_rbpower_en21:30:243
1448399331,4cyclictest7950irq/56-dwc_otg_00:15:203
14483993311,5cyclictest6755-21unixbench_singl20:15:383
14483993310,11cyclictest20341-21apt-get22:25:213
1448299339,6cyclictest26036-21fschecks_time22:40:282
1448299336,15cyclictest0-21swapper/200:15:222
1448299335,5cyclictest7850irq/56-dwc_otg_20:05:092
1448299331,25cyclictest0-21swapper/223:30:282
14481993310,5cyclictest3118850wget21:25:241
1448399327,9cyclictest7850irq/56-dwc_otg_19:50:313
1448399327,22cyclictest0-21swapper/322:05:243
1448399327,22cyclictest0-21swapper/319:40:243
1448399327,22cyclictest0-21swapper/319:40:243
1448399327,15cyclictest0-21swapper/323:15:243
1448399327,12cyclictest7950irq/56-dwc_otg_21:20:343
1448399325,4cyclictest30893-21cron22:55:093
1448399325,12cyclictest7850irq/56-dwc_otg_23:45:293
1448399323,7cyclictest7950irq/56-dwc_otg_20:40:313
1448399323,6cyclictest7750irq/56-dwc_otg21:25:393
14483993217,4cyclictest1125-21runrttasks20:50:363
1448399321,2cyclictest0-21swapper/300:25:213
14483993212,5cyclictest37-21rcuc/323:40:273
1448299325,15cyclictest7950irq/56-dwc_otg_19:30:272
1448299322,4cyclictest7950irq/56-dwc_otg_19:45:232
1448199327,15cyclictest0-21swapper/100:05:241
1448199326,13cyclictest7950irq/56-dwc_otg_00:10:391
1448199325,5cyclictest7750irq/56-dwc_otg20:40:341
1448199324,10cyclictest7950irq/56-dwc_otg_21:00:271
1448199323,13cyclictest0-21swapper/121:39:141
1448199322,22cyclictest0-21swapper/121:06:011
1448199321,27cyclictest15428-21ls22:10:301
1448199321,27cyclictest15428-21ls22:10:301
1448199321,20cyclictest0-21swapper/122:16:051
14481993210,5cyclictest0-21swapper/121:55:391
1448399317,9cyclictest0-21swapper/319:30:233
1448399317,14cyclictest0-21swapper/321:55:243
1448399316,15cyclictest0-21swapper/321:10:143
1448399314,13cyclictest7950irq/56-dwc_otg_23:25:423
1448399312,5cyclictest7850irq/56-dwc_otg_19:15:233
1448399311,7cyclictest1021-21grep00:30:273
14483993112,5cyclictest1125-21runrttasks20:31:473
1448399311,19cyclictest0-21swapper/319:35:233
1448399311,19cyclictest0-21swapper/319:35:233
14483993111,10cyclictest0-21swapper/323:33:103
1448299316,15cyclictest0-21swapper/219:55:232
1448299314,6cyclictest7850irq/56-dwc_otg_22:15:372
1448299311,4cyclictest0-21swapper/220:35:212
1448199316,23cyclictest0-21swapper/100:30:231
1448199316,16cyclictest0-21swapper/122:40:291
1448199316,15cyclictest0-21swapper/123:50:221
1448199313,20cyclictest0-21swapper/119:40:291
1448199313,20cyclictest0-21swapper/119:40:291
1448199313,14cyclictest0-21swapper/122:25:321
14481993124,5cyclictest11067-21aten_rbpower_cu20:30:261
14481993111,4cyclictest17897-21timerandwakeup23:45:391
14481993111,4cyclictest0-21swapper/100:00:241
14481993111,4cyclictest0-21swapper/100:00:241
1448399306,5cyclictest7850irq/56-dwc_otg_23:05:093
1448399306,5cyclictest7850irq/56-dwc_otg_23:05:093
14483993024,4cyclictest381ktimersoftd/322:35:213
14483993014,5cyclictest27482-21fschecks_count19:45:293
1448399301,3cyclictest0-21swapper/319:55:233
14483993010,5cyclictest20169-21sshd23:53:133
1448299306,15cyclictest0-21swapper/219:25:222
14482993017,6cyclictest7850irq/56-dwc_otg_20:40:222
1448199305,11cyclictest7950irq/56-dwc_otg_21:20:261
1448199301,23cyclictest0-21swapper/119:30:421
1448199301,17cyclictest14443-21apt-key20:40:091
1448399297,14cyclictest0-21swapper/321:05:233
1448399296,4cyclictest7950irq/56-dwc_otg_22:30:263
1448399295,14cyclictest7950irq/56-dwc_otg_22:15:313
1448399292,13cyclictest7950irq/56-dwc_otg_21:47:533
1448299297,9cyclictest7950irq/56-dwc_otg_21:45:222
1448299296,10cyclictest7750irq/56-dwc_otg23:25:232
1448299293,13cyclictest7950irq/56-dwc_otg_22:28:332
14482992922,5cyclictest4395-21fschecks_time23:10:252
1448299291,5cyclictest7750irq/56-dwc_otg00:35:272
1448299291,13cyclictest7950irq/56-dwc_otg_22:24:462
1448299291,13cyclictest7750irq/56-dwc_otg00:05:352
1448199293,17cyclictest0-21swapper/121:15:581
1448199293,17cyclictest0-21swapper/121:15:581
1448199292,16cyclictest20573-21awk20:55:301
1448199291,13cyclictest1253-21proc_pri23:00:321
1448199291,13cyclictest1253-21proc_pri23:00:321
1448399286,5cyclictest7850irq/56-dwc_otg_22:45:323
1448399284,5cyclictest20893-21fschecks_time23:55:283
1448399283,12cyclictest7950irq/56-dwc_otg_23:20:373
1448399282,6cyclictest7950irq/56-dwc_otg_20:00:233
1448299288,5cyclictest7950irq/56-dwc_otg_21:35:352
1448299286,9cyclictest29-21rcuc/220:35:092
1448299283,5cyclictest7850irq/56-dwc_otg_23:20:302
1448299282,12cyclictest0-21swapper/221:00:492
1448299282,10cyclictest7850irq/56-dwc_otg_21:25:322
1448299281,24cyclictest0-21swapper/223:40:232
1448399276,4cyclictest7950irq/56-dwc_otg_23:05:303
1448299276,9cyclictest7950irq/56-dwc_otg_22:10:262
1448299276,9cyclictest7950irq/56-dwc_otg_22:10:262
1448399262,17cyclictest0-21swapper/323:13:543
14483992615,8cyclictest20170-21aten_rbpower_cu20:55:243
1448399261,13cyclictest0-21swapper/300:05:283
1448299261,3cyclictest7850irq/56-dwc_otg_20:10:212
1448399251,7cyclictest0-21swapper/322:00:283
1448399251,4cyclictest0-21swapper/321:35:283
1448299251,5cyclictest755-21cut21:30:272
1448299251,14cyclictest0-21swapper/220:20:262
1448299241,5cyclictest16980-21apt-get23:45:242
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional