You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-08 - 18:40

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Wed Apr 08, 2026 12:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1595221670,5sleep21142899cyclictest21:35:022
11426999328,35cyclictest0-21swapper/017:45:540
23242890,2sleep30-21swapper/321:17:563
199722860,2sleep30-21swapper/321:00:493
11426998525,44cyclictest7950irq/56-dwc_otg_18:50:540
22512810,7sleep31142999cyclictest21:56:093
11426998116,55cyclictest24089-21latency_hist17:05:410
182462790,5sleep01142699cyclictest19:02:260
182462790,5sleep01142699cyclictest19:02:260
11426997726,20cyclictest0-21swapper/016:45:530
11426997630,30cyclictest7850irq/56-dwc_otg_21:16:050
11426997622,4cyclictest7850irq/56-dwc_otg_20:50:570
11426997520,40cyclictest0-21swapper/021:20:560
1142699751,28cyclictest27875-21cut17:15:530
77162740,2sleep30-21swapper/319:28:183
11426997419,39cyclictest0-21swapper/020:36:080
1142699732,39cyclictest0-21swapper/021:35:510
1142699731,18cyclictest10436-21rt-features19:31:040
1142699712,21cyclictest16597-21apt-config21:35:410
253852700,2sleep30-21swapper/319:49:033
1142999707,30cyclictest0-21swapper/320:10:523
1142999707,30cyclictest0-21swapper/320:10:523
1142699703,20cyclictest26312-21fschecks_time17:10:560
1142699703,20cyclictest26312-21fschecks_time17:10:560
1142699701,16cyclictest3452-21ssh18:45:560
1142699696,15cyclictest0-21swapper/020:41:350
1142699696,15cyclictest0-21swapper/020:41:350
11426996919,4cyclictest7850irq/56-dwc_otg_17:31:070
11426996916,12cyclictest11299-21taskset20:50:360
1142699691,21cyclictest14862-21sed19:36:060
1142699691,16cyclictest14904-21latency_hist20:15:410
1142699691,16cyclictest14904-21latency_hist20:15:410
252902680,3sleep10-21swapper/119:11:001
11428996821,20cyclictest12154-21kworker/u8:321:54:302
1142699682,7cyclictest25393-21cut21:45:570
11426996813,47cyclictest0-21swapper/017:05:410
11426996813,12cyclictest0-21swapper/020:04:540
1142699681,21cyclictest9105-21ntpq21:26:030
1142699681,17cyclictest10750-21cat17:56:070
11426996715,4cyclictest7750irq/56-dwc_otg19:22:020
11426996715,10cyclictest1576-21ssh19:59:330
1142699671,12cyclictest0-21swapper/022:00:040
99532660,7sleep09955-21idleruntime16:25:570
11428996627,13cyclictest25406-21ssh20:27:292
1142699668,17cyclictest0-21swapper/019:47:350
11426996622,4cyclictest20954-21ssh21:40:530
11426996616,6cyclictest0-21swapper/018:15:500
1142699661,54cyclictest0-21swapper/021:51:470
11426996614,42cyclictest0-21swapper/020:27:420
11426996612,6cyclictest7950irq/56-dwc_otg_19:11:070
1142699661,16cyclictest27164-21/usr/sbin/munin18:35:540
11428996529,20cyclictest10278-21ssh21:27:172
11428996524,15cyclictest16046-21ssh20:16:052
11428996520,26cyclictest11773-21basename20:50:542
1142799654,44cyclictest7750irq/56-dwc_otg21:00:531
11426996517,25cyclictest2855-21fschecks_time17:35:570
1142699651,5cyclictest7950irq/56-dwc_otg_18:05:520
1142699651,14cyclictest7987-21unixbench_singl20:06:080
1142699651,10cyclictest12786-21grep18:01:080
56032640,2sleep10-21swapper/121:21:211
11428996428,22cyclictest26399-21ssh21:07:492
11428996428,21cyclictest30409-21/usr/sbin/munin17:21:042
11426996418,5cyclictest15031-21ssh20:15:510
11426996413,2cyclictest0-21swapper/019:50:580
11428996337,8cyclictest10008-21df_inode17:55:562
11428996324,21cyclictest10908-21/usr/sbin/munin20:10:522
11428996324,21cyclictest10908-21/usr/sbin/munin20:10:522
11428996322,25cyclictest27593-21sensors19:51:052
1142799633,11cyclictest0-21swapper/117:15:501
1142699634,15cyclictest0-21swapper/020:24:430
11426996314,9cyclictest0-21swapper/016:42:160
11426996314,9cyclictest0-21swapper/016:42:160
11426996314,4cyclictest7750irq/56-dwc_otg17:40:570
11426996310,12cyclictest26468-21sh21:07:570
11428996224,13cyclictest12206-21ssh19:33:292
11428996223,25cyclictest12698-21unixbench_multi18:01:072
1142799623,13cyclictest14126-21ssh18:57:571
1142699622,16cyclictest0-21swapper/017:26:470
1142699621,4cyclictest23068-21fschecks_count18:30:570
1142699621,16cyclictest0-21swapper/019:18:160
11426996210,15cyclictest0-21swapper/018:42:230
260062610,1sleep20-21swapper/219:50:072
11428996125,12cyclictest16540-21chrt16:44:412
11428996125,12cyclictest16540-21chrt16:44:412
11427996115,17cyclictest221ktimersoftd/119:50:531
1142699619,44cyclictest0-21swapper/020:30:580
1142699615,13cyclictest0-21swapper/020:57:540
11426996128,4cyclictest0-21swapper/019:40:520
11426996128,4cyclictest0-21swapper/019:40:520
11426996120,4cyclictest7850irq/56-dwc_otg_18:25:500
11426996113,11cyclictest0-21swapper/018:59:460
1142699611,19cyclictest0-21swapper/021:05:070
1142699611,12cyclictest0-21swapper/016:51:000
11428996030,11cyclictest14648-21/usr/sbin/munin19:36:032
11428996028,12cyclictest6070-21ssh20:05:082
11428996027,25cyclictest27967-21ssh21:49:012
1142699601,5cyclictest7750irq/56-dwc_otg19:30:290
11428995930,11cyclictest32140-21ssh19:56:092
11428995929,12cyclictest727-21ssh20:36:322
11428995929,11cyclictest21561-21/usr/sbin/munin18:26:042
1142699598,10cyclictest0-21swapper/019:07:480
1142699592,17cyclictest0-21swapper/016:37:040
1142699591,13cyclictest0-21swapper/018:20:410
1142699591,13cyclictest0-21swapper/018:20:410
11428995826,11cyclictest30720-21ssh21:13:072
11428995824,19cyclictest2953150rm20:32:262
11428995816,22cyclictest0-21swapper/220:08:022
11426995812,8cyclictest28254-21sh21:10:460
11428995727,19cyclictest19901-21ssh19:05:192
11428995727,19cyclictest19901-21ssh19:05:192
11428995727,14cyclictest1079-21ssh18:42:392
11428995722,23cyclictest24544-21latency_hist19:10:402
11428995722,15cyclictest19319-21grep20:20:542
11428995715,27cyclictest25651-21/usr/sbin/munin19:11:062
11428995626,20cyclictest28833-21rm18:36:572
11428995625,20cyclictest21679-21ssh21:01:472
11428995625,12cyclictest32426-21/usr/sbin/munin21:16:002
11428995621,18cyclictest21917-21ssh19:45:282
11428995621,18cyclictest21917-21ssh19:45:282
1142699562,15cyclictest0-21swapper/016:57:480
11426995611,9cyclictest9342-21chrt17:53:060
11428995524,20cyclictest18946-21ssh20:59:212
11428995524,16cyclictest7396-21ssh21:24:352
11428995517,11cyclictest20595-21modprobe18:25:392
11428995517,11cyclictest20595-21modprobe18:25:392
11428995426,12cyclictest7428-21ssh18:50:502
11428995417,20cyclictest7750irq/56-dwc_otg17:15:532
11428995327,14cyclictest3006-21ssh21:57:312
11428995324,12cyclictest26051-21grep17:10:522
11428995324,12cyclictest26051-21grep17:10:522
11428995324,12cyclictest21961-21timerandwakeup21:41:062
11428995323,11cyclictest19300-21ssh21:38:212
1142699531,18cyclictest0-21swapper/017:23:480
11428995219,12cyclictest8848-21ssh19:30:152
11428995218,11cyclictest0-21swapper/218:31:322
11428995215,24cyclictest7950irq/56-dwc_otg_19:16:202
1142699521,34cyclictest12596-21grep16:31:070
11428995120,12cyclictest6891-21seq20:45:082
11428995120,12cyclictest6891-21seq20:45:082
11428995119,13cyclictest9841-21ssh20:47:572
11428995020,9cyclictest0-21swapper/217:05:172
11428995020,11cyclictest13465-21ssh18:56:492
11428995017,12cyclictest9356-21taskset17:53:162
1142799507,26cyclictest0-21swapper/117:20:531
11428994929,11cyclictest7012-21ssh18:50:302
11428994918,19cyclictest7750irq/56-dwc_otg19:22:172
11429994840,3cyclictest7850irq/56-dwc_otg_21:25:533
11428994820,17cyclictest12877-21taskset16:34:092
11428994816,13cyclictest7777-21basename17:50:402
1142799485,19cyclictest0-21swapper/118:40:511
11427994813,4cyclictest23-21ksoftirqd/119:35:511
11428994735,9cyclictest13870-21perl18:05:572
11428994720,10cyclictest7850irq/56-dwc_otg_17:39:592
1142999461,9cyclictest7950irq/56-dwc_otg_21:10:543
11428994619,15cyclictest7950irq/56-dwc_otg_17:00:042
11428994618,12cyclictest2208-21chrt17:34:162
11428994616,10cyclictest7950irq/56-dwc_otg_18:20:392
11428994615,18cyclictest0-21swapper/216:37:022
1142799467,19cyclictest23-21ksoftirqd/120:20:521
11427994620,17cyclictest0-21swapper/120:40:531
11427994620,17cyclictest0-21swapper/120:40:531
11426994614,21cyclictest0-21swapper/018:11:040
1142999458,8cyclictest7950irq/56-dwc_otg_19:05:523
1142999457,23cyclictest0-21swapper/316:30:533
1142999455,32cyclictest7950irq/56-dwc_otg_20:05:503
11428994511,13cyclictest31394-21/usr/sbin/munin17:25:572
11427994515,20cyclictest23-21ksoftirqd/120:05:531
271842440,12sleep1221ktimersoftd/120:30:401
1142999447,23cyclictest0-21swapper/316:45:463
11428994429,11cyclictest18980-21/usr/sbin/munin16:50:552
11428994423,10cyclictest18451-21chrt16:49:522
1142799447,25cyclictest0-21swapper/116:30:531
1142799447,24cyclictest0-21swapper/116:35:531
1142799447,22cyclictest0-21swapper/117:25:521
1142799444,12cyclictest11696-21ssh20:50:511
11428994329,11cyclictest5572-21/usr/sbin/munin17:41:082
11428994320,11cyclictest0-21swapper/218:15:112
11427994326,5cyclictest11413-21ssh18:55:411
11427994313,9cyclictest2136-21unixbench_singl19:21:071
1142999428,7cyclictest7850irq/56-dwc_otg_19:36:083
1142999423,7cyclictest7950irq/56-dwc_otg_17:20:523
1142999422,23cyclictest0-21swapper/320:00:513
11428994233,7cyclictest24189-21apt-get17:05:522
11427994218,8cyclictest29820-21/usr/sbin/munin19:16:031
1142999417,24cyclictest0-21swapper/319:30:463
1142999417,12cyclictest7750irq/56-dwc_otg18:50:503
1142999414,18cyclictest7950irq/56-dwc_otg_20:36:183
11427994113,4cyclictest31331-21idleruntime-cro20:35:401
1142999405,23cyclictest0-21swapper/318:05:463
1142999405,22cyclictest0-21swapper/321:35:463
1142799406,23cyclictest0-21swapper/121:15:521
39662390,3sleep339-21ksoftirqd/318:46:023
1142999399,17cyclictest0-21swapper/320:35:413
1142999398,11cyclictest39-21ksoftirqd/319:24:573
11429993925,11cyclictest7950irq/56-dwc_otg_20:25:503
11429993918,7cyclictest7750irq/56-dwc_otg19:05:003
11429993918,7cyclictest7750irq/56-dwc_otg19:05:003
1142799397,22cyclictest0-21swapper/118:05:471
11427993917,5cyclictest18379-21sh21:36:421
1142999384,6cyclictest7850irq/56-dwc_otg_18:15:523
1142999381,21cyclictest2403-21ls20:00:413
1142799383,21cyclictest9103-21apt19:30:401
1142999374,17cyclictest39-21ksoftirqd/318:35:503
11429993716,5cyclictest1254250wget21:30:533
1142799379,6cyclictest7950irq/56-dwc_otg_18:35:531
1142799376,22cyclictest0-21swapper/119:30:461
11427993722,5cyclictest7950irq/56-dwc_otg_21:49:431
1142799371,6cyclictest407550ssh18:46:041
1142999368,19cyclictest28842-21ls17:16:063
1142999368,16cyclictest381ktimersoftd/318:01:043
1142999368,10cyclictest37-21rcuc/316:57:233
11429993612,3cyclictest0-21swapper/320:49:593
1142999361,22cyclictest19053-21grep16:50:563
1142799363,7cyclictest0-21swapper/120:00:531
11427993617,5cyclictest27979-21munin-plugin-st21:10:401
1142799361,23cyclictest4067-21ssh21:59:271
11427993612,14cyclictest22416-21diskmemload19:49:291
1142999358,16cyclictest37-21rcuc/319:10:563
1142999358,14cyclictest7950irq/56-dwc_otg_21:20:593
1142999353,14cyclictest37-21rcuc/319:53:183
11429993513,8cyclictest7950irq/56-dwc_otg_21:46:203
1142999351,14cyclictest7950irq/56-dwc_otg_17:56:053
11429993510,6cyclictest0-21swapper/320:53:593
1142799353,17cyclictest11546-21latency_hist20:50:401
11427993524,8cyclictest10840-21/usr/sbin/munin20:11:041
11427993524,8cyclictest10840-21/usr/sbin/munin20:11:041
11427993515,6cyclictest19029-21grep16:50:561
11427993515,12cyclictest11674-21cut18:00:531
1142799350,26cyclictest0-21swapper/119:55:481
1142999346,25cyclictest0-21swapper/317:00:533
11429993412,8cyclictest7950irq/56-dwc_otg_18:12:053
1142999341,16cyclictest7950irq/56-dwc_otg_18:59:183
11429993410,14cyclictest11420-21cyclictest17:48:373
1142799349,5cyclictest7950irq/56-dwc_otg_18:31:001
1142799348,11cyclictest0-21swapper/121:31:011
1142799346,17cyclictest18703-21ls19:41:001
1142799346,17cyclictest18703-21ls19:41:001
1142799342,17cyclictest7950irq/56-dwc_otg_17:50:411
11427993416,9cyclictest29204-21acpi21:50:501
11427993415,11cyclictest23-21ksoftirqd/120:35:501
1142799341,21cyclictest23-21ksoftirqd/117:42:051
1142799341,21cyclictest0-21swapper/119:05:031
1142799341,21cyclictest0-21swapper/119:05:031
11427993412,13cyclictest0-21swapper/121:40:551
1142999338,9cyclictest37-21rcuc/320:56:073
1142999338,10cyclictest39-21ksoftirqd/317:55:403
1142999337,16cyclictest39-21ksoftirqd/319:16:373
1142999337,13cyclictest37-21rcuc/318:31:043
1142999336,13cyclictest7850irq/56-dwc_otg_18:41:083
1142999334,5cyclictest7750irq/56-dwc_otg20:16:063
1142999332,4cyclictest0-21swapper/321:43:163
11429993322,9cyclictest16682-21apt-key16:45:413
11429993322,9cyclictest16682-21apt-key16:45:413
1142799337,12cyclictest7850irq/56-dwc_otg_18:00:411
1142799336,8cyclictest12210-21ssh21:30:401
11427993312,5cyclictest23-21ksoftirqd/120:55:571
1142799331,23cyclictest0-21swapper/121:12:551
1142799331,15cyclictest15096-21wget16:40:521
1142799331,15cyclictest15096-21wget16:40:521
108882334,23sleep10-21swapper/116:27:201
103262335,17sleep20-21swapper/216:26:042
1142999326,14cyclictest0-21swapper/317:25:523
11429993216,5cyclictest7850irq/56-dwc_otg_17:42:143
11429993214,4cyclictest37-21rcuc/320:20:443
11429993212,9cyclictest22416-21diskmemload20:41:413
11429993212,9cyclictest22416-21diskmemload20:41:413
1142799322,7cyclictest7750irq/56-dwc_otg18:20:401
1142799321,25cyclictest2515-21ls17:35:411
11427993210,12cyclictest0-21swapper/119:08:281
1142999317,21cyclictest0-21swapper/317:35:533
1142999317,21cyclictest0-21swapper/317:30:533
1142999316,4cyclictest7850irq/56-dwc_otg_21:10:183
1142999315,8cyclictest7950irq/56-dwc_otg_19:45:103
1142999315,8cyclictest7950irq/56-dwc_otg_19:45:103
1142999312,7cyclictest39-21ksoftirqd/318:25:393
1142999312,7cyclictest39-21ksoftirqd/318:25:393
1142999312,11cyclictest39-21ksoftirqd/321:50:533
1142999311,6cyclictest7750irq/56-dwc_otg16:36:083
1142999311,18cyclictest0-21swapper/318:26:003
1142799319,4cyclictest0-21swapper/120:16:041
11427993112,4cyclictest25352-21grep17:06:071
1142999303,24cyclictest0-21swapper/317:10:523
1142999303,24cyclictest0-21swapper/317:10:523
1142799304,15cyclictest0-21swapper/116:45:461
11427993021,6cyclictest26104-21aten_rbpower_vo17:10:531
11427993021,6cyclictest26104-21aten_rbpower_vo17:10:531
11427993016,5cyclictest2560-21/usr/sbin/munin17:36:001
1142799301,3cyclictest0-21swapper/118:21:011
1142799301,3cyclictest0-21swapper/118:21:011
11427993013,9cyclictest908-21runrttasks18:13:301
1142799301,13cyclictest7750irq/56-dwc_otg18:26:071
1142799297,14cyclictest11420-21cyclictest17:52:061
1142799293,9cyclictest7850irq/56-dwc_otg_17:00:531
109612284,15sleep30-21swapper/316:28:153
1142999271,15cyclictest381ktimersoftd/317:08:093
1142799272,6cyclictest21283-21open_files16:56:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional