You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-10 - 21:22

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Jan 10, 2026 12:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3027599972,77cyclictest0-21swapper/008:20:170
3027599882,69cyclictest0-21swapper/008:35:420
3027599882,69cyclictest0-21swapper/008:35:420
30275998732,31cyclictest15406-21aten_rbpower_vo12:25:320
3027599872,70cyclictest26138-21grep08:25:420
3027599861,5cyclictest21578-21latency_hist08:15:170
3027599861,4cyclictest5649-21cron10:30:160
3027599851,67cyclictest0-21swapper/011:25:160
3027599846,53cyclictest0-21swapper/007:40:280
3027599841,79cyclictest7701-21/usr/sbin/munin10:35:460
3027599833,75cyclictest0-21swapper/010:00:330
3027599832,71cyclictest0-21swapper/011:00:160
3027599821,4cyclictest15735-21cat09:25:440
3027599821,44cyclictest7253-21unixbench_multi12:00:420
3027599801,2cyclictest0-21swapper/008:30:310
3027599791,4cyclictest19253-21/usr/sbin/munin11:05:390
3027599791,4cyclictest19253-21/usr/sbin/munin11:05:390
3027599782,73cyclictest0-21swapper/011:30:310
3027599771,6cyclictest4085-21latency_hist11:55:160
3027599771,44cyclictest12692-21latency_hist09:20:160
74522760,2sleep23027799cyclictest09:05:272
3027599762,51cyclictest0-21swapper/009:55:280
3027599761,54cyclictest0-21swapper/009:20:400
3027599761,51cyclictest0-21swapper/007:55:160
3027599742,53cyclictest0-21swapper/008:20:380
3027599741,3cyclictest0-21swapper/010:13:530
3027599732,36cyclictest13139-21apt12:20:160
3027599722,54cyclictest0-21swapper/008:05:280
3027599722,47cyclictest0-21swapper/011:05:170
3027599721,54cyclictest0-21swapper/009:47:250
3027599721,2cyclictest0-21swapper/012:30:590
3027599720,59cyclictest5189-21cat11:55:410
3027599713,47cyclictest7950irq/56-dwc_otg_10:25:170
3027599702,65cyclictest0-21swapper/012:06:150
3027599701,51cyclictest0-21swapper/008:48:420
3027599701,4cyclictest0-21swapper/009:04:240
3027599701,4cyclictest0-21swapper/009:04:240
30275997012,43cyclictest7950irq/56-dwc_otg_09:55:160
3027599691,50cyclictest0-21swapper/010:30:360
30275996813,29cyclictest7750irq/56-dwc_otg09:30:280
30275996813,29cyclictest7750irq/56-dwc_otg09:30:280
3027599681,2cyclictest0-21swapper/012:14:280
3027599672,62cyclictest0-21swapper/010:43:560
3027599671,63cyclictest1276-21latency_hist07:20:160
3027599671,54cyclictest14473-21runrttasks10:52:310
3027599661,48cyclictest0-21swapper/009:42:070
3027599661,3cyclictest0-21swapper/009:09:410
3027599652,3cyclictest0-21swapper/011:13:550
3027599651,60cyclictest128-21systemd-journal12:39:130
3027599651,4cyclictest0-21swapper/011:38:450
3027599651,4cyclictest0-21swapper/011:38:450
3027599651,4cyclictest0-21swapper/008:59:090
3027599651,4cyclictest0-21swapper/008:59:090
3027599651,3cyclictest0-21swapper/010:46:380
3027599651,3cyclictest0-21swapper/007:20:320
3027599651,3cyclictest0-21swapper/007:20:320
3027599651,37cyclictest0-21swapper/011:27:590
3027599645,56cyclictest0-21swapper/008:51:210
3027599641,60cyclictest0-21swapper/011:44:160
3027599641,4cyclictest196852sleep009:36:250
3027599641,2cyclictest0-21swapper/007:47:300
3027599641,2cyclictest0-21swapper/007:10:170
3232630,2sleep30-21swapper/308:45:323
3027599631,5cyclictest2003-21chrt11:46:580
3027599631,3cyclictest0-21swapper/012:22:410
3027599631,3cyclictest0-21swapper/012:22:410
3027599631,2cyclictest0-21swapper/010:19:210
3027599631,2cyclictest0-21swapper/010:19:210
3027599631,2cyclictest0-21swapper/008:40:380
130152630,1sleep20-21swapper/210:50:172
3027799625,19cyclictest7950irq/56-dwc_otg_11:35:232
3027799625,19cyclictest7950irq/56-dwc_otg_11:35:232
3027599622,45cyclictest0-21swapper/008:02:550
3027599621,5cyclictest1124-21snmpd10:08:340
3027599621,4cyclictest0-21swapper/008:00:050
3027599621,3cyclictest82982sleep007:36:540
3027599611,3cyclictest0-21swapper/007:26:370
3027599611,2cyclictest0-21swapper/011:16:590
3027599601,2cyclictest0-21swapper/009:15:030
3027599591,2cyclictest0-21swapper/007:31:440
3028099564,17cyclictest7850irq/56-dwc_otg_12:00:283
3028099557,28cyclictest0-21swapper/307:20:213
3028099557,28cyclictest0-21swapper/307:20:213
30280995217,24cyclictest0-21swapper/311:35:233
30280995217,24cyclictest0-21swapper/311:35:233
3027699517,24cyclictest0-21swapper/108:55:211
3027699517,24cyclictest0-21swapper/108:55:211
3028099497,28cyclictest0-21swapper/310:55:303
3028099497,23cyclictest0-21swapper/308:55:213
3028099497,23cyclictest0-21swapper/308:55:213
3027699497,23cyclictest0-21swapper/107:20:211
3027699497,23cyclictest0-21swapper/107:20:211
296842493,12sleep00-21swapper/007:06:140
3028099487,28cyclictest0-21swapper/311:40:303
3027699488,21cyclictest0-21swapper/111:40:301
3027799477,28cyclictest0-21swapper/209:30:302
3027799477,28cyclictest0-21swapper/209:30:302
3028099465,18cyclictest7950irq/56-dwc_otg_07:55:293
3028099457,24cyclictest0-21swapper/309:30:223
3028099457,24cyclictest0-21swapper/309:30:223
3027799458,22cyclictest0-21swapper/210:55:302
3027799447,24cyclictest0-21swapper/209:45:302
3027799447,23cyclictest0-21swapper/207:20:212
3027799447,23cyclictest0-21swapper/207:20:212
30276994416,23cyclictest0-21swapper/111:35:231
30276994416,23cyclictest0-21swapper/111:35:231
3028099437,22cyclictest0-21swapper/311:50:293
3028099436,22cyclictest0-21swapper/310:50:293
30280994322,12cyclictest381ktimersoftd/308:38:103
30280994322,12cyclictest381ktimersoftd/308:38:103
3027699437,9cyclictest0-21swapper/109:15:281
3027699437,23cyclictest0-21swapper/111:50:291
3027699437,23cyclictest0-21swapper/110:55:301
3027699435,7cyclictest0-21swapper/109:50:431
3027699431,26cyclictest0-21swapper/112:25:181
3028099427,24cyclictest0-21swapper/307:10:293
30277994216,13cyclictest29236-21fschecks_time08:35:332
30277994216,13cyclictest29236-21fschecks_time08:35:332
3027699426,22cyclictest0-21swapper/110:10:291
3027699421,5cyclictest0-21swapper/109:30:221
3027699421,5cyclictest0-21swapper/109:30:221
3027699421,23cyclictest0-21swapper/110:20:291
3028099417,22cyclictest0-21swapper/308:15:293
3028099416,18cyclictest0-21swapper/311:45:283
3028099412,3cyclictest7850irq/56-dwc_otg_07:35:453
3027799417,24cyclictest0-21swapper/208:55:212
3027799417,24cyclictest0-21swapper/208:55:212
3027799417,21cyclictest0-21swapper/207:10:292
3027699417,21cyclictest0-21swapper/112:25:221
3027699411,24cyclictest0-21swapper/110:35:311
3028099407,21cyclictest0-21swapper/310:10:293
3027799407,24cyclictest0-21swapper/211:40:302
3027799401,26cyclictest21989-21ls09:45:172
30277994012,4cyclictest28052-21missed_timers10:00:402
30280993918,5cyclictest1899650wget12:35:323
30280993917,4cyclictest8450-21timerwakeupswit09:05:453
30277993915,14cyclictest0-21swapper/212:00:282
3027699396,21cyclictest0-21swapper/109:40:281
3027699395,20cyclictest14775-21aten_rbpower_en09:25:311
3027699393,4cyclictest7336-21cut07:35:331
3028099387,11cyclictest18251-21unixbench_singl12:30:463
3028099381,9cyclictest20431-21ls09:40:293
3027799384,2cyclictest0-21swapper/209:15:282
30277993811,14cyclictest0-21swapper/209:00:362
30277993811,14cyclictest0-21swapper/209:00:362
3027699382,20cyclictest0-21swapper/108:20:271
3027699381,25cyclictest128-21systemd-journal08:33:171
3027699381,23cyclictest30798-21ls07:10:351
3027699381,22cyclictest0-21swapper/112:30:321
149332380,2sleep30-21swapper/309:25:333
30280993710,23cyclictest0-21swapper/311:20:293
3027799377,20cyclictest0-21swapper/210:10:292
30277993727,6cyclictest301ktimersoftd/211:00:282
3027699376,19cyclictest0-21swapper/110:50:291
3027699371,25cyclictest341-21cut08:45:321
3027699371,22cyclictest0-21swapper/111:15:301
3027799363,4cyclictest7750irq/56-dwc_otg12:15:232
3027799362,3cyclictest0-21swapper/211:05:342
3027799362,3cyclictest0-21swapper/211:05:342
3027699361,23cyclictest0-21swapper/110:15:291
3027699361,23cyclictest0-21swapper/110:15:291
30276993612,16cyclictest9975-21unixbench_singl07:40:431
226642360,6sleep23027799cyclictest11:15:372
184322361,4sleep30-21swapper/309:35:283
77762350,5sleep23027799cyclictest10:35:322
3027799354,5cyclictest7750irq/56-dwc_otg12:30:162
3027799354,5cyclictest14706-21/usr/sbin/munin09:25:352
3027799352,4cyclictest7850irq/56-dwc_otg_11:10:282
3027799351,9cyclictest0-21swapper/211:45:312
30277993516,10cyclictest13173-21fschecks_count09:20:312
3027699358,7cyclictest7850irq/56-dwc_otg_08:35:331
3027699358,7cyclictest7850irq/56-dwc_otg_08:35:331
30276993519,5cyclictest1125-21runrttasks09:38:071
3027699351,23cyclictest13863-21latency12:20:351
3028099347,9cyclictest37-21rcuc/310:35:403
30280993414,12cyclictest381ktimersoftd/309:53:463
30280993412,8cyclictest39-21ksoftirqd/308:30:393
3028099341,20cyclictest11839-21cut12:15:343
3027799347,15cyclictest0-21swapper/210:50:292
3027799345,5cyclictest7750irq/56-dwc_otg07:25:302
3027799345,4cyclictest7850irq/56-dwc_otg_09:10:282
3027799343,4cyclictest7850irq/56-dwc_otg_07:55:432
3027799342,6cyclictest2049-21modprobe10:20:172
3027799342,6cyclictest2049-21modprobe10:20:172
30277993421,5cyclictest29371-21aten_rbpower_po10:05:302
3027799341,6cyclictest19571-21grep09:35:432
3027699349,10cyclictest0-21swapper/110:05:381
3027699348,12cyclictest7950irq/56-dwc_otg_11:35:161
3027699345,17cyclictest7950irq/56-dwc_otg_12:00:281
3027699342,24cyclictest0-21swapper/109:05:361
3027699342,22cyclictest0-21swapper/110:41:051
3027699342,21cyclictest0-21swapper/110:25:321
3027699341,24cyclictest26017-21ls09:55:321
3027699341,20cyclictest0-21swapper/107:17:491
3027699341,12cyclictest7750irq/56-dwc_otg12:10:291
3028099331,5cyclictest7950irq/56-dwc_otg_10:30:343
3027799338,4cyclictest8166-21unixbench_singl07:35:442
3027799336,4cyclictest7750irq/56-dwc_otg10:00:162
3027799335,22cyclictest24003-21runrttasks11:20:292
3027799331,5cyclictest1124-21snmpd10:33:392
3027799331,4cyclictest128-21systemd-journal08:43:192
3027699334,5cyclictest7750irq/56-dwc_otg08:05:361
3027699334,22cyclictest0-21swapper/112:15:271
30276993322,7cyclictest6800-21latency_hist07:35:161
3027699331,22cyclictest0-21swapper/107:25:301
3027699331,20cyclictest8799-21taskset12:05:411
3027699331,13cyclictest0-21swapper/111:00:391
3027699331,11cyclictest0-21swapper/107:50:291
3028099329,11cyclictest381ktimersoftd/308:25:453
3028099327,14cyclictest0-21swapper/311:30:403
3028099326,4cyclictest7950irq/56-dwc_otg_08:43:193
3028099326,14cyclictest0-21swapper/309:45:303
3028099321,6cyclictest9948-21taskset12:10:313
3028099321,23cyclictest23835-21cut08:20:333
3027799321,7cyclictest22360-21ntpq08:15:382
3027799321,5cyclictest27608-21/usr/sbin/munin11:30:362
3027799321,4cyclictest26027-21ntp_states08:25:402
3027799321,4cyclictest0-21swapper/212:20:312
3027799321,4cyclictest0-21swapper/212:20:312
3027699327,7cyclictest6340-21awk10:30:361
3027699327,16cyclictest10797-21wget07:45:301
3027699326,19cyclictest1125-21runrttasks11:57:521
3027699326,10cyclictest0-21swapper/109:20:311
30276993215,7cyclictest217122sleep111:12:381
30276993211,9cyclictest3500-21latency_hist08:55:161
3028099318,5cyclictest7850irq/56-dwc_otg_09:13:243
3028099317,5cyclictest18099-21grep08:05:293
3028099313,5cyclictest26924-21tail11:25:413
30280993116,4cyclictest1141450wget10:45:303
3028099311,5cyclictest0-21swapper/312:25:173
3028099311,5cyclictest0-21swapper/312:25:173
30280993113,5cyclictest20249-21if_err_eth008:10:333
3027799312,9cyclictest7850irq/56-dwc_otg_11:55:412
3027799312,7cyclictest18069-21apt-get08:05:282
3027799311,6cyclictest24936-21sed09:50:432
3027799311,5cyclictest10891-21taskset10:42:542
30277993115,5cyclictest5196-21/usr/sbin/munin07:30:352
3027799311,4cyclictest9867-21wget12:10:302
3027799311,4cyclictest2282-21apt-get10:20:272
30277993114,4cyclictest32514-21if_eth007:15:352
30277993112,4cyclictest8214-21fschecks_count12:05:322
3027699316,15cyclictest0-21swapper/111:45:281
3027699315,23cyclictest0-21swapper/108:15:291
3027699311,9cyclictest0-21swapper/112:35:291
3027699311,3cyclictest0-21swapper/110:45:301
3027699311,13cyclictest0-21swapper/111:08:021
3027699311,13cyclictest0-21swapper/111:08:021
3027699311,12cyclictest0-21swapper/108:12:321
157342310,1sleep30-21swapper/312:25:373
3028099308,13cyclictest2847-21date08:50:413
3028099306,7cyclictest7950irq/56-dwc_otg_12:05:353
3028099303,17cyclictest7950irq/56-dwc_otg_11:55:413
3028099301,6cyclictest23338-21sed11:15:453
3027799308,13cyclictest0-21swapper/207:50:302
3027799306,5cyclictest29-21rcuc/208:20:302
3027799302,6cyclictest7850irq/56-dwc_otg_08:50:432
3027799301,6cyclictest20137-21sshd12:36:122
3027799301,5cyclictest8813-21/usr/sbin/munin07:40:342
3027799301,5cyclictest3222-21ntp_states11:50:392
3027799301,5cyclictest20225-21ls08:10:332
3027799301,4cyclictest0-21swapper/210:28:382
30277993011,4cyclictest301ktimersoftd/208:05:162
3027699306,11cyclictest15203-21wc07:55:401
30276993023,5cyclictest27383-21munin-plugin-st11:30:161
30276993023,4cyclictest5741-21aten_rbpower_po09:00:311
30276993023,4cyclictest5741-21aten_rbpower_po09:00:311
3027699302,15cyclictest7750irq/56-dwc_otg08:40:361
3028099298,8cyclictest176942chrt08:03:463
3028099292,22cyclictest0-21swapper/311:00:303
30280992912,9cyclictest4416-21fschecks_time10:25:323
3027799295,6cyclictest29-21rcuc/211:27:512
3027799291,5cyclictest27132-21/usr/sbin/munin08:30:462
3027799291,4cyclictest10942-21taskset07:45:322
3027799291,4cyclictest0-21swapper/208:47:552
3027699296,15cyclictest0-21swapper/109:45:301
3027699293,14cyclictest17015-21proc_pri08:00:411
3027699291,6cyclictest25086-21/usr/sbin/munin11:20:431
3027699291,13cyclictest26511-21head08:25:451
3028099288,12cyclictest0-21swapper/311:05:343
3028099288,12cyclictest0-21swapper/311:05:343
3028099288,11cyclictest30804-21seq10:09:503
3028099285,4cyclictest7850irq/56-dwc_otg_07:20:163
3028099283,17cyclictest37-21rcuc/309:01:413
3028099283,17cyclictest37-21rcuc/309:01:413
3028099282,3cyclictest0-21swapper/310:18:363
3028099282,3cyclictest0-21swapper/310:18:363
3028099282,17cyclictest12635-21/usr/sbin/munin07:50:413
3028099281,3cyclictest0-21swapper/309:20:313
3028099281,12cyclictest7850irq/56-dwc_otg_10:25:163
30280992810,9cyclictest9568-21aten_rbpower_en10:40:313
297832283,19sleep10-21swapper/107:07:321
114112280,2sleep30-21swapper/307:45:393
3028099272,9cyclictest7950irq/56-dwc_otg_11:13:013
3028099271,4cyclictest0-21swapper/307:25:303
3027799271,6cyclictest17364-21cut12:30:352
30276992713,5cyclictest1125-21runrttasks09:15:071
3027699271,16cyclictest7850irq/56-dwc_otg_10:00:451
3028099264,5cyclictest7850irq/56-dwc_otg_09:15:453
3028099262,4cyclictest7950irq/56-dwc_otg_09:55:233
3028099261,7cyclictest28482-21sort10:00:463
297482263,15sleep30-21swapper/307:07:063
296972263,14sleep20-21swapper/207:06:242
3028099252,3cyclictest7950irq/56-dwc_otg_07:30:373
30280992519,4cyclictest10422-21latency_hist07:45:163
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional