You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-24 - 06:10

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Wed Dec 24, 2025 00:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
445022290,3sleep30-21swapper/319:05:293
2148121730,2sleep0575599cyclictest21:20:330
320682870,2sleep00-21swapper/020:20:350
575599788,43cyclictest13-21rcuc/023:25:170
5755997519,36cyclictest0-21swapper/019:10:090
43362730,2sleep20-21swapper/220:35:232
575599701,45cyclictest0-21swapper/023:40:190
300412700,2sleep00-21swapper/023:15:080
300412700,2sleep00-21swapper/023:15:080
575599672,48cyclictest14253-21kworker/0:019:35:350
575599671,8cyclictest8335-21aten_rbpower_vo22:15:220
575799665,4cyclictest7950irq/56-dwc_otg_20:30:252
575599661,48cyclictest32524-21grep21:50:360
575599652,8cyclictest23120-21grep19:55:350
57192650,5sleep10-21swapper/119:10:081
575599643,47cyclictest24433-21fschecks_count21:30:250
5755996343,7cyclictest7850irq/56-dwc_otg_00:20:070
575599632,51cyclictest0-21swapper/019:55:060
575599631,3cyclictest0-21swapper/022:10:210
575599622,47cyclictest18101-21proc_pri22:40:310
575599622,45cyclictest0-21swapper/000:25:340
319322620,2sleep10-21swapper/123:20:081
5755996132,3cyclictest0-21swapper/019:45:230
575599612,4cyclictest19261-21munin-run00:15:070
575599602,48cyclictest0-21swapper/022:55:300
575599602,45cyclictest26790-21aten_rbpower_en00:35:200
575599602,45cyclictest0-21swapper/022:20:240
575599601,50cyclictest25412-21kernelversion00:30:260
575599601,50cyclictest25412-21kernelversion00:30:260
575799596,4cyclictest7850irq/56-dwc_otg_23:20:072
575799596,4cyclictest7850irq/56-dwc_otg_23:20:072
575599592,44cyclictest0-21swapper/022:00:200
575599591,46cyclictest0-21swapper/021:25:300
575599591,41cyclictest0-21swapper/023:05:060
575799581,23cyclictest28691-21latency23:10:292
5755995825,16cyclictest0-21swapper/020:00:360
5755995823,10cyclictest0-21swapper/020:55:180
5755995823,10cyclictest0-21swapper/020:55:180
575599581,54cyclictest0-21swapper/023:35:190
575599581,45cyclictest0-21swapper/020:30:310
575599581,44cyclictest13-21rcuc/019:25:230
5755995735,3cyclictest7850irq/56-dwc_otg_23:50:070
5755995735,3cyclictest7850irq/56-dwc_otg_23:50:070
575599569,9cyclictest0-21swapper/021:05:180
5755995640,6cyclictest7850irq/56-dwc_otg_20:10:070
575599563,38cyclictest14739-21kworker/0:021:15:070
575599562,36cyclictest13666-21ntpq19:30:290
575599561,42cyclictest19905-21grep22:45:320
575599561,42cyclictest19905-21grep22:45:320
575599558,36cyclictest0-21swapper/020:50:280
5755995536,3cyclictest0-21swapper/022:25:290
575599553,35cyclictest0-21swapper/021:00:390
5755995523,5cyclictest0-21swapper/021:45:190
5755995513,30cyclictest28292-21processes20:10:350
575599542,42cyclictest26007-21aten_rbpower_cu21:35:210
575799533,33cyclictest0-21swapper/219:10:102
575599538,6cyclictest0-21swapper/023:30:360
575599533,37cyclictest0-21swapper/022:50:320
575599531,8cyclictest16115-21grep22:35:300
5755995316,25cyclictest13875-21latency_hist00:00:070
575599521,40cyclictest1349-21missed_timers21:55:290
575599512,39cyclictest7565-21/usr/sbin/munin19:15:280
575599512,38cyclictest6603-21wc20:40:300
5755995118,4cyclictest10566-21aten_rbpower_po23:50:210
575599511,47cyclictest0-21swapper/019:20:170
575599511,39cyclictest14228-21missed_timers22:30:290
5755995113,27cyclictest1125-21runrttasks00:21:090
575799498,26cyclictest0-21swapper/221:20:122
5755994928,5cyclictest8975-21grep20:45:350
575599492,20cyclictest670-21unixbench_singl23:20:350
5755994910,6cyclictest0-21swapper/019:40:170
575599484,28cyclictest28921-21grep21:40:350
575599484,14cyclictest0-21swapper/020:35:200
54432483,13sleep00-21swapper/019:09:360
575799477,25cyclictest0-21swapper/222:55:202
575799477,24cyclictest0-21swapper/221:40:202
575699474,34cyclictest27819-21grep20:10:281
575599475,12cyclictest0-21swapper/021:15:200
5755994734,4cyclictest7950irq/56-dwc_otg_23:07:080
575799468,23cyclictest0-21swapper/222:30:212
575799467,25cyclictest0-21swapper/219:35:202
575599467,22cyclictest0-21swapper/020:25:330
575599463,29cyclictest0-21swapper/000:00:350
5755994617,4cyclictest7750irq/56-dwc_otg20:15:380
5755994617,4cyclictest7750irq/56-dwc_otg20:15:380
575899457,23cyclictest0-21swapper/320:10:243
575799457,6cyclictest24074-21ls00:25:352
575799457,24cyclictest0-21swapper/222:40:122
575799457,24cyclictest0-21swapper/221:25:202
5755994510,22cyclictest5765-21vmstat22:05:380
575899443,13cyclictest7950irq/56-dwc_otg_19:10:093
575799441,3cyclictest0-21swapper/221:15:182
575699444,21cyclictest0-21swapper/119:10:091
5756994410,19cyclictest0-21swapper/123:00:241
575799438,32cyclictest0-21swapper/200:15:212
575799437,24cyclictest0-21swapper/221:10:222
575799437,23cyclictest0-21swapper/219:45:262
575799436,12cyclictest0-21swapper/222:10:212
575799431,39cyclictest17557-21ls00:10:072
575699434,12cyclictest9129-1kworker/1:2H00:30:181
575699434,12cyclictest9129-1kworker/1:2H00:30:181
5756994320,5cyclictest14140-21wget00:00:211
575799427,23cyclictest0-21swapper/221:35:212
5757994217,5cyclictest13408-21idleruntime-cro22:30:062
575899411,20cyclictest7850irq/56-dwc_otg_20:30:293
5757994117,6cyclictest31-21ksoftirqd/223:25:172
575699413,13cyclictest0-21swapper/121:45:191
575699411,5cyclictest7850irq/56-dwc_otg_23:45:231
575699411,5cyclictest7850irq/56-dwc_otg_23:45:231
575899406,22cyclictest0-21swapper/321:20:203
575899401,5cyclictest2750-21tr22:00:213
575899401,25cyclictest0-21swapper/319:25:223
575799407,21cyclictest0-21swapper/223:20:122
575699402,8cyclictest7750irq/56-dwc_otg20:05:191
5756994014,14cyclictest4721-21basename23:35:071
5756994013,15cyclictest22359-21/usr/sbin/munin21:25:291
575699401,25cyclictest8851-21ls20:45:341
5755994011,19cyclictest28864-21/usr/sbin/munin23:10:310
575899391,6cyclictest31754-21missed_timers20:20:313
575899391,24cyclictest0-21swapper/322:25:213
575899391,24cyclictest0-21swapper/321:05:203
575899387,17cyclictest0-21swapper/323:30:213
575899381,9cyclictest0-21swapper/322:45:343
575899381,9cyclictest0-21swapper/322:45:343
575899381,26cyclictest15094-21cut19:35:243
575899381,23cyclictest0-21swapper/322:05:123
575899381,23cyclictest0-21swapper/300:20:213
575799387,22cyclictest0-21swapper/223:35:122
575799386,19cyclictest0-21swapper/200:20:212
575799381,23cyclictest18283-21ls19:45:072
575899377,20cyclictest9225-21ls19:20:073
5757993713,5cyclictest22775-21processes19:55:322
5757993712,9cyclictest14368-21sort00:00:242
575799371,27cyclictest11353-21switchtime23:50:322
575699375,4cyclictest0-21swapper/123:35:191
575699371,29cyclictest19098-21ls22:45:081
575699371,22cyclictest16669-21wget19:40:201
575599371,6cyclictest16552-21ntpq00:05:320
575899369,19cyclictest5285-21unixbench-2d20:35:363
575899367,16cyclictest0-21swapper/322:40:133
5758993617,5cyclictest13289-21/usr/sbin/munin19:30:243
575899361,25cyclictest0-21swapper/323:20:133
575899361,24cyclictest0-21swapper/323:35:213
575799367,16cyclictest0-21swapper/223:40:212
575799363,24cyclictest0-21swapper/222:45:212
575799363,24cyclictest0-21swapper/222:45:212
5757993625,8cyclictest15558-21aten_rbpower_vo22:35:232
575799361,7cyclictest28337-21latency_hist00:40:072
575699368,5cyclictest7850irq/56-dwc_otg_23:50:201
575699367,18cyclictest20229-21idleruntime-cro21:20:071
575699366,14cyclictest7950irq/56-dwc_otg_23:40:221
575699362,8cyclictest0-21swapper/121:55:071
575699362,5cyclictest128-21systemd-journal19:35:071
575699361,5cyclictest6421-21apt-get22:10:231
575699361,3cyclictest0-21swapper/120:30:211
5756993611,4cyclictest0-21swapper/120:15:351
5756993611,4cyclictest0-21swapper/120:15:351
575899351,27cyclictest13991-21ls22:30:263
575899351,25cyclictest14997-21timerandwakeup00:00:333
575899351,24cyclictest0-21swapper/322:10:233
5758993510,17cyclictest1125-21runrttasks00:35:223
575799354,6cyclictest7850irq/56-dwc_otg_20:50:252
575699358,7cyclictest0-21swapper/121:40:351
575699357,25cyclictest0-21swapper/123:25:191
575699355,4cyclictest7950irq/56-dwc_otg_22:45:351
575699355,4cyclictest7950irq/56-dwc_otg_22:45:351
575699355,20cyclictest0-21swapper/122:34:481
5756993513,5cyclictest128-21systemd-journal20:56:411
5756993513,5cyclictest128-21systemd-journal20:56:411
5758993421,6cyclictest381ktimersoftd/323:00:073
575899342,16cyclictest0-21swapper/321:45:073
575899341,24cyclictest0-21swapper/322:35:533
575899341,24cyclictest0-21swapper/321:30:223
575899341,19cyclictest22584-21missed_timers19:55:283
5757993415,6cyclictest301ktimersoftd/223:10:022
575699347,4cyclictest0-21swapper/121:05:191
575699347,24cyclictest0-21swapper/123:15:121
575699347,24cyclictest0-21swapper/123:15:121
575699347,24cyclictest0-21swapper/122:15:211
575699347,11cyclictest10563-21wc22:20:271
575699346,25cyclictest0-21swapper/100:25:221
575699344,5cyclictest7750irq/56-dwc_otg19:45:401
5756993421,10cyclictest0-21swapper/119:20:241
575699341,22cyclictest0-21swapper/123:55:201
575699341,13cyclictest7850irq/56-dwc_otg_22:05:221
5756993410,6cyclictest2591-21apt-config22:00:081
575899332,18cyclictest0-21swapper/300:35:083
575899332,18cyclictest0-21swapper/300:35:083
5758993313,9cyclictest26188-21interrupts20:05:263
575899331,25cyclictest0-21swapper/323:55:233
575899331,14cyclictest32489-21unixbench_multi21:50:353
575799336,15cyclictest0-21swapper/220:40:232
575799336,15cyclictest0-21swapper/219:15:222
575799336,13cyclictest7950irq/56-dwc_otg_21:00:332
5757993317,9cyclictest301ktimersoftd/219:30:202
575699337,8cyclictest7850irq/56-dwc_otg_22:52:051
575699334,8cyclictest7950irq/56-dwc_otg_21:55:211
5756993315,6cyclictest13445-21sh21:00:261
575899327,12cyclictest8922-21grep20:45:353
575899322,18cyclictest0-21swapper/323:00:253
575899322,17cyclictest0-21swapper/323:50:203
5758993217,4cyclictest8506-21fschecks_time22:15:253
575899321,22cyclictest0-21swapper/320:00:223
575899321,21cyclictest0-21swapper/300:25:233
575799326,7cyclictest7750irq/56-dwc_otg20:00:322
575799325,5cyclictest7850irq/56-dwc_otg_20:05:212
575799321,21cyclictest0-21swapper/219:50:282
575699328,4cyclictest7950irq/56-dwc_otg_00:20:071
575699326,16cyclictest1544-21ntpd20:50:221
575699321,6cyclictest21782-21munin-run19:55:061
5756993214,5cyclictest5790-21idleruntime-cro20:40:071
303882320,5sleep330390-21grep21:45:313
575899316,14cyclictest0-21swapper/320:15:363
575899316,14cyclictest0-21swapper/320:15:363
575899313,4cyclictest0-21swapper/320:25:133
575899313,16cyclictest14071-21/usr/sbin/munin21:00:373
575899312,20cyclictest0-21swapper/323:29:333
575899312,15cyclictest0-21swapper/320:55:353
575899312,15cyclictest0-21swapper/320:55:353
575899312,11cyclictest0-21swapper/321:37:293
5758993117,8cyclictest7950irq/56-dwc_otg_20:40:323
5758993113,9cyclictest381ktimersoftd/320:55:073
575899311,26cyclictest21167-21ls19:50:353
575899311,22cyclictest22897-21ls21:25:273
575899311,21cyclictest16808-21timerandwakeup00:05:363
575899311,21cyclictest0-21swapper/321:16:153
575899311,16cyclictest0-21swapper/321:10:373
575799317,14cyclictest0-21swapper/222:00:142
575799317,14cyclictest0-21swapper/220:25:142
575799312,14cyclictest0-21swapper/221:50:072
575799312,12cyclictest7950irq/56-dwc_otg_19:20:322
575699318,5cyclictest24663-21/usr/sbin/munin20:00:351
575699317,14cyclictest27032-21grep23:05:301
575699315,4cyclictest7850irq/56-dwc_otg_19:55:231
575699311,4cyclictest0-21swapper/122:35:191
5756993110,9cyclictest17680-21/usr/sbin/munin00:10:351
575899307,10cyclictest7850irq/56-dwc_otg_23:15:323
575899307,10cyclictest7850irq/56-dwc_otg_23:15:323
575899301,7cyclictest19241-21cron00:15:073
575899301,6cyclictest10303-21fschecks_count22:20:243
575899301,20cyclictest0-21swapper/323:45:083
575899301,19cyclictest0-21swapper/321:55:293
575899301,19cyclictest0-21swapper/319:40:313
575899301,17cyclictest0-21swapper/322:50:183
575799306,14cyclictest0-21swapper/221:05:202
575799304,10cyclictest4576-21sshd22:05:222
575799303,5cyclictest7950irq/56-dwc_otg_21:55:252
575799302,5cyclictest0-21swapper/222:20:342
575799301,8cyclictest28135-21missed_timers20:10:322
575799301,7cyclictest1124-21snmpd20:45:242
5757993015,5cyclictest21004-21/usr/sbin/munin22:50:202
575699308,10cyclictest0-21swapper/121:30:271
575699307,13cyclictest14796-21/usr/sbin/munin19:35:281
575699307,11cyclictest22819-21aten_rbpower_en22:55:211
575699306,4cyclictest7950irq/56-dwc_otg_21:10:371
575699303,13cyclictest6713-21awk20:40:321
575699302,4cyclictest7950irq/56-dwc_otg_00:35:221
575699301,5cyclictest7950irq/56-dwc_otg_19:15:201
575699301,5cyclictest26070-21basename21:35:211
575699301,5cyclictest0-21swapper/119:25:201
575699301,4cyclictest7850irq/56-dwc_otg_20:20:321
575699301,3cyclictest0-21swapper/121:20:091
575899293,7cyclictest7850irq/56-dwc_otg_19:45:233
575899291,15cyclictest0-21swapper/319:23:023
575799297,13cyclictest0-21swapper/219:25:222
575799297,10cyclictest7750irq/56-dwc_otg00:30:292
575799297,10cyclictest7750irq/56-dwc_otg00:30:292
575799296,15cyclictest0-21swapper/223:55:232
575799292,3cyclictest0-21swapper/221:50:332
5757992923,4cyclictest24829-21fschecks_count23:00:282
5757992915,10cyclictest0-21swapper/220:15:372
5757992915,10cyclictest0-21swapper/220:15:372
575699298,10cyclictest23055-21latency_hist00:25:081
575699293,6cyclictest7950irq/56-dwc_otg_22:25:191
5756992912,9cyclictest28895-21awk23:10:331
575899287,10cyclictest0-21swapper/323:45:213
575899287,10cyclictest0-21swapper/323:45:213
575899281,24cyclictest28373-21ls23:10:243
575899281,21cyclictest0-21swapper/300:15:303
575899281,20cyclictest0-21swapper/323:05:273
575799285,5cyclictest7950irq/56-dwc_otg_20:20:262
575799285,13cyclictest7950irq/56-dwc_otg_00:10:252
575799284,16cyclictest12545-21grep20:55:332
575799284,16cyclictest12545-21grep20:55:332
575799283,5cyclictest4750irq/17-3f00b88022:15:332
575799282,5cyclictest7750irq/56-dwc_otg21:30:192
575699284,6cyclictest16578-21ntp_offset00:05:321
575699281,5cyclictest602-21acpi20:25:191
575799273,14cyclictest0-21swapper/223:30:212
5757992720,4cyclictest8791-21aten_rbpower_vo23:45:242
5757992720,4cyclictest8791-21aten_rbpower_vo23:45:242
53932273,15sleep20-21swapper/219:08:572
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional