You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-13 - 05:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot6s.osadl.org (updated Mon Apr 13, 2026 00:44:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
133337997433,35cyclictest0-21swapper/119:15:011
133337997334,33cyclictest0-21swapper/100:25:301
133337997027,36cyclictest169407-21grep22:35:291
133337997027,36cyclictest169407-21grep22:35:291
133337996920,44cyclictest231ktimers/100:00:151
133337996727,33cyclictest166066-21grep22:15:281
133337996717,42cyclictest0-21swapper/100:05:281
133337996629,33cyclictest0-21swapper/121:50:301
133337996427,29cyclictest0-21swapper/120:20:301
133339996315,22cyclictest182624-21/usr/sbin/munin23:55:182
13333799634,12cyclictest156464-21grep21:20:291
133337996317,40cyclictest1660-21snmpd22:41:191
13333799624,13cyclictest181505-21grep23:45:281
13333799624,13cyclictest181505-21grep23:45:281
133337996221,34cyclictest0-21swapper/122:20:201
133337996213,41cyclictest0-21swapper/100:10:281
133337996128,28cyclictest0-21swapper/119:30:291
133337996128,26cyclictest0-21swapper/121:40:291
13333799612,7cyclictest172950-21apt-get23:00:021
13333799612,7cyclictest172950-21apt-get23:00:011
133337996125,25cyclictest0-21swapper/123:40:291
133337996124,32cyclictest152191-21grep20:55:291
13333799604,13cyclictest136110-21grep19:20:271
13333799604,11cyclictest186320-21fschecks_time00:15:191
133337996026,27cyclictest0-21swapper/120:05:011
133337996024,30cyclictest0-21swapper/120:00:001
13333799602,10cyclictest172061-21grep22:50:301
133337996018,32cyclictest0-21swapper/121:45:231
13333799595,47cyclictest179836-21grep23:35:291
133337995918,31cyclictest0-21swapper/119:45:011
133337995917,34cyclictest0-21swapper/123:05:301
133337995917,34cyclictest0-21swapper/123:05:301
13333799587,40cyclictest0-21swapper/123:20:011
13333799584,15cyclictest182550-21cat23:55:011
13333799583,8cyclictest188721-21apt-get00:30:171
133337995828,22cyclictest0-21swapper/121:40:011
13333799582,14cyclictest147790-21/usr/sbin/munin20:30:281
13333799582,11cyclictest187136-21fschecks_count00:20:211
133339995747,7cyclictest166116-21munin-plugin-st22:20:002
13333799578,39cyclictest158269-21unixbench_singl21:30:281
13333799576,43cyclictest0-21swapper/121:25:201
13333799576,11cyclictest134136-21apt-get19:15:031
13333799575,44cyclictest137018-21grep19:25:271
13333799575,40cyclictest167706-21grep22:25:291
13333799575,40cyclictest167706-21grep22:25:281
13333799574,11cyclictest155762-21cat21:20:001
13333799574,10cyclictest183224-21sed23:55:281
13333799574,10cyclictest175464-21grep23:10:281
133337995723,29cyclictest0-21swapper/122:00:281
133337995714,35cyclictest0-21swapper/122:30:241
133337995714,35cyclictest0-21swapper/119:45:301
13333799563,9cyclictest147070-21/usr/sbin/munin20:25:281
133337995624,25cyclictest0-21swapper/119:35:291
133337995621,27cyclictest0-21swapper/119:55:011
13333799556,41cyclictest0-21swapper/100:35:211
13333799555,40cyclictest150462-21grep20:45:281
13333799554,12cyclictest149623-21grep20:40:271
13333799554,12cyclictest149623-21grep20:40:271
13333799553,7cyclictest162168-21grep21:55:211
13333799553,42cyclictest144561-21sed20:10:281
13333799553,13cyclictest164037-21tail22:05:251
13333799553,12cyclictest148383-21fschecks_time20:35:211
13333799553,10cyclictest173863-21grep23:00:291
13333799553,10cyclictest170717-21/usr/sbin/munin22:45:181
13333799553,10cyclictest170717-21/usr/sbin/munin22:45:181
133337995517,29cyclictest0-21swapper/123:30:281
133337995514,32cyclictest0-21swapper/121:00:291
13333799551,11cyclictest177710-21grep23:25:181
13333499559,7cyclictest167720-21grep22:25:280
13333499559,7cyclictest167720-21grep22:25:280
13333799548,37cyclictest154733-21unixbench_singl21:10:281
13333799542,9cyclictest151353-21unixbench_singl20:50:301
13333799542,43cyclictest165233-21grep22:10:281
13333499541,34cyclictest0-21swapper/022:10:030
13333799534,36cyclictest153429-21sh21:05:211
13333799532,12cyclictest143227-21/usr/sbin/munin20:05:161
133334995347,3cyclictest169490-21apt-get22:40:020
133334995347,3cyclictest169490-21apt-get22:40:010
133339995240,8cyclictest0-21swapper/220:25:282
133339995240,10cyclictest311ktimers/223:50:122
133339995227,9cyclictest0-21swapper/219:15:292
133334995222,4cyclictest154445-21memory21:10:250
13333799513,11cyclictest145023-21sh20:15:211
13333799512,12cyclictest177280-21grep23:20:281
133339995039,7cyclictest176438-21sendmail23:20:002
133339995036,9cyclictest0-21swapper/223:00:012
133339995036,9cyclictest0-21swapper/223:00:012
133334995043,4cyclictest167350irq/118-8000000.ethernet-tx019:55:160
133334995022,3cyclictest188223-21/usr/sbin/munin00:25:260
133334995022,3cyclictest174169-21diskstats23:05:190
133334995022,3cyclictest174169-21diskstats23:05:180
133334994943,4cyclictest137053-21munin-plugin-st19:30:000
133334994940,6cyclictest177371-21munin-plugin-st23:25:010
133334994916,28cyclictest134658-21fschecks_time19:15:050
133339994835,8cyclictest0-21swapper/219:15:012
133334994841,4cyclictest0-21swapper/019:15:010
133334994839,5cyclictest167350irq/118-8000000.ethernet-tx020:25:180
133334994820,3cyclictest189862-21meminfo00:35:250
133334994820,3cyclictest173560-21memory23:00:250
133334994813,8cyclictest159172-21cron21:40:000
133339994732,8cyclictest0-21swapper/223:00:292
133339994732,10cyclictest0-21swapper/221:45:292
133339994723,13cyclictest311ktimers/221:30:152
13333799472,11cyclictest133346-21grep19:10:011
13333499475,40cyclictest0-21swapper/021:55:210
133334994740,4cyclictest189361-21munin-plugin-st00:35:010
133334994727,8cyclictest12-21ksoftirqd/020:05:010
133334994718,3cyclictest149999-21diskstats20:45:180
133334994716,27cyclictest0-21swapper/023:20:020
13333499468,3cyclictest164001-21meminfo22:05:250
133334994638,4cyclictest167350irq/118-8000000.ethernet-tx023:15:010
133334994638,4cyclictest167350irq/118-8000000.ethernet-tx020:35:170
133334994630,12cyclictest172314-21apt-get22:55:150
133334994630,12cyclictest172314-21apt-get22:55:150
133334994618,3cyclictest156005-21diskstats21:20:200
133334994616,3cyclictest151070-21memory20:50:260
13333999455,17cyclictest30-21rcuc/220:30:012
133339994534,7cyclictest0-21swapper/220:00:292
133339994532,8cyclictest0-21swapper/220:40:272
133339994532,8cyclictest0-21swapper/220:40:272
13333499458,33cyclictest187215-21sh00:20:220
133334994536,4cyclictest185988-21latency_hist00:15:000
13333499452,3cyclictest144961-21cut20:15:190
133334994517,3cyclictest153552-21if_eth121:05:230
133334994515,24cyclictest0-21swapper/021:35:000
133339994435,5cyclictest184238-21apt-key00:05:012
133339994429,10cyclictest0-21swapper/222:10:282
133334994437,4cyclictest20650irq/252-8000000.ethernet22:40:030
133334994416,3cyclictest185027-21users00:05:300
133334994416,25cyclictest157213-21/usr/sbin/munin21:25:260
133334994415,3cyclictest161226-21df21:50:180
133339994336,3cyclictest14-21rcu_preempt21:00:282
133339994326,10cyclictest0-21swapper/221:10:282
133339994321,12cyclictest30-21rcuc/221:50:162
13333499432,5cyclictest184124-21munin-run00:05:010
13333499432,5cyclictest170705-21diskstats22:45:180
13333499432,5cyclictest170705-21diskstats22:45:180
133334994314,3cyclictest166388-21df22:20:170
133339994235,4cyclictest0-21swapper/219:40:002
133339994226,8cyclictest0-21swapper/222:05:282
133339994225,9cyclictest0-21swapper/219:40:272
133334994235,5cyclictest142969-21munin-run20:05:000
133334994229,10cyclictest20850irq/208-8000000.ethernet20:30:150
13333499421,39cyclictest0-21swapper/019:20:160
133334994213,3cyclictest145778-21df_inode20:20:180
133339994133,5cyclictest0-21swapper/222:25:012
133339994129,7cyclictest311ktimers/222:00:232
133339994125,11cyclictest0-21swapper/220:55:012
13333499418,5cyclictest163497-21cron22:05:010
13333499417,31cyclictest0-21swapper/000:15:240
133334994135,3cyclictest131ktimers/023:25:510
133334994134,4cyclictest0-21swapper/019:45:320
133334994126,11cyclictest0-21swapper/019:30:120
133334994114,3cyclictest182220-21/usr/sbin/munin23:50:290
133334994114,3cyclictest152726-21irqstats21:00:230
133334994114,24cyclictest159178-21apt-get21:40:050
13333499411,38cyclictest0-21swapper/022:15:140
133334994111,4cyclictest182678-21df23:55:170
133334994111,3cyclictest171532-21df22:50:180
133339994027,8cyclictest0-21swapper/221:40:022
133339994027,7cyclictest0-21swapper/219:25:282
133339994019,12cyclictest30-21rcuc/200:30:202
13333499404,34cyclictest0-21swapper/019:40:200
133334994032,5cyclictest181006-21/usr/sbin/munin23:45:170
133334994032,5cyclictest181006-21/usr/sbin/munin23:45:160
133334994028,8cyclictest180644-21grep23:40:280
13333499401,3cyclictest179053-21latency_hist23:35:000
133339993929,6cyclictest311ktimers/220:55:272
133339993925,9cyclictest0-21swapper/220:05:282
133334993932,5cyclictest151922-21/usr/sbin/munin20:55:250
133334993925,9cyclictest140985-21/usr/sbin/munin19:50:290
13333499392,35cyclictest144616-21uptime20:10:280
133339993828,6cyclictest311ktimers/200:20:272
133339993824,8cyclictest0-21swapper/221:20:062
133339993823,9cyclictest0-21swapper/219:59:592
133339993822,8cyclictest0-21swapper/200:10:292
133339993822,10cyclictest311ktimers/200:25:152
133334993831,4cyclictest20850irq/208-8000000.ethernet21:20:010
133334993831,4cyclictest0-21swapper/023:40:000
13333499381,35cyclictest0-21swapper/021:45:270
133339993730,4cyclictest311ktimers/200:15:192
133339993725,6cyclictest311ktimers/223:05:142
133339993725,6cyclictest311ktimers/223:05:142
133339993725,5cyclictest0-21swapper/221:20:012
133339993724,8cyclictest0-21swapper/223:35:292
133339993721,9cyclictest0-21swapper/223:40:292
133334993722,11cyclictest168109-21lsblk22:30:190
13333499371,34cyclictest0-21swapper/019:37:580
133339993629,4cyclictest0-21swapper/223:23:212
133339993628,4cyclictest0-21swapper/219:30:122
133339993626,6cyclictest311ktimers/223:45:272
133339993626,6cyclictest311ktimers/223:45:262
133339993623,8cyclictest0-21swapper/220:15:282
133339993623,6cyclictest0-21swapper/220:35:292
133339993623,10cyclictest0-21swapper/219:50:002
133339993622,9cyclictest0-21swapper/221:55:282
133339993615,16cyclictest14-21rcu_preempt23:10:162
133339993612,2cyclictest0-21swapper/219:20:272
133339993611,17cyclictest311ktimers/222:30:022
133339993611,17cyclictest311ktimers/222:30:022
133339993610,10cyclictest153301-21/usr/sbin/munin21:05:192
13333499362,32cyclictest0-21swapper/020:41:520
13333499362,32cyclictest0-21swapper/020:41:520
133339993531,2cyclictest0-21swapper/220:10:282
133339993528,4cyclictest311ktimers/220:20:182
133339993527,4cyclictest0-21swapper/221:30:002
133339993522,7cyclictest30-21rcuc/200:35:272
133339993521,8cyclictest141179-21grep19:50:302
133339993421,8cyclictest0-21swapper/220:45:292
133339993322,8cyclictest160053-21unixbench_singl21:40:292
133334993317,9cyclictest133492-21latency_hist19:10:010
133339993224,5cyclictest30-21rcuc/222:40:042
133339993223,5cyclictest311ktimers/222:50:282
133339993223,5cyclictest30-21rcuc/222:35:262
133339993223,5cyclictest30-21rcuc/222:35:262
133339993123,4cyclictest0-21swapper/200:10:022
133339993121,6cyclictest0-21swapper/223:25:292
133339993019,7cyclictest0-21swapper/222:30:292
133339992920,5cyclictest0-21swapper/223:30:202
133339992920,5cyclictest0-21swapper/222:45:212
133339992920,5cyclictest0-21swapper/222:45:212
133339992518,3cyclictest0-21swapper/219:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional