You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-08-28 - 04:58

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot6s.osadl.org (updated Wed Aug 27, 2025 12:44:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1469653998174,4cyclictest22-21rcuc/112:10:001
1469653995941,13cyclictest231ktimers/109:15:171
1469656995538,9cyclictest1471599-21sendmail07:20:012
1469656995538,9cyclictest1471599-21sendmail07:20:002
146965299552,46cyclictest0-21swapper/011:00:110
1469652995339,9cyclictest0-21swapper/012:15:000
146965399523,27cyclictest22-21rcuc/108:20:021
146965399523,27cyclictest22-21rcuc/108:20:011
1469653995230,14cyclictest231ktimers/112:00:131
1469652995245,5cyclictest1513787-21munin-plugin-st11:25:000
1469656995036,9cyclictest0-21swapper/207:30:302
1469653995041,4cyclictest0-21swapper/109:25:241
1469653995028,13cyclictest231ktimers/110:45:131
1469652995037,8cyclictest0-21swapper/010:40:000
1469656994936,8cyclictest0-21swapper/208:45:012
1469656994936,8cyclictest0-21swapper/208:45:012
1469653994940,5cyclictest1484526-21munin-plugin-st08:35:001
1469653994938,7cyclictest1471524-21grep07:15:351
1469653994938,7cyclictest1471524-21grep07:15:341
1469653994934,10cyclictest231ktimers/111:25:181
1469653994934,10cyclictest231ktimers/111:25:181
1469652994938,8cyclictest1507030-21munin-plugin-st10:45:000
1469652994839,5cyclictest1526315-21sshd12:35:280
1469652994837,7cyclictest1495106-21munin-plugin-st09:34:590
1469653994739,4cyclictest1479463-21munin-plugin-st08:05:001
1469653994732,11cyclictest231ktimers/110:40:141
1469653994631,8cyclictest0-21swapper/112:15:311
1469653994628,12cyclictest231ktimers/107:55:111
1469653994536,5cyclictest0-21swapper/108:45:301
1469653994534,6cyclictest1496715-21grep09:40:291
1469653994532,9cyclictest0-21swapper/111:05:291
1469653994530,11cyclictest0-21swapper/112:30:011
1469653994529,12cyclictest231ktimers/109:50:151
1469653994529,12cyclictest231ktimers/109:50:151
1469653994525,14cyclictest231ktimers/110:10:161
1469653994513,7cyclictest14-21rcu_preempt09:30:321
1469656994436,5cyclictest1510305-21unixbench_multi11:00:272
1469653994434,6cyclictest1486159-21grep08:40:301
1469653994434,6cyclictest1486159-21grep08:40:291
1469653994430,6cyclictest0-21swapper/111:35:201
1469653994430,10cyclictest231ktimers/107:30:151
1469653994425,13cyclictest231ktimers/111:10:131
1469652994429,10cyclictest0-21swapper/012:20:000
1469652994419,5cyclictest0-21swapper/009:10:250
1469656994330,8cyclictest0-21swapper/211:05:292
1469656994328,10cyclictest0-21swapper/212:35:272
1469653994329,8cyclictest0-21swapper/108:55:301
1469653994327,12cyclictest231ktimers/110:05:161
1469652994322,19cyclictest20750irq/251-8000000.ethernet07:35:180
1469656994230,9cyclictest1492491-21sendmail09:20:012
1469653994232,7cyclictest293-21systemd-journal09:25:001
1469653994229,8cyclictest1483566-21grep08:25:291
146965299428,28cyclictest20950irq/209-8000000.ethernet10:20:190
1469652994230,8cyclictest0-21swapper/007:10:300
146965299422,10cyclictest0-21swapper/012:30:020
146965299421,17cyclictest0-21swapper/008:56:370
1469656994129,7cyclictest0-21swapper/208:35:282
1469656994128,9cyclictest0-21swapper/208:30:262
1469656994124,9cyclictest0-21swapper/210:45:302
1469653994132,5cyclictest1500079-21grep10:00:291
1469653994132,4cyclictest0-21swapper/109:45:201
1469653994127,7cyclictest0-21swapper/110:55:281
1469653994126,10cyclictest0-21swapper/111:55:211
1469653994124,12cyclictest231ktimers/107:45:161
1469652994133,5cyclictest1516404-21sendmail11:39:590
1469652994130,8cyclictest0-21swapper/010:15:310
1469652994126,10cyclictest0-21swapper/008:40:300
1469652994126,10cyclictest0-21swapper/008:40:300
1469652994125,11cyclictest0-21swapper/009:55:200
1469652994118,21cyclictest0-21swapper/009:45:010
1469656994027,9cyclictest0-21swapper/212:00:282
1469653994029,7cyclictest1504332-21grep10:25:281
1469653994028,9cyclictest231ktimers/112:35:131
1469653994028,6cyclictest0-21swapper/109:15:011
1469653994027,10cyclictest231ktimers/108:35:151
1469653994025,10cyclictest0-21swapper/111:20:271
1469653994024,11cyclictest231ktimers/107:35:131
1469652994033,4cyclictest0-21swapper/009:35:130
1469652994033,4cyclictest0-21swapper/009:35:120
1469652994032,4cyclictest1142720-1kworker/0:2H+kblockd07:10:010
1469652994032,4cyclictest1142720-1kworker/0:2H+kblockd07:10:010
1469652994017,21cyclictest0-21swapper/011:50:210
1469652994014,4cyclictest1508839-21latency_hist10:55:000
1469656993932,3cyclictest1486858-21tail08:45:272
1469656993927,8cyclictest0-21swapper/208:05:292
1469656993926,9cyclictest1477961-21/usr/sbin/munin07:55:192
1469656993924,12cyclictest311ktimers/212:10:162
1469656993923,11cyclictest0-21swapper/209:10:002
1469653993927,7cyclictest1477656-21grep07:50:291
1469653993927,6cyclictest0-21swapper/110:30:271
1469653993927,4cyclictest0-21swapper/108:55:021
1469653993923,9cyclictest0-21swapper/110:40:001
1469653993921,10cyclictest0-21swapper/107:25:291
146965299397,28cyclictest0-21swapper/010:55:290
1469652993935,2cyclictest0-21swapper/011:30:310
1469652993930,5cyclictest0-21swapper/010:05:140
1469652993924,10cyclictest0-21swapper/009:20:280
146965299391,36cyclictest0-21swapper/007:15:230
146965299391,36cyclictest0-21swapper/007:15:230
1469656993830,4cyclictest168450irq/135-8000000.ethernet-tx209:25:312
1469656993830,4cyclictest168450irq/135-8000000.ethernet-tx207:50:192
1469656993829,5cyclictest0-21swapper/208:00:302
1469656993829,4cyclictest0-21swapper/211:45:192
1469656993825,9cyclictest0-21swapper/208:15:292
1469656993825,9cyclictest0-21swapper/208:15:292
1469656993821,10cyclictest0-21swapper/209:50:302
1469656993821,10cyclictest0-21swapper/209:50:302
146965699381,30cyclictest0-21swapper/209:40:292
1469653993829,5cyclictest0-21swapper/111:45:291
1469653993827,6cyclictest1508607-21grep10:50:311
1469653993827,6cyclictest0-21swapper/107:40:291
1469653993826,8cyclictest1503338-21grep10:20:291
1469653993823,6cyclictest0-21swapper/109:05:231
1469652993830,4cyclictest20750irq/251-8000000.ethernet07:50:070
1469652993826,8cyclictest0-21swapper/011:55:310
146965299381,3cyclictest0-21swapper/007:45:300
1469656993729,5cyclictest0-21swapper/212:20:012
1469656993727,6cyclictest1500913-21grep10:05:312
1469656993727,5cyclictest1515606-21apt-key11:35:012
146965699372,6cyclictest1480553-21df08:10:172
1469656993724,7cyclictest0-21swapper/209:05:002
146965699372,28cyclictest0-21swapper/209:40:012
146965699372,28cyclictest0-21swapper/209:40:012
1469653993729,5cyclictest0-21swapper/112:20:281
146965399371,29cyclictest1480499-21/usr/sbin/munin08:10:291
1469652993733,2cyclictest0-21swapper/008:40:000
1469652993731,4cyclictest20950irq/209-8000000.ethernet08:25:000
1469652993730,4cyclictest20750irq/251-8000000.ethernet08:50:150
1469652993727,7cyclictest0-21swapper/008:30:290
1469652993724,9cyclictest0-21swapper/008:50:010
1469652993724,9cyclictest0-21swapper/008:00:280
146965299371,34cyclictest0-21swapper/010:45:150
146965699363,4cyclictest1516288-21unixbench_multi11:35:292
1469656993628,5cyclictest30-21rcuc/211:55:292
1469656993628,4cyclictest168450irq/135-8000000.ethernet-tx210:10:232
1469656993628,4cyclictest0-21swapper/212:24:592
146965699362,6cyclictest1476467-21uname07:45:272
1469656993626,5cyclictest1508648-21grep10:50:312
1469656993626,4cyclictest0-21swapper/210:25:162
1469656993624,5cyclictest30-21rcuc/211:40:302
1469656993624,5cyclictest30-21rcuc/211:40:302
1469656993623,8cyclictest0-21swapper/208:20:302
146965399365,16cyclictest1489226-21/usr/sbin/munin09:00:191
1469653993626,5cyclictest0-21swapper/108:20:271
1469653993616,13cyclictest231ktimers/110:15:151
1469652993629,5cyclictest20950irq/209-8000000.ethernet09:50:260
1469652993629,5cyclictest20950irq/209-8000000.ethernet09:50:260
1469652993628,5cyclictest20950irq/209-8000000.ethernet10:25:170
1469652993627,5cyclictest0-21swapper/009:25:260
1469652993625,8cyclictest0-21swapper/011:45:290
1469652993624,9cyclictest0-21swapper/009:45:280
146965299362,32cyclictest0-21swapper/008:10:280
146965299362,31cyclictest1512935-21munin-run11:20:010
146965299361,23cyclictest0-21swapper/009:01:490
1469656993527,4cyclictest168450irq/135-8000000.ethernet-tx211:25:232
1469656993527,4cyclictest168450irq/135-8000000.ethernet-tx211:25:232
1469656993526,4cyclictest0-21swapper/207:40:292
1469656993524,7cyclictest0-21swapper/208:25:292
1469656993523,8cyclictest1512930-21sendmail11:20:002
1469656993513,19cyclictest30-21rcuc/210:25:012
1469653993525,7cyclictest1666-21snmpd09:55:291
1469653993521,7cyclictest0-21swapper/112:30:291
1469652993529,4cyclictest20950irq/209-8000000.ethernet11:10:260
1469652993528,4cyclictest0-21swapper/008:15:140
1469652993528,4cyclictest0-21swapper/008:15:130
1469652993528,4cyclictest0-21swapper/007:25:180
1469652993517,3cyclictest0-21swapper/007:55:250
146965699349,3cyclictest27350irq/343-s-wl18xx10:55:182
146965699344,10cyclictest32-21ksoftirqd/209:35:002
1469656993428,4cyclictest168450irq/135-8000000.ethernet-tx211:50:162
1469656993427,4cyclictest0-21swapper/211:10:272
1469656993426,5cyclictest1525782-21munin-run12:34:592
1469656993425,5cyclictest0-21swapper/211:20:262
1469656993420,10cyclictest0-21swapper/208:50:292
1469656993419,11cyclictest0-21swapper/210:15:302
1469653993422,7cyclictest0-21swapper/111:30:241
146965399341,2cyclictest0-21swapper/112:15:021
1469652993428,4cyclictest20950irq/209-8000000.ethernet07:20:230
1469652993428,4cyclictest0-21swapper/011:25:260
1469652993428,4cyclictest0-21swapper/011:25:260
1469652993427,5cyclictest20950irq/209-8000000.ethernet07:30:270
1469652993423,6cyclictest131ktimers/010:00:280
146965299342,28cyclictest1517212-21sed11:40:310
146965299342,28cyclictest1517212-21sed11:40:300
146965299341,2cyclictest0-21swapper/012:35:010
1469656993327,4cyclictest168450irq/135-8000000.ethernet-tx210:40:142
1469656993326,4cyclictest1491654-21latency_hist09:15:002
1469656993324,5cyclictest30-21rcuc/209:55:302
1469656993320,8cyclictest0-21swapper/207:25:292
1469656993320,10cyclictest0-21swapper/207:10:292
146965699331,25cyclictest0-21swapper/212:30:012
1469653993320,10cyclictest231ktimers/111:00:131
146965399331,2cyclictest0-21swapper/109:40:021
146965399331,2cyclictest0-21swapper/109:40:021
146965399331,27cyclictest0-21swapper/111:15:191
1469652993327,4cyclictest20950irq/209-8000000.ethernet09:05:290
1469652993326,4cyclictest20750irq/251-8000000.ethernet11:05:230
1469652993324,6cyclictest0-21swapper/009:15:310
1469652993323,7cyclictest0-21swapper/012:20:260
1469652993321,9cyclictest0-21swapper/012:00:290
1469652993321,8cyclictest0-21swapper/012:05:310
146965299331,17cyclictest0-21swapper/008:28:150
1469656993224,6cyclictest0-21swapper/207:35:302
146965699321,26cyclictest0-21swapper/209:20:202
1469653993225,5cyclictest1666-21snmpd07:10:291
146965399322,21cyclictest1472436-21tail07:20:311
146965399321,8cyclictest0-21swapper/111:45:021
146965399321,8cyclictest0-21swapper/111:45:021
146965399321,29cyclictest0-21swapper/108:05:281
1469652993227,3cyclictest20950irq/209-8000000.ethernet07:40:270
1469656993119,8cyclictest0-21swapper/209:00:012
146965699311,3cyclictest0-21swapper/212:10:012
146965699311,27cyclictest1497632-21dropbear09:49:152
146965399311,7cyclictest0-21swapper/107:10:011
146965399311,7cyclictest0-21swapper/107:10:011
1469653993116,9cyclictest0-21swapper/111:50:281
146965299311,2cyclictest0-21swapper/010:35:020
146965299311,17cyclictest0-21swapper/008:09:280
1469656993018,5cyclictest0-21swapper/210:40:012
1469656993017,10cyclictest0-21swapper/210:00:222
146965699301,5cyclictest0-21swapper/210:30:162
1469652993023,5cyclictest1501469-21/usr/sbin/munin10:10:240
1469656992920,5cyclictest0-21swapper/207:20:312
146965699193,9cyclictest1469742-21grep07:10:022
146965699193,9cyclictest1469742-21grep07:10:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional