You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-08-27 - 09:33

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot6s.osadl.org (updated Wed Aug 27, 2025 00:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1026287997647,13cyclictest231ktimers/121:50:241
1026287997541,30cyclictest0-21swapper/121:05:001
1026287996834,28cyclictest1079698-21munin-plugin-st00:20:001
1026287996834,28cyclictest1079698-21munin-plugin-st00:20:001
1026287996734,28cyclictest1063294-21unixbench_multi22:40:351
1026287996627,5cyclictest1041023-21unixbench_singl20:30:291
1026287996524,31cyclictest0-21swapper/121:55:291
1026287996424,5cyclictest0-21swapper/100:35:001
1026287996424,5cyclictest0-21swapper/100:35:001
1026289996315,23cyclictest32-21ksoftirqd/222:35:022
1026289996315,23cyclictest32-21ksoftirqd/222:35:022
1026287996330,28cyclictest0-21swapper/123:44:591
1026287996226,30cyclictest0-21swapper/120:25:211
102628599609,23cyclictest0-21swapper/020:45:020
102628599609,23cyclictest0-21swapper/020:45:020
102628599601,29cyclictest0-21swapper/022:25:020
102628799591,2cyclictest0-21swapper/119:50:021
102628799586,8cyclictest0-21swapper/119:35:011
1026287995835,19cyclictest1043497-21grep20:45:321
1026287995830,22cyclictest0-21swapper/121:05:311
1026287995815,8cyclictest0-21swapper/120:15:211
1026287995728,24cyclictest1065993-21grep22:55:281
102628799564,14cyclictest1071963-21grep23:30:291
1026287995620,4cyclictest0-21swapper/120:40:201
1026287995620,4cyclictest0-21swapper/120:40:201
102628799557,22cyclictest1029276-21/usr/sbin/munin19:25:191
1026287995417,6cyclictest1052056-21grep21:35:321
1026285995416,8cyclictest1027225-21if_eth019:15:020
1026287995319,27cyclictest0-21swapper/122:35:301
1026287995319,27cyclictest0-21swapper/122:35:301
1026287995316,4cyclictest1027286-21latency_hist19:15:011
1026287995222,24cyclictest0-21swapper/122:30:241
1026287995222,24cyclictest0-21swapper/122:30:241
1026287995219,7cyclictest0-21swapper/122:25:311
1026287995122,4cyclictest0-21swapper/120:20:261
1026287995116,9cyclictest0-21swapper/123:20:251
1026287995116,9cyclictest0-21swapper/123:20:251
102628599510,49cyclictest0-21swapper/019:10:010
1026289995041,5cyclictest30-21rcuc/219:15:012
1026287995018,9cyclictest0-21swapper/119:55:281
1026285995041,4cyclictest1077372-21apt-get00:05:170
1026285995036,9cyclictest168250irq/119-8000000.ethernet-tx020:10:010
1026285995033,12cyclictest0-21swapper/022:10:170
102628599501,40cyclictest0-21swapper/022:55:150
1026289994939,5cyclictest0-21swapper/219:25:012
1026289994924,14cyclictest311ktimers/222:20:012
102628999492,11cyclictest0-21swapper/223:15:022
1026287994922,8cyclictest1037686-21cron20:14:591
1026285994924,17cyclictest0-21swapper/000:10:270
1026287994839,5cyclictest0-21swapper/122:55:001
102628599488,24cyclictest19950irq/27-20000000.i2c22:25:020
1026285994831,12cyclictest1052147-21sendmail21:40:000
1026285994827,16cyclictest0-21swapper/022:40:330
102628599482,10cyclictest1029881-21grep19:25:290
1026289994738,5cyclictest293-21systemd-journal21:20:012
1026289994738,5cyclictest293-21systemd-journal21:20:002
102628799474,19cyclictest1080510-21sed00:20:291
1026289994633,10cyclictest1031623-21apt-get19:40:012
1026289994625,13cyclictest311ktimers/219:40:142
102628799469,3cyclictest1048021-21cp21:15:021
1026287994638,5cyclictest1028222-21run-parts19:20:001
1026285994639,4cyclictest0-21swapper/021:30:200
1026285994639,4cyclictest0-21swapper/021:30:200
1026285994636,6cyclictest0-21swapper/023:50:210
102628599462,39cyclictest1069399-21unixbench_singl23:15:320
102628599460,13cyclictest0-21swapper/021:45:000
1026285994534,8cyclictest1065046-21grep22:50:300
1026285994527,4cyclictest27250irq/343-wl18xx23:50:010
1026285994510,33cyclictest0-21swapper/023:30:280
1026287994421,5cyclictest0-21swapper/121:50:011
1026285994433,8cyclictest1069868-21fschecks_time23:20:270
1026285994433,8cyclictest1069868-21fschecks_time23:20:270
1026285994419,17cyclictest0-21swapper/021:05:180
102628599441,35cyclictest1033701-21fschecks_count19:50:210
1026285994413,25cyclictest0-21swapper/020:20:230
1026285994410,30cyclictest0-21swapper/000:00:010
1026289994333,5cyclictest14-21rcu_preempt19:55:302
102628999433,32cyclictest1048068-21latency_hist21:15:022
1026289994329,9cyclictest311ktimers/220:15:152
102628799432,12cyclictest1082861-21ptp4l00:35:281
102628599433,4cyclictest1031601-21apt19:40:000
1026285994324,14cyclictest0-21swapper/000:15:210
1026285994324,14cyclictest0-21swapper/000:15:210
1026285994319,22cyclictest1027646-21diskstats19:15:200
1026289994223,14cyclictest311ktimers/223:55:142
1026289994220,14cyclictest311ktimers/200:25:162
102628799421,2cyclictest0-21swapper/100:15:011
1026285994236,3cyclictest1045294-21sendmail21:00:010
1026285994236,3cyclictest1045294-21sendmail21:00:000
1026285994235,5cyclictest1038531-21cron20:20:000
102628999416,17cyclictest1055731-21/usr/sbin/munin22:00:222
1026289994133,5cyclictest1074545-21munin-plugin-st23:50:002
1026289994129,9cyclictest0-21swapper/220:55:292
1026289994129,9cyclictest0-21swapper/220:55:292
1026289994129,6cyclictest0-21swapper/223:25:322
1026287994126,9cyclictest0-21swapper/120:00:211
1026285994134,4cyclictest20750irq/251-8000000.ethernet19:30:170
102628599412,3cyclictest1061900-21apt-get22:35:130
102628599412,3cyclictest1061900-21apt-get22:35:130
102628599412,37cyclictest0-21swapper/020:50:180
102628599411,34cyclictest0-21swapper/021:45:140
102628599410,32cyclictest0-21swapper/000:05:010
1026289994029,6cyclictest0-21swapper/200:00:302
1026289994026,7cyclictest1044370-21grep20:50:302
1026287994032,5cyclictest168350irq/127-8000000.ethernet-tx123:20:001
1026287994031,5cyclictest0-21swapper/100:10:021
102628799401,4cyclictest0-21swapper/119:45:011
102628599409,8cyclictest0-21swapper/022:01:270
102628599409,29cyclictest0-21swapper/021:20:290
1026285994030,6cyclictest1080454-21grep00:20:290
102628599401,4cyclictest1040735-21meminfo20:30:250
1026289993926,8cyclictest0-21swapper/219:25:212
1026289993925,9cyclictest0-21swapper/220:00:192
1026289993919,13cyclictest311ktimers/220:05:172
1026287993925,11cyclictest1044652-21/usr/sbin/munin20:55:181
1026287993925,11cyclictest1044652-21/usr/sbin/munin20:55:181
102628599399,27cyclictest0-21swapper/023:10:350
102628599398,29cyclictest0-21swapper/023:30:000
1026285993931,4cyclictest20950irq/209-8000000.ethernet23:00:270
1026285993930,6cyclictest1041801-21grep20:35:350
1026285993929,6cyclictest0-21swapper/020:45:240
102628599392,4cyclictest1059064-21cron22:20:000
1026285993916,19cyclictest0-21swapper/019:40:040
102628599391,36cyclictest0-21swapper/021:00:150
102628599391,35cyclictest0-21swapper/000:25:230
102628999386,16cyclictest1030116-21/usr/sbin/munin19:30:212
1026289993826,8cyclictest0-21swapper/222:05:272
1026289993825,9cyclictest0-21swapper/222:10:282
1026289993820,11cyclictest311ktimers/220:30:132
1026287993828,5cyclictest0-21swapper/119:35:281
1026287993827,6cyclictest0-21swapper/121:25:321
102628599387,23cyclictest0-21swapper/019:25:020
1026285993830,4cyclictest0-21swapper/023:05:220
1026285993828,6cyclictest0-21swapper/000:35:290
1026285993824,10cyclictest0-21swapper/023:35:300
1026285993824,10cyclictest0-21swapper/023:35:300
1026289993725,8cyclictest0-21swapper/222:40:342
102628799372,7cyclictest0-21swapper/100:05:011
1026287993727,6cyclictest1052891-21grep21:40:331
102628799371,2cyclictest0-21swapper/100:00:011
1026285993724,8cyclictest0-21swapper/021:10:300
102628599370,22cyclictest0-21swapper/022:05:030
1026289993629,4cyclictest168450irq/135-8000000.ethernet-tx222:45:032
1026289993627,5cyclictest0-21swapper/200:10:302
1026289993627,4cyclictest0-21swapper/221:05:312
1026289993623,8cyclictest0-21swapper/221:40:332
1026289993621,10cyclictest311ktimers/220:25:162
1026289993620,9cyclictest0-21swapper/223:50:192
102628799361,29cyclictest0-21swapper/121:30:221
102628799361,29cyclictest0-21swapper/121:30:221
102628599367,27cyclictest0-21swapper/021:55:270
102628599361,3cyclictest0-21swapper/021:20:010
102628599361,3cyclictest0-21swapper/021:20:010
102628599361,2cyclictest0-21swapper/023:40:280
1026289993527,4cyclictest1083081-21cron00:40:002
1026289993527,4cyclictest0-21swapper/220:10:332
1026289993526,6cyclictest0-21swapper/219:15:232
102628999352,5cyclictest1053644-21sendmail_mailqu21:45:272
1026289993525,7cyclictest0-21swapper/223:30:282
1026289993524,5cyclictest0-21swapper/200:05:182
1026289993522,8cyclictest0-21swapper/222:30:212
1026289993522,8cyclictest0-21swapper/222:30:212
1026289993519,11cyclictest311ktimers/223:00:132
1026287993530,3cyclictest1041915-21sh20:40:001
1026287993527,4cyclictest1057441-21apt-key22:10:011
1026287993517,7cyclictest1067147-21/usr/sbin/munin23:05:221
1026285993523,7cyclictest0-21swapper/020:00:290
1026285993521,9cyclictest0-21swapper/019:45:290
1026285993519,13cyclictest0-21swapper/000:30:210
1026285993519,13cyclictest0-21swapper/000:30:200
1026285993516,16cyclictest0-21swapper/021:25:220
1026285993510,23cyclictest0-21swapper/022:45:050
1026289993427,4cyclictest168450irq/135-8000000.ethernet-tx221:00:162
1026289993426,3cyclictest1049537-21tail21:20:292
1026289993424,7cyclictest1079703-21sendmail00:20:002
1026289993424,7cyclictest1079703-21sendmail00:19:592
102628999342,26cyclictest0-21swapper/219:45:142
1026289993421,6cyclictest0-21swapper/222:30:002
102628999341,28cyclictest1072858-21sendmail23:40:002
102628999341,28cyclictest1072858-21sendmail23:40:002
1026287993424,4cyclictest0-21swapper/123:00:201
1026287993423,7cyclictest1056310-21grep22:00:321
1026289993318,12cyclictest311ktimers/200:30:162
1026289993318,12cyclictest311ktimers/200:30:162
1026289993316,14cyclictest311ktimers/223:40:192
102628999331,4cyclictest1052140-21munin-run21:40:002
102628999331,27cyclictest0-21swapper/221:26:272
102628999331,26cyclictest0-21swapper/220:20:162
102628999331,18cyclictest1055505-21sshd21:59:272
1026287993324,5cyclictest1049515-21grep21:20:291
1026287993323,6cyclictest0-21swapper/122:10:291
1026287993322,6cyclictest0-21swapper/123:10:351
1026287993320,8cyclictest0-21swapper/121:15:321
1026287993320,8cyclictest0-21swapper/121:15:321
102628799331,2cyclictest0-21swapper/119:10:011
1026285993327,4cyclictest20950irq/209-8000000.ethernet19:55:150
1026285993315,15cyclictest0-21swapper/020:10:250
102628599330,31cyclictest0-21swapper/021:50:320
1026289993225,5cyclictest168450irq/135-8000000.ethernet-tx220:35:242
1026289993220,8cyclictest0-21swapper/223:20:352
1026289993220,8cyclictest0-21swapper/223:20:352
1026287993223,5cyclictest0-21swapper/123:55:011
1026287993221,8cyclictest0-21swapper/122:45:291
1026287993217,10cyclictest0-21swapper/120:05:231
1026285993225,4cyclictest0-21swapper/022:30:170
1026285993225,4cyclictest0-21swapper/022:30:170
1026289993123,3cyclictest0-21swapper/223:05:322
1026289993120,7cyclictest1065784-21phc2sys22:55:262
1026287993122,7cyclictest231ktimers/119:50:231
102628799312,15cyclictest231ktimers/122:25:011
1026287993120,7cyclictest0-21swapper/122:15:291
102628799311,4cyclictest0-21swapper/100:30:001
102628599316,23cyclictest0-21swapper/020:25:180
102628799301,2cyclictest0-21swapper/123:30:011
102628999299,4cyclictest27350irq/343-s-wl18xx00:23:322
1026289992923,4cyclictest0-21swapper/220:40:292
1026289992923,4cyclictest0-21swapper/220:40:292
102628999292,24cyclictest1054287-21/usr/sbin/munin21:50:282
1026289992921,4cyclictest0-21swapper/222:50:212
1026289992917,6cyclictest0-21swapper/221:35:022
1026289992917,6cyclictest0-21swapper/221:35:022
102628999291,16cyclictest0-21swapper/222:22:552
102628799296,14cyclictest1028436-21/usr/sbin/munin19:20:191
1026287992921,4cyclictest0-21swapper/120:50:291
102628999281,16cyclictest0-21swapper/219:50:312
1026287992819,6cyclictest0-21swapper/123:45:351
1026289992715,9cyclictest0-21swapper/223:15:242
102628799271,24cyclictest0-21swapper/123:35:201
102628799271,24cyclictest0-21swapper/123:35:191
1026289992619,4cyclictest168450irq/135-8000000.ethernet-tx220:45:192
1026289992115,3cyclictest0-21swapper/219:10:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional