You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-27 - 13:54

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #4, slot #1

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack4slot1s.osadl.org (updated Sat Dec 27, 2025 12:44:11)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
157372900,3sleep20-21swapper/208:20:282
157372900,3sleep20-21swapper/208:20:282
189732860,3chrt0-21swapper/211:20:392
189732860,3chrt0-21swapper/211:20:392
300062730,2sleep30-21swapper/307:30:363
300062730,2sleep30-21swapper/307:30:363
191732670,3sleep20-21swapper/209:55:322
191732670,3sleep20-21swapper/209:55:322
191732670,3sleep20-21swapper/209:55:322
59142650,2chrt0-21swapper/109:20:301
59142650,2chrt0-21swapper/109:20:301
182462650,2sleep118251-21gltestperf11:20:301
182462650,2sleep118251-21gltestperf11:20:301
59662640,3sleep20-21swapper/212:15:192
59662640,3sleep20-21swapper/212:15:192
77402590,1sleep30-21swapper/312:20:143
77402590,1sleep30-21swapper/312:20:143
264332580,2sleep126432-21if_eth010:15:301
264332580,2sleep126432-21if_eth010:15:301
285912530,1sleep10-21swapper/110:20:361
53522490,2sleep20-21swapper/210:45:302
234752470,3sleep20-21swapper/207:15:282
234752470,3sleep20-21swapper/207:15:282
170972470,2sleep10-21swapper/109:50:291
170972470,2sleep10-21swapper/109:50:291
122302460,4chrt0-21swapper/308:10:323
66272440,7sleep16679-21ntpq07:55:321
66272440,7sleep16679-21ntpq07:55:321
78772430,3chrt0-21swapper/310:50:373
78772430,3chrt0-21swapper/310:50:373
39912410,3sleep30-21swapper/309:15:293
39912410,3sleep30-21swapper/309:15:293
39912410,3sleep30-21swapper/309:15:293
31212390,1sleep3431rcuc/312:05:353
31212390,1sleep3431rcuc/312:05:353
21617993829,7cyclictest6798-21netstat12:15:341
21617993829,7cyclictest6798-21netstat12:15:341
64722370,2sleep06491-21latency_hist10:50:150
21612993731,4cyclictest21607-21cyclictest12:10:260
21612993731,4cyclictest21607-21cyclictest12:10:260
167492370,3sleep10-21swapper/111:15:361
167492370,3sleep10-21swapper/111:15:361
167492370,3sleep10-21swapper/111:15:361
258992360,2sleep00-21swapper/007:20:320
258992360,2sleep00-21swapper/007:20:320
258222360,4sleep20-21swapper/208:45:372
258222360,4sleep20-21swapper/208:45:372
152732360,3sleep20-21swapper/208:20:202
152732360,3sleep20-21swapper/208:20:202
152732360,3sleep20-21swapper/208:20:202
127192360,2sleep112721-21grep08:10:391
21617993529,4cyclictest0-21swapper/111:00:141
21617993529,4cyclictest0-21swapper/111:00:141
21617993427,5cyclictest1346-21avahi-daemon08:20:361
21617993427,5cyclictest1346-21avahi-daemon08:20:361
21617993426,6cyclictest10412-21netstat08:05:341
21617993325,6cyclictest12083-21cron11:05:141
21612993326,5cyclictest8307-21gltestperf12:20:310
21612993326,5cyclictest8307-21gltestperf12:20:310
21617993225,5cyclictest4230-21needreboot09:15:321
21617993225,5cyclictest4230-21needreboot09:15:321
21617993225,5cyclictest4230-21needreboot09:15:321
2161299325,12cyclictest13022-21taskset12:31:050
2161299325,12cyclictest13022-21taskset12:31:050
21612993225,5cyclictest21607-21cyclictest12:20:160
21612993225,5cyclictest21607-21cyclictest12:20:160
21612993223,6cyclictest5651-21fschecks_time09:20:280
21612993223,6cyclictest5651-21fschecks_time09:20:280
21612993125,4cyclictest21607-21cyclictest09:00:510
21612993124,5cyclictest25428-21tr08:45:330
21612993124,5cyclictest25428-21tr08:45:330
21612993122,7cyclictest17541-21grep09:50:350
21612993122,7cyclictest17541-21grep09:50:350
21612993122,7cyclictest13806-21cut12:35:280
21612993122,7cyclictest13806-21cut12:35:280
21612993118,11cyclictest0-21swapper/008:10:290
286442300,2chrt28646-21sort08:55:291
286442300,2chrt28646-21sort08:55:291
265242300,3sleep20-21swapper/210:15:312
265242300,3sleep20-21swapper/210:15:312
21617993024,5cyclictest23872-21kernelversion07:15:321
21617993024,5cyclictest23872-21kernelversion07:15:321
21617993023,5cyclictest18704-21cut09:55:281
21617993023,5cyclictest18704-21cut09:55:281
21617993023,5cyclictest18704-21cut09:55:281
2161299306,8cyclictest4911-21taskset09:16:390
2161299306,8cyclictest4911-21taskset09:16:390
2161299306,8cyclictest4911-21taskset09:16:390
2161299305,12cyclictest27589-21taskset10:19:450
2161299305,12cyclictest27589-21taskset10:19:450
2161299305,11cyclictest31150-21taskset10:27:210
2161299305,11cyclictest31150-21taskset10:27:210
2161299304,10cyclictest169132sleep008:24:000
2161299304,10cyclictest169132sleep008:24:000
21612993024,4cyclictest601-21snmpd09:40:400
21612993024,4cyclictest601-21snmpd09:40:400
21612993023,5cyclictest544-21lldpd11:15:320
21612993023,5cyclictest544-21lldpd11:15:320
21612993023,5cyclictest544-21lldpd11:15:320
21612993021,7cyclictest8520-21needreboot08:00:330
21612993021,7cyclictest8520-21needreboot08:00:330
21612993021,7cyclictest8520-21needreboot08:00:330
21612993019,3cyclictest0-21swapper/007:50:270
49752290,3sleep30-21swapper/312:10:343
49752290,3sleep30-21swapper/312:10:343
21617992923,5cyclictest535-21fschecks_time07:40:281
21617992923,5cyclictest535-21fschecks_time07:40:281
21617992923,5cyclictest21225-21fschecks_time08:35:261
21617992923,5cyclictest21225-21fschecks_time08:35:261
21617992923,5cyclictest19369-21fschecks_time08:30:291
21617992923,5cyclictest19369-21fschecks_time08:30:291
21617992922,5cyclictest24158-21sshd08:41:001
21617992922,5cyclictest24158-21sshd08:41:001
21617992921,6cyclictest21607-21cyclictest10:40:151
21617992921,6cyclictest21607-21cyclictest10:40:151
21617992921,6cyclictest21607-21cyclictest10:40:151
21617992921,6cyclictest21607-21cyclictest10:40:151
21617992921,5cyclictest3613-21unixbench_singl12:05:391
21617992921,5cyclictest3613-21unixbench_singl12:05:391
2161299297,7cyclictest24453-21chrt08:44:470
2161299297,7cyclictest24453-21chrt08:44:470
2161299294,9cyclictest11789-21taskset11:01:280
2161299294,11cyclictest1162-21seq09:06:380
2161299294,11cyclictest1162-21seq09:06:380
2161299293,11cyclictest29148-21/usr/sbin/munin08:55:340
2161299293,11cyclictest29148-21/usr/sbin/munin08:55:340
21612992924,4cyclictest25654-21fschecks_time11:40:280
21612992924,3cyclictest940-21latency_hist10:35:180
21612992924,3cyclictest940-21latency_hist10:35:180
21612992922,5cyclictest1369-21gltestperf10:35:280
21612992922,5cyclictest1369-21gltestperf10:35:280
21612992922,5cyclictest1369-21gltestperf10:35:280
21612992922,5cyclictest1369-21gltestperf10:35:280
21612992921,6cyclictest773-21apache211:30:150
21612992921,6cyclictest22228-21latency_hist10:05:220
21612992921,6cyclictest22228-21latency_hist10:05:220
150612290,3sleep30-21swapper/309:45:283
150612290,3sleep30-21swapper/309:45:283
8642280,3sleep30-21swapper/312:00:283
21618992819,7cyclictest8540-21chrt09:25:372
21617992823,2cyclictest0-21swapper/107:25:141
21617992823,2cyclictest0-21swapper/107:25:141
21617992821,5cyclictest25734-21gltestperf11:40:281
21617992821,5cyclictest25734-21gltestperf11:40:281
21617992821,5cyclictest25213-21kernelversion08:45:301
21617992821,5cyclictest25213-21kernelversion08:45:301
21617992820,6cyclictest8976-21sort12:20:391
21617992820,6cyclictest8976-21sort12:20:391
21617992819,7cyclictest30441-21netstat10:25:331
21617992819,7cyclictest30441-21netstat10:25:331
21617992819,7cyclictest13826-21fschecks_time12:35:281
21617992819,7cyclictest13826-21fschecks_time12:35:281
21617992819,6cyclictest8317-21threads09:25:361
21617992818,7cyclictest4829-21cat12:10:311
21617992818,7cyclictest4829-21cat12:10:311
2161299285,10cyclictest12414-21seq09:36:570
2161299285,10cyclictest12414-21seq09:36:570
2161299283,8cyclictest8145-21taskset10:52:450
2161299283,8cyclictest8145-21taskset10:52:450
21612992824,2cyclictest0-21swapper/010:55:370
21612992824,2cyclictest0-21swapper/010:55:370
21612992822,3cyclictest19626-21latency08:30:310
21612992822,3cyclictest19626-21latency08:30:310
21617992722,3cyclictest2527-21gltestperf07:45:291
21617992721,3cyclictest0-21swapper/111:15:151
21617992721,3cyclictest0-21swapper/111:15:151
21617992720,5cyclictest27510-21cut11:45:311
21617992720,5cyclictest27510-21cut11:45:311
2161299274,10cyclictest27996-21taskset08:52:270
2161299274,10cyclictest27996-21taskset08:52:270
2161299274,10cyclictest16404-21taskset09:50:070
2161299274,10cyclictest16404-21taskset09:50:070
21612992722,3cyclictest8951-21latency_hist09:30:150
21612992722,3cyclictest0-21swapper/010:40:310
21612992720,5cyclictest27167-21latency_hist11:45:210
21612992720,5cyclictest27167-21latency_hist11:45:210
21612992720,5cyclictest22942-21sshd11:30:430
21612992720,5cyclictest22942-21sshd11:30:430
190032270,2sleep019030-21latency_hist08:30:200
190032270,2sleep019030-21latency_hist08:30:200
21617992620,5cyclictest27378-21cut07:25:281
21617992620,5cyclictest27378-21cut07:25:281
21617992618,5cyclictest550-21cron09:40:161
21617992618,5cyclictest550-21cron09:40:161
2161299266,2cyclictest0-21swapper/008:07:310
2161299265,8cyclictest23646-21taskset10:06:590
2161299265,8cyclictest23646-21taskset10:06:590
21612992621,4cyclictest142-21systemd-journal10:13:440
21612992621,4cyclictest142-21systemd-journal10:13:440
21612992621,4cyclictest1097-21ntp_offset07:40:330
21612992621,4cyclictest1097-21ntp_offset07:40:330
21612992621,3cyclictest0-21swapper/009:55:310
21612992621,3cyclictest0-21swapper/009:55:310
21612992621,3cyclictest0-21swapper/009:55:310
21612992621,3cyclictest0-21swapper/007:35:350
21612992621,3cyclictest0-21swapper/007:35:350
21612992621,3cyclictest0-21swapper/007:35:350
21612992619,5cyclictest29413-21gltestperf11:50:270
21612992619,5cyclictest29413-21gltestperf11:50:270
21612992612,11cyclictest27891-21/usr/sbin/munin07:25:350
21612992612,11cyclictest27891-21/usr/sbin/munin07:25:350
21612992611,12cyclictest31739-21ntp_states11:55:340
21612992611,12cyclictest31739-21ntp_states11:55:340
21612992611,12cyclictest31739-21ntp_states11:55:340
2161299260,12cyclictest19530-21taskset11:24:500
2161299260,12cyclictest19530-21taskset11:24:500
24862250,1sleep00-21swapper/012:05:280
24862250,1sleep00-21swapper/012:05:280
2161799259,4cyclictest90-1pr/ttyS012:30:271
2161799259,4cyclictest90-1pr/ttyS012:30:271
21617992521,2cyclictest0-21swapper/110:55:151
21617992521,2cyclictest0-21swapper/110:55:151
21617992519,5cyclictest9908-21ntp_offset09:30:341
21617992519,5cyclictest9908-21ntp_offset09:30:341
21617992519,4cyclictest4284-21fschecks_count07:50:271
21617992518,5cyclictest28993-21/usr/sbin/munin07:30:261
21617992518,5cyclictest28993-21/usr/sbin/munin07:30:261
21617992517,6cyclictest713-21cut12:00:281
2161299252,7cyclictest2238-21/usr/sbin/munin07:45:300
21612992520,3cyclictest547-21rs:main0
21612992520,3cyclictest547-21rs:main0
21612992517,6cyclictest13594-21df_inode08:15:270
21612992517,6cyclictest13594-21df_inode08:15:270
21612992517,6cyclictest13594-21df_inode08:15:270
21612992511,12cyclictest28631-21ntp_states10:20:370
21612992510,11cyclictest30738-21wc07:35:190
21612992510,11cyclictest30738-21wc07:35:190
21619992413,7cyclictest9340-21chrt08:03:253
21619992413,7cyclictest9340-21chrt08:03:253
21619992413,7cyclictest9340-21chrt08:03:253
21617992418,5cyclictest29624-21kernelversion11:50:291
21617992418,5cyclictest29624-21kernelversion11:50:291
21617992418,5cyclictest21411-21timerandwakeup10:00:371
21617992418,5cyclictest21411-21timerandwakeup10:00:371
21612992418,4cyclictest0-21swapper/008:35:340
21612992418,4cyclictest0-21swapper/008:35:340
21612992414,3cyclictest181rcu_preempt11:10:560
21612992414,3cyclictest181rcu_preempt11:10:560
21612992411,10cyclictest25077-21sed07:20:150
21612992411,10cyclictest25077-21sed07:20:150
21619992314,6cyclictest31088-21chrt10:26:333
21619992314,6cyclictest31088-21chrt10:26:333
21619992313,7cyclictest4441-21chrt10:43:013
21619992313,7cyclictest26933-21chrt11:43:523
21619992313,7cyclictest26933-21chrt11:43:523
21617992319,2cyclictest0-21swapper/110:45:361
21617992318,4cyclictest953-21unixbench-2d09:05:361
21617992318,4cyclictest953-21unixbench-2d09:05:361
21617992318,3cyclictest0-21swapper/110:40:331
21617992317,3cyclictest0-21swapper/109:10:361
21617992317,3cyclictest0-21swapper/109:10:361
21617992316,5cyclictest749-21runrttasks08:50:281
21617992316,5cyclictest749-21runrttasks08:50:281
21617992316,5cyclictest13752-21sshd11:07:431
21617992314,7cyclictest22398-21ntpq11:30:341
21617992314,7cyclictest22398-21ntpq11:30:341
21612992318,4cyclictest2283-21missed_timers09:10:310
21612992318,4cyclictest2283-21missed_timers09:10:310
21612992318,3cyclictest1648-21ntpd11:45:300
21612992318,3cyclictest1648-21ntpd11:45:300
21612992316,5cyclictest837-21gltestperf12:00:280
21612992315,2cyclictest181rcu_preempt11:35:250
21612992315,2cyclictest181rcu_preempt11:35:250
21612992314,7cyclictest9367-21cut09:30:270
21612992314,7cyclictest9367-21cut09:30:270
21612992314,7cyclictest6166-21fschecks_time07:55:270
21612992314,7cyclictest6166-21fschecks_time07:55:270
253352220,3sleep30-21swapper/307:20:273
253352220,3sleep30-21swapper/307:20:273
2161999229,9cyclictest9949-21chrt12:25:253
2161999229,9cyclictest9949-21chrt12:25:253
21619992217,3cyclictest1255-21chrt09:07:493
21619992217,3cyclictest1255-21chrt09:07:493
21619992214,6cyclictest8676-21chrt09:26:473
21619992213,7cyclictest24852-21chrt07:18:023
21619992213,7cyclictest24852-21chrt07:18:023
21619992213,6cyclictest27879-21chrt08:50:573
21619992213,6cyclictest27879-21chrt08:50:573
21619992212,8cyclictest3787-21chrt07:49:103
21619992212,7cyclictest25463-21chrt10:11:253
21619992212,7cyclictest25463-21chrt10:11:253
21619992212,7cyclictest2413-21chrt10:36:103
21619992212,7cyclictest2413-21chrt10:36:103
21619992212,7cyclictest2413-21chrt10:36:103
21619992212,7cyclictest2413-21chrt10:36:103
21619992212,7cyclictest18162-21chrt09:53:453
21619992212,7cyclictest18162-21chrt09:53:453
21619992212,7cyclictest14243-21chrt09:41:143
21619992212,7cyclictest14243-21chrt09:41:143
21619992210,8cyclictest29680-21chrt08:55:393
21619992210,8cyclictest29680-21chrt08:55:393
21617992218,2cyclictest0-21swapper/111:55:361
21617992218,2cyclictest0-21swapper/111:55:361
21617992218,2cyclictest0-21swapper/111:55:361
21617992217,3cyclictest0-21swapper/108:15:371
21617992217,3cyclictest0-21swapper/108:15:371
21617992217,3cyclictest0-21swapper/108:15:371
21617992216,4cyclictest23893-21head11:35:291
21617992216,4cyclictest23893-21head11:35:291
21617992216,4cyclictest23893-21head11:35:291
21617992216,4cyclictest0-21swapper/110:10:151
21617992216,4cyclictest0-21swapper/110:10:151
21617992216,3cyclictest0-21swapper/107:35:281
21617992216,3cyclictest0-21swapper/107:35:281
21617992216,3cyclictest0-21swapper/107:35:281
21617992215,5cyclictest14359-21sshd09:42:441
21617992215,5cyclictest14359-21sshd09:42:441
21617992215,5cyclictest0-21swapper/110:30:311
21617992215,5cyclictest0-21swapper/110:30:311
21617992213,7cyclictest15341-21sort09:45:311
21617992213,7cyclictest15341-21sort09:45:311
21617992213,7cyclictest142-21systemd-journal08:00:431
21617992213,7cyclictest142-21systemd-journal08:00:431
21617992213,7cyclictest142-21systemd-journal08:00:431
2161299220,11cyclictest12699-21basename11:05:280
153922220,3chrt0-21swapper/209:45:312
153922220,3chrt0-21swapper/209:45:312
21619992113,6cyclictest7276-21chrt07:56:053
21619992113,6cyclictest7276-21chrt07:56:053
21619992113,6cyclictest530-21chrt10:32:043
21619992113,6cyclictest530-21chrt10:32:043
21619992113,6cyclictest28667-21chrt11:47:143
21619992113,6cyclictest28667-21chrt11:47:143
21619992112,7cyclictest27621-21chrt10:20:103
21619992112,7cyclictest27621-21chrt10:20:103
21619992112,7cyclictest23227-21chrt11:34:233
21619992112,7cyclictest23227-21chrt11:34:233
21619992112,7cyclictest21989-21chrt10:04:423
21619992112,7cyclictest21989-21chrt10:04:423
21619992112,7cyclictest17616-21chrt11:19:283
21619992112,7cyclictest17616-21chrt11:19:283
21619992112,7cyclictest17616-21chrt11:19:283
21619992112,7cyclictest10515-21chrt09:31:293
21619992112,7cyclictest10515-21chrt09:31:293
21619992112,6cyclictest9853-21chrt10:55:483
21619992112,6cyclictest9853-21chrt10:55:483
21619992112,6cyclictest17141-21chrt08:25:203
21619992112,6cyclictest17141-21chrt08:25:203
21619992111,7cyclictest6959-21chrt09:23:413
21619992111,7cyclictest6959-21chrt09:23:413
21619992111,7cyclictest5586-21chrt07:53:203
21619992111,7cyclictest26019-21chrt08:45:583
21619992111,7cyclictest26019-21chrt08:45:583
21617992116,3cyclictest0-21swapper/110:10:371
21617992116,3cyclictest0-21swapper/110:10:371
21617992113,6cyclictest10019-21fschecks_count12:25:261
21617992113,6cyclictest10019-21fschecks_count12:25:261
21619992014,4cyclictest23753-21chrt10:08:243
21619992014,4cyclictest23753-21chrt10:08:243
21619992014,4cyclictest13713-21chrt11:07:143
21619992012,6cyclictest32336-21chrt11:56:303
21619992012,6cyclictest32336-21chrt11:56:303
21619992012,6cyclictest32336-21chrt11:56:303
21619992012,6cyclictest28473-21chrt07:26:263
21619992012,6cyclictest28473-21chrt07:26:263
21619992012,6cyclictest22556-21chrt08:39:393
21619992012,6cyclictest22556-21chrt08:39:393
21619992012,6cyclictest19513-21chrt11:24:383
21619992012,6cyclictest19513-21chrt11:24:383
21619992012,6cyclictest13271-21chrt12:34:183
21619992012,6cyclictest13271-21chrt12:34:183
21619992012,6cyclictest11919-21chrt11:03:083
21619992011,7cyclictest9395-21chrt12:22:203
21619992011,7cyclictest9395-21chrt12:22:203
21619992011,7cyclictest31951-21chrt09:05:083
21619992011,7cyclictest20528-21chrt08:32:363
21619992011,7cyclictest20528-21chrt08:32:363
21619992011,7cyclictest18577-21chrt08:26:283
21619992011,7cyclictest18577-21chrt08:26:283
21619992011,7cyclictest12391-21chrt09:36:403
21619992011,7cyclictest12391-21chrt09:36:403
21619992011,6cyclictest3102-21chrt09:12:203
21619992011,6cyclictest3102-21chrt09:12:203
21619992011,6cyclictest29502-21chrt10:25:083
21619992011,6cyclictest14781-21chrt08:15:553
21619992011,6cyclictest14781-21chrt08:15:553
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional