You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-09 - 03:28

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Tue Jun 09, 2026 00:43:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
681210996144,7cyclictest717197-21diskmemload23:40:251
681210996144,7cyclictest717197-21diskmemload23:40:251
681210995848,5cyclictest843161-21unixbench_singl00:25:341
681210995847,7cyclictest682698-21grep19:15:001
681210995847,7cyclictest682698-21grep19:15:001
68120999522,17cyclictest715120-21ntpq21:00:290
681209995212,31cyclictest627-21lldpd20:10:240
681211994941,5cyclictest0-21swapper/221:30:362
68121199484,36cyclictest753390-21ssh22:05:212
681210994838,4cyclictest0-21swapper/122:55:281
681210994835,8cyclictest0-21swapper/100:05:261
681209994835,8cyclictest813898-21sh23:40:220
681209994835,8cyclictest813898-21sh23:40:220
681210994711,8cyclictest28-21ksoftirqd/119:45:261
681209994732,8cyclictest12650irq/32-eth023:45:270
681209994732,8cyclictest12650irq/32-eth023:45:270
68120999472,41cyclictest665-21snmpd19:35:280
68120999472,18cyclictest731192-21ntpq21:30:300
68120999471,14cyclictest694166-21ntpq19:50:270
68121199464,38cyclictest845846-21sshd00:30:272
68121199462,40cyclictest836247-21ssh00:15:262
68120999463,7cyclictest712040-21ntpq20:50:210
68120999463,7cyclictest712040-21ntpq20:50:210
68120999463,36cyclictest791702-21ssh23:05:250
68120999462,17cyclictest788652-21ps23:00:310
68120999452,5cyclictest740650-21ntpq21:45:220
681209994518,20cyclictest772479-21ssh22:35:200
68121099441,36cyclictest775766-21ssh22:40:241
681209994435,6cyclictest12650irq/32-eth000:30:280
681209994433,7cyclictest151ktimers/023:10:240
681209994427,13cyclictest12650irq/32-eth022:10:270
68120999441,17cyclictest703195-21ntpq20:20:270
681211994315,6cyclictest171rcu_preempt22:45:222
68121099433,33cyclictest782103-21ssh22:50:211
68120999433,5cyclictest839478-21ntpq00:20:260
68120999433,5cyclictest839478-21ntpq00:20:260
68120999432,6cyclictest710558-21ntpq20:45:220
68120999431,11cyclictest707572-21ntpq20:35:260
68120999431,10cyclictest683550-21ntpq19:15:220
68120999431,10cyclictest683550-21ntpq19:15:220
681211994230,7cyclictest0-21swapper/223:30:262
681211994230,7cyclictest0-21swapper/223:30:262
681211994215,7cyclictest171rcu_preempt22:55:342
68121099422,37cyclictest747129-21sh21:55:291
68120999422,7cyclictest692630-21ntpq19:45:300
681209994227,3cyclictest0-21swapper/000:35:270
68120999422,6cyclictest823451-21ntpq23:55:240
681209994222,15cyclictest12650irq/32-eth021:55:300
68120999421,6cyclictest775809-21ntpq22:40:250
68120999421,38cyclictest688623-21unixbench_singl19:30:340
68120999421,15cyclictest836206-21ssh00:15:240
68120999421,12cyclictest716618-21ntpq21:05:250
68120999421,10cyclictest691089-21ntpq19:40:270
681211994133,5cyclictest758853-21latency_hist22:15:022
681211994132,5cyclictest0-21swapper/220:15:012
681211994130,8cyclictest681164-21/usr/sbin/munin19:10:012
681211994130,8cyclictest681164-21/usr/sbin/munin19:10:012
681210994132,6cyclictest810129-21tail23:35:131
681210994110,9cyclictest171rcu_preempt19:50:231
68120999415,32cyclictest420-21avahi-daemon21:40:250
68120999414,5cyclictest697116-21ntpq20:00:230
681209994132,5cyclictest0-21swapper/023:25:260
681209994119,19cyclictest1003-21mta-sts-daemon23:54:110
68120999411,14cyclictest785309-21sh22:55:280
68120999411,12cyclictest832580-21df_inode00:10:140
68120999411,12cyclictest713539-21ntpq20:55:200
68120999411,10cyclictest698557-21ntpq20:05:240
68121199402,30cyclictest814001-21sshd23:40:262
68121199402,30cyclictest814001-21sshd23:40:262
68121199401,32cyclictest823537-21ssh23:55:262
68121099407,23cyclictest1001-21mta-sts-daemon19:30:251
681210994032,4cyclictest0-21swapper/123:05:221
68120999409,28cyclictest745256-21ssh21:52:490
68120999406,4cyclictest684847-21kernelversion19:20:170
68120999403,7cyclictest842576-21ntpq00:25:230
681209994032,4cyclictest0-21swapper/021:20:250
681209994030,6cyclictest151ktimers/022:30:240
68120999402,7cyclictest829812-21ntpq00:05:240
68120999401,13cyclictest759816-21ssh22:15:220
68120999401,11cyclictest704606-21ntpq20:25:230
681211993931,5cyclictest728455-21unixbench_singl21:25:342
681211993929,6cyclictest690235-21unin-run19:40:022
68121099393,27cyclictest804462-21ssh23:25:251
681210993930,6cyclictest1-21systemd21:00:011
68120999399,2cyclictest0-21swapper/020:15:150
68120999394,6cyclictest762938-21ssh22:20:220
68120999393,6cyclictest686568-21ntpq19:25:250
68120999392,8cyclictest753365-21ntpq22:05:200
68120999392,6cyclictest779015-21ntpq22:45:260
68120999392,6cyclictest682083-21ntpq19:10:230
68120999392,6cyclictest682083-21ntpq19:10:230
681209993922,11cyclictest151ktimers/021:10:210
681209993922,11cyclictest151ktimers/021:10:210
68120999392,16cyclictest798184-21ps23:15:280
68120999392,13cyclictest734272-21ssh21:35:230
68120999391,9cyclictest695659-21ntp_states19:55:310
68120999391,6cyclictest750182-21ntpq22:00:230
681209993914,23cyclictest643-21cups-browsed21:25:120
68120999391,13cyclictest768064-21ssh22:29:130
68120999390,12cyclictest723196-21ssh21:18:460
68121199383,29cyclictest798141-21ssh23:15:252
68121199381,32cyclictest697169-21sshd20:00:262
681210993831,4cyclictest809765-21cron23:35:011
681210993831,4cyclictest809765-21cron23:35:011
681210993831,4cyclictest800212-21systemctl23:20:011
681210993831,4cyclictest761970-21idleruntime-cro22:20:011
681210993831,3cyclictest0-21swapper/100:10:261
681210993830,5cyclictest733253-21ssh21:35:011
68120999384,30cyclictest777945-21kworker/u8:10+rpciod22:50:230
68120999382,7cyclictest810829-21ssh23:35:290
68120999381,6cyclictest706150-21ntpq20:30:250
68120999381,10cyclictest807691-21ntp_states23:30:260
68120999381,10cyclictest807691-21ntp_states23:30:260
68121199374,25cyclictest829980-21ssh00:05:302
68121199374,24cyclictest724765-21ssh21:20:302
681211993728,6cyclictest643-21cups-browsed23:54:162
68121199372,19cyclictest36-21ksoftirqd/220:55:202
681211993719,4cyclictest171rcu_preempt19:55:282
681210993729,5cyclictest758776-21munin-plugin-st22:15:011
68121099372,28cyclictest737568-21ssh21:40:261
681209993720,14cyclictest801859-21unixbench_singl23:20:370
68120999371,9cyclictest708694-21df20:40:160
68120999371,11cyclictest826617-21ntpq00:00:220
681211993628,5cyclictest838783-21aten_r2power_fr00:20:122
681211993628,5cyclictest838783-21aten_r2power_fr00:20:122
681211993628,5cyclictest803395-21cron23:25:002
68121199362,27cyclictest848976-21ssh00:35:262
681211993621,3cyclictest171rcu_preempt23:10:292
68121099363,26cyclictest848946-21ssh00:35:251
681210993629,3cyclictest0-21swapper/122:35:011
681210993622,8cyclictest801267-21sshd23:20:261
68121199358,21cyclictest717197-21diskmemload22:50:222
681211993527,5cyclictest708506-21aten_r2power_en20:40:142
681211993526,4cyclictest0-21swapper/200:00:212
681211993518,5cyclictest171rcu_preempt20:30:222
68121099354,7cyclictest171rcu_preempt21:25:281
68121099353,23cyclictest721413-21ssh21:15:211
681210993528,5cyclictest703714-21munin-plugin-st20:25:011
681210993528,4cyclictest1002-21mta-sts-daemon23:53:541
681210993526,7cyclictest697216-21proc_pri20:00:281
68121099350,28cyclictest691067-21sshd19:40:261
68121199348,19cyclictest341rcuc/221:10:212
68121199348,19cyclictest341rcuc/221:10:212
681211993426,5cyclictest774716-21ls22:40:002
68121199342,26cyclictest810777-21ssh23:35:262
68121199342,25cyclictest788486-21ssh23:00:242
681211993418,4cyclictest171rcu_preempt21:59:452
681210993426,5cyclictest825625-21ssh00:00:001
68121099341,26cyclictest734259-21ssh21:35:221
68121199338,19cyclictest604-21cupsd20:25:222
681211993328,3cyclictest0-21swapper/222:20:012
681211993323,6cyclictest792276-21unixbench_singl23:05:362
681211993322,3cyclictest768702-21aten2.4-expect22:30:122
68121199332,23cyclictest763057-21rm22:20:272
68121199332,22cyclictest842512-21ssh00:25:212
681211993320,3cyclictest816740-21grep23:45:212
681211993320,3cyclictest816740-21grep23:45:212
681211993319,3cyclictest171rcu_preempt20:50:242
681211993319,3cyclictest171rcu_preempt20:50:242
68121099333,21cyclictest709120-21sshd20:40:261
681210993325,6cyclictest694-21cron00:15:031
681210993325,5cyclictest695207-21fschecks_count19:55:161
681210993322,7cyclictest702208-21idleruntime-cro20:20:011
68121299321,10cyclictest0-21swapper/322:30:253
681211993227,3cyclictest57-21kcompactd020:15:282
681211993227,3cyclictest0-21swapper/219:50:212
681211993223,6cyclictest1001-21mta-sts-daemon23:25:352
681211993214,4cyclictest171rcu_preempt19:15:282
681211993214,4cyclictest171rcu_preempt19:15:282
681210993224,5cyclictest686235-21fschecks_time19:25:191
681210993223,6cyclictest643-21cups-browsed22:24:311
681210993220,9cyclictest643-21cups-browsed21:45:331
681210993220,9cyclictest271ktimers/121:00:261
68121099321,26cyclictest724647-21ssh21:20:251
68121099321,25cyclictest718211-21ssh21:10:241
68121099321,25cyclictest718211-21ssh21:10:241
681211993127,3cyclictest57-21kcompactd021:15:262
681211993126,3cyclictest57-21kcompactd022:01:012
681211993124,4cyclictest832337-21aten_r2power_cu00:10:122
681211993123,5cyclictest714568-21aten_r2power_po21:00:122
681211993118,3cyclictest171rcu_preempt22:40:232
681211993115,9cyclictest0-21swapper/221:35:222
681211993113,9cyclictest703055-21ntpq20:20:202
68121199311,26cyclictest766133-21ssh22:25:212
68121199311,24cyclictest737459-21ssh21:40:222
681210993123,5cyclictest708186-21cron20:40:011
681210993119,7cyclictest717197-21diskmemload23:10:251
681210993118,9cyclictest717197-21diskmemload22:45:251
681211993023,3cyclictest0-21swapper/221:50:262
681211993020,8cyclictest694-21cron20:10:012
681211993020,7cyclictest691483-21timerwakeupswit19:40:382
68121099304,20cyclictest623-21sshd20:10:261
68121099303,7cyclictest171rcu_preempt20:30:241
68121099303,22cyclictest817170-21ssh23:45:291
68121099303,22cyclictest817170-21ssh23:45:291
68121099303,18cyclictest443-21gpm00:20:291
68121099303,18cyclictest443-21gpm00:20:291
681210993022,6cyclictest439-21systemd-logind20:10:011
681210993022,5cyclictest744184-21ssh21:50:381
681210993020,7cyclictest766009-21missed_timers22:25:181
68121299296,4cyclictest0-21swapper/300:35:243
68121199294,18cyclictest740643-21ssh21:45:222
681211992919,3cyclictest171rcu_preempt19:30:242
681211992912,3cyclictest171rcu_preempt19:20:212
68121099295,19cyclictest1000-21mta-sts-daemon20:45:241
68121099292,21cyclictest788442-21ssh23:00:231
68121299285,5cyclictest0-21swapper/322:00:273
68121199285,17cyclictest428-21mta-sts-daemon21:05:222
681211992815,2cyclictest171rcu_preempt19:10:252
681211992815,2cyclictest171rcu_preempt19:10:252
681211992813,3cyclictest171rcu_preempt20:45:262
68121099286,14cyclictest428-21mta-sts-daemon20:25:231
68121099285,18cyclictest750299-21ssh22:00:281
681210992823,2cyclictest0-21swapper/100:00:271
681210992822,3cyclictest0-21swapper/119:40:031
681209992821,4cyclictest681349-21latency_hist19:10:020
681209992821,4cyclictest681349-21latency_hist19:10:020
681211992719,6cyclictest421-21dbus-daemon20:37:512
681211992712,3cyclictest171rcu_preempt19:25:292
68121099275,13cyclictest753436-21ssh22:05:231
681210992719,4cyclictest741973-21kworker/u8:12-xprtiod22:40:011
681210992718,6cyclictest845511-21latency00:30:171
681210992518,4cyclictest717087-21tail21:05:341
68121199242,7cyclictest36-21ksoftirqd/219:45:282
681210992415,6cyclictest684523-21basename19:20:111
68121299234,8cyclictest0-21swapper/323:00:253
68121099232,15cyclictest683598-21ntpq19:15:241
68121099232,15cyclictest683598-21ntpq19:15:241
681210992318,2cyclictest0-21swapper/120:55:011
681210992318,2cyclictest0-21swapper/120:55:011
68121299202,8cyclictest0-21swapper/300:25:213
68121299202,7cyclictest0-21swapper/300:00:223
68121299194,6cyclictest0-21swapper/323:20:253
68121299193,8cyclictest0-21swapper/321:15:273
68121299192,10cyclictest0-21swapper/322:50:233
68121299192,10cyclictest0-21swapper/321:55:263
68121299183,9cyclictest0-21swapper/320:40:263
68121299183,10cyclictest0-21swapper/323:57:453
68121299182,8cyclictest0-21swapper/320:00:263
68121299182,8cyclictest0-21swapper/300:20:263
68121299182,8cyclictest0-21swapper/300:20:263
68121299182,10cyclictest0-21swapper/322:10:243
68121299181,8cyclictest0-21swapper/320:05:263
68121299181,7cyclictest0-21swapper/320:35:253
68121299175,8cyclictest0-21swapper/319:25:253
68121299174,8cyclictest0-21swapper/321:35:283
68121299173,8cyclictest0-21swapper/320:45:263
68121299173,7cyclictest0-21swapper/300:15:273
68121299173,10cyclictest0-21swapper/322:20:263
68121299172,9cyclictest0-21swapper/323:15:253
68121299172,8cyclictest0-21swapper/322:40:233
68121299172,8cyclictest0-21swapper/320:20:263
68121299171,7cyclictest0-21swapper/320:15:233
68121299171,6cyclictest0-21swapper/319:30:213
68121299170,8cyclictest0-21swapper/323:45:263
68121299170,8cyclictest0-21swapper/323:45:263
68121299162,8cyclictest0-21swapper/321:30:273
68121299162,8cyclictest0-21swapper/300:30:243
68121299162,7cyclictest0-21swapper/323:10:243
68121299162,7cyclictest0-21swapper/319:40:293
68121299162,6cyclictest0-21swapper/320:50:273
68121299162,6cyclictest0-21swapper/320:50:273
68121299162,6cyclictest0-21swapper/319:15:223
68121299162,6cyclictest0-21swapper/319:15:223
68121299161,9cyclictest0-21swapper/322:25:263
68121299161,8cyclictest0-21swapper/300:05:253
681210991611,2cyclictest0-21swapper/119:10:011
681210991611,2cyclictest0-21swapper/119:10:011
68121299154,8cyclictest0-21swapper/321:20:253
68121299154,4cyclictest0-21swapper/320:30:243
68121299153,7cyclictest0-21swapper/322:55:223
68121299152,8cyclictest0-21swapper/300:10:213
68121299152,7cyclictest0-21swapper/323:40:223
68121299152,7cyclictest0-21swapper/323:40:223
68121299152,7cyclictest0-21swapper/323:05:233
68121299152,7cyclictest0-21swapper/322:35:203
68121299151,9cyclictest0-21swapper/323:50:263
68121299151,8cyclictest0-21swapper/323:35:273
68121299151,8cyclictest0-21swapper/319:50:253
68121299151,7cyclictest0-21swapper/323:30:193
68121299151,7cyclictest0-21swapper/323:30:193
68121299144,6cyclictest0-21swapper/321:45:273
68121299142,8cyclictest0-21swapper/322:15:203
68121299142,8cyclictest0-21swapper/321:50:253
68121299142,8cyclictest0-21swapper/321:25:223
68121299142,7cyclictest0-21swapper/321:40:233
68121299142,7cyclictest0-21swapper/321:10:203
68121299142,7cyclictest0-21swapper/321:10:203
68121299142,5cyclictest0-21swapper/321:00:143
68121299141,8cyclictest0-21swapper/322:45:253
68121299141,6cyclictest0-21swapper/320:10:223
68121299131,7cyclictest0-21swapper/323:25:163
68121299131,7cyclictest0-21swapper/319:55:273
68121299131,7cyclictest0-21swapper/319:45:263
68121299131,7cyclictest0-21swapper/319:20:253
68121299131,7cyclictest0-21swapper/319:10:273
68121299131,7cyclictest0-21swapper/319:10:273
68121299123,6cyclictest0-21swapper/321:05:223
68121299122,5cyclictest0-21swapper/319:35:233
68121299121,7cyclictest0-21swapper/322:05:103
68121299112,6cyclictest0-21swapper/320:25:173
68121299111,6cyclictest0-21swapper/320:55:153
6812129981,6cyclictest0-21swapper/319:10:013
6812129981,6cyclictest0-21swapper/319:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional