You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-05 - 14:32

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Fri Jun 05, 2026 00:44:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
626951995327,22cyclictest0-21swapper/300:00:273
626942995342,7cyclictest679027-21chrt21:35:261
626942995140,7cyclictest722145-21grep23:40:251
626951995042,5cyclictest741550-21munin-plugin-st00:40:003
626951994618,25cyclictest714040-21sendmail23:20:003
626946994636,6cyclictest665203-21grep20:55:232
626946994636,6cyclictest665203-21grep20:55:232
626942994536,5cyclictest672680-21cut21:20:001
626942994535,7cyclictest686334-21sendmail22:00:001
626942994535,7cyclictest653729-21fschecks_time20:25:161
626942994535,7cyclictest653729-21fschecks_time20:25:151
62695199449,32cyclictest677182-21sed21:30:263
626951994333,6cyclictest734530-21sendmail00:20:003
62695199421,4cyclictest0-21swapper/321:35:123
626937994229,9cyclictest121ktimers/019:55:120
62695199412,35cyclictest689019-21/usr/sbin/munin22:05:233
62695199411,8cyclictest723405-21/usr/sbin/munin23:45:223
62695199411,4cyclictest0-21swapper/321:40:123
62695199411,4cyclictest0-21swapper/319:40:113
62695199411,37cyclictest627790-21/usr/sbin/munin19:10:223
62695199403,32cyclictest662563-21df20:50:133
62695199403,32cyclictest639996-21/usr/sbin/munin19:45:173
62695199402,35cyclictest635373-21/usr/sbin/munin19:30:253
62695199402,35cyclictest635373-21/usr/sbin/munin19:30:243
62695199401,9cyclictest717737-21grep23:30:133
626951994019,17cyclictest0-21swapper/320:05:253
62695199401,5cyclictest0-21swapper/321:55:133
62695199401,36cyclictest673724-21/usr/sbin/munin21:20:253
62695199401,36cyclictest644113-21/usr/sbin/munin19:55:253
62695199401,32cyclictest698263-21apt-get22:35:063
62695199401,32cyclictest698263-21apt-get22:35:053
62695199401,11cyclictest696914-21/usr/sbin/munin22:30:143
62695199401,10cyclictest631976-21threads19:20:273
62695199400,5cyclictest0-21swapper/320:30:123
62695199400,4cyclictest0-21swapper/300:05:143
62695199400,3cyclictest0-21swapper/319:25:123
626951993917,19cyclictest0-21swapper/321:25:263
62695199391,6cyclictest711213-21ntp_states23:10:223
62695199391,4cyclictest0-21swapper/323:05:133
62695199391,4cyclictest0-21swapper/323:00:133
62695199391,4cyclictest0-21swapper/321:50:133
62695199391,33cyclictest716550-21/usr/sbin/munin23:25:213
62695199391,33cyclictest716550-21/usr/sbin/munin23:25:203
62695199391,33cyclictest693736-21/usr/sbin/munin22:20:183
62695199390,5cyclictest0-21swapper/322:10:123
62695199390,4cyclictest0-21swapper/300:20:113
626946993929,6cyclictest690962-21grep22:10:252
626942993931,4cyclictest0-21swapper/100:20:011
626942993929,6cyclictest0-21swapper/120:40:001
626937993927,8cyclictest653726-21grep20:25:150
626937993927,8cyclictest653726-21grep20:25:150
626951993824,11cyclictest391ktimers/322:50:133
62695199381,6cyclictest669822-21/usr/sbin/munin21:10:173
62695199381,4cyclictest681724-21/usr/sbin/munin21:45:173
62695199381,4cyclictest681724-21/usr/sbin/munin21:45:173
62695199381,4cyclictest0-21swapper/323:55:133
62695199381,4cyclictest0-21swapper/323:40:103
62695199381,4cyclictest0-21swapper/322:45:133
62695199381,4cyclictest0-21swapper/321:00:113
62695199381,4cyclictest0-21swapper/320:40:133
62695199381,4cyclictest0-21swapper/300:25:143
62695199381,34cyclictest725192-21/usr/sbin/munin23:50:233
62695199381,34cyclictest692192-21/usr/sbin/munin22:15:203
62695199381,33cyclictest696372-21sshd22:27:463
62695199381,30cyclictest653672-21cut20:25:153
62695199381,30cyclictest653672-21cut20:25:153
62695199380,4cyclictest0-21swapper/321:15:133
62695199380,4cyclictest0-21swapper/320:45:113
62695199380,4cyclictest0-21swapper/320:00:113
62695199380,4cyclictest0-21swapper/300:10:103
626946993830,5cyclictest644758-21sendmail20:00:002
62694299385,6cyclictest131rcu_preempt19:50:121
626937993830,4cyclictest0-21swapper/023:44:590
62695199371,4cyclictest714285-21apt-get23:20:123
62695199371,4cyclictest0-21swapper/319:50:133
62695199371,4cyclictest0-21swapper/319:35:113
62695199371,4cyclictest0-21swapper/300:30:103
62695199371,33cyclictest668314-21/usr/sbin/munin21:05:213
62695199371,32cyclictest686675-21df22:00:153
62695199371,31cyclictest657100-21/usr/sbin/munin20:35:163
62695199371,31cyclictest652155-21/usr/sbin/munin20:20:193
62695199370,4cyclictest0-21swapper/320:15:103
62695199370,3cyclictest0-21swapper/322:40:123
626946993727,7cyclictest693164-21sendmail22:20:002
62695199362,31cyclictest649467-21users20:10:243
62695199361,8cyclictest629981-21ntp_states19:15:213
62695199361,32cyclictest720073-21/usr/sbin/munin23:35:233
62695199360,4cyclictest0-21swapper/320:55:103
62695199360,4cyclictest0-21swapper/320:55:103
62695199360,2cyclictest0-21swapper/322:55:123
626946993629,4cyclictest705292-21cron22:55:002
62694299366,6cyclictest131rcu_preempt23:10:111
626937993525,7cyclictest0-21swapper/022:25:000
626946993427,4cyclictest707002-21kthreadd23:00:002
626946993424,6cyclictest0-21swapper/219:25:002
626942993425,6cyclictest231ktimers/120:15:111
626937993424,6cyclictest0-21swapper/023:55:010
626937993424,4cyclictest0-21swapper/021:30:170
626937993423,6cyclictest0-21swapper/023:55:280
62693799341,31cyclictest0-21swapper/019:30:120
62693799341,31cyclictest0-21swapper/019:30:120
626946993324,6cyclictest653294-21grep20:25:002
626942993326,4cyclictest731110-21latency_hist00:10:001
626942993324,5cyclictest677374-21grep21:30:261
626942993321,8cyclictest681203-21cron21:45:001
626942993321,7cyclictest0-21swapper/121:10:251
62693799337,6cyclictest131rcu_preempt23:00:130
626937993326,3cyclictest0-21swapper/022:40:010
626937993326,3cyclictest0-21swapper/022:40:000
626937993323,6cyclictest688034-21sh22:04:590
626946993224,4cyclictest0-21swapper/223:40:262
626946993224,4cyclictest0-21swapper/220:50:262
626946993224,4cyclictest0-21swapper/219:50:002
626942993225,5cyclictest675848-21kworker/u8:3+events_unbound21:27:401
626942993224,4cyclictest0-21swapper/120:55:241
626942993224,4cyclictest0-21swapper/120:55:241
626942993221,7cyclictest728921-21grep00:00:261
626937993222,6cyclictest0-21swapper/022:45:250
626946993123,4cyclictest0-21swapper/200:15:012
626946993121,7cyclictest0-21swapper/200:35:172
626946993121,6cyclictest670483-21grep21:10:262
626942993123,4cyclictest0-21swapper/119:35:161
626942993122,5cyclictest0-21swapper/123:35:151
62693799313,6cyclictest131rcu_preempt00:30:100
626937993125,3cyclictest0-21swapper/022:25:250
626937993123,3cyclictest0-21swapper/019:50:250
626937993122,6cyclictest680279-21ntpq21:40:210
626937993122,5cyclictest0-21swapper/023:34:590
626937993122,5cyclictest0-21swapper/000:30:010
626937993121,6cyclictest0-21swapper/021:10:250
626946993024,3cyclictest696568-21kthreadd22:30:012
626946993023,4cyclictest0-21swapper/223:25:252
626946993023,4cyclictest0-21swapper/223:25:252
626946993023,4cyclictest0-21swapper/222:35:252
626946993023,4cyclictest0-21swapper/222:35:252
626946993023,4cyclictest0-21swapper/200:34:592
626946993020,6cyclictest0-21swapper/221:05:202
626942993023,5cyclictest634063-21kworker/u8:1+events_unbound19:30:431
626942993023,5cyclictest634063-21kworker/u8:1+events_unbound19:30:431
626942993022,4cyclictest0-21swapper/122:30:171
626942993022,4cyclictest0-21swapper/120:05:171
626942993020,6cyclictest689319-21grep22:05:261
626937993023,3cyclictest0-21swapper/021:50:260
626937993021,5cyclictest0-21swapper/020:00:280
626937993021,4cyclictest0-21swapper/019:25:260
62693799301,6cyclictest131rcu_preempt22:15:120
626946992921,4cyclictest0-21swapper/222:30:262
626946992920,6cyclictest0-21swapper/222:45:172
626946992918,7cyclictest0-21swapper/200:00:262
626942992921,4cyclictest0-21swapper/123:30:251
626942992921,4cyclictest0-21swapper/119:20:161
626942992920,6cyclictest734971-21fschecks_time00:20:171
626942992920,6cyclictest0-21swapper/120:00:001
626937992920,6cyclictest628102-21grep19:10:240
626937992920,5cyclictest0-21swapper/022:10:250
626937992919,5cyclictest706540-21unixbench_multi22:55:270
626937992915,12cyclictest11-21ksoftirqd/023:20:110
626946992822,3cyclictest0-21swapper/221:35:272
626946992821,3cyclictest0-21swapper/200:05:252
626946992820,5cyclictest0-21swapper/221:50:252
626946992820,4cyclictest0-21swapper/220:05:252
626946992818,7cyclictest1-21systemd20:17:322
626946992818,6cyclictest636012-21basename19:35:012
626946992818,6cyclictest636012-21basename19:35:002
626942992822,4cyclictest646101-21kworker/u8:0+events_unbound20:22:331
626942992819,6cyclictest654691-21kworker/u8:2+events_unbound20:30:211
626942992819,4cyclictest0-21swapper/122:20:001
626942992818,6cyclictest0-21swapper/121:20:181
626942992817,8cyclictest204-21dbus-daemon21:07:371
626937992822,3cyclictest0-21swapper/021:20:000
626937992820,4cyclictest13850irq/36-mmc120:40:010
626937992817,6cyclictest0-21swapper/023:05:260
626946992721,4cyclictest641107-21kworker/u8:2+events_unbound19:52:302
626946992720,3cyclictest0-21swapper/222:00:182
626946992717,7cyclictest311ktimers/221:25:132
626946992717,6cyclictest718680-21grep23:30:252
62694299279,11cyclictest0-21swapper/123:56:221
626942992722,3cyclictest643403-21kworker/u8:1+events_unbound20:12:321
626942992718,5cyclictest0-21swapper/122:25:161
626942992716,7cyclictest630441-21grep19:15:261
626942992715,8cyclictest690108-21uniq22:10:161
62693799279,15cyclictest658700-21date20:40:020
626937992723,2cyclictest13550irq/42-30be0000.ethernet00:20:130
626937992719,4cyclictest13550irq/42-30be0000.ethernet19:20:000
626937992719,4cyclictest0-21swapper/022:50:210
626937992715,8cyclictest698263-21apt-get22:35:010
626946992619,3cyclictest0-21swapper/220:15:002
626946992615,8cyclictest727694-21cut00:00:002
62694299264,3cyclictest7321522cat00:10:231
62694299263,19cyclictest715990-21taskset23:25:111
62694299263,19cyclictest715990-21taskset23:25:101
626942992618,5cyclictest687845-21kworker/u8:1+events_unbound22:20:141
626942992613,9cyclictest660331-21basename20:45:001
626937992620,4cyclictest652934-21kworker/u8:1+events_unbound20:32:330
626937992618,4cyclictest0-21swapper/000:00:140
626937992617,6cyclictest710827-21tune2fs23:10:140
626937992617,6cyclictest0-21swapper/021:00:160
626946992518,3cyclictest0-21swapper/221:00:262
626942992518,5cyclictest0-21swapper/120:50:251
626942992518,4cyclictest0-21swapper/119:50:001
626942992518,3cyclictest629-21snmpd22:35:191
626942992518,3cyclictest629-21snmpd22:35:181
626942992517,4cyclictest0-21swapper/100:30:001
626942992515,7cyclictest683303-21fschecks_count21:50:151
626937992518,5cyclictest689113-21timerandwakeup22:05:240
626937992518,4cyclictest717393-21kworker/u8:0-ext4-rsv-conversion23:40:000
626937992518,3cyclictest0-21swapper/020:55:130
626937992518,3cyclictest0-21swapper/020:55:130
62693799251,7cyclictest651128-21grep20:15:250
626937992517,5cyclictest0-21swapper/019:35:240
626937992517,4cyclictest0-21swapper/022:45:000
626937992516,6cyclictest668171-21grep21:05:190
626937992516,6cyclictest121ktimers/020:10:190
62693799251,2cyclictest631135-21apt-get19:20:150
626946992418,4cyclictest659901-21grep20:40:242
626946992416,5cyclictest311ktimers/223:00:132
626946992416,4cyclictest0-21swapper/223:05:252
626942992418,4cyclictest637541-21kworker/u8:2+events_unbound19:42:301
626942992416,5cyclictest605217-21kworker/u8:2+events_unbound19:10:031
626942992414,6cyclictest0-21swapper/120:00:201
626942992412,8cyclictest204-21dbus-daemon23:07:511
626937992418,3cyclictest0-21swapper/019:40:220
626937992417,3cyclictest0-21swapper/023:50:010
626937992416,5cyclictest0-21swapper/021:35:260
626937992416,4cyclictest13550irq/42-30be0000.ethernet20:05:250
626937992415,6cyclictest0-21swapper/020:50:150
626937992415,6cyclictest0-21swapper/020:45:150
62693799241,4cyclictest131rcu_preempt00:35:280
626937992414,7cyclictest686307-21cron22:00:010
626946992317,3cyclictest0-21swapper/223:40:002
626946992316,3cyclictest0-21swapper/222:10:012
626946992315,6cyclictest311ktimers/223:50:242
626942992317,3cyclictest0-21swapper/123:20:261
626942992316,4cyclictest705688-21grep22:55:171
626942992316,4cyclictest0-21swapper/121:00:261
62694299231,5cyclictest131rcu_preempt22:50:131
626942992315,4cyclictest740284-21fschecks_time00:35:161
626942992315,4cyclictest633018-21fschecks_time19:25:151
626942992313,3cyclictest0-21swapper/123:19:541
626937992318,3cyclictest626928-21cyclictest23:15:220
626937992318,3cyclictest13550irq/42-30be0000.ethernet23:25:140
626937992318,3cyclictest13550irq/42-30be0000.ethernet23:25:130
626937992317,2cyclictest0-21swapper/000:10:210
626937992316,4cyclictest0-21swapper/020:20:260
626937992315,4cyclictest0-21swapper/021:25:280
62693799231,18cyclictest0-21swapper/000:06:300
62693799230,21cyclictest0-21swapper/021:49:140
62693799230,21cyclictest0-21swapper/021:49:140
626946992217,3cyclictest738167-21latency_hist00:30:002
626946992216,3cyclictest0-21swapper/221:40:202
626946992216,3cyclictest0-21swapper/220:00:162
626946992216,3cyclictest0-21swapper/219:25:222
626946992216,3cyclictest0-21swapper/219:15:142
626946992215,5cyclictest656412-21kworker/u8:0+events_unbound20:47:362
626946992215,3cyclictest0-21swapper/222:40:262
626946992214,4cyclictest0-21swapper/219:10:162
626946992212,7cyclictest0-21swapper/221:30:212
626946992211,8cyclictest654552-21grep20:25:262
626946992211,8cyclictest654552-21grep20:25:262
626942992216,4cyclictest723965-21kworker/u8:0+events_unbound23:50:271
626942992215,5cyclictest696485-21kworker/u8:1+events_unbound22:44:421
626942992215,4cyclictest0-21swapper/123:45:271
626942992214,5cyclictest231ktimers/120:45:241
626937992216,3cyclictest0-21swapper/019:45:240
62693799220,18cyclictest0-21swapper/000:16:000
626946992115,3cyclictest734500-21cron00:20:002
626946992115,3cyclictest672681-21idleruntime-cro21:20:012
626946992115,3cyclictest0-21swapper/219:40:152
626946992114,4cyclictest7129022sleep223:15:202
626946992114,4cyclictest637469-21sshd19:37:172
626946992113,5cyclictest0-21swapper/220:35:012
626946992111,7cyclictest712180-21date23:15:012
626942992115,3cyclictest681610-21fschecks_count21:45:171
626942992115,3cyclictest681610-21fschecks_count21:45:171
626942992115,3cyclictest0-21swapper/122:45:201
626942992113,4cyclictest0-21swapper/123:05:001
626937992114,3cyclictest0-21swapper/021:23:210
626946992014,3cyclictest0-21swapper/222:20:242
626946992014,3cyclictest0-21swapper/221:45:262
626946992014,3cyclictest0-21swapper/221:45:262
626946992014,3cyclictest0-21swapper/221:20:242
626946992013,5cyclictest311ktimers/200:20:222
62694699201,16cyclictest53-21kcompactd020:40:002
62694699199,8cyclictest724270-21cron23:50:002
62694699199,7cyclictest684936-21awk21:55:142
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional