You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-04 - 05:23

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Fri Sep 04, 2026 00:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3937662995536,15cyclictest3945021-21ls19:30:011
3937662995434,17cyclictest4019439-21munin-plugin-st23:05:001
3937670995035,11cyclictest391ktimers/319:50:133
3937662995025,3cyclictest0-21swapper/122:20:011
3937662995017,6cyclictest0-21swapper/119:45:271
3937665994941,5cyclictest3972738-21munin-plugin-st20:50:002
3937662994923,4cyclictest0-21swapper/121:37:581
393765799491,6cyclictest3988376-21sshd21:33:290
3937665994537,4cyclictest0-21swapper/222:00:002
3937657994536,5cyclictest3988881-21fschecks_count21:35:150
3937662994416,6cyclictest0-21swapper/120:40:261
3937657994430,10cyclictest121ktimers/019:35:110
3937665994332,8cyclictest438-21cron00:10:002
393765799433,8cyclictest3951540-21sshd19:46:300
3937657994335,6cyclictest3941606-21munin-plugin-st19:20:000
393765799431,9cyclictest4033635-21/usr/sbin/munin23:45:140
3937657994318,20cyclictest0-21swapper/000:20:250
3937657994312,27cyclictest4045255-21basename00:20:000
3937665994225,13cyclictest311ktimers/220:15:132
393765799422,8cyclictest3994204-21/usr/sbin/munin21:50:210
393765799422,12cyclictest3981221-21tail21:10:270
3937657994210,28cyclictest0-21swapper/020:45:270
3937665994135,4cyclictest3977694-21kworker/u8:2+events_unbound21:02:472
3937665994130,7cyclictest3946269-21grep19:30:262
3937665994129,9cyclictest311ktimers/220:55:122
393765799412,9cyclictest4017715-21munin-plugin-st23:00:000
393765799411,9cyclictest3944459-21/usr/sbin/munin19:25:250
393765799411,8cyclictest3982497-21/usr/sbin/munin21:15:240
3937657994117,20cyclictest3959935-21grep20:10:250
3937657994114,24cyclictest4002673-21if_eth022:15:160
393765799411,11cyclictest3955236-21cron20:00:010
3937665994033,4cyclictest3979761-21cron21:10:002
393765799401,9cyclictest3938142-21/usr/sbin/munin19:10:170
393765799401,8cyclictest4012838-21/usr/sbin/munin22:45:100
393765799401,8cyclictest4012838-21/usr/sbin/munin22:45:100
393765799401,8cyclictest3964715-21/usr/sbin/munin20:25:250
393765799401,8cyclictest3964715-21/usr/sbin/munin20:25:240
3937657994016,21cyclictest121ktimers/020:50:050
3937657994013,23cyclictest13550irq/42-30be0000.ethernet21:10:000
3937665993929,7cyclictest3988099-21grep21:30:312
3937662993932,4cyclictest3983404-21sendmail21:20:001
393765799399,6cyclictest4028299-21df23:30:180
393765799398,7cyclictest4005059-21cat22:20:250
393765799392,8cyclictest3952158-21/usr/sbin/munin19:50:150
3937657993921,14cyclictest0-21swapper/023:05:220
393765799391,8cyclictest4001217-21/usr/sbin/munin22:10:230
393765799391,8cyclictest3966313-21/usr/sbin/munin20:30:220
393765799391,7cyclictest3969675-21/usr/sbin/munin20:40:160
393765799391,12cyclictest4039207-21ntp_states00:00:210
393765799391,11cyclictest3997727-21meminfo22:00:190
393765799391,11cyclictest3997727-21meminfo22:00:180
393765799391,11cyclictest3960706-21df20:15:140
393765799391,10cyclictest3996287-21mailstats21:55:240
393765799391,10cyclictest3985343-21apt-get21:25:130
3937665993827,7cyclictest0-21swapper/222:30:012
3937662993829,6cyclictest3946242-21grep19:30:261
3937662993827,8cyclictest231ktimers/119:55:141
393765799389,3cyclictest13850irq/36-mmc123:40:010
393765799389,3cyclictest13850irq/36-mmc123:40:010
393765799389,26cyclictest0-21swapper/020:05:260
393765799383,11cyclictest4010915-21awk22:40:000
393765799381,8cyclictest4023184-21taskset23:15:150
393765799381,6cyclictest3976340-21cron21:00:000
393765799381,34cyclictest3992160-21apt-get21:45:110
393765799381,10cyclictest4027051-21ntp_states23:25:210
393765799381,10cyclictest4021813-21memory23:10:220
393765799381,10cyclictest4000229-21sshd22:07:290
3937670993728,5cyclictest0-21swapper/322:40:003
3937665993727,7cyclictest4052094-21sendmail00:40:002
393765799373,6cyclictest3977674-21users21:00:270
3937657993728,6cyclictest0-21swapper/022:50:310
393765799371,9cyclictest4047447-21if_err_eth100:25:170
393765799371,9cyclictest4025349-21ntp_states23:20:230
393765799371,9cyclictest4008283-21ntp_states22:30:240
393765799371,9cyclictest3983748-21df21:20:150
393765799371,9cyclictest3967737-21df20:35:150
393765799371,9cyclictest3941850-21apt-get19:20:120
393765799371,8cyclictest3946159-21timerwakeupswit19:30:270
393765799371,7cyclictest4037981-21sed23:55:260
393765799371,6cyclictest4040481-21fschecks_count00:05:160
393765799371,3cyclictest0-21swapper/023:00:200
3937657993713,21cyclictest645-21runrttasks00:10:170
393765799371,12cyclictest0-21swapper/000:35:160
393765799371,10cyclictest4007349-21cat22:30:020
393765799371,10cyclictest3956620-21cron20:01:000
3937670993628,4cyclictest0-21swapper/319:20:173
3937665993627,6cyclictest3989736-21unixbench_multi21:35:252
3937665993627,5cyclictest4029686-21latency_hist23:35:012
393765799361,9cyclictest4011411-21cat22:40:180
393765799361,8cyclictest3949246-21ntp_states19:40:230
393765799361,7cyclictest4030788-21wc23:35:250
393765799361,7cyclictest4030788-21wc23:35:250
3937665993525,7cyclictest311ktimers/221:20:012
393765799352,4cyclictest3991477-21unixbench_multi21:40:280
393765799351,9cyclictest3962501-21fschecks_time20:20:180
3937670993426,5cyclictest0-21swapper/320:15:003
3937670993424,6cyclictest0-21swapper/319:45:273
3937665993427,4cyclictest0-21swapper/219:45:172
3937665993421,5cyclictest131rcu_preempt20:05:232
3937665993418,13cyclictest311ktimers/221:10:062
3937665993417,5cyclictest0-21swapper/223:04:312
3937662993427,5cyclictest4022669-21kworker/u8:1+events_unbound23:48:171
3937662993425,6cyclictest3964184-21fschecks_count20:25:161
3937662993425,6cyclictest3964184-21fschecks_count20:25:161
393765799341,9cyclictest4050289-21taskset00:34:310
3937670993325,4cyclictest0-21swapper/300:25:253
3937670993324,6cyclictest4037084-21fschecks_count23:55:163
3937670993324,5cyclictest0-21swapper/321:10:273
3937665993326,4cyclictest0-21swapper/220:00:152
3937665993326,3cyclictest0-21swapper/222:55:152
3937665993323,6cyclictest0-21swapper/223:45:262
3937665993322,7cyclictest3963315-21grep20:20:262
3937665993312,18cyclictest311ktimers/221:25:042
393765799332,5cyclictest4035384-21fschecks_count23:50:180
3937670993223,6cyclictest3998283-21grep22:00:253
3937670993223,6cyclictest3998283-21grep22:00:253
3937670993222,6cyclictest0-21swapper/322:20:013
393766599327,14cyclictest32-21ksoftirqd/200:10:182
393766599325,6cyclictest32-21ksoftirqd/200:15:172
3937665993227,3cyclictest3954905-21kworker/u8:0-events_power_efficient19:59:312
3937665993226,4cyclictest301rcuc/222:43:272
3937665993219,4cyclictest131rcu_preempt23:22:052
3937665993213,3cyclictest131rcu_preempt19:41:492
3937665993212,11cyclictest3937648-21cyclictest19:35:192
3937662993225,4cyclictest4041290-21timerwakeupswit00:05:251
3937662993224,4cyclictest0-21swapper/100:33:201
3937662993223,5cyclictest0-21swapper/122:00:161
3937662993223,5cyclictest0-21swapper/122:00:151
3937662993223,4cyclictest0-21swapper/122:00:001
3937670993124,3cyclictest0-21swapper/321:55:163
393766599319,7cyclictest32-21ksoftirqd/219:55:002
393766599319,13cyclictest32-21ksoftirqd/222:30:162
3937665993121,7cyclictest311ktimers/223:25:162
3937665993120,6cyclictest131rcu_preempt21:20:272
3937665993120,5cyclictest131rcu_preempt00:30:252
3937665993115,4cyclictest131rcu_preempt23:09:422
3937665993112,11cyclictest131rcu_preempt21:50:272
3937665993111,12cyclictest131rcu_preempt20:35:212
3937665993110,11cyclictest131rcu_preempt22:00:182
3937665993110,11cyclictest131rcu_preempt22:00:182
3937662993123,4cyclictest0-21swapper/122:45:271
3937662993123,4cyclictest0-21swapper/122:45:261
3937670993024,4cyclictest4031417-21kworker/u8:0+events_unbound23:45:323
3937670993022,4cyclictest0-21swapper/323:00:013
3937670993021,6cyclictest3979984-21grep21:10:013
393766599308,11cyclictest32-21ksoftirqd/222:36:472
393766599305,14cyclictest32-21ksoftirqd/219:20:202
3937665993025,3cyclictest3937648-21cyclictest20:32:342
3937665993021,6cyclictest311ktimers/200:00:152
3937665993020,7cyclictest301rcuc/222:09:212
3937665993020,7cyclictest301rcuc/219:16:192
3937665993019,3cyclictest131rcu_preempt22:20:012
3937665993017,4cyclictest131rcu_preempt21:45:162
3937665993016,3cyclictest131rcu_preempt23:15:142
3937665993015,3cyclictest131rcu_preempt22:20:142
3937665993012,4cyclictest301rcuc/220:12:332
3937665993010,13cyclictest32-21ksoftirqd/222:10:282
3937662993023,4cyclictest0-21swapper/123:50:191
3937662993023,4cyclictest0-21swapper/120:00:251
3937662993022,4cyclictest0-21swapper/123:25:251
3937670992922,3cyclictest0-21swapper/323:15:263
3937670992921,4cyclictest0-21swapper/300:40:013
3937670992919,7cyclictest0-21swapper/300:15:263
3937670992919,6cyclictest0-21swapper/323:25:173
393766599297,11cyclictest32-21ksoftirqd/223:10:232
3937665992919,7cyclictest311ktimers/223:55:012
3937665992919,7cyclictest311ktimers/223:40:002
3937665992919,7cyclictest311ktimers/223:40:002
3937665992919,7cyclictest311ktimers/200:00:012
3937665992916,4cyclictest131rcu_preempt22:48:032
3937665992916,4cyclictest131rcu_preempt22:48:032
3937665992915,9cyclictest131rcu_preempt20:52:512
3937662992923,3cyclictest0-21swapper/100:15:161
3937662992918,8cyclictest4032021-21tune2fs23:40:171
3937662992918,8cyclictest4032021-21tune2fs23:40:171
393767099288,3cyclictest39896212ls21:35:243
3937670992822,3cyclictest0-21swapper/320:20:003
3937670992822,3cyclictest0-21swapper/300:05:263
3937670992820,4cyclictest0-21swapper/320:50:003
3937670992818,7cyclictest4029816-21latency_hist23:35:013
3937670992814,6cyclictest3965281-21kworker/u8:1+events_unbound20:39:003
393766599289,11cyclictest32-21ksoftirqd/220:27:062
393766599289,11cyclictest32-21ksoftirqd/220:27:062
393766599288,12cyclictest32-21ksoftirqd/219:25:262
393766599286,6cyclictest32-21ksoftirqd/222:50:242
393766599284,8cyclictest32-21ksoftirqd/220:40:252
3937665992816,4cyclictest131rcu_preempt23:35:132
3937665992816,4cyclictest131rcu_preempt23:35:132
3937665992812,9cyclictest131rcu_preempt19:10:112
3937662992820,4cyclictest39392792sleep119:15:001
3937670992720,4cyclictest3956956-21cron20:05:013
3937670992720,3cyclictest0-21swapper/322:45:003
3937670992719,4cyclictest0-21swapper/319:25:263
393766599279,10cyclictest32-21ksoftirqd/221:40:242
3937665992714,4cyclictest131rcu_preempt00:25:112
3937662992720,3cyclictest0-21swapper/122:50:271
3937662992718,6cyclictest3981072-21sort21:10:271
3937662992715,8cyclictest4051628-21grep00:35:261
393767099267,5cyclictest131rcu_preempt23:10:283
393767099262,6cyclictest131rcu_preempt00:00:133
3937670992620,3cyclictest0-21swapper/323:40:173
3937670992620,3cyclictest0-21swapper/323:40:163
3937670992618,4cyclictest0-21swapper/321:20:283
3937670992618,4cyclictest0-21swapper/320:35:003
3937665992613,5cyclictest131rcu_preempt00:20:122
3937662992620,4cyclictest0-21swapper/122:20:271
3937662992620,3cyclictest0-21swapper/123:35:211
3937662992620,3cyclictest0-21swapper/123:35:211
3937662992619,4cyclictest0-21swapper/100:10:241
3937662992618,5cyclictest0-21swapper/121:45:251
3937662992617,5cyclictest0-21swapper/123:10:001
3937662992616,6cyclictest0-21swapper/122:35:261
3937670992518,4cyclictest0-21swapper/322:10:283
3937670992518,3cyclictest0-21swapper/321:30:313
3937670992517,5cyclictest3970833-21idleruntime-cro20:45:003
3937670992517,4cyclictest0-21swapper/321:15:273
3937670992516,6cyclictest391ktimers/319:40:023
3937670992515,7cyclictest0-21swapper/323:00:243
3937662992519,3cyclictest0-21swapper/122:10:191
3937662992519,3cyclictest0-21swapper/120:45:171
3937662992518,4cyclictest0-21swapper/121:30:001
3937662992517,5cyclictest0-21swapper/122:30:001
3937662992516,5cyclictest3991922-21cron21:45:001
3937662992515,6cyclictest0-21swapper/120:05:221
3937662992514,8cyclictest4000459-21munin-plugin-st22:10:001
3937662992514,8cyclictest3940281-21grep19:15:151
3937662992514,7cyclictest204-21dbus-daemon23:18:141
3937662992512,9cyclictest204-21dbus-daemon21:02:451
393767099244,5cyclictest4019202-21kworker/u8:1+events_unbound23:05:233
3937670992418,3cyclictest0-21swapper/322:05:243
3937670992418,3cyclictest0-21swapper/320:00:013
3937670992417,5cyclictest4007323-21apt-key22:30:013
3937670992417,5cyclictest3955039-21kworker/u8:2+events_unbound20:22:133
3937670992417,4cyclictest0-21swapper/319:30:183
3937670992416,4cyclictest0-21swapper/300:10:243
3937670992415,6cyclictest0-21swapper/320:55:173
3937662992418,3cyclictest0-21swapper/123:35:001
3937662992416,6cyclictest3942797-21sort19:20:271
3937662992415,6cyclictest4012105-21sed22:40:261
3937662992415,6cyclictest3979781-21dpkg21:10:011
3937670992318,2cyclictest0-21swapper/321:45:263
3937670992317,4cyclictest4012400-21kworker/u8:1+events_unbound22:48:113
3937670992317,4cyclictest4012400-21kworker/u8:1+events_unbound22:48:113
3937670992317,4cyclictest3986557-21kworker/u8:1+events_unbound21:42:173
3937670992317,4cyclictest3970674-21kworker/u8:2+events_unbound20:52:453
3937670992317,3cyclictest3949706-21grep19:40:273
3937670992316,4cyclictest0-21swapper/322:25:013
3937670992316,4cyclictest0-21swapper/321:50:183
3937670992315,5cyclictest3978077-21munin-plugin-st21:05:003
3937670992315,5cyclictest391ktimers/322:30:043
393767099231,4cyclictest3964319-21if_eth020:25:183
393767099231,4cyclictest3964319-21if_eth020:25:183
3937662992317,3cyclictest0-21swapper/121:20:211
3937662992316,3cyclictest0-21swapper/119:35:221
3937662992315,5cyclictest438-21cron20:40:011
3937670992216,3cyclictest0-21swapper/319:15:013
3937670992216,3cyclictest0-21swapper/300:30:293
3937670992215,4cyclictest3958192-21grep20:05:263
3937670992214,5cyclictest0-21swapper/323:55:003
3937662992216,4cyclictest231ktimers/121:33:321
3937662992215,3cyclictest0-21swapper/100:20:231
3937662992214,5cyclictest3918161-21kworker/u8:3+events_unbound20:30:111
3937662992214,4cyclictest0-21swapper/123:10:291
3937662992212,6cyclictest204-21dbus-daemon20:57:441
393767099212,3cyclictest131rcu_preempt23:40:003
393767099212,3cyclictest131rcu_preempt23:40:003
3937670992115,3cyclictest4014543-21/usr/sbin/munin22:50:233
3937670992115,3cyclictest0-21swapper/319:10:203
3937670992115,3cyclictest0-21swapper/300:20:233
393766299216,3cyclictest0-21swapper/120:24:451
3937662992116,3cyclictest0-21swapper/119:55:021
3937662992112,6cyclictest3937648-21cyclictest20:50:051
3937662992112,5cyclictest0-21swapper/123:20:161
393766299211,12cyclictest0-21swapper/123:57:421
3937662992013,4cyclictest0-21swapper/120:15:211
3937662992011,6cyclictest4039218-21ntpq00:00:221
3937670991912,5cyclictest391ktimers/323:20:143
3937662991913,3cyclictest0-21swapper/119:40:141
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional