You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-23 - 08:31

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Mon Mar 23, 2026 00:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
782996997263,5cyclictest891946-21unixbench_multi00:20:252
782996995043,5cyclictest843308-21kworker/u8:2+events_unbound22:21:262
783000994842,4cyclictest479220-21kworker/u8:1+events_unbound20:41:113
782996994737,7cyclictest860197-21grep22:50:252
782996994737,7cyclictest860197-21grep22:50:242
782994994737,6cyclictest825269-21fschecks_count21:10:151
783000994336,5cyclictest822984-21kworker/u8:2+events_unbound21:21:163
783000994336,5cyclictest822984-21kworker/u8:2+events_unbound21:21:163
783000994235,4cyclictest765969-21kworker/u8:2+events_unbound19:36:083
782989994231,7cyclictest0-21swapper/022:55:000
782989994231,7cyclictest0-21swapper/022:55:000
783000994125,13cyclictest391ktimers/321:15:113
783000994125,13cyclictest391ktimers/321:15:113
783000994031,4cyclictest0-21swapper/321:45:013
782996994033,5cyclictest479220-21kworker/u8:1+events_unbound21:01:122
782989994034,4cyclictest840205-21cron21:55:000
782989994032,5cyclictest0-21swapper/019:25:010
782996993934,3cyclictest807398-21cron20:20:012
782996993929,6cyclictest0-21swapper/219:25:252
782996993928,7cyclictest0-21swapper/223:30:262
782989993933,4cyclictest151rcuc/000:00:120
782989993925,11cyclictest121ktimers/000:25:150
783000993830,4cyclictest0-21swapper/322:35:003
782996993832,4cyclictest862590-21cron23:00:012
78298999389,5cyclictest131rcu_preempt21:15:120
78298999389,5cyclictest131rcu_preempt21:15:110
783000993729,4cyclictest0-21swapper/321:35:143
783000993728,6cyclictest860199-21unixbench_multi22:50:253
783000993728,6cyclictest860199-21unixbench_multi22:50:253
783000993726,8cyclictest813994-21grep20:35:253
782994993729,4cyclictest0-21swapper/120:00:001
78298999379,5cyclictest131rcu_preempt22:15:110
78298999378,5cyclictest131rcu_preempt21:40:130
782989993727,6cyclictest0-21swapper/021:40:010
783000993630,4cyclictest892277-21kworker/u8:1+events_unbound00:33:593
783000993629,4cyclictest810808-21apt-get20:30:013
783000993628,6cyclictest855802-21kworker/u8:1+events_unbound23:00:403
783000993625,8cyclictest845326-21cron22:10:013
782996993629,4cyclictest836825-21munin-plugin-st21:45:002
782996993624,9cyclictest311ktimers/223:35:112
782994993628,4cyclictest0-21swapper/122:39:591
783000993522,10cyclictest391ktimers/322:55:103
782996993528,4cyclictest0-21swapper/223:20:012
782996993528,3cyclictest0-21swapper/200:00:002
782996993525,6cyclictest0-21swapper/222:00:252
782994993528,4cyclictest821454-21kthreadd21:00:011
78298999359,4cyclictest131rcu_preempt20:10:120
782989993523,8cyclictest838103-21grep21:45:260
782989993523,7cyclictest824442-21grep21:05:270
783000993417,11cyclictest479220-21kworker/u8:1+events_unbound20:09:273
782996993427,3cyclictest0-21swapper/221:50:022
782996993420,11cyclictest311ktimers/220:45:132
782994993423,8cyclictest817893-21apt-key20:50:011
782994993423,7cyclictest0-21swapper/100:25:271
782989993427,3cyclictest0-21swapper/000:00:000
782989993426,4cyclictest0-21swapper/020:40:010
782989993426,4cyclictest0-21swapper/019:20:000
783000993327,3cyclictest0-21swapper/319:15:023
783000993325,5cyclictest0-21swapper/322:45:003
783000993322,7cyclictest0-21swapper/321:05:273
782996993324,6cyclictest895819-21sh00:35:002
782996993324,5cyclictest0-21swapper/221:40:002
782996993322,7cyclictest808643-21grep20:20:252
782996993316,6cyclictest765969-21kworker/u8:2+events_unbound19:22:252
782989993321,7cyclictest789885-21grep19:25:260
782989993321,10cyclictest121ktimers/023:35:120
783000993225,5cyclictest479220-21kworker/u8:1+events_unbound19:16:043
783000993222,7cyclictest884737-21grep00:00:263
783000993222,6cyclictest0-21swapper/322:15:263
783000993220,8cyclictest0-21swapper/321:00:273
78300099321,8cyclictest0-21swapper/320:00:133
783000993216,5cyclictest846869-21kworker/u8:1+events_unbound22:24:253
782996993226,3cyclictest0-21swapper/223:25:272
782996993225,5cyclictest812341-21kworker/u8:3+events_unbound20:50:402
782996993225,4cyclictest0-21swapper/219:30:252
782996993214,6cyclictest822984-21kworker/u8:2+events_unbound21:19:182
782996993214,6cyclictest822984-21kworker/u8:2+events_unbound21:19:182
782996993211,11cyclictest884999-21kworker/u8:0+events_unbound00:15:022
782994993225,4cyclictest876447-21idleruntime-cro23:40:001
782994993224,4cyclictest0-21swapper/122:20:251
782989993226,3cyclictest873036-21sh23:30:000
782989993226,3cyclictest0-21swapper/020:30:010
782989993224,4cyclictest0-21swapper/022:35:240
782989993224,4cyclictest0-21swapper/019:31:060
782989993214,12cyclictest131rcu_preempt23:45:260
783000993125,3cyclictest0-21swapper/300:25:013
783000993124,3cyclictest0-21swapper/320:20:153
783000993123,4cyclictest0-21swapper/323:40:253
783000993121,6cyclictest0-21swapper/319:25:263
78300099310,6cyclictest831930-21apt-get21:30:123
782996993125,4cyclictest853481-21kworker/u8:3+events_unbound23:06:362
782996993116,8cyclictest131rcu_preempt20:30:252
782994993123,4cyclictest823564-21grep21:05:171
782994993123,4cyclictest0-21swapper/121:50:271
782994993122,4cyclictest0-21swapper/120:05:001
782994993121,6cyclictest0-21swapper/120:30:021
782994993116,12cyclictest782983-21cyclictest23:30:141
78298999315,4cyclictest131rcu_preempt22:20:120
782989993124,4cyclictest0-21swapper/023:00:010
782989993124,3cyclictest0-21swapper/023:05:260
782989993121,8cyclictest151rcuc/022:25:120
782989993121,6cyclictest0-21swapper/000:20:250
782989993121,4cyclictest131rcu_preempt21:00:120
782989993120,7cyclictest867693-21cron23:15:010
782989993120,5cyclictest800822-21kworker/u8:2+events_unbound20:18:410
782989993116,9cyclictest131rcu_preempt00:30:130
782989993115,5cyclictest862357-21kworker/u8:0+events_unbound23:20:020
78300099309,11cyclictest40-21ksoftirqd/321:10:153
783000993022,4cyclictest0-21swapper/323:45:263
783000993020,5cyclictest0-21swapper/300:28:543
782996993024,4cyclictest829581-21head21:20:272
782996993024,4cyclictest829581-21head21:20:262
782996993024,3cyclictest0-21swapper/219:15:172
782996993022,5cyclictest0-21swapper/220:10:252
78299699301,6cyclictest0-21swapper/222:30:102
78299699301,14cyclictest0-21swapper/219:11:472
782994993023,4cyclictest0-21swapper/100:05:251
782994993023,4cyclictest0-21swapper/100:05:241
782994993022,4cyclictest0-21swapper/100:15:001
782994993019,7cyclictest846869-21kworker/u8:1-events_freezable_power_22:30:241
782989993015,8cyclictest131rcu_preempt19:10:220
78300099296,3cyclictest131rcu_preempt20:15:143
78300099295,5cyclictest131rcu_preempt20:10:123
783000992923,4cyclictest765969-21kworker/u8:2+events_unbound19:41:073
783000992923,4cyclictest765969-21kworker/u8:2+events_unbound19:41:063
783000992922,5cyclictest479220-21kworker/u8:1+events_unbound21:55:193
783000992922,4cyclictest0-21swapper/320:30:263
78300099292,14cyclictest40-21ksoftirqd/319:23:183
783000992921,3cyclictest0-21swapper/323:55:163
783000992920,5cyclictest0-21swapper/319:30:253
783000992913,5cyclictest782983-21cyclictest00:35:213
782996992922,4cyclictest0-21swapper/221:10:252
782996992921,5cyclictest0-21swapper/222:00:012
782994992922,5cyclictest479220-21kworker/u8:1+events_unbound20:11:061
782994992922,4cyclictest0-21swapper/123:49:591
782994992921,6cyclictest53-21kcompactd023:10:241
782994992921,4cyclictest0-21swapper/120:40:251
782994992919,7cyclictest0-21swapper/100:00:011
782989992923,4cyclictest795359-21kworker/u8:3+events_unbound19:51:070
782989992923,4cyclictest795359-21kworker/u8:3+events_unbound19:51:060
782989992922,3cyclictest0-21swapper/020:50:260
782989992921,5cyclictest0-21swapper/022:10:010
782989992921,4cyclictest0-21swapper/023:50:240
782989992920,7cyclictest862357-21kworker/u8:0+events_unbound23:16:380
782989992919,6cyclictest808642-21grep20:20:250
782989992914,5cyclictest131rcu_preempt00:35:210
783000992821,5cyclictest870966-21kworker/u8:4+events_unbound00:09:413
783000992821,5cyclictest870966-21kworker/u8:4+events_unbound00:09:413
783000992821,5cyclictest865879-21kworker/u8:2+events_unbound23:16:433
78300099281,9cyclictest0-21swapper/300:15:103
783000992817,7cyclictest866000-21sh23:10:003
78300099281,13cyclictest0-21swapper/322:02:413
78300099281,12cyclictest0-21swapper/323:25:273
782996992822,3cyclictest0-21swapper/200:40:012
782996992821,4cyclictest867694-21cron23:15:002
782996992821,3cyclictest0-21swapper/200:04:592
782996992819,6cyclictest892893-21tune2fs00:25:172
782996992819,6cyclictest855069-21grep22:35:242
782996992817,7cyclictest820985-21grep20:55:242
782996992814,4cyclictest838180-21kworker/u8:0+events_unbound22:10:032
782996992810,6cyclictest32-21ksoftirqd/223:00:202
782994992820,4cyclictest0-21swapper/122:15:261
782994992819,6cyclictest0-21swapper/119:35:261
782994992819,5cyclictest0-21swapper/100:39:591
782994992817,8cyclictest834676-21grep21:35:241
782994992815,8cyclictest0-21swapper/100:20:001
782989992821,5cyclictest855802-21kworker/u8:1+events_unbound23:42:410
782989992818,5cyclictest874261-21tail23:30:260
782989992814,8cyclictest131rcu_preempt21:30:180
782989992814,6cyclictest815955-21kworker/u8:2+events_unbound20:46:490
782989992812,3cyclictest131rcu_preempt20:00:270
783000992720,3cyclictest0-21swapper/323:20:253
78300099271,13cyclictest800687-21latency_hist20:00:003
78300099271,10cyclictest0-21swapper/322:27:593
78299699276,12cyclictest131rcu_preempt19:35:172
782996992720,5cyclictest0-21swapper/220:30:012
782996992720,3cyclictest0-21swapper/200:10:132
782996992719,6cyclictest819439-21kworker/u8:0+events_unbound21:32:412
782996992717,6cyclictest794991-21grep19:40:252
782996992717,6cyclictest794991-21grep19:40:252
78299699271,13cyclictest32-21ksoftirqd/220:42:422
782994992719,4cyclictest0-21swapper/121:55:261
782989992718,6cyclictest863818-21grep23:00:240
78298999271,15cyclictest771030-21kworker/0:1+events20:56:390
782989992710,10cyclictest795359-21kworker/u8:3+events_unbound19:59:530
78300099265,10cyclictest40-21ksoftirqd/322:10:213
783000992620,4cyclictest815955-21kworker/u8:2+events_unbound20:50:373
783000992620,3cyclictest0-21swapper/320:45:133
783000992618,4cyclictest0-21swapper/321:45:263
783000992615,8cyclictest867715-21cut23:15:013
783000992613,10cyclictest391ktimers/322:45:133
783000992613,10cyclictest391ktimers/322:45:123
783000992612,7cyclictest876438-21cron23:40:003
78300099260,15cyclictest0-21swapper/319:49:513
78300099260,15cyclictest0-21swapper/319:49:513
78299699269,5cyclictest32-21ksoftirqd/220:00:202
78299699267,10cyclictest0-21swapper/219:50:192
78299699267,10cyclictest0-21swapper/219:50:192
78299699266,5cyclictest131rcu_preempt22:05:122
782996992621,3cyclictest0-21swapper/221:25:162
782996992618,4cyclictest0-21swapper/222:26:262
782996992617,7cyclictest838180-21kworker/u8:0+events_unbound21:50:162
782996992617,7cyclictest800822-21kworker/u8:2+events_unbound20:05:452
78299699261,6cyclictest0-21swapper/223:40:122
78299699261,15cyclictest0-21swapper/219:48:072
78299699261,15cyclictest0-21swapper/219:48:062
782994992619,4cyclictest866003-21latency_hist23:10:011
782994992618,5cyclictest812709-21cron20:35:011
782994992617,6cyclictest784730-21grep19:15:001
78298999267,3cyclictest131rcu_preempt19:45:170
78298999267,3cyclictest131rcu_preempt19:45:170
782989992620,4cyclictest853481-21kworker/u8:3+events_unbound22:46:310
782989992620,4cyclictest853481-21kworker/u8:3+events_unbound22:46:300
782989992620,3cyclictest13850irq/36-mmc120:45:010
782989992615,8cyclictest828724-21cut21:20:170
782989992615,8cyclictest828724-21cut21:20:170
782989992615,6cyclictest0-21swapper/020:30:260
783000992517,5cyclictest0-21swapper/323:35:003
78300099251,21cyclictest838977-21tune2fs21:50:173
78299699258,10cyclictest32-21ksoftirqd/222:45:142
78299699258,10cyclictest32-21ksoftirqd/222:45:132
782996992519,3cyclictest0-21swapper/222:20:012
782996992517,6cyclictest882988-21kworker/u8:2+events_unbound00:06:372
782996992517,6cyclictest882988-21kworker/u8:2+events_unbound00:06:372
782996992511,11cyclictest301rcuc/222:40:212
78299499251,8cyclictest789878-21tail19:25:261
782994992516,4cyclictest0-21swapper/123:25:171
78298999259,10cyclictest131rcu_preempt22:35:000
78298999256,13cyclictest0-21swapper/022:40:240
78298999254,4cyclictest131rcu_preempt22:10:130
78298999251,9cyclictest802928-21wc20:05:200
78298999251,8cyclictest11-21ksoftirqd/000:10:100
782989992517,6cyclictest479220-21kworker/u8:1+events_unbound19:35:400
782989992511,11cyclictest13550irq/42-30be0000.ethernet00:05:020
782989992511,11cyclictest13550irq/42-30be0000.ethernet00:05:020
783000992417,5cyclictest870966-21kworker/u8:4+events_unbound23:50:133
783000992417,3cyclictest0-21swapper/320:55:253
783000992413,3cyclictest0-21swapper/322:35:223
782996992417,4cyclictest824874-21kthreadd21:10:012
78299699240,5cyclictest800562-21cron20:00:002
782994992418,3cyclictest0-21swapper/119:15:221
782994992417,5cyclictest819439-21kworker/u8:0+events_unbound21:00:211
782994992417,4cyclictest0-21swapper/123:15:221
782994992417,3cyclictest0-21swapper/122:50:251
782994992417,3cyclictest0-21swapper/122:50:241
782994992417,3cyclictest0-21swapper/121:45:131
782994992416,5cyclictest0-21swapper/123:44:591
782994992415,6cyclictest885180-21cron00:05:001
78298999247,9cyclictest11-21ksoftirqd/021:10:200
782989992418,3cyclictest0-21swapper/022:00:260
782989992417,4cyclictest882988-21kworker/u8:2+events_unbound00:16:340
78298999241,19cyclictest0-21swapper/019:42:110
78298999241,19cyclictest0-21swapper/019:42:100
783000992316,5cyclictest479220-21kworker/u8:1+events_unbound19:50:513
783000992316,5cyclictest479220-21kworker/u8:1+events_unbound19:50:503
782996992316,5cyclictest812341-21kworker/u8:3+events_unbound20:35:142
782996992314,6cyclictest878524-21grep23:45:172
782996992313,8cyclictest881016-21sed23:50:252
782994992315,5cyclictest0-21swapper/123:05:011
782994992315,4cyclictest0-21swapper/122:15:001
782994992315,4cyclictest0-21swapper/121:30:261
782994992314,6cyclictest871011-21seq23:21:121
782989992317,3cyclictest0-21swapper/021:55:210
78298999230,19cyclictest0-21swapper/021:26:090
78300099222,5cyclictest775720-21kworker/3:2+events21:25:253
782994992216,3cyclictest0-21swapper/121:40:221
782994992216,3cyclictest0-21swapper/119:20:281
782994992216,3cyclictest0-21swapper/100:20:161
782994992215,5cyclictest231ktimers/122:05:151
782994992215,4cyclictest831701-21kthreadd21:30:001
782994992215,3cyclictest0-21swapper/123:50:161
782994992213,6cyclictest0-21swapper/119:50:201
782994992213,6cyclictest0-21swapper/119:50:191
782994992213,5cyclictest842375-21fschecks_time22:00:171
782994992211,8cyclictest1-21systemd22:41:301
783000992114,5cyclictest870966-21kworker/u8:4+events_unbound00:11:153
782994992114,4cyclictest858972-21latency_hist22:50:001
782994992114,4cyclictest858972-21latency_hist22:50:001
782994992114,4cyclictest231ktimers/121:21:291
782994992114,4cyclictest231ktimers/121:21:281
782994992114,4cyclictest0-21swapper/122:25:161
782994992114,4cyclictest0-21swapper/119:45:261
782994992114,4cyclictest0-21swapper/119:45:251
782994992113,4cyclictest792033-21cron19:35:001
782994992111,7cyclictest0-21swapper/120:15:261
782994992110,7cyclictest0-21swapper/120:50:241
782994992014,3cyclictest0-21swapper/122:56:321
782994992014,3cyclictest0-21swapper/120:20:251
782994992013,4cyclictest827849-21unixbench_singl21:15:251
782994992013,4cyclictest827849-21unixbench_singl21:15:251
782994992010,7cyclictest894449-21/usr/sbin/munin00:30:131
782994991914,2cyclictest0-21swapper/120:35:231
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional