You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-06 - 21:20

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Tue Jan 06, 2026 12:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
34225080,4sleep20-21swapper/207:05:382
306382990,5sleep0145399cyclictest08:30:280
145399972,86cyclictest1452-21cyclictest07:10:160
67122790,1sleep3381ktimersoftd/310:20:403
327472780,2sleep00-21swapper/007:05:360
1455997818,32cyclictest0-21swapper/207:10:162
145399751,25cyclictest16298-21munin-run10:50:140
1453997419,43cyclictest0-21swapper/012:00:270
1453997318,4cyclictest17648-21idleruntime-cro07:55:140
145399724,15cyclictest7850irq/56-dwc_otg_10:10:140
145399711,25cyclictest0-21swapper/008:10:420
145399711,15cyclictest0-21swapper/007:25:140
1453997018,5cyclictest18467-21missed_timers07:55:350
1453997018,5cyclictest18467-21missed_timers07:55:350
145399701,5cyclictest21760-21grep08:05:310
145399698,20cyclictest0-21swapper/007:45:250
1453996914,5cyclictest30794-21latency_hist11:30:140
1453996914,4cyclictest28509-21unixbench_multi11:20:420
145399682,8cyclictest22997-21grep12:35:360
145399681,7cyclictest20285-21latency_hist12:30:140
1453996816,14cyclictest0-21swapper/009:42:040
145399661,20cyclictest0-21swapper/010:32:560
246012650,8sleep37950irq/56-dwc_otg_11:10:393
145399652,7cyclictest7384-21fschecks_count08:55:310
145399652,20cyclictest0-21swapper/012:14:180
145399652,20cyclictest0-21swapper/012:14:180
145399652,18cyclictest0-21swapper/007:27:460
145399651,15cyclictest0-21swapper/010:50:290
145399642,20cyclictest0-21swapper/008:50:280
1453996419,2cyclictest0-21swapper/011:35:300
1453996419,2cyclictest0-21swapper/011:35:300
1453996415,9cyclictest11874-21grep09:05:410
145399632,21cyclictest0-21swapper/009:25:420
1453996214,12cyclictest0-21swapper/009:30:570
145399621,27cyclictest0-21swapper/012:30:260
145399612,19cyclictest0-21swapper/010:10:320
145399602,19cyclictest0-21swapper/011:07:350
145399601,19cyclictest0-21swapper/011:01:360
145399601,19cyclictest0-21swapper/009:19:100
145499592,6cyclictest0-21swapper/109:05:251
145399596,32cyclictest0-21swapper/012:15:200
145399592,8cyclictest0-21swapper/009:55:490
1453995918,10cyclictest1125-21runrttasks08:50:080
1456995812,20cyclictest7850irq/56-dwc_otg_07:10:163
145399582,23cyclictest0-21swapper/011:16:060
1453995816,4cyclictest7850irq/56-dwc_otg_08:00:240
1456995711,27cyclictest7950irq/56-dwc_otg_08:55:313
145399572,7cyclictest0-21swapper/009:50:180
145399571,25cyclictest0-21swapper/009:39:370
1456995617,17cyclictest11093-21/usr/sbin/munin10:35:403
8072550,5sleep30-21swapper/307:05:433
1456995515,24cyclictest16279-21cron10:50:143
274242540,4sleep00-21swapper/008:20:340
1455995415,16cyclictest12246-21cut07:40:142
1453995447,5cyclictest1125-21runrttasks11:45:250
1453995427,15cyclictest7750irq/56-dwc_otg09:10:420
1453995413,22cyclictest1125-21runrttasks08:15:270
1453995332,4cyclictest9450-21latency_hist12:00:150
1453995331,3cyclictest0-21swapper/008:45:130
145399531,8cyclictest10497-21cron09:05:140
1456995221,14cyclictest7950irq/56-dwc_otg_08:10:403
145599526,28cyclictest0-21swapper/211:25:282
1453995226,14cyclictest1628-21ls08:40:150
1453995213,8cyclictest0-21swapper/007:35:200
1456995124,7cyclictest22334-21apt-get12:35:253
1456995122,18cyclictest30239-21unixbench_singl09:55:423
1456995122,12cyclictest14166-21latency_hist07:45:153
145599517,25cyclictest16865-21grep10:50:312
145599516,25cyclictest0-21swapper/207:30:262
1453995129,6cyclictest7850irq/56-dwc_otg_07:30:290
1453995116,14cyclictest101ktimersoftd/010:44:280
145399511,47cyclictest2646-21ls11:40:330
145399511,28cyclictest1125-21runrttasks07:40:330
1453995030,6cyclictest7750irq/56-dwc_otg10:20:270
1456994911,23cyclictest7950irq/56-dwc_otg_10:44:483
145599496,12cyclictest22801-21uname12:35:342
145499495,11cyclictest15734-21kworker/u8:211:40:261
1456994820,8cyclictest27026-21munin-run09:50:143
1456994819,11cyclictest27632-21/usr/sbin/munin09:50:313
145599489,12cyclictest20287-21ls12:30:142
145599486,28cyclictest7950irq/56-dwc_otg_07:30:142
145699477,23cyclictest0-21swapper/310:15:273
1456994718,11cyclictest26750-21/usr/sbin/munin11:15:413
1456994716,20cyclictest7224-21runrttasks11:52:173
1456994714,9cyclictest0-21swapper/311:35:273
1456994714,9cyclictest0-21swapper/311:35:273
1456994711,7cyclictest20871-21/usr/sbin/munin12:30:323
1456994711,22cyclictest16329-21taskset12:16:553
1456994710,10cyclictest7950irq/56-dwc_otg_09:25:433
145599478,22cyclictest7950irq/56-dwc_otg_08:10:392
145599477,27cyclictest28076-21sensors_temp09:50:382
1455994713,22cyclictest9503-21/usr/sbin/munin12:00:442
145499477,25cyclictest0-21swapper/110:20:271
145499474,15cyclictest7850irq/56-dwc_otg_09:25:151
1453994723,5cyclictest7850irq/56-dwc_otg_12:10:140
1453994722,11cyclictest7750irq/56-dwc_otg11:10:410
1453994710,20cyclictest0-21swapper/008:25:270
145699462,12cyclictest0-21swapper/307:35:263
1456994620,18cyclictest23193-21sshd09:39:103
1456994615,19cyclictest128-21systemd-journal11:24:363
1456994613,10cyclictest7950irq/56-dwc_otg_07:30:143
145599467,25cyclictest0-21swapper/211:40:202
145599467,24cyclictest0-21swapper/210:40:272
1453994626,8cyclictest7850irq/56-dwc_otg_11:30:260
145699457,24cyclictest0-21swapper/309:10:273
145699457,23cyclictest0-21swapper/307:30:263
145699456,23cyclictest0-21swapper/310:00:283
1456994522,11cyclictest10433-21/usr/sbin/munin12:00:403
1456994511,11cyclictest7950irq/56-dwc_otg_12:30:153
1456994510,10cyclictest7850irq/56-dwc_otg_08:00:403
145599459,10cyclictest7750irq/56-dwc_otg11:35:272
145599459,10cyclictest7750irq/56-dwc_otg11:35:272
1455994520,10cyclictest20528-21apt-get12:30:272
145499452,11cyclictest0-21swapper/109:25:281
145399452,34cyclictest0-21swapper/010:59:400
145399452,34cyclictest0-21swapper/010:59:400
145399452,21cyclictest0-21swapper/012:20:420
1453994516,19cyclictest0-21swapper/009:46:300
145699446,25cyclictest0-21swapper/310:05:283
1456994432,8cyclictest28728-21apt-get08:25:273
1456994415,10cyclictest7950irq/56-dwc_otg_10:10:293
145699441,4cyclictest7950irq/56-dwc_otg_08:40:293
1456994413,11cyclictest14218-21modprobe07:45:153
1456994411,12cyclictest18018-21latency_hist09:25:153
145599444,20cyclictest7950irq/56-dwc_otg_07:55:302
145599444,20cyclictest7950irq/56-dwc_otg_07:55:302
1455994413,14cyclictest26573-21sed11:15:392
145499447,25cyclictest0-21swapper/107:55:281
145499447,25cyclictest0-21swapper/107:55:281
1454994421,6cyclictest1872850wget12:25:281
145699437,24cyclictest0-21swapper/310:25:283
1456994314,11cyclictest7950irq/56-dwc_otg_07:55:143
1456994311,16cyclictest0-21swapper/310:50:273
145599439,13cyclictest21568-21grep08:05:282
145499434,8cyclictest7850irq/56-dwc_otg_09:15:251
1454994311,21cyclictest0-21swapper/111:30:261
145399433,18cyclictest7750irq/56-dwc_otg10:35:410
145399432,24cyclictest0-21swapper/009:21:580
1453994318,5cyclictest7575-21tr10:25:290
145399431,24cyclictest0-21swapper/010:00:260
145699428,9cyclictest0-21swapper/308:05:283
1456994219,16cyclictest19516-21users10:55:453
1456994219,16cyclictest19516-21users10:55:453
145599429,16cyclictest0-21swapper/210:10:262
145599428,20cyclictest7850irq/56-dwc_otg_07:20:152
145599428,12cyclictest7228-21aten_rbpower_po08:55:282
145599427,29cyclictest0-21swapper/210:25:282
145599427,25cyclictest0-21swapper/209:05:272
145599427,23cyclictest0-21swapper/210:05:282
145599426,27cyclictest0-21swapper/209:10:272
1455994212,12cyclictest18075-21gpgconf09:25:162
145499428,4cyclictest7944-21grep11:55:331
145499427,4cyclictest0-21swapper/109:55:241
1454994219,5cyclictest25169-21aten_rbpower_po08:15:281
1453994223,3cyclictest0-21swapper/011:50:300
1453994218,7cyclictest5500-21latency_hist10:20:140
1456994129,8cyclictest5211-21apt-get07:20:283
1456994127,10cyclictest17871-21apt-get07:55:263
1456994127,10cyclictest17871-21apt-get07:55:263
145599417,22cyclictest0-21swapper/211:30:272
1455994113,7cyclictest20223-21ls08:00:332
145499417,22cyclictest0-21swapper/110:50:271
145499416,9cyclictest7750irq/56-dwc_otg11:45:261
1453994124,3cyclictest0-21swapper/007:15:240
145699404,5cyclictest0-21swapper/308:20:253
145699403,28cyclictest7950irq/56-dwc_otg_08:45:263
1456994030,7cyclictest31015-21apt-get11:30:253
1456994010,20cyclictest0-21swapper/309:41:593
145599409,21cyclictest25153-21seq09:44:432
145599409,19cyclictest28506-21unixbench_multi11:20:422
145499407,24cyclictest0-21swapper/108:50:281
145499407,23cyclictest0-21swapper/108:55:281
1454994018,4cyclictest757250wget10:25:291
145499401,3cyclictest7750irq/56-dwc_otg10:55:281
145499401,3cyclictest7750irq/56-dwc_otg10:55:281
145699399,10cyclictest7950irq/56-dwc_otg_12:11:503
145699399,10cyclictest7950irq/56-dwc_otg_12:11:503
145699397,9cyclictest7950irq/56-dwc_otg_12:25:153
145699397,20cyclictest0-21swapper/309:05:273
145699397,10cyclictest7950irq/56-dwc_otg_08:39:273
145699396,12cyclictest0-21swapper/310:30:193
1456993911,9cyclictest0-21swapper/311:30:023
145599399,12cyclictest17847-21cat09:25:152
145599397,17cyclictest6527-21chrt07:22:202
1455993915,11cyclictest11804-21ntp_states10:35:392
1455993914,13cyclictest30057-21/usr/sbin/munin09:55:412
145699387,9cyclictest7950irq/56-dwc_otg_08:31:583
1456993810,15cyclictest7950irq/56-dwc_otg_11:04:233
1456993810,13cyclictest26311-21taskset08:15:513
145599389,19cyclictest7418-21chrt11:54:502
145599388,15cyclictest7950irq/56-dwc_otg_11:07:172
145599385,16cyclictest7850irq/56-dwc_otg_10:50:142
145599384,19cyclictest14383-21taskset12:11:272
145599384,19cyclictest14383-21taskset12:11:272
145599381,3cyclictest7950irq/56-dwc_otg_09:15:262
145499385,7cyclictest7750irq/56-dwc_otg11:05:401
145499382,3cyclictest7850irq/56-dwc_otg_11:20:251
145499381,27cyclictest29440-21cut11:25:331
313182370,1sleep10-21swapper/110:00:341
145699377,14cyclictest15930-21chrt09:20:023
145699377,10cyclictest7950irq/56-dwc_otg_09:31:153
145699376,22cyclictest3290-21runrttasks07:15:273
1456993715,11cyclictest23484-21chrt11:09:593
145599379,18cyclictest31997-21sshd08:34:102
145599379,11cyclictest1416-21sshd08:39:452
145599378,15cyclictest0-21swapper/212:17:142
145599377,3cyclictest7850irq/56-dwc_otg_10:25:142
145599377,24cyclictest0-21swapper/209:35:282
145599377,11cyclictest19789-21taskset10:59:012
145599377,11cyclictest19789-21taskset10:59:012
1455993726,9cyclictest20145-21apt-get11:00:252
1455993711,11cyclictest7850irq/56-dwc_otg_08:50:252
1454993719,5cyclictest27192-21fschecks_count08:20:311
145499371,25cyclictest14505-21cut07:45:311
145499371,24cyclictest23986-21ls09:40:321
145699364,10cyclictest7950irq/56-dwc_otg_08:50:253
1456993618,13cyclictest12418-21grep12:05:423
145599366,12cyclictest27191-21cat09:50:152
145599364,23cyclictest7850irq/56-dwc_otg_08:29:042
145599361,24cyclictest23928-21cpuspeed11:10:282
1455993611,12cyclictest3016-21runrttasks08:42:002
1454993614,5cyclictest17754-21sed12:20:401
145699357,22cyclictest0-21swapper/309:00:263
145599354,3cyclictest0-21swapper/210:00:262
145599353,16cyclictest7950irq/56-dwc_otg_07:52:562
145599353,16cyclictest7850irq/56-dwc_otg_09:30:382
1455993511,8cyclictest16858-21apt-get12:20:262
145499356,16cyclictest23550-21cut08:10:311
145499355,15cyclictest7950irq/56-dwc_otg_07:20:301
1454993514,5cyclictest13213-21fschecks_time10:40:311
1454993511,9cyclictest26165-21missed_timers11:15:341
1456993421,10cyclictest5403-21sshd11:47:103
145599341,4cyclictest0-21swapper/211:45:252
145499343,24cyclictest0-21swapper/107:10:171
145499341,7cyclictest7750irq/56-dwc_otg12:15:311
145499341,7cyclictest28962-21fschecks_count08:25:311
145499341,31cyclictest2377-21cut10:10:321
145499341,15cyclictest7750irq/56-dwc_otg07:15:311
1456993310,9cyclictest0-21swapper/311:41:013
145599338,14cyclictest10159-21taskset09:00:522
145599335,12cyclictest128-21systemd-journal11:59:422
145599332,9cyclictest4283-21/usr/sbin/munin08:45:392
145599331,8cyclictest27444-21latency08:20:342
145499338,11cyclictest7850irq/56-dwc_otg_09:50:271
145499334,6cyclictest7950irq/56-dwc_otg_08:35:271
145499333,7cyclictest7850irq/56-dwc_otg_07:25:321
1454993316,8cyclictest1125-21runrttasks07:36:541
1454993315,10cyclictest0-21swapper/110:45:311
1454993314,4cyclictest11777-21/usr/sbin/munin12:05:331
1454993311,7cyclictest7750irq/56-dwc_otg10:05:421
1456993218,11cyclictest7822-21aten_rbpower_vo11:55:303
145599328,5cyclictest0-21swapper/208:18:302
145599325,13cyclictest7950irq/56-dwc_otg_10:15:332
145599324,18cyclictest7950irq/56-dwc_otg_10:32:522
145599323,11cyclictest12559-21runrttasks12:06:152
145599321,10cyclictest7950irq/56-dwc_otg_07:45:022
145499326,7cyclictest7850irq/56-dwc_otg_09:00:351
145499324,19cyclictest23-21ksoftirqd/109:50:151
145499323,8cyclictest0-21swapper/111:35:251
145499323,8cyclictest0-21swapper/111:35:251
1454993219,4cyclictest22321-21/usr/sbin/munin12:35:281
1454993217,8cyclictest12422-21/usr/sbin/munin07:40:261
1454993214,4cyclictest1324650wget12:10:291
1454993214,4cyclictest1324650wget12:10:291
1454993212,5cyclictest23547-21sed09:40:151
1454993210,5cyclictest8938-21wget07:30:271
145499315,5cyclictest7750irq/56-dwc_otg10:15:251
145499314,16cyclictest16348-21fschecks_time07:50:321
145499313,17cyclictest1125-21runrttasks09:32:101
145499313,10cyclictest0-21swapper/108:05:261
145499312,16cyclictest0-21swapper/109:12:421
145499311,25cyclictest9800-21cut12:00:311
1455993011,11cyclictest1125-21runrttasks07:48:002
145499303,15cyclictest0-21swapper/110:30:311
145499302,5cyclictest7950irq/56-dwc_otg_08:00:301
145499302,10cyclictest31658-21grep08:30:421
1454993013,8cyclictest21491-21seq11:02:351
145499296,5cyclictest7750irq/56-dwc_otg08:40:381
145499295,5cyclictest7950irq/56-dwc_otg_11:50:361
145499292,18cyclictest0-21swapper/112:35:101
145499291,18cyclictest0-21swapper/108:48:021
3082285,11sleep10-21swapper/107:05:381
145499282,15cyclictest0-21swapper/111:12:491
1454992813,7cyclictest11913-21/usr/sbin/munin10:35:401
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional