You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-28 - 20:28

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack7slot3s.osadl.org (updated Fri Nov 28, 2025 12:43:39)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2066199988,74cyclictest0-21swapper/007:55:210
20661999755,25cyclictest0-21swapper/009:20:230
20661999755,25cyclictest0-21swapper/009:20:230
20661999427,24cyclictest977-21runrttasks07:45:210
133392900,2sleep20-21swapper/210:16:422
2066199831,50cyclictest0-21swapper/011:05:220
20664998024,37cyclictest25503-21idleruntime-cro10:35:092
2066199801,39cyclictest0-21swapper/011:35:210
326532790,3sleep337-21rcuc/309:58:443
2066199776,22cyclictest0-21swapper/012:05:250
2066499743,11cyclictest0-21swapper/207:10:122
2066399742,47cyclictest7750irq/56-dwc_otg10:00:211
2066499721,6cyclictest5528-21ps10:05:352
2066499721,6cyclictest5528-21ps10:05:352
2066199723,48cyclictest0-21swapper/011:00:230
20661997224,5cyclictest0-21swapper/010:50:240
20661997134,27cyclictest0-21swapper/007:25:220
196812710,1sleep00-21swapper/007:05:380
20661996822,4cyclictest0-21swapper/011:15:210
2066499676,47cyclictest0-21swapper/212:30:262
2066499676,47cyclictest0-21swapper/212:30:262
2066399663,43cyclictest7750irq/56-dwc_otg11:40:221
38012650,2sleep00-21swapper/009:15:370
276692650,2sleep30-21swapper/310:37:043
20661996560,3cyclictest0-21swapper/012:00:090
93092640,5sleep22066499cyclictest10:10:382
42012640,3sleep3381ktimersoftd/309:15:483
2066199637,53cyclictest0-21swapper/009:05:240
2066199631,18cyclictest7850irq/56-dwc_otg_08:50:230
2066199631,18cyclictest7850irq/56-dwc_otg_08:50:230
203282633,14sleep10-21swapper/107:09:241
2066599623,12cyclictest7750irq/56-dwc_otg11:25:253
20661996221,12cyclictest0-21swapper/008:45:200
2066499617,5cyclictest7950irq/56-dwc_otg_11:05:412
2066499611,16cyclictest0-21swapper/210:27:232
2066499611,16cyclictest0-21swapper/210:27:232
20661996130,14cyclictest7850irq/56-dwc_otg_10:20:090
2066199611,14cyclictest7950irq/56-dwc_otg_12:40:090
2066499605,10cyclictest7950irq/56-dwc_otg_09:20:282
2066499605,10cyclictest7950irq/56-dwc_otg_09:20:282
20664995917,32cyclictest7950irq/56-dwc_otg_10:03:112
2066399597,45cyclictest0-21swapper/108:50:231
2066399597,45cyclictest0-21swapper/108:50:231
2066399592,43cyclictest7750irq/56-dwc_otg10:45:231
2066199592,53cyclictest9-21ksoftirqd/010:10:390
2066199591,43cyclictest0-21swapper/011:50:280
2066499571,4cyclictest0-21swapper/212:08:072
20664995714,4cyclictest24074-21latency_hist07:20:102
2066499571,3cyclictest7750irq/56-dwc_otg12:15:372
2066199573,32cyclictest0-21swapper/007:10:120
20661995732,4cyclictest1310-21aten_rbpower_en10:00:240
2066499563,3cyclictest7950irq/56-dwc_otg_11:35:302
20664995616,37cyclictest3604-21ntp_offset09:15:342
2066499561,3cyclictest7850irq/56-dwc_otg_12:01:442
2066499561,10cyclictest0-21swapper/211:00:282
2066399562,28cyclictest7750irq/56-dwc_otg09:05:231
20661995634,5cyclictest9-21ksoftirqd/012:20:320
2066499554,5cyclictest140-21systemd-journal10:00:092
2066499554,4cyclictest7950irq/56-dwc_otg_09:52:052
2066499552,15cyclictest25614-21grep08:50:382
2066499552,15cyclictest25614-21grep08:50:382
2066499551,5cyclictest17566-21cut08:30:262
2066499551,15cyclictest0-21swapper/211:17:022
20664995511,4cyclictest31389-21latency_hist07:40:092
20663995511,23cyclictest20515-21ssh11:15:211
2066199558,26cyclictest13-21rcuc/009:30:250
20661995523,15cyclictest8469-21fschecks_count08:05:280
20661995523,15cyclictest8469-21fschecks_count08:05:280
20661995522,12cyclictest26712-21sh11:25:250
2066499545,5cyclictest7950irq/56-dwc_otg_09:38:402
2066499541,6cyclictest12204-21ssh11:50:332
2066499541,4cyclictest7850irq/56-dwc_otg_09:25:272
2066499541,3cyclictest7950irq/56-dwc_otg_09:31:032
2066499541,17cyclictest22562-21sshd08:45:102
20664995410,5cyclictest26782-21unixbench-2d12:10:372
2066199549,25cyclictest0-21swapper/007:30:230
20665995340,10cyclictest1120-21runrttasks08:35:183
2066499537,4cyclictest0-21swapper/212:35:252
2066499534,4cyclictest7850irq/56-dwc_otg_10:56:432
2066499534,4cyclictest7850irq/56-dwc_otg_10:56:432
2066499532,13cyclictest0-21swapper/211:30:552
2066499532,13cyclictest0-21swapper/211:30:552
2066499531,4cyclictest7750irq/56-dwc_otg07:25:272
2066499531,14cyclictest0-21swapper/208:25:382
20661995329,7cyclictest7850irq/56-dwc_otg_08:35:250
20661995326,5cyclictest16289-21switchtime08:25:340
2066199531,26cyclictest29502-21fschecks_count10:40:260
20661995310,14cyclictest0-21swapper/008:00:200
2066499523,8cyclictest0-21swapper/210:20:182
2066499521,5cyclictest26058-21diskstats10:35:242
2066499521,15cyclictest0-21swapper/212:26:422
2066399527,30cyclictest0-21swapper/107:55:211
20661995235,9cyclictest0-21swapper/007:35:230
20661995224,6cyclictest23593-21tail07:15:380
20661995213,22cyclictest9-21ksoftirqd/010:00:090
2066199521,27cyclictest18690-21cat10:25:100
2066499513,4cyclictest7750irq/56-dwc_otg11:13:152
2066499511,9cyclictest7950irq/56-dwc_otg_08:15:242
2066499511,5cyclictest1872-21ssh12:21:092
2066499511,4cyclictest442-21sshd07:41:472
2066499511,3cyclictest7950irq/56-dwc_otg_10:40:362
2066499511,3cyclictest7950irq/56-dwc_otg_09:41:232
2066499511,12cyclictest14148-21cat08:20:302
2066499511,12cyclictest0-21swapper/211:42:092
2066499511,11cyclictest7950irq/56-dwc_otg_11:58:572
2066499511,10cyclictest7850irq/56-dwc_otg_07:56:562
20664995110,6cyclictest29053-21cat09:00:542
2066199511,7cyclictest10990-21unixbench-2d09:25:380
2066599506,23cyclictest0-21swapper/307:35:233
2066499506,8cyclictest0-21swapper/209:49:452
2066499506,8cyclictest0-21swapper/209:49:452
2066499505,4cyclictest0-21swapper/211:26:492
2066499502,3cyclictest7950irq/56-dwc_otg_08:56:322
2066499502,3cyclictest7950irq/56-dwc_otg_08:56:322
2066499501,5cyclictest5486-21ssh10:52:072
2066499501,3cyclictest0-21swapper/210:45:342
2066499501,12cyclictest10186-21ssh11:47:462
2066499501,10cyclictest0-21swapper/211:22:092
20661995036,2cyclictest0-21swapper/007:20:160
20661995027,6cyclictest9-21ksoftirqd/008:40:390
20661995023,7cyclictest26381-21runrttasks12:10:330
2066199502,27cyclictest18529-21ls11:10:370
2066199502,26cyclictest0-21swapper/010:35:260
20661995021,18cyclictest0-21swapper/008:19:540
20661995020,12cyclictest101ktimersoftd/011:30:210
20661995020,12cyclictest101ktimersoftd/011:30:210
2066199501,36cyclictest0-21swapper/007:50:270
20661995013,20cyclictest1120-21runrttasks10:09:350
20661995013,20cyclictest1120-21runrttasks10:09:350
2066199501,31cyclictest8426-21unixbench_singl10:55:380
2066199501,31cyclictest8426-21unixbench_singl10:55:380
2066499496,7cyclictest7950irq/56-dwc_otg_09:10:152
2066499493,3cyclictest7950irq/56-dwc_otg_08:02:272
2066499492,38cyclictest0-21swapper/208:12:472
2066499491,3cyclictest7750irq/56-dwc_otg08:09:532
2066499491,3cyclictest7750irq/56-dwc_otg08:09:532
2066499491,12cyclictest0-21swapper/207:33:462
2066399492,7cyclictest7850irq/56-dwc_otg_07:15:221
2066199496,27cyclictest21069-21ls09:40:370
20661994931,5cyclictest7950irq/56-dwc_otg_12:30:300
20661994931,5cyclictest7950irq/56-dwc_otg_12:30:300
20661994920,6cyclictest19197-21grep12:00:320
20665994810,23cyclictest0-21swapper/307:15:223
2066499481,6cyclictest7750irq/56-dwc_otg07:25:092
2066499481,5cyclictest20259-21taskset08:36:002
2066499481,3cyclictest0-21swapper/207:45:372
2066499481,14cyclictest0-21swapper/208:48:412
2066399487,18cyclictest0-21swapper/108:40:221
2066199484,41cyclictest13-21rcuc/011:47:070
20661994825,6cyclictest7950irq/56-dwc_otg_11:24:400
2066199481,26cyclictest4213-21ssh12:25:270
204732480,8sleep3381ktimersoftd/307:10:103
20661994726,6cyclictest7850irq/56-dwc_otg_10:30:320
2066199472,20cyclictest0-21swapper/010:46:300
2066199471,14cyclictest24182-21ps09:45:350
2066199471,14cyclictest24182-21ps09:45:350
2066599467,25cyclictest0-21swapper/309:25:153
2066399468,24cyclictest0-21swapper/107:50:241
2066399467,28cyclictest0-21swapper/108:35:201
2066399467,26cyclictest0-21swapper/109:30:231
2066399467,26cyclictest0-21swapper/108:55:221
2066399467,26cyclictest0-21swapper/108:55:221
2066399467,25cyclictest0-21swapper/107:30:221
2066199461,5cyclictest28115-21aten_rbpower_cu09:00:240
2066499452,8cyclictest4071-21sshd07:51:462
2066399457,25cyclictest0-21swapper/111:35:241
2066399452,9cyclictest11471-21ssh11:50:221
2066199455,21cyclictest0-21swapper/009:14:530
20661994519,5cyclictest4851-21aten_rbpower_cu11:40:240
20661994518,20cyclictest0-21swapper/009:54:280
2066199451,26cyclictest0-21swapper/009:37:500
2066199451,25cyclictest0-21swapper/008:20:250
183502450,5sleep12066399cyclictest11:10:361
2066499441,5cyclictest29878-21/usr/sbin/munin09:05:392
2066399448,25cyclictest0-21swapper/110:20:151
2066399447,26cyclictest0-21swapper/108:00:231
2066399447,24cyclictest0-21swapper/107:20:241
2066399445,25cyclictest7184-21ssh10:55:221
2066399445,25cyclictest7184-21ssh10:55:221
2066199448,19cyclictest0-21swapper/010:26:270
2066199448,19cyclictest0-21swapper/010:26:270
20661994417,12cyclictest7950irq/56-dwc_otg_12:15:350
2066599437,25cyclictest0-21swapper/307:40:253
2066599434,25cyclictest0-21swapper/309:35:243
20665994324,8cyclictest7750irq/56-dwc_otg12:15:293
20663994317,14cyclictest0-21swapper/110:30:241
20663994310,22cyclictest0-21swapper/108:45:201
2066199432,11cyclictest10599-21cat08:10:350
20665994213,7cyclictest8901-21proc_pri11:45:403
2066399425,22cyclictest0-21swapper/110:50:241
2066399422,24cyclictest0-21swapper/107:25:211
2066199422,6cyclictest32724-21unixbench_multi07:40:390
2066599417,22cyclictest0-21swapper/308:15:223
2066599416,22cyclictest0-21swapper/307:25:223
2066599416,13cyclictest7850irq/56-dwc_otg_11:50:233
2066199412,37cyclictest18392-21grep08:30:410
20661994114,21cyclictest0-21swapper/008:56:350
20661994114,21cyclictest0-21swapper/008:56:350
2066599408,16cyclictest0-21swapper/308:05:233
2066599408,16cyclictest0-21swapper/308:05:233
2066599407,23cyclictest0-21swapper/308:25:223
2066599406,4cyclictest7950irq/56-dwc_otg_09:40:253
2066599403,21cyclictest0-21swapper/307:20:153
2066599401,25cyclictest0-21swapper/312:05:253
2066399409,4cyclictest7750irq/56-dwc_otg11:55:371
2066399407,24cyclictest0-21swapper/112:25:211
2066399407,24cyclictest0-21swapper/111:30:231
2066399407,24cyclictest0-21swapper/111:30:231
20663994010,18cyclictest0-21swapper/112:14:181
20665993917,8cyclictest7950irq/56-dwc_otg_12:32:083
20665993917,8cyclictest7950irq/56-dwc_otg_12:32:083
2066399395,22cyclictest29250-21ssh10:40:221
20663993919,6cyclictest32098-21kernelversion07:40:311
2066599387,17cyclictest37-21rcuc/311:25:103
2066399383,23cyclictest7750irq/56-dwc_otg09:50:271
2066399382,4cyclictest0-21swapper/110:10:221
2066399382,25cyclictest7750irq/56-dwc_otg09:55:291
2066599377,11cyclictest37-21rcuc/312:20:393
2066599376,5cyclictest7950irq/56-dwc_otg_12:40:093
2066599373,12cyclictest0-21swapper/307:10:123
2066599372,29cyclictest7950irq/56-dwc_otg_11:55:223
20665993718,12cyclictest6165-21idleruntime-cro08:00:103
20665993717,5cyclictest31459-21diskmemload11:00:273
20665993714,11cyclictest7950irq/56-dwc_otg_09:12:273
20665993713,7cyclictest381ktimersoftd/310:13:313
20665993712,4cyclictest1120-21runrttasks07:50:353
2066399373,17cyclictest7950irq/56-dwc_otg_07:10:121
44592361,30sleep30-21swapper/311:40:093
2066599369,8cyclictest7950irq/56-dwc_otg_09:30:383
2066599367,18cyclictest37-21rcuc/310:05:473
2066599367,18cyclictest37-21rcuc/310:05:473
2066599367,15cyclictest0-21swapper/308:45:223
2066599367,12cyclictest7950irq/56-dwc_otg_11:30:293
2066599367,12cyclictest7950irq/56-dwc_otg_11:30:293
2066599366,17cyclictest37-21rcuc/311:40:223
2066599366,17cyclictest37-21rcuc/310:32:073
2066599365,16cyclictest37-21rcuc/310:00:233
2066599361,25cyclictest0-21swapper/308:10:213
20663993614,5cyclictest7364-21cat09:20:371
20663993614,5cyclictest7364-21cat09:20:371
2066599353,13cyclictest20769-21rm10:26:593
2066599353,13cyclictest20769-21rm10:26:593
2066399351,24cyclictest31459-21diskmemload11:00:321
2066399351,21cyclictest23442-21wget11:20:231
2066399351,18cyclictest7850irq/56-dwc_otg_12:00:281
20663993511,4cyclictest0-21swapper/109:25:271
299052340,1sleep10-21swapper/107:35:241
2066599349,9cyclictest7950irq/56-dwc_otg_10:48:563
2066599347,16cyclictest39-21ksoftirqd/309:20:213
2066599347,16cyclictest39-21ksoftirqd/309:20:213
20665993417,4cyclictest7950irq/56-dwc_otg_12:12:263
2066599341,22cyclictest14399-21cut11:05:313
2066599341,13cyclictest381ktimersoftd/312:26:333
20665993411,11cyclictest0-21swapper/310:40:343
2066399345,20cyclictest4707-21ssh10:05:231
2066399345,20cyclictest4707-21ssh10:05:231
2066399343,4cyclictest31858-21cut09:10:221
2066399342,22cyclictest7750irq/56-dwc_otg11:45:241
2066399341,5cyclictest31331-21snmpd12:09:531
2066599333,12cyclictest6957-21latency_hist10:55:103
2066599332,15cyclictest7950irq/56-dwc_otg_08:30:233
20665993314,10cyclictest7750irq/56-dwc_otg12:01:123
2066599331,24cyclictest12543-21ls10:15:353
20665993312,12cyclictest27321-21unixbench-2d08:55:373
20665993312,12cyclictest27321-21unixbench-2d08:55:373
2066599331,17cyclictest7850irq/56-dwc_otg_09:46:573
2066599331,17cyclictest7850irq/56-dwc_otg_09:46:573
2066399339,5cyclictest441-21cut12:20:241
2066399336,8cyclictest8075-21switchtime12:30:401
2066399336,8cyclictest8075-21switchtime12:30:401
2066399334,17cyclictest10000-21/usr/sbin/munin08:10:331
2066399334,14cyclictest7950irq/56-dwc_otg_08:20:101
2066399333,11cyclictest7850irq/56-dwc_otg_11:25:401
2066399332,13cyclictest17512-21ssh09:35:371
2066399331,5cyclictest17564-21fschecks_time08:30:261
2066399331,5cyclictest11752-21aten_rbpower_vo10:15:231
2066599324,6cyclictest381ktimersoftd/308:20:243
2066599323,10cyclictest7950irq/56-dwc_otg_11:14:133
2066599322,16cyclictest381ktimersoftd/308:51:313
2066599322,16cyclictest381ktimersoftd/308:51:313
2066599321,22cyclictest23089-21latency_hist11:20:103
2066599321,20cyclictest1172-21cpuspeed07:45:253
20665993211,8cyclictest7950irq/56-dwc_otg_07:33:423
20665993210,10cyclictest381ktimersoftd/310:21:323
2066399328,5cyclictest0-21swapper/111:05:221
2066399326,16cyclictest32674-21kworker/u8:109:15:331
2066399325,5cyclictest7750irq/56-dwc_otg10:35:251
2066399322,7cyclictest0-21swapper/108:25:271
2066399321,7cyclictest19356-21iwlist10:25:301
2066399321,7cyclictest19356-21iwlist10:25:301
2066399321,21cyclictest23676-21uniq09:45:281
2066399321,21cyclictest23676-21uniq09:45:281
2066599311,18cyclictest0-21swapper/309:50:243
2066399317,6cyclictest7750irq/56-dwc_otg09:40:251
2066399314,4cyclictest7850irq/56-dwc_otg_12:15:271
2066599306,14cyclictest0-21swapper/309:05:243
2066599304,10cyclictest7950irq/56-dwc_otg_10:57:343
2066599304,10cyclictest7950irq/56-dwc_otg_10:57:343
2066599302,9cyclictest0-21swapper/309:00:213
2066599302,12cyclictest7950irq/56-dwc_otg_08:41:093
2066599301,18cyclictest6667-21cut08:00:273
2066399302,19cyclictest0-21swapper/108:08:471
2066399302,19cyclictest0-21swapper/108:08:471
20663993021,7cyclictest13872-21fschecks_count08:20:271
2066399302,10cyclictest0-21swapper/107:45:221
20663993012,10cyclictest0-21swapper/112:36:021
202772303,14sleep20-21swapper/207:08:442
2066399296,4cyclictest7750irq/56-dwc_otg09:00:521
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional