You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-30 - 06:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Tue Dec 30, 2025 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
967499967,53cyclictest0-21swapper/023:40:240
303922840,3sleep1221ktimersoftd/123:05:271
967599809,12cyclictest0-21swapper/119:10:131
300982780,3sleep231-21ksoftirqd/220:05:282
300982780,3sleep231-21ksoftirqd/220:05:282
967699741,50cyclictest5019-21cut21:55:292
9676997310,41cyclictest17267-21latency_hist22:30:102
9674997319,29cyclictest10527-21fschecks_time22:10:280
967699723,61cyclictest0-21swapper/219:10:132
967699707,37cyclictest7950irq/56-dwc_otg_19:30:302
9674996830,4cyclictest11-21rcu_preempt00:15:260
9674996830,4cyclictest11-21rcu_preempt00:15:260
967699671,48cyclictest24143-21sshd22:46:372
967499672,5cyclictest0-21swapper/021:25:250
967699661,48cyclictest19673-21if_eth022:35:292
967699651,47cyclictest14263-21ntp_states20:50:342
967699651,47cyclictest14263-21ntp_states20:50:342
967699651,45cyclictest16800-21sshd20:58:382
967699651,43cyclictest31775-21taskset00:37:182
967699651,40cyclictest11660-21latency_hist20:45:112
9675996516,5cyclictest6526-21/usr/sbin/munin22:00:331
967699641,45cyclictest19977-21/usr/sbin/munin19:35:392
967699641,43cyclictest32767-21cat23:10:362
967699641,43cyclictest31546-21taskset20:10:212
967699641,43cyclictest26583-21df_inode21:25:292
967599642,11cyclictest7950irq/56-dwc_otg_22:30:391
9674996423,7cyclictest0-21swapper/021:20:200
967699634,35cyclictest7750irq/56-dwc_otg00:15:392
967699634,35cyclictest7750irq/56-dwc_otg00:15:392
967699631,48cyclictest20499-21runrttasks21:09:132
967699631,44cyclictest7850irq/56-dwc_otg_23:35:232
967499636,54cyclictest0-21swapper/000:35:270
967499631,39cyclictest0-21swapper/022:50:240
967699622,43cyclictest0-21swapper/223:19:102
967699621,48cyclictest1227-21fschecks_time20:15:292
967699621,43cyclictest29489-21taskset20:05:042
967699621,43cyclictest18648-21taskset21:03:432
967699621,42cyclictest6846-21fschecks_time22:00:282
967599622,6cyclictest7750irq/56-dwc_otg20:15:311
967699611,43cyclictest30777-21/usr/sbin/munin23:05:322
967699611,42cyclictest15232-21latency_hist19:25:102
967699611,40cyclictest25595-21chrt19:51:232
967699611,39cyclictest11849-21taskset23:42:402
967599613,5cyclictest7950irq/56-dwc_otg_21:20:101
9675996120,4cyclictest19339-21if_eth019:35:301
967499617,30cyclictest0-21swapper/023:00:230
967699604,12cyclictest0-21swapper/222:05:262
967699601,45cyclictest2729-21/usr/sbin/munin20:20:412
967699601,44cyclictest22506-21sshd22:43:382
967699601,39cyclictest29113-21irqstats00:30:322
967599601,6cyclictest7950irq/56-dwc_otg_20:50:281
967599601,6cyclictest7950irq/56-dwc_otg_20:50:281
93252603,14sleep10-21swapper/119:09:131
967699591,47cyclictest11519-21sshd22:11:382
967699591,44cyclictest4250-21chrt21:52:232
967599595,4cyclictest7950irq/56-dwc_otg_23:35:251
967599592,5cyclictest7750irq/56-dwc_otg23:40:301
967499597,11cyclictest7850irq/56-dwc_otg_21:50:230
967499591,46cyclictest0-21swapper/021:45:290
967699581,46cyclictest1124-21snmpd23:26:502
967699581,45cyclictest22813-21taskset00:13:132
967699581,44cyclictest1124-21snmpd23:56:572
967699581,40cyclictest26180-21chrt22:54:252
967699581,40cyclictest25836-21seq21:23:032
967699581,39cyclictest26508-21chrt00:24:062
967699581,36cyclictest0-21swapper/219:28:102
967599581,7cyclictest32027-21munin-run00:40:101
9675995812,9cyclictest0-21swapper/121:00:361
9674995828,5cyclictest0-21swapper/020:40:230
967799576,10cyclictest7850irq/56-dwc_otg_23:15:253
967699571,43cyclictest0-21swapper/219:59:462
967699571,42cyclictest12971-21sshd19:17:382
967699571,40cyclictest23969-21chrt19:48:462
967699571,38cyclictest0-21swapper/200:07:282
967699571,35cyclictest13101-21runrttasks20:47:342
967599576,10cyclictest7950irq/56-dwc_otg_19:25:401
9674995712,31cyclictest0-21swapper/019:10:130
967699561,42cyclictest0-21swapper/223:51:332
967699561,41cyclictest0-21swapper/222:30:352
967599565,4cyclictest7950irq/56-dwc_otg_00:05:111
967599562,18cyclictest0-21swapper/122:11:281
967599561,13cyclictest0-21swapper/121:50:111
967499561,42cyclictest0-21swapper/022:15:220
967499561,35cyclictest7474-21unixbench_singl20:30:370
967499561,33cyclictest0-21swapper/022:30:250
967499561,22cyclictest0-21swapper/019:45:200
967699551,37cyclictest604-21runrttasks21:41:542
967599553,4cyclictest31457-21cat20:10:111
967599553,4cyclictest31457-21cat20:10:111
967599551,5cyclictest28856-21ls20:00:361
967599551,4cyclictest1124-21snmpd22:06:361
9674995530,3cyclictest0-21swapper/021:45:100
967499551,26cyclictest0-21swapper/021:30:210
967499551,26cyclictest0-21swapper/021:30:210
967499551,18cyclictest20985-21fschecks_count19:40:260
967699542,39cyclictest0-21swapper/221:17:422
967699541,45cyclictest31424-21taskset21:38:582
967699541,41cyclictest7950irq/56-dwc_otg_23:02:372
967699541,40cyclictest0-21swapper/223:24:092
967699541,40cyclictest0-21swapper/223:24:092
967699541,39cyclictest0-21swapper/221:30:512
967699541,39cyclictest0-21swapper/221:30:512
967599544,6cyclictest7950irq/56-dwc_otg_19:20:261
967599543,4cyclictest7850irq/56-dwc_otg_21:20:291
967599542,5cyclictest7750irq/56-dwc_otg19:15:251
9674995437,5cyclictest7850irq/56-dwc_otg_19:40:100
9674995417,11cyclictest0-21swapper/023:30:250
967799531,41cyclictest0-21swapper/319:45:233
967699532,31cyclictest0-21swapper/222:25:112
967699531,45cyclictest0-21swapper/221:47:212
967699531,43cyclictest0-21swapper/222:19:482
967699531,37cyclictest0-21swapper/219:43:542
967699531,35cyclictest13505-21taskset23:45:442
967599532,6cyclictest7950irq/56-dwc_otg_21:55:341
967599531,4cyclictest0-21swapper/100:10:371
967499538,30cyclictest0-21swapper/023:25:280
9674995326,5cyclictest20932-21latency_hist22:40:110
967699521,48cyclictest27041-21/usr/sbin/munin00:25:252
967699521,47cyclictest8148-21apt-get20:35:252
967699521,47cyclictest20841-21apt-get21:10:212
967699521,41cyclictest19130-21chrt00:02:162
967699521,40cyclictest6003-21chrt20:29:072
967599524,8cyclictest0-21swapper/123:19:101
9674995224,4cyclictest0-21swapper/021:55:240
967499521,23cyclictest0-21swapper/020:05:220
967499521,23cyclictest0-21swapper/020:05:220
967699511,40cyclictest7950irq/56-dwc_otg_20:34:342
967599515,8cyclictest7950irq/56-dwc_otg_20:30:201
9675995116,4cyclictest4858-21cut20:25:291
967499517,25cyclictest0-21swapper/020:25:330
967499514,6cyclictest0-21swapper/020:15:400
967499513,4cyclictest30625-21ls23:05:300
9674995125,7cyclictest31931-21grep23:10:240
9674995123,14cyclictest7950irq/56-dwc_otg_23:20:400
9674995123,14cyclictest7950irq/56-dwc_otg_23:20:400
967499512,27cyclictest0-21swapper/020:15:090
967699501,46cyclictest8251-21sshd23:32:552
967699501,46cyclictest26531-21/usr/sbin/munin22:55:252
967599501,7cyclictest0-21swapper/121:55:101
967599501,13cyclictest0-21swapper/100:23:511
967499503,29cyclictest11-21rcu_preempt20:50:220
967499503,29cyclictest11-21rcu_preempt20:50:220
9674995028,7cyclictest16765-21grep22:25:390
967499502,34cyclictest0-21swapper/020:47:070
967499501,8cyclictest27846-21latency_hist20:00:110
967599491,4cyclictest7750irq/56-dwc_otg23:31:511
9674994935,4cyclictest13932-21ls23:50:110
967499493,27cyclictest0-21swapper/021:05:250
9674994930,4cyclictest18899-21unixbench_multi00:00:390
9674994926,3cyclictest0-21swapper/022:05:400
967499492,24cyclictest0-21swapper/000:35:100
967499491,17cyclictest27086-21uniq00:25:270
9675994810,4cyclictest24344-21sed00:15:401
9675994810,4cyclictest24344-21sed00:15:401
967499483,23cyclictest0-21swapper/019:30:240
967499482,27cyclictest8469-21fschecks_time20:35:290
967499481,26cyclictest15651-21fschecks_time19:25:290
967799477,25cyclictest0-21swapper/321:45:223
967599475,39cyclictest0-21swapper/122:15:341
967599474,7cyclictest0-21swapper/120:45:241
967599471,4cyclictest9948-21/usr/sbin/munin20:40:341
967499475,39cyclictest0-21swapper/022:40:290
967499475,12cyclictest21126-21uniq21:10:270
9674994722,13cyclictest12277-21grep19:15:330
92412473,36sleep00-21swapper/019:08:060
967799461,23cyclictest24745-21cut21:20:273
967599466,4cyclictest7950irq/56-dwc_otg_19:41:031
967599464,11cyclictest0-21swapper/123:55:251
967499462,24cyclictest0-21swapper/000:10:260
967499462,23cyclictest0-21swapper/020:55:250
9674994619,6cyclictest7850irq/56-dwc_otg_23:00:100
967499461,28cyclictest22695-21wget21:15:250
967499461,24cyclictest0-21swapper/021:35:260
967599457,24cyclictest0-21swapper/123:20:151
967599457,24cyclictest0-21swapper/123:20:151
967599457,24cyclictest0-21swapper/121:25:151
967599451,20cyclictest24519-21ls22:50:111
967499456,25cyclictest0-21swapper/023:50:240
967499452,39cyclictest25499-21sed19:50:380
967499452,26cyclictest0-21swapper/023:55:120
9674994519,14cyclictest0-21swapper/020:01:180
9674994518,4cyclictest23310-21if_wlan022:45:290
967499451,25cyclictest0-21swapper/020:20:290
967599443,11cyclictest7950irq/56-dwc_otg_21:10:111
967499446,26cyclictest0-21swapper/021:00:270
967499442,25cyclictest0-21swapper/019:20:140
9674994411,15cyclictest26786-21grep00:25:100
9674994410,18cyclictest0-21swapper/000:05:220
967799437,22cyclictest0-21swapper/322:10:163
967799431,6cyclictest0-21swapper/319:55:223
967499432,26cyclictest0-21swapper/022:00:140
967799427,21cyclictest0-21swapper/323:45:233
967799421,4cyclictest7950irq/56-dwc_otg_23:10:223
967499421,20cyclictest0-21swapper/023:38:580
967799417,24cyclictest0-21swapper/323:00:233
967799416,25cyclictest0-21swapper/300:00:163
967799416,21cyclictest39-21ksoftirqd/300:15:263
967799416,21cyclictest39-21ksoftirqd/300:15:263
967799411,2cyclictest0-21swapper/319:35:253
967599412,8cyclictest0-21swapper/123:45:221
967599411,3cyclictest0-21swapper/120:20:221
8142410,2sleep1221ktimersoftd/123:12:521
967799403,7cyclictest0-21swapper/320:00:223
967799403,10cyclictest39-21ksoftirqd/320:55:383
967799402,5cyclictest7850irq/56-dwc_otg_19:40:203
967799401,4cyclictest0-21swapper/322:00:243
9675994021,6cyclictest435-21cron19:55:101
967799395,6cyclictest7850irq/56-dwc_otg_19:30:243
9677993910,14cyclictest7850irq/56-dwc_otg_22:25:363
9675993919,4cyclictest6676-21latency_hist23:30:101
967499393,16cyclictest0-21swapper/022:20:290
967799381,8cyclictest0-21swapper/300:20:223
9677993815,7cyclictest37-21rcuc/321:25:163
967799377,25cyclictest0-21swapper/320:35:253
967799377,24cyclictest0-21swapper/323:20:163
967799377,24cyclictest0-21swapper/323:20:163
967799377,23cyclictest37-21rcuc/300:34:313
967799375,20cyclictest39-21ksoftirqd/320:45:103
967799373,10cyclictest7950irq/56-dwc_otg_20:10:263
967799371,25cyclictest25283-21missed_timers22:50:323
967599376,3cyclictest0-21swapper/122:25:281
9675993712,4cyclictest22938-21if_eth019:45:281
9674993711,15cyclictest1889-21date23:15:330
967799361,9cyclictest18322-21ls22:30:373
9675993615,5cyclictest27120-21fschecks_count00:25:281
967799357,14cyclictest0-21swapper/300:05:243
967799352,15cyclictest0-21swapper/323:35:223
967799351,9cyclictest0-21swapper/319:20:233
9677993515,5cyclictest1187650wget20:45:273
9677993515,4cyclictest39-21ksoftirqd/323:40:323
967599357,13cyclictest7950irq/56-dwc_otg_23:05:101
967599355,19cyclictest7850irq/56-dwc_otg_21:35:481
967599354,20cyclictest0-21swapper/122:20:261
967599353,4cyclictest0-21swapper/119:30:231
967799347,15cyclictest0-21swapper/319:15:153
967799346,6cyclictest7750irq/56-dwc_otg19:25:383
967799345,20cyclictest7950irq/56-dwc_otg_22:58:283
967799342,5cyclictest37-21rcuc/322:35:293
967799341,24cyclictest19222-21ls21:05:273
967599347,14cyclictest7950irq/56-dwc_otg_22:55:391
967599346,13cyclictest7850irq/56-dwc_otg_00:30:231
967599342,9cyclictest0-21swapper/121:33:371
967599342,9cyclictest0-21swapper/121:33:371
9675993415,5cyclictest408-21grep21:40:391
967799339,6cyclictest39-21ksoftirqd/320:15:373
967799339,12cyclictest14215-21idleruntime22:20:303
967799337,14cyclictest0-21swapper/321:30:243
967799337,14cyclictest0-21swapper/321:30:243
967799336,5cyclictest7750irq/56-dwc_otg20:25:263
967799332,5cyclictest37-21rcuc/323:05:273
967599332,16cyclictest7850irq/56-dwc_otg_21:10:241
9675993312,13cyclictest0-21swapper/120:35:401
967799329,5cyclictest7950irq/56-dwc_otg_00:10:363
967799328,5cyclictest468-21rs:main3
967799322,21cyclictest0-21swapper/321:53:223
9677993214,9cyclictest37-21rcuc/321:41:313
967599323,12cyclictest7950irq/56-dwc_otg_22:40:331
967599322,15cyclictest0-21swapper/123:52:431
9675993210,4cyclictest7750irq/56-dwc_otg00:05:221
967799316,15cyclictest0-21swapper/321:02:223
967799313,14cyclictest7950irq/56-dwc_otg_21:20:113
967799311,6cyclictest7950irq/56-dwc_otg_00:25:223
967799311,19cyclictest10030-21grep19:10:293
967799305,7cyclictest7950irq/56-dwc_otg_20:50:393
967799305,7cyclictest7950irq/56-dwc_otg_20:50:393
967799304,12cyclictest7950irq/56-dwc_otg_19:54:033
967799302,15cyclictest0-21swapper/322:05:483
967799301,9cyclictest5256-21wc21:55:323
967799301,9cyclictest12106-21cut22:15:223
967799301,6cyclictest3832-21unixbench_multi20:20:393
967799301,5cyclictest20890-21aten_rbpower_en21:10:243
967599307,19cyclictest0-21swapper/120:55:241
967599302,4cyclictest7850irq/56-dwc_otg_22:50:351
967799299,6cyclictest39-21ksoftirqd/323:35:113
967799294,5cyclictest7950irq/56-dwc_otg_22:45:113
967799292,15cyclictest30451-21/usr/sbin/munin00:35:363
967799292,10cyclictest37-21rcuc/323:51:043
967799291,22cyclictest0-21swapper/323:55:263
967599295,4cyclictest7750irq/56-dwc_otg20:00:101
9675992920,4cyclictest3159150wget20:10:251
9675992915,5cyclictest20220-21cat22:35:381
94542297,10sleep30-21swapper/319:10:123
967799284,11cyclictest7950irq/56-dwc_otg_22:49:243
967799282,12cyclictest7950irq/56-dwc_otg_20:05:313
967799282,12cyclictest7950irq/56-dwc_otg_20:05:313
967799281,17cyclictest0-21swapper/321:35:253
967799281,13cyclictest7950irq/56-dwc_otg_20:35:103
92332253,15sleep20-21swapper/219:08:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional