You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-12-10 - 13:07

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot7s.osadl.org (updated Tue Dec 10, 2024 00:44:00)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2036628657,27sleep30-21swapper/319:06:033
2055126649,10sleep10-21swapper/119:08:251
2077899310,30cyclictest7744-21snmpd21:31:153
2077899294,23cyclictest502-21rs:main3
2077899281,3cyclictest1751-21apt-get20:45:133
2077899281,2cyclictest0-21swapper/321:18:353
2077899274,22cyclictest13383-21diskmemload23:18:483
2077899273,21cyclictest0-21swapper/319:25:273
2077899270,2cyclictest0-21swapper/321:20:143
2077899263,22cyclictest7744-21snmpd20:35:153
2077899261,2cyclictest1572-21turbostat.cron00:20:003
2077899260,20cyclictest0-21swapper/321:05:143
2077899260,20cyclictest0-21swapper/321:05:133
2077499260,25cyclictest0-21swapper/221:41:092
2077899255,16cyclictest224-21systemd-journal00:07:223
2077899252,1cyclictest558-21lldpd19:55:143
2077899251,4cyclictest558-21lldpd20:55:153
2077899251,23cyclictest20291-21wc21:40:013
2077899250,2cyclictest0-21swapper/322:03:363
2077899250,1cyclictest0-21swapper/321:43:173
2077899243,1cyclictest20686-21apt-get23:20:143
2077899242,3cyclictest224-21systemd-journal21:14:373
2077899241,5cyclictest502-21rs:main3
2077899241,2cyclictest13870-21ssh00:30:143
2077899241,1cyclictest558-21lldpd20:40:153
2077899241,1cyclictest13383-21diskmemload22:25:503
2077899241,19cyclictest0-21swapper/320:25:173
2077899232,18cyclictest0-21swapper/320:15:133
2077899231,2cyclictest0-21swapper/322:56:573
2077899231,21cyclictest0-21swapper/319:30:133
2077899230,2cyclictest0-21swapper/322:54:393
20769992313,2cyclictest221irq_work/121:20:101
2076699230,20cyclictest11416-21ssh22:47:350
2077899227,14cyclictest558-21lldpd19:35:223
2077899222,1cyclictest20089-21apt-get22:30:133
2077899220,3cyclictest8613-21irqstats19:50:203
2077899220,3cyclictest0-21swapper/322:19:033
2077899220,2cyclictest0-21swapper/321:53:393
2077899220,1cyclictest0-21swapper/323:01:263
2077899220,18cyclictest13383-21diskmemload21:45:353
20774992218,1cyclictest32-21ksoftirqd/223:06:442
2077499221,20cyclictest37850irq/131-snd_hda20:35:152
2077499220,21cyclictest0-21swapper/220:15:152
2076999223,18cyclictest0-21swapper/100:20:131
2076699221,20cyclictest2892-21ssh22:40:350
2077899219,11cyclictest0-21swapper/322:05:243
2077899214,11cyclictest25836-21apache_volume19:20:113
2077899212,1cyclictest558-21lldpd20:30:243
2077899211,2cyclictest558-21lldpd19:15:163
2077899211,2cyclictest5376-21aten2_r7power_e19:45:173
2077899211,1cyclictest558-21lldpd21:00:223
2077899210,3cyclictest3634-21fschecks_time19:40:193
2077899210,3cyclictest3634-21fschecks_time19:40:183
2077899210,1cyclictest18284-21kworker/u8:200:13:243
2077499219,6cyclictest32-21ksoftirqd/223:51:162
2077499215,6cyclictest224-21systemd-journal21:35:402
20769992113,5cyclictest500-21in:imuxsock21:45:231
2076699210,20cyclictest13383-21diskmemload22:36:510
2076699210,20cyclictest13383-21diskmemload22:36:500
2077899203,1cyclictest13383-21diskmemload23:51:133
2077899202,17cyclictest13383-21diskmemload23:28:143
2077899200,4cyclictest0-21swapper/323:55:433
2077899200,4cyclictest0-21swapper/323:55:423
2077899200,3cyclictest0-21swapper/322:40:053
2077899200,2cyclictest0-21swapper/323:41:233
2077899200,2cyclictest0-21swapper/300:00:273
2077899200,19cyclictest13383-21diskmemload00:20:023
2077899200,19cyclictest0-21swapper/320:00:163
2077499200,1cyclictest0-21swapper/222:31:572
2077499200,1cyclictest0-21swapper/222:20:032
2077499200,1cyclictest0-21swapper/200:37:222
2076999207,6cyclictest224-21systemd-journal21:40:321
2076999202,2cyclictest26334-21awk22:35:001
20766992017,3cyclictest13-21ksoftirqd/000:07:530
2076699200,10cyclictest224-21systemd-journal21:41:310
2077899197,10cyclictest7744-21snmpd20:20:223
2077899191,1cyclictest13383-21diskmemload23:39:043
2077899190,2cyclictest26104-21cpuspeed_turbos22:10:153
2077899190,2cyclictest0-21swapper/323:30:363
2077899190,2cyclictest0-21swapper/320:05:283
20774991910,6cyclictest7744-21snmpd21:24:202
2076999198,3cyclictest224-21systemd-journal21:33:561
2076999194,5cyclictest224-21systemd-journal21:39:021
2077899182,1cyclictest7744-21snmpd20:50:133
2077899181,6cyclictest0-21swapper/300:28:243
2077899180,2cyclictest0-21swapper/322:20:263
2077899180,1cyclictest0-21swapper/322:37:033
2077899180,1cyclictest0-21swapper/322:37:023
2077499182,15cyclictest7744-21snmpd20:49:592
2077499180,18cyclictest0-21swapper/223:38:312
2077499180,18cyclictest0-21swapper/222:58:442
2077499180,17cyclictest0-21swapper/223:21:492
2076999180,1cyclictest0-21swapper/122:40:111
2076999180,17cyclictest0-21swapper/122:11:591
2076699186,6cyclictest7478-21munin-run00:25:000
20766991813,4cyclictest558-21lldpd21:30:450
2076699180,2cyclictest0-21swapper/023:59:150
2076699180,2cyclictest0-21swapper/023:59:140
2077899171,15cyclictest0-21swapper/323:11:203
20774991714,2cyclictest32-21ksoftirqd/222:50:032
2077499170,17cyclictest0-21swapper/222:10:162
2076999174,9cyclictest32436-21tune2fs20:40:171
2076999173,5cyclictest224-21systemd-journal21:18:461
2076999171,0cyclictest141rcu_preempt21:10:121
2076999170,12cyclictest13383-21diskmemload22:02:521
2076699177,8cyclictest7744-21snmpd21:20:130
2077899160,7cyclictest25700-21runrttasks23:47:573
2077899160,2cyclictest0-21swapper/319:10:143
2077499166,9cyclictest32-21ksoftirqd/221:32:252
2077499166,6cyclictest32-21ksoftirqd/219:47:422
20774991612,3cyclictest27258-21ls19:20:252
2076999167,1cyclictest141rcu_preempt19:10:371
2076999165,10cyclictest28218-21apt-get19:25:141
2076999161,8cyclictest224-21systemd-journal21:29:301
20769991612,2cyclictest22341-21smartctl23:45:191
2076999161,1cyclictest16572-21cat23:40:281
2076699168,4cyclictest6523-21lsb_release23:09:230
2076699166,4cyclictest500-21in:imuxsock21:25:290
2076699161,2cyclictest7744-21snmpd19:25:140
20766991612,4cyclictest558-21lldpd19:51:410
2077899150,4cyclictest25710-21wc00:40:003
2077899150,2cyclictest4302-21ssh23:07:053
20774991513,1cyclictest7744-21snmpd19:30:122
20774991512,2cyclictest32-21ksoftirqd/221:15:202
20774991512,2cyclictest311rcuc/221:28:372
2077499150,1cyclictest0-21swapper/223:04:132
2077499150,14cyclictest0-21swapper/221:57:462
2076999157,7cyclictest502-21rs:main1
2076999153,6cyclictest224-21systemd-journal19:16:461
2076999151,3cyclictest224-21systemd-journal19:40:141
2076999151,3cyclictest224-21systemd-journal19:40:131
2076999150,14cyclictest0-21swapper/122:55:141
2076699154,6cyclictest19347-21idleruntime-cro20:15:000
20766991513,2cyclictest13-21ksoftirqd/000:34:530
20766991511,1cyclictest558-21lldpd20:46:360
20766991510,3cyclictest14205-21head22:25:170
2076699150,1cyclictest0-21swapper/021:51:470
20778991410,3cyclictest8520-21wc22:45:213
2077899140,1cyclictest6051-21ssh21:55:093
2077499149,3cyclictest782-21ls21:50:002
2077499142,7cyclictest14195-21users20:00:302
2077499142,1cyclictest0-21swapper/220:08:202
2077499141,7cyclictest1493-21basename20:45:002
20774991412,1cyclictest32-21ksoftirqd/222:46:172
20774991411,2cyclictest32-21ksoftirqd/220:50:152
20774991411,2cyclictest32-21ksoftirqd/219:55:222
20774991411,2cyclictest27479-21cut20:30:182
20774991410,3cyclictest23106-21turbostat19:14:592
20774991410,2cyclictest8041-21wc20:55:282
2077499140,3cyclictest18197-21ssh00:06:222
2077499140,1cyclictest0-21swapper/200:34:442
2077499140,13cyclictest0-21swapper/200:02:182
2076999146,4cyclictest224-21systemd-journal20:20:271
2076999144,2cyclictest224-21systemd-journal19:47:131
2076999143,2cyclictest224-21systemd-journal20:53:131
2076999142,3cyclictest224-21systemd-journal19:35:121
2076999141,9cyclictest224-21systemd-journal21:05:191
2076999141,9cyclictest224-21systemd-journal21:05:181
20769991414,0cyclictest0-21swapper/122:22:551
2076999140,7cyclictest141rcu_preempt20:34:401
2076999140,14cyclictest0-21swapper/122:37:171
2076999140,14cyclictest0-21swapper/122:37:161
2076699145,5cyclictest224-21systemd-journal20:55:160
2076699144,5cyclictest224-21systemd-journal21:13:270
2076699144,4cyclictest1472-21cron20:44:590
2076699143,9cyclictest29189-21apt-get20:35:150
2076699142,0cyclictest0-21swapper/022:16:250
20766991411,2cyclictest31265-21grep19:30:170
20766991411,2cyclictest28290-21head21:45:220
20766991410,2cyclictest16594-21ssh21:36:040
2077499139,3cyclictest3391-21grep23:30:272
2077499138,4cyclictest2372-21taskset19:36:352
2077499138,4cyclictest0-21swapper/222:15:142
2077499138,4cyclictest0-21swapper/220:25:032
2077499136,3cyclictest224-21systemd-journal21:05:152
2077499136,3cyclictest224-21systemd-journal21:05:142
2077499134,4cyclictest224-21systemd-journal19:52:522
2077499132,2cyclictest311rcuc/223:40:172
20774991310,2cyclictest32-21ksoftirqd/221:11:462
2077499130,2cyclictest17798-21kworker/u8:023:26:212
2077499130,0cyclictest0-21swapper/200:16:132
2076999134,5cyclictest224-21systemd-journal20:05:191
2076999133,5cyclictest224-21systemd-journal20:04:451
2076999133,4cyclictest224-21systemd-journal20:35:431
20769991313,0cyclictest0-21swapper/123:50:281
20769991310,2cyclictest9920-21cat21:00:221
20769991310,2cyclictest2825-21cat20:45:211
20769991310,2cyclictest26867-21wc19:20:191
20769991310,2cyclictest25-21ksoftirqd/120:10:201
20769991310,2cyclictest17069-21cat00:05:271
20769991310,2cyclictest14193-21basename23:15:131
2076999130,1cyclictest0-21swapper/100:16:241
2076999130,12cyclictest263092sleep120:27:121
2076999130,12cyclictest13506-21cat00:30:011
2076699139,3cyclictest1965-21ls19:35:270
2076699139,2cyclictest11126-21cat19:55:190
2076699137,4cyclictest13-21ksoftirqd/022:52:380
2076699135,5cyclictest7744-21snmpd20:24:380
2076699135,5cyclictest25426-21apache223:30:130
2076699134,4cyclictest500-21in:imuxsock20:30:190
2076699133,7cyclictest7744-21snmpd23:52:220
20766991310,2cyclictest6337-21tr21:55:100
20766991310,2cyclictest5820-21grep20:50:260
20766991310,2cyclictest23579-21ssh21:16:280
20766991310,2cyclictest20355-21head20:15:180
2076699130,12cyclictest4924-21seq19:43:350
2076699130,12cyclictest4924-21seq19:43:340
2076699130,11cyclictest14985-21ssh00:05:000
2077499129,2cyclictest9879-21cat21:00:212
2077499129,2cyclictest463-21cat22:40:012
2077499129,2cyclictest463-21cat22:40:012
2077499129,2cyclictest3650-21grep19:40:192
2077499129,2cyclictest3650-21grep19:40:182
2077499129,2cyclictest28180-21seq19:25:112
2077499129,2cyclictest23050-21sort00:10:252
2077499129,2cyclictest22451-21expr20:20:142
2077499129,2cyclictest22249-21head23:45:192
2077499129,2cyclictest18368-21ntpq20:10:192
2077499129,2cyclictest162722sleep222:26:242
2077499129,2cyclictest13825-21cat23:15:002
2077499128,3cyclictest32-21ksoftirqd/219:15:182
20774991210,1cyclictest32-21ksoftirqd/200:26:102
20774991210,1cyclictest14295-21grep23:15:142
2076999129,2cyclictest8568-21cat22:45:221
2076999129,2cyclictest20374-21ntpq22:05:221
2076999129,2cyclictest15309-21sed22:25:271
2076999129,2cyclictest100312sleep119:55:091
2076999128,3cyclictest8268-21chrt20:55:491
2076999128,3cyclictest17053-21sh22:51:281
2076999126,4cyclictest27417-21aten2_r7power_e23:25:151
2076999125,1cyclictest141rcu_preempt19:52:511
2076999124,4cyclictest224-21systemd-journal20:15:191
2076999123,5cyclictest224-21systemd-journal19:33:281
2076999120,3cyclictest224-21systemd-journal00:05:001
2076699129,2cyclictest8789-21rm00:25:190
2076699129,2cyclictest25109-21grep20:25:190
2076699129,2cyclictest20544-21basename22:55:120
2076699129,2cyclictest11761-21df21:05:160
2076699129,2cyclictest11761-21df21:05:150
2076699128,3cyclictest20761-21ssh23:44:460
2076699124,7cyclictest26990-21ntp_states19:20:210
2076699124,4cyclictest224-21systemd-journal19:15:190
2076699123,3cyclictest224-21systemd-journal19:12:460
2076699123,2cyclictest224-21systemd-journal19:45:200
2076699120,11cyclictest26118-21wc22:10:160
204382121,1sleep2558-21lldpd19:06:582
2077499118,2cyclictest5066-21ssh23:56:242
2077499118,2cyclictest5066-21ssh23:56:232
2077499118,2cyclictest3006-21ssh21:52:112
2077499118,2cyclictest12403-21ssh22:00:012
2077499118,1cyclictest3367-21sh22:41:062
2077499116,2cyclictest22872-21ssh22:07:272
2076999119,1cyclictest21889-21cat23:20:201
2076999118,2cyclictest8377-21sed23:10:181
2076999118,2cyclictest7648-21ssh23:59:151
2076999118,2cyclictest7648-21ssh23:59:141
2076999118,2cyclictest7201-21ssh23:34:401
2076999118,2cyclictest5995-21ssh23:08:551
2076999118,2cyclictest4550-21ssh22:18:071
2076999118,2cyclictest24941-21taskset00:39:161
2076999118,2cyclictest24098-21sed00:10:361
2076999118,2cyclictest17258-21sh00:32:101
2076999118,2cyclictest1687-21ssh21:50:441
2076999118,2cyclictest14534-21cat23:39:591
2076999110,10cyclictest6993-21ssh21:55:151
2076699118,2cyclictest8597-21expr23:35:150
2076699118,2cyclictest30884-21head00:15:300
2076699118,2cyclictest25506-21ssh23:47:440
2076699118,2cyclictest20852-21grep23:20:140
2076699118,2cyclictest20338-21grep22:30:140
2076699118,2cyclictest15372-21grep23:15:210
2076699118,2cyclictest11689-21ssh22:23:390
2076699118,2cyclictest1077-21perf23:30:000
2076699118,2cyclictest10266-21ssh23:11:170
2076699117,3cyclictest28370-21cut00:15:000
2076699114,4cyclictest224-21systemd-journal21:00:150
2076699113,4cyclictest224-21systemd-journal20:09:190
2076699113,4cyclictest224-21systemd-journal20:00:170
2076699110,10cyclictest19079-21sh22:05:090
205922113,4sleep0558-21lldpd19:08:560
2077499107,1cyclictest4711-21ssh00:21:282
2076699108,1cyclictest22094-21ssh00:35:490
2076699107,2cyclictest27655-21cut23:00:200
2076699107,2cyclictest12399-21ssh22:00:020
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional