You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-16 - 00:55

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackbslot5s.osadl.org (updated Thu May 15, 2025 12:44:57)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1726850995243,5cyclictest1778768-21sendmail09:40:000
1726859995137,10cyclictest311ktimers/207:45:132
1726850995140,7cyclictest1728861-21gpgv07:15:020
1726864994431,8cyclictest1795890-21apt-config10:30:003
1726859994434,6cyclictest1811438-21cron11:15:012
1726855994336,4cyclictest1763461-21sh08:55:001
1726850994336,4cyclictest1833737-21idleruntime-cro12:20:010
1726850994332,7cyclictest1818033-21grep11:30:270
1726850994233,6cyclictest1774913-21grep09:25:270
1726864994130,6cyclictest1764735-21grep08:55:283
1726859994133,4cyclictest0-21swapper/207:15:022
1726855994032,4cyclictest1739495-21munin-plugin-st07:45:021
1726850994033,5cyclictest121ktimers/009:20:150
1726850994033,5cyclictest121ktimers/009:20:150
1726850994026,8cyclictest1828188-21grep12:00:370
1726855993931,4cyclictest0-21swapper/110:20:001
1726850993930,5cyclictest1806138-21munin-plugin-st11:00:010
1726850993928,8cyclictest1780057-21grep09:40:260
1726864993829,4cyclictest0-21swapper/308:40:163
1726859993828,7cyclictest311ktimers/207:55:142
1726864993729,4cyclictest0-21swapper/309:20:003
1726859993730,4cyclictest0-21swapper/210:50:002
1726859993727,6cyclictest1836666-21grep12:25:322
1726859993727,6cyclictest1836666-21grep12:25:312
1726850993730,3cyclictest0-21swapper/007:15:030
1726850993730,3cyclictest0-21swapper/007:15:030
1726850993726,7cyclictest1764738-21unixbench_singl08:55:280
1726864993626,5cyclictest1750880-21tail08:15:273
1726864993625,7cyclictest1802739-21sh10:49:593
1726864993624,6cyclictest0-21swapper/311:50:283
1726864993624,6cyclictest0-21swapper/311:50:283
1726859993626,7cyclictest311ktimers/209:00:122
1726850993629,4cyclictest1788948-21sh10:10:000
1726850993626,6cyclictest0-21swapper/008:20:270
1726850993620,14cyclictest11-21ksoftirqd/011:55:130
1726864993527,4cyclictest0-21swapper/310:55:273
1726855993527,4cyclictest0-21swapper/108:00:191
1726850993528,4cyclictest1747973-21idleruntime-cro08:10:010
1726850993527,4cyclictest0-21swapper/011:20:270
1726850993527,4cyclictest0-21swapper/007:35:280
1726864993426,4cyclictest0-21swapper/308:54:593
1726864993425,5cyclictest0-21swapper/307:55:163
1726864993425,4cyclictest0-21swapper/312:35:273
1726864993425,4cyclictest0-21swapper/312:35:263
1726864993425,4cyclictest0-21swapper/307:35:283
1726864993424,6cyclictest0-21swapper/308:20:283
1726859993425,4cyclictest0-21swapper/212:35:172
1726859993425,4cyclictest0-21swapper/212:35:172
1726859993424,6cyclictest0-21swapper/210:05:012
1726855993426,3cyclictest0-21swapper/109:55:001
1726855993425,6cyclictest1739902-21fschecks_time07:45:171
1726855993424,5cyclictest0-21swapper/111:40:171
1726850993427,4cyclictest1813141-21munin-plugin-st11:20:000
1726850993416,15cyclictest11-21ksoftirqd/011:50:130
1726850993416,15cyclictest11-21ksoftirqd/011:50:120
1726864993325,3cyclictest0-21swapper/309:10:163
1726864993319,9cyclictest1826961-21basename11:59:593
1726855993323,6cyclictest0-21swapper/109:20:011
1726850993326,3cyclictest0-21swapper/008:10:280
1726864993227,3cyclictest1792768-21fschecks_count10:20:193
1726864993224,4cyclictest0-21swapper/310:35:273
1726864993224,4cyclictest0-21swapper/310:35:273
1726864993224,4cyclictest0-21swapper/307:20:003
1726864993224,4cyclictest0-21swapper/307:20:003
1726864993223,7cyclictest1761776-21cut08:50:003
1726864993223,5cyclictest0-21swapper/309:40:003
1726864993222,6cyclictest0-21swapper/307:40:263
1726859993226,4cyclictest1739089-21unixbench_singl07:40:272
1726859993224,4cyclictest0-21swapper/210:30:272
1726859993224,4cyclictest0-21swapper/210:30:262
1726855993224,5cyclictest1778752-21munin-run09:40:001
1726855993224,4cyclictest0-21swapper/110:35:261
1726855993224,4cyclictest0-21swapper/110:35:261
1726855993222,8cyclictest231ktimers/108:25:131
1726855993221,8cyclictest1816694-21latency_hist11:30:021
1726850993226,3cyclictest0-21swapper/010:25:260
1726850993225,3cyclictest0-21swapper/011:00:170
1726850993222,6cyclictest0-21swapper/012:20:240
1726864993123,5cyclictest1816541-21idleruntime-cro11:30:013
1726864993123,4cyclictest0-21swapper/311:15:273
1726864993122,4cyclictest0-21swapper/312:30:263
1726864993122,4cyclictest0-21swapper/312:30:263
1726864993122,4cyclictest0-21swapper/309:45:303
1726864993119,7cyclictest1834979-21unixbench_multi12:20:243
1726859993124,4cyclictest0-21swapper/209:45:292
1726859993124,3cyclictest0-21swapper/208:35:192
1726859993124,3cyclictest0-21swapper/208:35:182
1726859993123,4cyclictest0-21swapper/211:15:282
1726855993124,4cyclictest0-21swapper/112:20:241
1726855993124,3cyclictest0-21swapper/111:40:001
1726855993124,3cyclictest0-21swapper/111:40:001
1726855993123,4cyclictest0-21swapper/111:20:271
172685599311,27cyclictest1756658-21cron08:35:011
172685599311,27cyclictest1756658-21cron08:35:011
1726850993123,4cyclictest0-21swapper/007:20:280
1726850993123,4cyclictest0-21swapper/007:20:280
1726850993122,6cyclictest1799342-21auditctl10:40:000
1726850993122,6cyclictest1799342-21auditctl10:40:000
1726864993021,7cyclictest391ktimers/309:25:133
1726864993019,7cyclictest1733992-21grep07:25:313
1726859993023,4cyclictest0-21swapper/211:05:272
1726859993021,6cyclictest1750953-21grep08:15:272
1726859993021,6cyclictest1747517-21unixbench_multi08:05:272
1726859993021,6cyclictest0-21swapper/210:00:012
1726859993016,10cyclictest311ktimers/211:45:132
1726859993016,10cyclictest311ktimers/211:45:132
1726855993023,4cyclictest1757069-21fschecks_count08:35:151
1726855993023,4cyclictest1757069-21fschecks_count08:35:151
1726855993023,4cyclictest0-21swapper/110:30:011
1726855993022,4cyclictest0-21swapper/110:30:181
1726855993022,4cyclictest0-21swapper/110:30:181
1726855993021,6cyclictest1836669-21unixbench_multi12:25:321
1726855993021,6cyclictest1836669-21unixbench_multi12:25:321
1726855993021,4cyclictest0-21swapper/111:30:261
1726855993020,6cyclictest0-21swapper/110:10:011
1726855993020,6cyclictest0-21swapper/108:15:271
1726855993020,6cyclictest0-21swapper/107:35:011
1726850993022,4cyclictest0-21swapper/010:44:590
1726850993019,7cyclictest1758356-21sh08:40:010
1726850993019,7cyclictest1758356-21sh08:40:010
1726864992922,5cyclictest1754753-21kworker/u8:0+events_unbound08:31:433
1726864992922,5cyclictest1754753-21kworker/u8:0+events_unbound08:31:423
1726864992922,3cyclictest0-21swapper/311:10:013
1726864992922,3cyclictest0-21swapper/310:20:013
1726864992921,5cyclictest1728932-21latency_hist07:15:023
1726864992917,7cyclictest0-21swapper/312:00:363
1726859992921,4cyclictest0-21swapper/210:30:012
1726859992920,6cyclictest0-21swapper/212:30:262
1726859992920,6cyclictest0-21swapper/212:30:252
1726859992919,5cyclictest0-21swapper/209:20:012
1726859992918,7cyclictest0-21swapper/211:40:012
1726859992918,7cyclictest0-21swapper/211:40:012
1726855992921,4cyclictest1753079-21munin-plugin-st08:25:001
1726855992921,4cyclictest0-21swapper/109:30:251
1726855992921,4cyclictest0-21swapper/108:45:001
1726855992919,6cyclictest0-21swapper/110:44:591
1726850992922,5cyclictest11-21ksoftirqd/008:00:130
1726850992921,5cyclictest1791937-21grep10:15:260
1726850992920,7cyclictest1815615-21ntp_kernel_pll_11:25:220
172685099291,4cyclictest131rcu_preempt09:45:160
1726864992820,4cyclictest0-21swapper/311:00:283
1726864992817,8cyclictest1797702-21date10:35:003
1726864992817,8cyclictest1797702-21date10:35:003
172686499281,6cyclictest131rcu_preempt11:35:133
172686499281,6cyclictest131rcu_preempt11:35:133
1726859992821,4cyclictest1756660-21cron08:35:002
1726859992821,4cyclictest1756660-21cron08:35:002
1726859992821,3cyclictest0-21swapper/211:50:282
1726859992821,3cyclictest0-21swapper/211:50:282
1726859992820,4cyclictest0-21swapper/208:10:272
1726859992818,6cyclictest1753100-21latency_hist08:25:012
1726859992818,3cyclictest0-21swapper/209:20:122
1726859992818,3cyclictest0-21swapper/209:20:122
1726859992816,9cyclictest311ktimers/209:35:142
1726855992820,4cyclictest0-21swapper/109:29:591
1726855992820,4cyclictest0-21swapper/107:15:001
1726855992819,6cyclictest1825230-21cron11:54:591
1726855992819,6cyclictest1825230-21cron11:54:591
1726855992817,6cyclictest0-21swapper/108:10:271
1726850992818,6cyclictest0-21swapper/010:10:260
1726864992721,3cyclictest0-21swapper/312:25:283
1726864992721,3cyclictest0-21swapper/312:25:283
1726864992721,3cyclictest0-21swapper/309:00:153
1726864992721,3cyclictest0-21swapper/308:10:003
1726864992719,3cyclictest0-21swapper/309:55:293
1726864992718,6cyclictest1818036-21unixbench_singl11:30:273
172686499271,23cyclictest391ktimers/309:30:233
1726859992721,4cyclictest1804441-21idleruntime-cro10:55:002
1726859992720,4cyclictest1821390-21grep11:40:272
1726859992720,4cyclictest0-21swapper/211:25:262
1726859992719,4cyclictest0-21swapper/207:15:042
1726859992719,4cyclictest0-21swapper/207:15:032
1726859992718,6cyclictest1829041-21fschecks_count12:05:162
1726859992715,9cyclictest1734604-21seq07:30:042
1726855992719,4cyclictest0-21swapper/111:50:001
1726855992719,4cyclictest0-21swapper/111:50:001
1726855992717,6cyclictest0-21swapper/111:05:261
1726855992717,6cyclictest0-21swapper/109:20:451
1726855992717,6cyclictest0-21swapper/109:20:451
1726855992717,6cyclictest0-21swapper/108:05:281
1726850992717,6cyclictest1785098-21grep09:55:290
1726850992715,8cyclictest0-21swapper/007:25:300
1726864992619,3cyclictest0-21swapper/307:45:153
1726864992618,5cyclictest0-21swapper/311:10:283
1726864992616,6cyclictest0-21swapper/312:20:013
1726859992619,4cyclictest0-21swapper/208:30:012
1726859992618,5cyclictest0-21swapper/211:20:262
1726859992618,5cyclictest0-21swapper/209:55:002
1726859992618,5cyclictest0-21swapper/208:05:012
1726859992618,4cyclictest0-21swapper/212:20:012
1726859992618,4cyclictest0-21swapper/207:35:192
1726859992618,4cyclictest0-21swapper/207:20:182
1726859992618,4cyclictest0-21swapper/207:20:182
1726859992617,5cyclictest0-21swapper/210:15:252
1726855992619,4cyclictest0-21swapper/112:20:001
1726855992619,3cyclictest0-21swapper/107:15:021
1726855992619,3cyclictest0-21swapper/107:15:021
1726855992616,6cyclictest0-21swapper/112:30:261
1726855992616,6cyclictest0-21swapper/112:30:251
1726855992616,6cyclictest0-21swapper/112:00:371
1726855992614,7cyclictest0-21swapper/110:00:001
1726850992619,4cyclictest0-21swapper/007:40:220
1726850992617,5cyclictest0-21swapper/008:25:210
1726850992613,10cyclictest121ktimers/008:15:140
1726864992519,3cyclictest0-21swapper/311:45:163
1726864992519,3cyclictest0-21swapper/311:45:153
1726864992519,3cyclictest0-21swapper/307:20:193
1726864992519,3cyclictest0-21swapper/307:20:193
1726864992518,5cyclictest0-21swapper/309:25:013
1726864992518,5cyclictest0-21swapper/309:25:003
1726864992517,4cyclictest0-21swapper/312:10:183
1726864992517,4cyclictest0-21swapper/310:10:263
1726864992515,6cyclictest1768145-21grep09:05:273
1726859992519,4cyclictest1762211-21fschecks_time08:50:182
1726859992519,3cyclictest0-21swapper/208:55:242
1726859992518,4cyclictest0-21swapper/210:05:262
1726859992516,5cyclictest0-21swapper/210:40:002
1726859992516,5cyclictest0-21swapper/210:39:592
1726855992518,4cyclictest0-21swapper/107:50:181
1726855992517,4cyclictest0-21swapper/110:10:271
1726855992516,5cyclictest0-21swapper/108:59:591
1726855992514,7cyclictest1802300-21unixbench_multi10:45:271
1726855992514,6cyclictest1840057-21grep12:35:271
1726855992514,6cyclictest1840057-21grep12:35:261
1726850992519,3cyclictest1771492-21unixbench_multi09:15:280
1726850992519,3cyclictest1769848-21unixbench_singl09:10:260
1726850992518,4cyclictest1793632-21unixbench_singl10:20:270
1726850992518,4cyclictest0-21swapper/009:10:000
1726850992515,6cyclictest0-21swapper/008:50:340
1726850992514,6cyclictest0-21swapper/008:30:320
1726850992514,6cyclictest0-21swapper/008:30:310
1726864992418,3cyclictest0-21swapper/309:50:183
1726864992417,3cyclictest0-21swapper/309:40:203
1726864992415,6cyclictest1746420-21ls08:05:013
1726864992415,6cyclictest1734798-21tune2fs07:30:173
1726859992418,3cyclictest0-21swapper/211:55:222
1726859992416,6cyclictest1804902-21cut10:55:172
1726859992414,7cyclictest0-21swapper/209:25:212
172685599248,3cyclictest131rcu_preempt09:09:541
1726855992416,6cyclictest1828480-21kworker/u8:3+events_unbound12:11:181
1726855992415,6cyclictest0-21swapper/107:40:011
1726855992414,6cyclictest0-21swapper/112:10:001
172685099242,18cyclictest1742972-21latency_hist07:55:020
1726850992419,3cyclictest0-21swapper/009:05:020
1726850992418,3cyclictest0-21swapper/009:30:250
1726850992417,3cyclictest0-21swapper/010:50:220
172685099241,19cyclictest0-21swapper/012:36:550
172685099241,19cyclictest0-21swapper/012:36:550
172685099241,19cyclictest0-21swapper/011:36:050
172685099241,19cyclictest0-21swapper/011:36:040
172685099241,19cyclictest0-21swapper/011:08:310
172685099241,19cyclictest0-21swapper/010:46:140
172685099241,19cyclictest0-21swapper/008:41:390
1726864992317,3cyclictest0-21swapper/311:45:003
1726864992317,3cyclictest0-21swapper/311:20:203
1726864992316,4cyclictest391ktimers/310:05:153
1726864992315,5cyclictest1800052-21sort10:40:203
1726864992314,5cyclictest1754578-21grep08:25:263
1726859992317,3cyclictest0-21swapper/210:40:152
1726859992317,3cyclictest0-21swapper/209:40:252
1726859992316,3cyclictest0-21swapper/210:20:272
1726859992314,6cyclictest1817092-21df_inode11:30:152
1726859992314,6cyclictest1768103-21grep09:05:272
1726859992314,6cyclictest1761596-21seq08:48:022
1726859992313,7cyclictest1770212-21seq09:14:332
172685599236,7cyclictest131rcu_preempt09:47:271
1726855992317,3cyclictest0-21swapper/109:10:261
1726855992315,6cyclictest231ktimers/111:55:131
1726855992315,4cyclictest0-21swapper/110:55:171
1726855992314,5cyclictest0-21swapper/109:00:261
1726855992312,8cyclictest1779447-21seq09:40:201
172685099231,8cyclictest1811060-21users11:10:290
1726850992317,3cyclictest0-21swapper/011:40:160
1726850992317,3cyclictest0-21swapper/010:30:260
1726850992317,3cyclictest0-21swapper/010:30:250
1726850992316,3cyclictest13950irq/36-mmc107:50:010
1726850992316,3cyclictest0-21swapper/012:28:590
1726850992316,3cyclictest0-21swapper/012:28:580
1726850992316,3cyclictest0-21swapper/011:49:520
1726850992316,3cyclictest0-21swapper/011:49:520
172685099231,18cyclictest0-21swapper/009:51:440
1726864992212,7cyclictest1741878-21sed07:50:233
1726859992216,3cyclictest0-21swapper/212:20:122
1726859992216,3cyclictest0-21swapper/212:10:182
1726859992216,3cyclictest0-21swapper/207:50:262
1726859992215,5cyclictest311ktimers/212:00:192
1726859992215,3cyclictest0-21swapper/211:00:162
1726859992214,6cyclictest1733183-21basename07:25:192
1726855992216,3cyclictest0-21swapper/107:55:151
1726855992215,3cyclictest0-21swapper/110:25:001
1726855992212,6cyclictest0-21swapper/111:00:271
1726855992211,7cyclictest0-21swapper/110:00:201
172685099221,8cyclictest53-21kcompactd012:30:150
172685099221,8cyclictest53-21kcompactd012:30:150
1726850992215,3cyclictest0-21swapper/010:00:220
172685099221,19cyclictest0-21swapper/012:12:050
172685099220,18cyclictest0-21swapper/012:07:480
1726864992116,3cyclictest1829069-21fschecks_time12:05:183
172686499211,3cyclictest131rcu_preempt10:50:153
1726859992114,4cyclictest1758609-21/usr/sbin/munin08:40:182
1726859992114,4cyclictest0-21swapper/209:30:222
1726855992115,4cyclictest231ktimers/107:22:561
1726855992115,4cyclictest231ktimers/107:22:551
1726855992115,3cyclictest0-21swapper/108:45:281
1726850992116,3cyclictest13650irq/42-30be0000.ethernet07:30:130
1726864992013,3cyclictest0-21swapper/308:35:163
1726864992013,3cyclictest0-21swapper/308:35:163
1726859992015,2cyclictest0-21swapper/210:10:202
172685599207,2cyclictest131rcu_preempt10:51:231
1726855992014,3cyclictest637-21runrttasks11:10:031
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional