You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-06-16 - 15:19
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot4.osadl.org (updated Mon Jun 16, 2025 00:43:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1638962993314,9cyclictest1838214-21turbostat.cron22:10:012
163896299311,2cyclictest0-21swapper/222:15:142
163896299311,28cyclictest1746547-21cron20:54:592
163896299311,28cyclictest0-21swapper/223:25:182
163896299310,21cyclictest1921150-21seq23:15:162
1638962993018,11cyclictest1901259-21ssh22:59:362
163896299301,2cyclictest0-21swapper/200:15:232
1638962992919,9cyclictest1843895-21ssh22:13:082
163896299291,2cyclictest0-21swapper/221:45:202
163896299291,27cyclictest0-21swapper/221:55:192
163896299291,1cyclictest1946864-21apt-get23:35:202
163896299290,4cyclictest1870408-21fschecks_time22:35:162
163896299290,3cyclictest1857507-21ssh22:25:132
163896299290,2cyclictest1762238-21diskmemload00:00:332
163896299290,2cyclictest1762238-21diskmemload00:00:332
163896299281,2cyclictest0-21swapper/221:32:182
163896299281,26cyclictest0-21swapper/200:13:372
163896299281,26cyclictest0-21swapper/200:05:212
163896299281,21cyclictest0-21swapper/200:31:062
163896299281,1cyclictest0-21swapper/223:40:312
163896299281,1cyclictest0-21swapper/223:34:012
163896299280,3cyclictest1883052-21fschecks_time22:45:162
163896299280,2cyclictest1893891-21ssh22:51:212
163896299280,2cyclictest1856515-21ssh22:23:082
163896299280,2cyclictest1762238-21diskmemload21:41:242
163896299280,2cyclictest1762238-21diskmemload21:41:232
163896299280,2cyclictest0-21swapper/200:38:542
163896299280,27cyclictest0-21swapper/221:51:252
163896299280,26cyclictest0-21swapper/223:05:152
1638967992724,1cyclictest0-21swapper/322:10:143
163896299271,2cyclictest0-21swapper/221:10:332
163896299271,23cyclictest1762238-21diskmemload23:00:032
163896299271,1cyclictest0-21swapper/222:30:282
163896299271,1cyclictest0-21swapper/219:55:122
1638962992710,7cyclictest1927340-21ssh23:20:042
163896299270,1cyclictest0-21swapper/221:39:402
163896299270,1cyclictest0-21swapper/200:23:392
163896299270,19cyclictest0-21swapper/221:15:212
163895999271,23cyclictest1762238-21diskmemload22:00:131
163896299262,21cyclictest1914780-21apt-get23:10:152
1638962992617,8cyclictest0-21swapper/223:50:342
1638962992617,8cyclictest0-21swapper/223:50:332
163896299261,23cyclictest1751614-21cron21:00:012
163896299260,2cyclictest1786285-21ssh21:26:122
163895999261,21cyclictest1984832-21df_inode00:05:171
163895999261,21cyclictest1669716-21apt-get19:40:131
163895799262,21cyclictest1857448-21apt-get22:25:120
163896799250,1cyclictest0-21swapper/319:25:003
1638962992518,6cyclictest0-21swapper/222:00:582
1638962992516,7cyclictest1976612-21ssh23:55:462
163896299251,2cyclictest1762238-21diskmemload00:26:162
163896299251,21cyclictest0-21swapper/221:20:122
163896299250,2cyclictest1762238-21diskmemload22:42:382
163896299250,24cyclictest0-21swapper/223:48:222
1638959992520,3cyclictest1700222-21apt-get20:10:121
1638959992520,3cyclictest1674816-21apt-get19:45:141
1638959992519,4cyclictest1953383-21fschecks_time23:40:181
163895999251,21cyclictest1940525-21apt-get23:30:161
163895999251,21cyclictest1787848-21apt-get21:30:131
163895999250,23cyclictest2129583-21systemd-journal21:50:001
1638957992521,2cyclictest1908418-21apt-get23:05:150
1638957992518,1cyclictest191rcu_preempt23:37:320
163896799243,20cyclictest1871128-21kthreadcore22:35:193
1638967992412,2cyclictest191rcu_preempt22:25:183
163896799240,23cyclictest2014556-21ssh00:26:123
163896299245,8cyclictest1664376-21munin-run19:35:002
1638962992420,2cyclictest1664637-21apt-get19:35:132
1638962992419,4cyclictest0-21swapper/219:54:442
163896299241,20cyclictest1757396-21apt-get21:05:132
163896299240,1cyclictest0-21swapper/220:40:142
1638959992419,3cyclictest1639177-21apt-get19:10:141
1638959992419,3cyclictest1639177-21apt-get19:10:141
1638959992418,5cyclictest1806361-21ssh21:44:261
1638959992418,5cyclictest1806361-21ssh21:44:251
163895999241,3cyclictest1908418-21apt-get23:05:151
163895999241,2cyclictest2009813-21apt-get00:25:181
163895999241,21cyclictest1762238-21diskmemload00:31:231
163895999240,4cyclictest1768458-21ssh21:14:371
163895999240,20cyclictest0-21swapper/123:15:151
163895799242,20cyclictest16-21ksoftirqd/021:11:590
1638957992420,2cyclictest1997247-21apt-get00:15:140
1638957992420,2cyclictest1959477-21apt-get23:45:160
1638957992419,3cyclictest1736671-21apt-get20:45:190
1638957992415,8cyclictest1990939-21apt-get00:10:160
163895799241,2cyclictest2022449-21apt-get00:35:170
163895799241,2cyclictest1726109-21apt-get20:35:140
163895799241,2cyclictest1705325-21apt-get20:15:130
163895799241,21cyclictest1953318-21diskstats23:40:180
163895799240,5cyclictest1690530-21irqcore20:00:180
163895799240,23cyclictest1841705-21grep22:10:210
163895799240,22cyclictest1819608-21ssh21:55:110
163895799240,22cyclictest1813678-21/usr/sbin/munin21:50:190
163896799232,2cyclictest2020067-21ntpq00:30:213
1638967992318,3cyclictest2022365-21ssh00:35:073
163896799231,2cyclictest1978307-21apt-get00:00:173
163896799231,2cyclictest1978307-21apt-get00:00:163
163896799230,21cyclictest1887105-21sed22:45:273
163896799230,21cyclictest1762238-21diskmemload21:31:463
163896799230,20cyclictest1902146-21ssh23:00:163
163896799230,1cyclictest0-21swapper/323:05:043
163896799230,1cyclictest0-21swapper/322:05:153
163896799230,19cyclictest0-21swapper/320:55:193
1638962992319,3cyclictest1730926-21systemd-run20:40:002
1638962992319,2cyclictest0-21swapper/220:05:182
1638962992314,8cyclictest1679591-21cron19:50:002
1638962992312,9cyclictest1649532-21fschecks_count19:20:152
163896299230,1cyclictest0-21swapper/219:19:472
1638959992319,2cyclictest1906865-21ssh23:01:071
1638959992319,2cyclictest1705325-21apt-get20:15:131
1638959992319,2cyclictest0-21swapper/121:55:111
163895999231,3cyclictest1762238-21diskmemload23:51:511
163895999231,3cyclictest1762238-21diskmemload23:51:501
163895999231,2cyclictest1762238-21diskmemload23:20:121
163895999231,2cyclictest1762238-21diskmemload00:38:511
163895999231,21cyclictest1762238-21diskmemload21:26:141
163895999231,21cyclictest1762238-21diskmemload00:22:461
163895999230,21cyclictest1952685-21ssh23:39:391
163895999230,21cyclictest1900758-21ssh22:58:021
163895999230,21cyclictest1876173-21munin-run22:40:011
163895999230,20cyclictest1762238-21diskmemload21:20:041
163895999230,20cyclictest1762238-21diskmemload00:10:011
163895999230,20cyclictest0-21swapper/122:40:121
163895999230,20cyclictest0-21swapper/121:50:131
163895799232,1cyclictest1800555-21apt-get21:40:140
163895799232,1cyclictest1800555-21apt-get21:40:130
1638957992320,2cyclictest1710382-21apt-get20:20:130
1638957992319,3cyclictest18815572sleep022:42:080
1638957992319,2cyclictest1752321-21apt-get21:00:140
1638957992317,4cyclictest1887314-21ssh22:45:270
163895799231,2cyclictest1762238-21diskmemload23:19:030
163895799230,4cyclictest1853594-21kthreadcore22:20:200
163895799230,21cyclictest1762238-21diskmemload21:16:240
163895799230,20cyclictest1762238-21diskmemload00:05:020
1638967992219,2cyclictest1914721-21ssh23:10:083
1638967992219,1cyclictest0-21swapper/321:20:183
1638967992218,3cyclictest75-21kswapd000:20:173
1638967992218,2cyclictest1901448-21apt-config23:00:003
1638967992218,2cyclictest1768910-21apt-get21:15:133
163896799221,2cyclictest1762238-21diskmemload21:54:443
163896799221,20cyclictest1762238-21diskmemload22:51:103
163896799221,20cyclictest1762238-21diskmemload22:04:583
163896799221,1cyclictest1762238-21diskmemload23:18:573
163896799220,3cyclictest1812460-21ssh21:48:383
163896799220,2cyclictest1953155-21ssh23:40:163
163896799220,2cyclictest1762238-21diskmemload23:58:553
163896799220,2cyclictest1690531-21ps20:00:173
163896799220,21cyclictest2002671-21ssh00:18:223
163896799220,21cyclictest1951707-21ssh23:36:323
163896799220,21cyclictest1932484-21ssh23:22:123
163896799220,20cyclictest1781450-21ssh21:25:043
163896299221,20cyclictest1721007-21apt-get20:30:122
163896299221,20cyclictest0-21swapper/221:00:142
1638959992219,2cyclictest301rcuc/123:25:201
1638959992219,2cyclictest1762238-21diskmemload21:15:091
1638959992219,2cyclictest0-21swapper/123:59:471
1638959992219,2cyclictest0-21swapper/122:05:461
1638959992219,2cyclictest0-21swapper/120:51:431
1638959992219,1cyclictest0-21swapper/121:05:131
1638959992218,3cyclictest1736392-21sh20:44:591
1638959992218,2cyclictest1997156-21ssh00:15:011
1638959992218,2cyclictest19830852sleep100:01:151
1638959992218,2cyclictest19830852sleep100:01:141
1638959992218,2cyclictest1855765-21ssh22:20:451
1638959992218,2cyclictest1762238-21diskmemload23:45:131
1638959992218,2cyclictest1746824-21apt-get20:55:181
1638959992218,2cyclictest0-21swapper/120:20:121
163895999221,20cyclictest0-21swapper/122:32:321
163895999221,20cyclictest0-21swapper/122:13:001
163895999221,19cyclictest0-21swapper/121:35:341
163895999220,2cyclictest1882795-21ssh22:45:141
163895999220,2cyclictest1860044-21cut22:25:181
163895999220,2cyclictest1659560-21apt-get19:30:131
163895999220,20cyclictest1914783-21ssh23:10:151
163895999220,20cyclictest0-21swapper/121:00:131
163895999220,20cyclictest0-21swapper/119:20:121
163895999220,20cyclictest0-21swapper/119:15:131
163895999220,19cyclictest0-21swapper/122:50:071
1638957992219,2cyclictest1762238-21diskmemload23:12:180
1638957992219,2cyclictest1762238-21diskmemload22:52:350
1638957992219,2cyclictest1762238-21diskmemload22:09:020
1638957992218,1cyclictest2016083-21apt-get00:30:110
1638957992218,1cyclictest0-21swapper/021:30:130
163895799221,2cyclictest1931270-21memory23:20:270
163895799221,2cyclictest1762238-21diskmemload22:31:010
163895799221,20cyclictest1762238-21diskmemload23:00:250
163895799221,20cyclictest1762238-21diskmemload22:55:580
163895799221,20cyclictest1762238-21diskmemload22:00:370
163895799221,20cyclictest1762238-21diskmemload21:45:420
163895799221,1cyclictest0-21swapper/000:20:260
163895799220,2cyclictest1850210-21ssh22:18:050
163895799220,2cyclictest0-21swapper/020:55:180
163895799220,2cyclictest0-21swapper/000:27:410
163895799220,21cyclictest1762238-21diskmemload23:55:060
163895799220,21cyclictest1762238-21diskmemload21:23:040
163895799220,20cyclictest1762238-21diskmemload23:54:080
163895799220,20cyclictest1762238-21diskmemload23:54:070
163895799220,20cyclictest1762238-21diskmemload00:01:590
163895799220,20cyclictest1762238-21diskmemload00:01:580
1638967992119,1cyclictest1762238-21diskmemload21:55:443
1638967992119,1cyclictest1679867-21apt-get19:50:123
1638967992119,1cyclictest0-21swapper/321:37:403
1638967992118,1cyclictest1940533-21ssh23:30:173
163896799210,2cyclictest1853593-21kthreadcore22:20:203
163896799210,2cyclictest1707541-21ps20:15:193
163896799210,20cyclictest1762569-21ssh21:10:153
163896799210,20cyclictest1762238-21diskmemload23:27:123
163896799210,1cyclictest0-21swapper/322:18:043
163896799210,1cyclictest0-21swapper/320:35:143
163896799210,19cyclictest0-21swapper/322:31:013
163896799210,19cyclictest0-21swapper/319:33:463
163896799210,19cyclictest0-21swapper/300:10:323
163896799210,18cyclictest0-21swapper/323:50:033
163896799210,18cyclictest0-21swapper/323:50:033
1638962992118,2cyclictest0-21swapper/220:15:232
163896299210,2cyclictest0-21swapper/220:25:142
1638959992119,1cyclictest0-21swapper/120:47:251
1638959992119,1cyclictest0-21swapper/120:32:221
1638959992117,2cyclictest1715482-21apt-get20:25:131
1638959992117,2cyclictest1659277-21cron19:30:001
1638957992118,2cyclictest1794153-21ssh21:35:050
1638957992118,2cyclictest1684676-21cron19:55:000
1638957992118,2cyclictest1643980-21idleruntime-cro19:15:000
1638957992118,2cyclictest1643980-21idleruntime-cro19:15:000
163895799210,2cyclictest1697376-21ps20:05:190
163895799210,20cyclictest1762238-21diskmemload23:30:410
163895799210,20cyclictest1762238-21diskmemload23:25:400
163895799210,20cyclictest0-21swapper/022:35:450
163895799210,20cyclictest0-21swapper/020:30:120
163895799210,20cyclictest0-21swapper/019:35:140
163895799210,20cyclictest0-21swapper/019:26:470
1638967992018,1cyclictest0-21swapper/322:40:073
1638967992018,1cyclictest0-21swapper/320:30:123
1638967992018,1cyclictest0-21swapper/319:26:473
1638967992017,1cyclictest0-21swapper/321:00:143
163896799200,1cyclictest1762238-21diskmemload23:45:383
163896799200,1cyclictest1762238-21diskmemload21:40:483
163896799200,1cyclictest1762238-21diskmemload21:40:483
163896299209,9cyclictest1643978-21idleruntime-cro19:15:002
163896299209,9cyclictest1643978-21idleruntime-cro19:15:002
1638962992017,2cyclictest0-21swapper/219:25:142
163896299200,1cyclictest0-21swapper/220:10:122
1638957992018,1cyclictest0-21swapper/020:50:130
1638957992017,2cyclictest1715972-21irqcore20:25:170
1638957992016,2cyclictest0-21swapper/019:40:130
163895799200,1cyclictest0-21swapper/019:33:450
1638967991916,2cyclictest1643976-21cron19:15:003
1638967991916,2cyclictest1643976-21cron19:15:003
1638967991916,2cyclictest0-21swapper/320:20:133
163896799190,1cyclictest0-21swapper/320:44:453
1638962991917,1cyclictest0-21swapper/219:40:132
1638962991910,7cyclictest0-21swapper/220:00:152
1638959991917,1cyclictest1689767-21cron20:00:001
1638959991917,1cyclictest0-21swapper/119:52:351
1638957991916,2cyclictest0-21swapper/019:55:110
1638957991916,2cyclictest0-21swapper/019:15:120
163895799190,1cyclictest0-21swapper/019:20:520
1638967991817,1cyclictest0-21swapper/319:35:143
1638967991816,1cyclictest1695147-21apt-get20:05:133
1638957991816,1cyclictest0-21swapper/020:13:010
1638967991716,1cyclictest0-21swapper/320:45:193
1638967991715,1cyclictest0-21swapper/320:50:133
1638967991714,1cyclictest0-21swapper/319:15:133
1638962991715,1cyclictest0-21swapper/220:20:122
1638959991714,2cyclictest64-21kcompactd019:39:091
1638957991715,1cyclictest0-21swapper/021:05:120
1638967991614,1cyclictest0-21swapper/320:13:013
1638967991614,1cyclictest0-21swapper/319:40:133
1638959991612,3cyclictest1731223-21latency_hist20:40:001
1638957991614,1cyclictest64-21kcompactd019:46:080
1638967991513,1cyclictest64-21kcompactd020:29:093
1638967991513,1cyclictest0-21swapper/321:05:423
1638967991513,1cyclictest0-21swapper/319:55:113
1638959991511,2cyclictest0-21swapper/120:05:131
1638959991413,1cyclictest0-21swapper/120:00:131
1638957991411,2cyclictest1733816-21ps20:40:200
163896799130,2cyclictest191rcu_preempt19:45:253
163896299130,4cyclictest1638985-21wc19:10:002
1638959991310,2cyclictest1638969-21cat19:10:001
163896799100,2cyclictest191rcu_preempt19:10:003
163895799102,2cyclictest191rcu_preempt19:09:590
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional