You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-17 - 11:36

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Tue Mar 17, 2026 00:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1591756994941,4cyclictest1628727-21cron20:55:012
1591752994937,9cyclictest231ktimers/123:45:131
1591761994734,10cyclictest391ktimers/323:25:113
1591761994532,10cyclictest391ktimers/323:05:123
1591756994536,6cyclictest1609934-21fschecks_count20:00:152
1591756994536,5cyclictest1675422-21audit_send_reply23:10:002
1591748994432,8cyclictest1654277-21grep22:05:230
159175299437,9cyclictest24-21ksoftirqd/122:30:111
1591752994336,4cyclictest1651347-21sendmail22:00:001
1591756994233,6cyclictest1653038-21cron22:05:012
1591752994231,8cyclictest1626824-21idleruntime-cro20:50:011
1591756994135,4cyclictest1656056-21kworker/u8:0+events_unbound22:12:272
1591756994134,4cyclictest0-21swapper/223:55:012
1591756994132,6cyclictest1602716-21cron19:40:012
1591752994128,9cyclictest1699082-21grep00:15:281
1591748994130,6cyclictest0-21swapper/023:00:000
1591756994031,6cyclictest1663712-21fschecks_time22:35:162
1591752994034,4cyclictest1642263-21kworker/u8:2+events_unbound21:37:241
1591748994033,4cyclictest1695898-21idleruntime-cro00:10:010
1591748994021,5cyclictest1609418-21kworker/u8:3+events_unbound21:31:590
1591756993932,4cyclictest1616388-21sendmail20:20:012
1591756993929,6cyclictest1592954-21unixbench_singl19:10:262
1591752993932,4cyclictest0-21swapper/119:20:011
1591752993928,7cyclictest1683952-21munin-plugin-st23:35:011
1591752993927,8cyclictest1598853-21grep19:25:241
1591748993930,6cyclictest0-21swapper/022:20:010
1591748993930,6cyclictest0-21swapper/021:00:250
1591748993930,5cyclictest0-21swapper/021:44:590
1591748993930,5cyclictest0-21swapper/021:44:590
1591761993829,5cyclictest0-21swapper/322:15:003
1591756993829,6cyclictest1704634-21munin-plugin-st00:35:002
1591752993827,7cyclictest1678342-21grep23:15:251
1591756993728,6cyclictest1599694-21fschecks_count19:30:172
1591756993727,6cyclictest1603972-21unixbench_multi19:40:252
1591756993727,5cyclictest0-21swapper/219:20:252
1591752993730,4cyclictest0-21swapper/120:30:151
1591752993726,7cyclictest0-21swapper/122:05:241
1591752993720,10cyclictest1656885-21fschecks_time22:15:171
1591752993719,5cyclictest131rcu_preempt20:00:131
1591761993628,4cyclictest0-21swapper/322:30:263
1591752993630,4cyclictest1687319-21kworker/u8:0+events_unbound00:02:401
1591752993624,8cyclictest0-21swapper/100:25:001
1591752993624,8cyclictest0-21swapper/100:25:001
1591752993618,9cyclictest131rcu_preempt23:55:171
1591752993616,5cyclictest131rcu_preempt20:50:131
1591748993615,5cyclictest131rcu_preempt22:50:010
1591761993523,9cyclictest391ktimers/300:10:123
1591756993528,4cyclictest1619799-21idleruntime-cro20:30:012
1591752993528,3cyclictest0-21swapper/122:45:231
159175299351,9cyclictest0-21swapper/119:50:131
159175299351,10cyclictest0-21swapper/100:10:121
159175299350,7cyclictest0-21swapper/119:35:131
1591748993527,4cyclictest1651328-21kthreadd22:00:010
1591748993525,7cyclictest0-21swapper/019:40:000
1591748993514,5cyclictest131rcu_preempt22:20:150
1591748993512,7cyclictest131rcu_preempt19:50:130
1591761993426,4cyclictest0-21swapper/320:00:003
1591761993423,7cyclictest0-21swapper/319:15:263
1591756993426,4cyclictest0-21swapper/219:50:182
1591752993428,4cyclictest1670138-21kworker/u8:2+events_unbound23:12:351
1591752993427,4cyclictest1675424-21idleruntime-cro23:10:011
1591752993427,4cyclictest0-21swapper/122:45:001
1591752993427,4cyclictest0-21swapper/122:45:001
1591752993426,4cyclictest0-21swapper/121:30:011
1591752993415,9cyclictest1626467-21kworker/u8:1+events_unbound21:01:271
1591752993415,5cyclictest131rcu_preempt00:05:201
1591748993428,4cyclictest1598958-21kworker/u8:4+events_unbound19:45:420
1591748993428,4cyclictest1598958-21kworker/u8:4+events_unbound19:45:420
1591748993426,4cyclictest0-21swapper/022:35:150
1591748993424,6cyclictest0-21swapper/022:34:590
1591748993420,9cyclictest131rcu_preempt20:05:190
159174899341,8cyclictest11-21ksoftirqd/022:10:120
1591748993411,12cyclictest11-21ksoftirqd/023:45:220
1591761993326,5cyclictest1641898-21unixbench_multi21:30:233
1591761993326,4cyclictest1664973-21munin-plugin-st22:39:593
1591756993326,4cyclictest1699894-21fschecks_count00:20:152
1591756993326,4cyclictest1699894-21fschecks_count00:20:142
1591756993326,4cyclictest0-21swapper/221:30:002
1591756993325,4cyclictest0-21swapper/200:05:002
1591752993325,4cyclictest0-21swapper/122:20:141
1591748993324,6cyclictest0-21swapper/020:30:020
1591748993319,9cyclictest131rcu_preempt23:22:340
1591748993318,9cyclictest131rcu_preempt20:02:470
1591748993315,5cyclictest131rcu_preempt20:45:230
1591748993312,7cyclictest131rcu_preempt00:15:130
1591748993311,15cyclictest11-21ksoftirqd/000:20:160
1591748993311,15cyclictest11-21ksoftirqd/000:20:150
1591761993222,6cyclictest0-21swapper/320:15:293
1591756993225,5cyclictest1575870-21kworker/u8:1+events_unbound19:27:092
1591756993225,4cyclictest0-21swapper/200:05:222
1591756993224,4cyclictest0-21swapper/221:55:002
1591756993222,6cyclictest0-21swapper/223:45:272
1591756993221,6cyclictest0-21swapper/221:05:272
159175299327,5cyclictest16136792grep20:10:191
1591752993226,4cyclictest1697475-21kworker/u8:1+events_unbound00:27:451
1591752993226,4cyclictest1609418-21kworker/u8:3+events_unbound21:42:271
1591752993226,4cyclictest1609418-21kworker/u8:3+events_unbound21:42:271
1591752993225,5cyclictest1685317-21kworker/u8:3+events_unbound23:37:371
1591752993225,4cyclictest0-21swapper/122:35:261
1591752993223,6cyclictest0-21swapper/123:30:011
1591752993219,9cyclictest204-21dbus-daemon21:47:251
1591752993219,9cyclictest204-21dbus-daemon21:47:251
1591752993214,10cyclictest131rcu_preempt22:55:161
159174899327,6cyclictest11-21ksoftirqd/023:35:010
159174899326,3cyclictest131rcu_preempt23:00:160
1591748993226,4cyclictest1661529-21kworker/u8:3+events_unbound22:52:330
1591748993225,5cyclictest1695681-21kworker/u8:2+events_unbound00:12:420
1591748993221,7cyclictest0-21swapper/021:15:000
1591748993217,3cyclictest131rcu_preempt23:50:130
159174899321,22cyclictest131rcu_preempt20:50:110
1591761993123,4cyclictest0-21swapper/321:55:153
1591756993125,4cyclictest1614336-21kworker/u8:1+events_unbound20:21:422
1591756993122,6cyclictest0-21swapper/220:55:242
1591756993121,6cyclictest0-21swapper/223:10:242
1591756993121,6cyclictest0-21swapper/220:40:262
1591756993120,6cyclictest0-21swapper/223:20:262
159175299319,12cyclictest1633848-21cron21:10:001
159175299318,6cyclictest24-21ksoftirqd/123:20:261
1591752993124,4cyclictest0-21swapper/122:54:591
1591752993121,4cyclictest1609418-21kworker/u8:3+events_unbound20:57:211
1591752993118,5cyclictest131rcu_preempt22:30:001
1591752993113,10cyclictest1600957-21kworker/u8:0-ext4-rsv-conversion20:15:171
1591752993111,4cyclictest131rcu_preempt20:09:261
159174899319,13cyclictest1593893-21kworker/u8:2-events_freezable_power_19:17:160
159174899317,13cyclictest11-21ksoftirqd/000:35:010
1591748993122,6cyclictest151rcuc/023:35:130
159174899311,8cyclictest11-21ksoftirqd/000:25:120
1591748993117,6cyclictest131rcu_preempt23:10:020
1591748993117,5cyclictest1649461-21kworker/u8:3+events_unbound22:04:180
1591748993114,5cyclictest131rcu_preempt00:35:190
1591748993114,4cyclictest131rcu_preempt21:15:120
1591748993114,3cyclictest131rcu_preempt20:35:260
1591748993113,5cyclictest131rcu_preempt19:55:130
1591748993113,11cyclictest131rcu_preempt23:40:210
1591761993022,4cyclictest0-21swapper/321:10:013
1591761993020,7cyclictest0-21swapper/321:50:013
1591761993020,7cyclictest0-21swapper/321:50:003
1591761993020,6cyclictest1623421-21sendmail20:40:013
1591756993024,4cyclictest1628542-21kworker/u8:2+events_unbound21:12:212
1591756993022,4cyclictest0-21swapper/223:35:252
1591756993020,6cyclictest0-21swapper/200:40:002
159175299308,5cyclictest131rcu_preempt21:20:121
159175299307,12cyclictest131rcu_preempt22:10:241
1591752993024,3cyclictest0-21swapper/120:00:011
1591752993023,4cyclictest0-21swapper/119:25:011
1591752993020,6cyclictest0-21swapper/120:20:261
1591752993012,3cyclictest0-21swapper/119:40:111
1591752993011,11cyclictest24-21ksoftirqd/119:30:191
1591752993010,13cyclictest24-21ksoftirqd/100:30:241
1591752993010,11cyclictest0-21swapper/120:41:461
159174899309,14cyclictest11-21ksoftirqd/021:25:010
159174899308,4cyclictest131rcu_preempt21:50:250
159174899305,6cyclictest11-21ksoftirqd/022:27:280
1591748993024,4cyclictest151rcuc/020:15:140
1591748993023,5cyclictest1609418-21kworker/u8:3+events_unbound20:24:410
1591748993023,4cyclictest13850irq/36-mmc121:40:000
1591748993023,4cyclictest0-21swapper/000:00:250
1591748993020,4cyclictest131rcu_preempt20:57:220
1591748993013,5cyclictest131rcu_preempt23:55:240
1591748993013,4cyclictest131rcu_preempt23:15:160
1591748993013,10cyclictest11-21ksoftirqd/023:15:010
1591748993011,5cyclictest131rcu_preempt19:25:110
159174899300,15cyclictest1647705-21cron21:50:000
159174899300,15cyclictest1647705-21cron21:50:000
1591761992919,7cyclictest1635240-21kworker/u8:1+events_unbound21:52:263
1591756992920,6cyclictest0-21swapper/222:35:002
1591756992919,6cyclictest0-21swapper/219:55:262
1591756992918,7cyclictest0-21swapper/222:44:592
1591756992918,7cyclictest0-21swapper/222:44:592
1591756992917,7cyclictest0-21swapper/223:25:252
159175699291,4cyclictest131rcu_preempt21:20:112
159175299298,3cyclictest131rcu_preempt19:45:171
159175299298,3cyclictest131rcu_preempt19:45:161
1591752992922,5cyclictest1609418-21kworker/u8:3+events_unbound20:37:161
1591752992920,5cyclictest1652560-21grep22:00:261
1591752992917,8cyclictest231ktimers/123:40:261
1591752992915,8cyclictest131rcu_preempt23:50:251
1591752992912,10cyclictest0-21swapper/121:17:011
159174899299,11cyclictest11-21ksoftirqd/020:30:250
159174899298,13cyclictest11-21ksoftirqd/019:15:010
159174899295,4cyclictest131rcu_preempt19:35:000
1591748992922,4cyclictest1625129-21idleruntime-cro20:45:010
1591748992910,9cyclictest131rcu_preempt19:20:230
159174899290,22cyclictest131rcu_preempt21:25:180
1591761992823,3cyclictest1609418-21kworker/u8:3+events_unbound20:47:183
1591761992822,3cyclictest0-21swapper/320:10:143
1591761992821,4cyclictest1599740-21fschecks_time19:30:163
1591761992820,4cyclictest0-21swapper/321:35:163
1591761992819,5cyclictest0-21swapper/321:25:243
1591761992819,4cyclictest0-21swapper/300:05:233
159175699282,5cyclictest131rcu_preempt21:00:112
1591756992820,5cyclictest0-21swapper/219:15:252
1591756992820,4cyclictest0-21swapper/221:15:242
1591756992818,6cyclictest1622964-21grep20:35:262
1591756992817,7cyclictest0-21swapper/220:05:232
159175699281,5cyclictest131rcu_preempt00:15:142
1591756992812,7cyclictest32-21ksoftirqd/222:45:142
159175699281,13cyclictest0-21swapper/222:16:142
1591752992811,9cyclictest131rcu_preempt23:00:241
1591748992812,3cyclictest131rcu_preempt21:05:260
1591748992811,5cyclictest131rcu_preempt20:10:120
159176199276,4cyclictest16712122gunzip22:55:233
1591761992720,4cyclictest0-21swapper/320:05:243
1591761992719,5cyclictest0-21swapper/323:10:253
1591761992717,7cyclictest1685170-21grep23:35:263
1591756992721,3cyclictest0-21swapper/222:25:242
1591756992720,3cyclictest0-21swapper/200:25:152
1591756992718,6cyclictest0-21swapper/220:10:262
1591756992717,6cyclictest0-21swapper/221:55:242
1591756992717,6cyclictest0-21swapper/220:47:182
159175299277,5cyclictest131rcu_preempt21:50:151
159175299276,12cyclictest24-21ksoftirqd/120:25:241
159175299276,12cyclictest24-21ksoftirqd/119:10:261
1591752992717,6cyclictest0-21swapper/121:10:231
159175299271,14cyclictest0-21swapper/121:31:311
1591756992618,5cyclictest0-21swapper/221:35:012
1591756992616,4cyclictest1600957-21kworker/u8:0+events_unbound19:45:192
1591756992616,4cyclictest1600957-21kworker/u8:0+events_unbound19:45:182
1591756992615,7cyclictest1-21systemd23:42:372
1591756992613,4cyclictest1670138-21kworker/u8:2+events_unbound23:02:302
1591756992612,4cyclictest131rcu_preempt22:05:222
159175699261,13cyclictest1619789-21apt-get20:30:052
159175299269,5cyclictest131rcu_preempt00:35:241
159174899267,3cyclictest1600957-21kworker/u8:0+events_freezable_power_19:40:160
1591761992519,3cyclictest0-21swapper/320:30:203
1591761992519,3cyclictest0-21swapper/300:00:003
1591761992518,5cyclictest1697475-21kworker/u8:1+events_unbound00:25:003
1591761992518,5cyclictest1697475-21kworker/u8:1+events_unbound00:24:593
1591761992518,3cyclictest0-21swapper/300:30:193
1591761992517,5cyclictest0-21swapper/319:40:003
1591761992517,4cyclictest0-21swapper/322:45:253
1591761992517,4cyclictest0-21swapper/321:00:253
1591756992514,7cyclictest0-21swapper/221:35:212
159175699251,13cyclictest0-21swapper/222:55:452
159174899256,4cyclictest131rcu_preempt23:25:100
1591761992418,3cyclictest0-21swapper/323:40:183
1591761992418,3cyclictest0-21swapper/321:10:223
1591761992418,3cyclictest0-21swapper/320:40:253
1591761992417,3cyclictest0-21swapper/300:00:253
1591761992416,5cyclictest1659708-21kworker/u8:2+events_unbound22:26:173
1591761992416,5cyclictest0-21swapper/319:50:173
1591761992415,6cyclictest1665402-21fschecks_time22:40:183
1591761992415,6cyclictest1665402-21fschecks_time22:40:173
1591756992417,5cyclictest1657833-21kworker/u8:1+events_unbound22:23:542
159175699241,13cyclictest0-21swapper/223:15:162
1591756992410,5cyclictest1635240-21kworker/u8:1+events_unbound21:41:232
1591756992410,5cyclictest1635240-21kworker/u8:1+events_unbound21:41:232
1591761992317,3cyclictest0-21swapper/323:30:143
1591761992317,3cyclictest0-21swapper/319:25:203
1591761992316,3cyclictest0-21swapper/320:00:163
1591761992315,6cyclictest645-21runrttasks00:35:023
1591761992312,8cyclictest1657686-21awk22:15:283
1591761992312,7cyclictest0-21swapper/319:45:263
1591761992312,7cyclictest0-21swapper/319:45:263
1591756992316,5cyclictest1695681-21kworker/u8:2+events_unbound00:10:122
1591756992316,5cyclictest1670138-21kworker/u8:2+events_unbound23:32:372
1591756992313,7cyclictest32-21ksoftirqd/223:59:242
1591756992310,4cyclictest1635240-21kworker/u8:1+events_unbound21:49:012
1591756992310,4cyclictest1635240-21kworker/u8:1+events_unbound21:49:012
1591761992216,4cyclictest1656056-21kworker/u8:0+events_unbound22:22:293
1591761992214,4cyclictest0-21swapper/322:05:143
1591761992213,6cyclictest0-21swapper/320:55:203
1591761992211,8cyclictest1652148-21ntp_states22:00:213
1591761992211,8cyclictest1597480-21apt-config19:25:023
159176199221,13cyclictest0-21swapper/319:13:053
159176199219,8cyclictest1-21systemd21:22:223
159176199212,14cyclictest1618079-21cron20:25:003
1591761992115,3cyclictest0-21swapper/323:50:003
1591761992115,3cyclictest0-21swapper/321:40:143
1591761992115,3cyclictest0-21swapper/321:40:143
1591761992115,3cyclictest0-21swapper/319:40:253
1591761992114,5cyclictest1675640-21kworker/u8:3+events_unbound23:22:483
1591761992114,5cyclictest0-21swapper/323:50:223
1591761992114,3cyclictest0-21swapper/300:15:243
159176199211,17cyclictest1702475-21grep00:25:263
1591761992014,3cyclictest0-21swapper/323:00:223
1591761992014,3cyclictest0-21swapper/320:55:003
1591761992013,4cyclictest1678369-21grep23:15:263
159176199200,4cyclictest0-21swapper/322:51:163
1591761991913,4cyclictest1636124-21irqstats21:15:163
1591761991913,3cyclictest0-21swapper/320:30:003
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional