You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-17 - 21:27
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot6.osadl.org (updated Wed Dec 17, 2025 12:44:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1572056998878,8cyclictest1596160-21kworker/u8:3+flush-179:008:40:001
1572054998780,4cyclictest1607230-21kworker/u8:1+events_unbound09:00:240
1572056998578,6cyclictest1594287-21apt-get08:20:031
1572056998074,5cyclictest1644892-21kworker/u8:0+events_unbound11:00:231
1572056998065,12cyclictest1635115-21latency_hist10:25:011
1572056997769,7cyclictest1618125-21kworker/u8:1+flush-179:009:40:011
1572054997771,4cyclictest1587902-21latency_hist08:00:010
1572054997769,5cyclictest1638548-21latency_hist10:35:010
1572054997769,5cyclictest1638548-21latency_hist10:35:000
1572054997668,6cyclictest1607230-21kworker/u8:1+events_unbound09:00:000
1572054997667,7cyclictest1596124-21latency_hist08:25:010
1572056997564,8cyclictest1587924-21kworker/u8:2+flush-179:008:25:211
1572054997465,6cyclictest1597711-21latency_hist08:30:010
1572054997367,4cyclictest1654770-21kworker/u8:1+events_unbound11:45:000
157205499731,70cyclictest1-21systemd08:45:000
1572054997264,6cyclictest1615275-21kworker/u8:2+events_unbound09:40:010
1572056996962,5cyclictest1609102-21/usr/sbin/munin09:05:241
1572054996963,4cyclictest1669042-21kworker/u8:1+flush-179:012:30:240
1572054996963,4cyclictest1615275-21kworker/u8:2+events_unbound09:30:000
1572054996956,10cyclictest1625290-21latency_hist09:55:010
1572056996560,4cyclictest1567459-21kworker/u8:1+events_unbound07:10:371
1572056996458,4cyclictest1620307-21kworker/u8:3+flush-179:010:05:011
1572056996454,8cyclictest1651783-21/usr/sbin/munin11:15:241
1572054996458,4cyclictest1607230-21kworker/u8:1+flush-179:009:05:240
1572054996354,6cyclictest1579932-21kworker/u8:3+flush-179:007:45:200
1572061996260,1cyclictest0-21swapper/311:42:593
1572056996258,3cyclictest1615275-21kworker/u8:2+events_unbound09:25:261
1572056996257,4cyclictest1665845-21kworker/u8:2+events_unbound12:05:151
1572056996151,8cyclictest1660067-21diskstats11:40:141
1572054996153,6cyclictest1575385-21/usr/sbin/munin07:20:220
1572056996057,2cyclictest0-21swapper/110:16:591
1572054995955,2cyclictest714-21Xorg08:13:000
1572056995854,3cyclictest1654770-21kworker/u8:1+events_unbound11:45:251
1572056995851,5cyclictest1604079-21latency_hist08:50:011
1572054995853,4cyclictest1644892-21kworker/u8:0+events_unbound11:05:240
1572056995753,3cyclictest1604315-21kworker/u8:0+events_unbound08:58:071
1572056995750,5cyclictest1615275-21kworker/u8:2+flush-179:010:05:211
1572056995749,5cyclictest1656326-21latency_hist11:30:021
1572054995750,5cyclictest1596160-21kworker/u8:3+events_unbound08:35:240
1572056995652,3cyclictest1662729-21kworker/u8:0+events_unbound11:51:121
1572056995652,3cyclictest1636945-21kworker/u8:0+events_unbound10:38:291
1572054995651,4cyclictest1567403-21kworker/u8:0+flush-179:008:00:140
1572056995551,3cyclictest1592907-21kworker/u8:0+events_unbound08:15:231
1572054995548,5cyclictest1644892-21kworker/u8:0+events_unbound11:10:110
1572054995545,8cyclictest1656583-21apt-get11:30:120
1572054995545,8cyclictest1656583-21apt-get11:30:120
1572056995446,6cyclictest1665880-21latency_hist12:00:001
1572056995349,3cyclictest1641778-21kworker/u8:3+events_unbound10:56:121
1572056995349,3cyclictest1615275-21kworker/u8:2+events_unbound10:26:111
1572054995349,3cyclictest1620307-21kworker/u8:3+flush-179:010:05:260
1572054995348,4cyclictest1607230-21kworker/u8:1+flush-179:009:15:210
1572054995348,4cyclictest1607230-21kworker/u8:1+flush-179:009:15:210
1572056995248,3cyclictest1567459-21kworker/u8:1+events_unbound07:40:181
1572054995245,5cyclictest1654770-21kworker/u8:1+events_unbound11:40:010
1572056995147,3cyclictest1579932-21kworker/u8:3+events_unbound07:53:121
1572056995147,3cyclictest1567459-21kworker/u8:1+events_unbound07:25:031
1572054995141,8cyclictest1671165-21apt-get12:15:090
1572061995043,5cyclictest1604096-21turbostat08:50:003
1572056995045,4cyclictest1654770-21kworker/u8:1+events_unbound11:36:101
1572054995043,5cyclictest1631957-21kworker/u8:0+flush-179:010:21:100
1572056994945,3cyclictest1669042-21kworker/u8:1+events_unbound12:18:461
1572056994940,7cyclictest1617316-21/usr/sbin/munin09:30:231
1572056994939,8cyclictest1620530-21apt-get09:40:111
1572054994945,2cyclictest1567459-21kworker/u8:1+flush-179:007:20:000
1572054994944,4cyclictest1662729-21kworker/u8:0+flush-179:012:25:230
1572054994943,4cyclictest1641778-21kworker/u8:3+flush-179:010:55:230
1572054994943,3cyclictest1604315-21kworker/u8:0+flush-179:009:10:170
4577091480,13ptp4l441ktimers/307:10:013
1572056994844,3cyclictest1567459-21kworker/u8:1+events_unbound07:38:111
1572056994743,3cyclictest1644892-21kworker/u8:0+events_unbound11:07:111
1572056994743,3cyclictest1607230-21kworker/u8:1+events_unbound09:19:111
1572056994743,3cyclictest1607230-21kworker/u8:1+events_unbound09:19:111
1572056994743,3cyclictest1596160-21kworker/u8:3+events_unbound08:42:121
1572056994743,3cyclictest1586840-21kworker/u8:1+events_unbound08:02:591
1572056994742,4cyclictest1587924-21kworker/u8:2+events_unbound08:05:291
1572056994742,4cyclictest1579932-21kworker/u8:3+events_unbound07:45:031
157205699470,45cyclictest1638553-21grep10:35:001
157205699470,45cyclictest1638553-21grep10:34:591
1572056994642,3cyclictest1620307-21kworker/u8:3+events_unbound09:48:111
1572056994642,3cyclictest1615275-21kworker/u8:2+events_unbound10:14:111
1572056994642,3cyclictest1575696-21kworker/u8:2+events_unbound07:22:531
1572056994641,4cyclictest1586840-21kworker/u8:1+events_unbound08:14:101
1572056994641,4cyclictest1567403-21kworker/u8:0+events_unbound07:17:531
1572056994640,5cyclictest1642000-21apt-get10:45:101
1572054994641,2cyclictest714-21Xorg11:15:590
1572054994639,5cyclictest1579932-21kworker/u8:3+flush-179:007:35:270
1572054994638,6cyclictest266-21systemd-journal09:45:100
1572056994541,3cyclictest1654770-21kworker/u8:1+events_unbound11:33:401
1572056994541,3cyclictest1654770-21kworker/u8:1+events_unbound11:33:401
1572056994540,3cyclictest1645059-21ls10:55:011
1572054994542,2cyclictest1641778-21kworker/u8:3+events_unbound11:20:250
1572054994541,3cyclictest1669042-21kworker/u8:1+events_unbound12:15:010
1572054994539,4cyclictest1586840-21kworker/u8:1+events_unbound08:30:250
1572054994538,5cyclictest1618125-21kworker/u8:1+events_unbound09:35:010
1572054994537,5cyclictest1635095-21kworker/u8:1+events_unbound11:00:160
1572056994439,4cyclictest1669042-21kworker/u8:1+events_unbound12:20:041
1572054994439,4cyclictest1615275-21kworker/u8:2+flush-179:010:00:210
1572054994435,5cyclictest1567459-21kworker/u8:1+flush-179:007:25:220
157205499441,2cyclictest714-21Xorg09:44:590
1572056994339,3cyclictest1596160-21kworker/u8:3+events_unbound08:33:111
1572056994332,8cyclictest1675692-21latency_hist12:30:011
1572054994339,3cyclictest1615275-21kworker/u8:2+flush-179:009:55:150
1572054994338,4cyclictest1675696-21kworker/u8:2+flush-179:012:35:150
1572054994338,4cyclictest1641778-21kworker/u8:3+flush-179:011:30:000
1572056994238,3cyclictest1641778-21kworker/u8:3+events_unbound11:23:381
1572056994238,3cyclictest1607310-21kworker/u8:3+events_unbound09:01:011
1572054994237,4cyclictest1636945-21kworker/u8:0+events_unbound10:40:240
1572054994237,4cyclictest1607230-21kworker/u8:1+flush-179:009:20:240
1572054994236,4cyclictest1654770-21kworker/u8:1+events_unbound11:55:240
1572056994137,3cyclictest1607230-21kworker/u8:1+events_unbound09:10:031
1572056994137,3cyclictest1604315-21kworker/u8:0+events_unbound08:53:071
1572056994134,5cyclictest266-21systemd-journal12:37:101
1572054994137,3cyclictest1602538-21kworker/u8:2+flush-179:008:55:010
157205499412,37cyclictest1643335-21cron10:50:000
1572056994036,3cyclictest1662729-21kworker/u8:0+events_unbound12:33:491
1572056994036,3cyclictest1641778-21kworker/u8:3+events_unbound11:10:021
1572056994036,3cyclictest1620307-21kworker/u8:3+events_unbound09:53:201
1572056994036,3cyclictest1615275-21kworker/u8:2+events_unbound10:40:021
1572054994036,3cyclictest1669042-21kworker/u8:1+flush-179:012:20:220
1572054994036,3cyclictest1665845-21kworker/u8:2+events_unbound12:00:230
1572054994034,4cyclictest1636973-21sh10:30:010
157206199390,38cyclictest1628754-21turbostat10:05:013
1572056993935,3cyclictest1662729-21kworker/u8:0+events_unbound12:03:121
1572056993935,3cyclictest1607230-21kworker/u8:1+events_unbound09:22:111
1572056993934,3cyclictest1627153-21perf10:00:001
1572054993935,3cyclictest1572195-21kworker/u8:3+flush-179:007:10:310
1572054993932,5cyclictest1615275-21kworker/u8:2+flush-179:010:15:000
1572054993932,3cyclictest1635095-21kworker/u8:1+flush-179:010:35:110
157205499391,37cyclictest714-21Xorg07:41:590
157205499391,2cyclictest714-21Xorg11:49:590
1572061993833,4cyclictest1643334-21turbostat10:50:003
157206199380,3cyclictest1667489-21turbostat12:09:543
1572059993835,2cyclictest0-21swapper/211:29:002
1572054993835,2cyclictest714-21Xorg11:55:000
1572054993833,4cyclictest1635095-21kworker/u8:1+events_unbound10:50:220
157205499380,37cyclictest0-21swapper/007:50:590
1572061993735,1cyclictest0-21swapper/311:46:583
1572059993734,2cyclictest0-21swapper/209:35:592
1572059993734,2cyclictest0-21swapper/208:29:552
1572059993734,2cyclictest0-21swapper/207:47:592
1572059993733,2cyclictest0-21swapper/207:27:592
1572059993733,2cyclictest0-21swapper/207:12:592
157205999370,35cyclictest0-21swapper/212:31:582
157205999370,35cyclictest0-21swapper/207:33:582
157205499372,31cyclictest1578575-21apt-get07:30:130
1572061993634,1cyclictest0-21swapper/312:18:593
1572061993634,1cyclictest0-21swapper/307:51:593
1572061993632,3cyclictest1583138-21turbostat07:45:003
1572061993630,5cyclictest1599308-21turbostat08:35:013
157206199360,35cyclictest0-21swapper/312:28:583
157206199360,35cyclictest0-21swapper/311:33:593
157206199360,35cyclictest0-21swapper/311:33:583
157206199360,35cyclictest0-21swapper/308:13:003
1572059993633,2cyclictest0-21swapper/208:17:592
1572054993632,3cyclictest1620307-21kworker/u8:3+flush-179:010:15:170
1572061993533,1cyclictest0-21swapper/311:08:593
1572061993532,2cyclictest0-21swapper/311:15:593
157206199350,34cyclictest0-21swapper/312:11:003
157206199350,34cyclictest0-21swapper/309:54:593
157206199350,1cyclictest0-21swapper/310:36:593
157206199350,1cyclictest0-21swapper/309:36:593
157206199350,1cyclictest0-21swapper/309:22:593
1572059993532,2cyclictest0-21swapper/211:44:552
1572059993532,2cyclictest0-21swapper/210:09:552
1572059993532,2cyclictest0-21swapper/207:53:592
1572059993531,2cyclictest0-21swapper/208:07:592
157205999350,1cyclictest0-21swapper/211:09:552
1572056993531,3cyclictest1586840-21kworker/u8:1+events_unbound07:58:281
1572054993530,4cyclictest1591170-21latency_hist08:10:000
1572061993432,1cyclictest0-21swapper/310:19:593
1572061993428,4cyclictest1631919-21turbostat10:15:003
1572059993431,2cyclictest0-21swapper/212:27:592
1572059993431,2cyclictest0-21swapper/211:51:582
1572059993431,2cyclictest0-21swapper/211:30:592
1572059993431,2cyclictest0-21swapper/211:30:582
1572054993431,2cyclictest714-21Xorg08:46:590
1572061993331,1cyclictest0-21swapper/311:54:003
1572061993331,1cyclictest0-21swapper/311:26:593
1572061993330,2cyclictest0-21swapper/310:40:593
1572059993331,1cyclictest0-21swapper/208:40:012
1572059993330,2cyclictest0-21swapper/211:58:002
1572056993327,4cyclictest1669578-21apt-get12:10:111
1572054993328,4cyclictest1592907-21kworker/u8:0+events_unbound08:15:210
1572061993229,2cyclictest0-21swapper/309:40:593
157206199320,31cyclictest0-21swapper/308:25:593
1572059993230,1cyclictest0-21swapper/212:25:002
157206199310,30cyclictest0-21swapper/309:12:593
1572059993129,1cyclictest0-21swapper/211:04:592
1572059993128,2cyclictest0-21swapper/210:38:592
157205999310,29cyclictest0-21swapper/208:40:122
1572056993126,4cyclictest1567403-21kworker/u8:0+events_unbound07:31:121
1572054993124,6cyclictest1669070-21idleruntime-cro12:10:010
1572061993028,1cyclictest0-21swapper/311:56:003
1572059993028,1cyclictest0-21swapper/211:00:002
1572059993027,2cyclictest0-21swapper/211:15:582
1572059993027,2cyclictest0-21swapper/210:15:142
1572059993027,2cyclictest0-21swapper/209:20:142
1572059993027,2cyclictest0-21swapper/208:30:142
1572059993027,2cyclictest0-21swapper/208:03:592
1572059993027,2cyclictest0-21swapper/207:55:152
1572061992927,1cyclictest0-21swapper/311:03:593
1572061992927,1cyclictest0-21swapper/308:20:033
1572061992926,2cyclictest0-21swapper/309:55:133
1572061992925,1cyclictest0-21swapper/307:25:133
1572061992924,4cyclictest1636975-21turbostat10:30:013
157206199290,27cyclictest0-21swapper/308:05:123
157206199290,27cyclictest0-21swapper/307:30:133
1572059992926,2cyclictest0-21swapper/210:53:592
157205999290,28cyclictest0-21swapper/208:20:032
157205999290,27cyclictest0-21swapper/210:20:122
157205999290,27cyclictest0-21swapper/209:30:012
157205999290,27cyclictest0-21swapper/209:25:132
157205999290,27cyclictest0-21swapper/207:15:122
157205999290,1cyclictest0-21swapper/208:45:132
4577091280,7ptp4l441ktimers/311:40:003
4577091280,7ptp4l441ktimers/308:20:003
231999280,13rtkit-daemon1571268-21memory07:05:330
1572061992826,1cyclictest0-21swapper/312:33:593
1572061992826,1cyclictest0-21swapper/310:06:593
1572061992826,1cyclictest0-21swapper/308:36:593
1572061992825,2cyclictest0-21swapper/312:35:123
1572061992825,2cyclictest0-21swapper/311:24:563
1572061992825,2cyclictest0-21swapper/307:14:593
157206199280,26cyclictest0-21swapper/310:30:133
157206199280,26cyclictest0-21swapper/310:30:123
157206199280,26cyclictest0-21swapper/308:50:133
157206199280,26cyclictest0-21swapper/307:45:123
1572059992826,1cyclictest0-21swapper/209:05:142
1572059992826,1cyclictest0-21swapper/207:45:002
1572059992825,2cyclictest0-21swapper/212:10:022
1572059992825,2cyclictest0-21swapper/211:14:592
1572059992825,2cyclictest0-21swapper/209:00:132
1572059992824,2cyclictest0-21swapper/209:47:592
157205999280,26cyclictest0-21swapper/209:55:022
4577091270,7ptp4l61490irq/134-eno1-TxRx-011:15:003
4577091270,6ptp4l441ktimers/312:05:003
4577091270,6ptp4l441ktimers/309:10:003
1572061992724,2cyclictest0-21swapper/308:41:593
157206199270,26cyclictest0-21swapper/307:37:593
157206199270,20cyclictest0-21swapper/309:45:013
1572059992724,2cyclictest0-21swapper/212:05:582
1572059992724,2cyclictest0-21swapper/212:01:592
1572059992723,2cyclictest0-21swapper/209:42:372
157205999270,25cyclictest0-21swapper/212:40:002
157205999270,1cyclictest0-21swapper/211:39:002
4577091260,5ptp4l441ktimers/312:24:553
4577091260,5ptp4l441ktimers/308:59:563
1572061992623,2cyclictest0-21swapper/310:50:583
157206199260,24cyclictest0-21swapper/309:25:493
1572059992623,2cyclictest0-21swapper/209:54:332
1572059992623,2cyclictest0-21swapper/208:55:152
1572059992623,2cyclictest0-21swapper/208:11:592
157205999260,2cyclictest0-21swapper/208:53:592
4577091250,6ptp4l61490irq/134-eno1-TxRx-009:20:013
4577091250,6ptp4l61490irq/134-eno1-TxRx-009:20:013
4577091250,4ptp4l441ktimers/309:05:003
4577091250,4ptp4l441ktimers/308:00:013
1572061992523,1cyclictest0-21swapper/308:00:133
157206199250,24cyclictest0-21swapper/307:19:593
157206199250,23cyclictest0-21swapper/309:30:303
157206199250,1cyclictest0-21swapper/307:24:543
1572059992523,1cyclictest0-21swapper/210:34:592
1572059992523,1cyclictest0-21swapper/210:34:592
1572059992522,2cyclictest0-21swapper/210:40:132
1572059992521,2cyclictest0-21swapper/211:49:582
4577091240,4ptp4l61490irq/134-eno1-TxRx-010:25:013
1572059992421,2cyclictest0-21swapper/210:28:002
1572059992421,2cyclictest0-21swapper/207:22:592
157205999240,1cyclictest0-21swapper/207:39:592
1572056992419,4cyclictest0-21swapper/107:10:031
1572059992321,1cyclictest0-21swapper/209:15:002
1572059992320,2cyclictest0-21swapper/212:15:592
1572059992017,2cyclictest0-21swapper/211:23:592
1572059992017,2cyclictest0-21swapper/210:00:122
1572059991917,1cyclictest0-21swapper/209:15:592
1572059991917,1cyclictest0-21swapper/209:15:592
1572061991715,1cyclictest0-21swapper/310:56:003
1572059991412,1cyclictest0-21swapper/210:48:592
15720599998,1cyclictest0-21swapper/210:15:002
15720599930,2cyclictest0-21swapper/207:10:022
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional