You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2021-09-29 - 04:03

Intel(R) Core(TM) i3-4360 CPU @ 3.70GHz, Linux 5.10.1-rt20 (Profile)

Latency plot of system in rack #0, slot #4
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack0slot4.osadl.org (updated Wed Sep 29, 2021 00:43:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
4099958991605,29cyclictest213848-21CPU2
21016021170,0sleep20-21swapper/223:09:412
4099551211370,30sleep30-21swapper/319:07:303
4099459211170,31sleep20-21swapper/219:06:412
4099435210668,18sleep00-21swapper/019:06:230
4099342210074,19sleep10-21swapper/119:05:301
4099958997420,30cyclictest0-21swapper/219:22:432
825602690,0sleep00-21swapper/023:05:290
2951142690,0sleep10-21swapper/100:31:051
409995899680,65cyclictest271668-21systemd-userwor00:13:592
409995899680,2cyclictest35159-21systemd-userwor22:25:262
4099958996718,29cyclictest0-21swapper/221:52:442
409995399670,63cyclictest230507-21systemd-userwor23:32:102
409995899663,1cyclictest4127107-21systemd-userwor20:11:392
409995899660,66cyclictest0-21swapper/219:27:272
409995399660,1cyclictest300568-21systemd-userwor00:39:052
409995899659,34cyclictest3508982-21gmain21:02:432
4099958996564,1cyclictest218448-21kworker/0:123:29:160
4099958996513,30cyclictest0-21swapper/219:57:432
409995899651,0cyclictest9-21ksoftirqd/023:44:590
409995899650,0cyclictest493-21jbd2/dm-0-819:51:312
409995899650,0cyclictest0-21swapper/223:15:582
409995899650,0cyclictest0-21swapper/200:15:212
409994999651,64cyclictest9-21ksoftirqd/021:05:240
4099958996410,30cyclictest0-21swapper/220:42:442
409995899640,64cyclictest0-21swapper/221:23:302
409995899640,1cyclictest4137959-21systemd-userwor20:36:432
409994999640,63cyclictest0-21swapper/020:05:220
4099963996361,1cyclictest3508964-21gnome-shell23:56:580
4099958996363,0cyclictest218448-21kworker/0:123:20:340
4099958996363,0cyclictest0-21swapper/219:45:012
409995899630,63cyclictest0-21swapper/222:31:562
409995899630,63cyclictest0-21swapper/222:01:122
409995899630,63cyclictest0-21swapper/221:41:452
409995899630,63cyclictest0-21swapper/221:18:422
409995899630,63cyclictest0-21swapper/221:18:422
409995899630,63cyclictest0-21swapper/220:51:242
409995899630,63cyclictest0-21swapper/219:19:052
409995899630,63cyclictest0-21swapper/219:12:052
409995899630,63cyclictest0-21swapper/000:15:220
409995899630,1cyclictest69143-21systemd-userwor22:58:542
409995899630,0cyclictest0-21swapper/223:54:422
409995899630,0cyclictest0-21swapper/223:21:572
409995899630,0cyclictest0-21swapper/222:54:492
409995899630,0cyclictest0-21swapper/221:56:152
409995899630,0cyclictest0-21swapper/221:48:352
409995899630,0cyclictest0-21swapper/221:38:212
409995899630,0cyclictest0-21swapper/220:32:082
409995899630,0cyclictest0-21swapper/220:16:562
409995899630,0cyclictest0-21swapper/219:33:352
409994999630,0cyclictest0-21swapper/223:38:002
4099958996262,0cyclictest29507-21kworker/0:223:12:530
4099958996262,0cyclictest290183-21kworker/3:000:29:593
4099958996262,0cyclictest265486-21kworker/0:200:07:300
4099958996262,0cyclictest265486-21kworker/0:200:04:460
4099958996210,30cyclictest0-21swapper/222:47:432
409995899620,62cyclictest4149245-21kworker/2:021:10:422
409995899620,62cyclictest29410-21kworker/2:022:17:562
409995899620,62cyclictest0-21swapper/223:02:592
409995899620,62cyclictest0-21swapper/222:22:332
409995899620,62cyclictest0-21swapper/221:31:002
409995899620,62cyclictest0-21swapper/220:28:022
409995899620,62cyclictest0-21swapper/220:03:272
409995899620,62cyclictest0-21swapper/219:38:022
409995899620,2cyclictest4131297-21systemd-userwor20:20:002
409995899620,0cyclictest0-21swapper/222:11:472
409995899620,0cyclictest0-21swapper/221:29:072
4099953996260,1cyclictest273989-21sensors00:10:230
4099949996262,0cyclictest4104956-21kworker/0:119:25:590
4099949996262,0cyclictest0-21swapper/020:29:590
4099949996262,0cyclictest0-21swapper/020:14:590
409994999620,62cyclictest0-21swapper/020:17:590
409994999620,0cyclictest0-21swapper/123:36:051
4099963996160,1cyclictest3508964-21gnome-shell20:17:583
4099963996159,1cyclictest3508964-21gnome-shell22:24:593
409995899610,61cyclictest0-21swapper/223:29:062
409995899610,61cyclictest0-21swapper/222:36:232
409995899610,61cyclictest0-21swapper/220:06:002
409995899610,61cyclictest0-21swapper/219:40:042
409995899610,0cyclictest0-21swapper/223:45:502
409995899610,0cyclictest0-21swapper/222:40:072
409995899610,0cyclictest0-21swapper/222:05:402
409995899610,0cyclictest0-21swapper/200:27:392
4099953996159,1cyclictest68737-21sensors22:55:261
409995399610,0cyclictest0-21swapper/121:35:541
4099949996161,0cyclictest4144885-21kworker/0:020:51:580
4099949996161,0cyclictest4104956-21kworker/0:119:30:590
4099949996161,0cyclictest4083008-21kworker/0:219:47:590
4099949996161,0cyclictest17683-21kworker/0:022:08:000
409994999610,61cyclictest0-21swapper/323:27:593
409994999610,61cyclictest0-21swapper/023:00:590
409994999610,61cyclictest0-21swapper/020:30:590
4099963996060,0cyclictest4167022-21ssh21:21:593
409996399600,0cyclictest0-21swapper/123:30:221
4099958996060,0cyclictest289175-21kworker/0:100:32:150
4099958996060,0cyclictest218448-21kworker/0:123:31:500
4099958996059,1cyclictest29507-21kworker/0:223:15:270
4099958996059,1cyclictest265486-21kworker/0:200:24:450
409995899600,60cyclictest4138235-21kworker/u8:120:45:262
409995899600,60cyclictest0-21swapper/221:06:462
409995899600,60cyclictest0-21swapper/220:57:032
409995899600,60cyclictest0-21swapper/200:01:322
4099953996060,0cyclictest289175-21kworker/0:100:36:410
4099949996060,0cyclictest4136019-21kworker/0:120:48:590
4099949996060,0cyclictest29507-21kworker/0:222:31:590
4099949996060,0cyclictest0-21swapper/022:41:590
4099949996059,1cyclictest17683-21kworker/0:022:10:590
4099949996058,1cyclictest3508964-21gnome-shell22:25:580
4099949996058,1cyclictest3508964-21gnome-shell00:04:581
409994999600,60cyclictest0-21swapper/022:35:230
409994999600,60cyclictest0-21swapper/019:12:590
4099958995958,1cyclictest0-21swapper/200:20:082
409995899590,59cyclictest0-21swapper/200:31:032
4099953995957,1cyclictest243421-21sensors23:40:222
409995399590,58cyclictest0-21swapper/123:09:291
4099949995959,0cyclictest4104956-21kworker/0:119:20:580
409994999590,59cyclictest0-21swapper/019:44:590
409994999590,0cyclictest0-21swapper/023:45:590
409994999590,0cyclictest0-21swapper/022:00:590
4099963995858,0cyclictest0-21swapper/123:27:581
409996399580,58cyclictest0-21swapper/321:09:593
409996399580,58cyclictest0-21swapper/320:03:583
4099958995858,0cyclictest218448-21kworker/0:123:53:000
4099958995858,0cyclictest0-21swapper/123:47:591
409995899580,58cyclictest0-21swapper/200:09:332
4099953995858,0cyclictest1000-21snmpd20:07:591
4099953995857,1cyclictest0-21swapper/120:15:241
409995399580,58cyclictest0-21swapper/223:59:082
4099949995858,0cyclictest4187842-21kworker/0:021:46:590
4099949995858,0cyclictest4083008-21kworker/0:219:19:590
4099949995858,0cyclictest0-21swapper/021:24:590
4099949995858,0cyclictest0-21swapper/020:20:580
409994999580,58cyclictest0-21swapper/000:27:590
4099963995757,0cyclictest0-21swapper/319:59:593
4099963995757,0cyclictest0-21swapper/100:05:231
4099963995756,1cyclictest3508964-21gnome-shell19:53:593
4099963995756,1cyclictest3508964-21gnome-shell19:30:593
4099963995756,1cyclictest3508964-21gnome-shell19:27:593
4099963995756,1cyclictest3508964-21gnome-shell19:19:593
4099958995757,0cyclictest218448-21kworker/0:123:35:460
4099958995753,3cyclictest0-21swapper/300:34:593
4099953995755,1cyclictest1000-21snmpd22:29:551
409995399570,0cyclictest0-21swapper/121:31:301
4099949995757,0cyclictest0-21swapper/020:59:590
409994999570,57cyclictest0-21swapper/022:15:590
409994999570,57cyclictest0-21swapper/021:26:000
409994999570,57cyclictest0-21swapper/019:58:590
4099963995655,1cyclictest3508964-21gnome-shell20:58:593
4099958995656,0cyclictest0-21swapper/300:11:593
4099953995656,0cyclictest4109331-21kworker/1:119:51:301
409995399560,55cyclictest209631-21sshd23:10:201
4099949995655,1cyclictest0-21swapper/022:55:580
4099949995654,1cyclictest3508964-21gnome-shell21:41:590
4099963995555,0cyclictest0-21swapper/321:31:583
409995399550,1cyclictest4188912-21kworker/u8:021:44:291
4099949995555,0cyclictest4118262-21kworker/0:120:02:590
4099963995454,0cyclictest0-21swapper/321:01:583
4099963995453,1cyclictest73945-21sensors23:00:223
4099963995452,1cyclictest3508964-21gnome-shell19:47:593
4099958995454,0cyclictest0-21swapper/323:22:353
4099953995454,0cyclictest4146715-21kworker/u8:021:10:421
4099953995454,0cyclictest0-21swapper/121:18:591
4099953995454,0cyclictest0-21swapper/121:18:581
4099963995353,0cyclictest0-21swapper/100:22:591
4099958995353,0cyclictest265415-21kworker/1:200:16:591
4099953995351,1cyclictest1000-21snmpd19:27:341
4099963995252,0cyclictest1000-21snmpd22:07:573
409996399520,52cyclictest0-21swapper/320:47:583
4099953995249,3cyclictest0-21swapper/323:55:233
409995399520,52cyclictest0-21swapper/121:26:451
4099949995251,1cyclictest0-21swapper/021:35:590
2574082520,0sleep10-21swapper/123:55:121
4099963995150,1cyclictest4137400-21sensors20:30:263
4099958995151,0cyclictest0-21swapper/300:39:593
4099953995151,0cyclictest4131189-21kworker/u8:220:40:401
4099953995151,0cyclictest0-21swapper/120:10:371
4099949995151,0cyclictest0-21swapper/022:50:580
4099949995151,0cyclictest0-21swapper/022:46:580
4099949995151,0cyclictest0-21swapper/021:33:580
4099949995150,1cyclictest2412-21ssh21:50:240
4099963995050,0cyclictest3508964-21gnome-shell23:41:581
4099953994949,0cyclictest0-21swapper/120:57:441
4099953994949,0cyclictest0-21swapper/120:26:301
4099953994948,1cyclictest54935-21kworker/1:222:51:001
4099953994947,1cyclictest1000-21snmpd22:01:061
4099949994947,1cyclictest3508964-21gnome-shell21:19:590
4099949994947,1cyclictest3508964-21gnome-shell21:19:580
4099953994848,0cyclictest0-21swapper/122:45:041
409995399480,48cyclictest4191814-21kworker/1:022:15:531
409995399480,48cyclictest0-21swapper/120:36:331
409995399480,48cyclictest0-21swapper/120:22:541
4099963994747,0cyclictest1000-21snmpd22:52:583
4099963994746,1cyclictest3508964-21gnome-shell22:37:593
4099963994743,4cyclictest0-21swapper/100:10:231
4099953994744,3cyclictest0-21swapper/123:53:001
4099953994743,3cyclictest0-21swapper/300:15:593
4099949994747,0cyclictest0-21swapper/021:59:590
4099949994746,1cyclictest0-21swapper/021:11:590
4099953994646,0cyclictest0-21swapper/123:01:551
4099953994645,1cyclictest4110773-21sensors19:30:241
4099949994644,1cyclictest3508964-21gnome-shell22:21:590
4099953994545,0cyclictest4186541-21kworker/1:121:53:001
4099953994545,0cyclictest0-21swapper/121:47:581
4099953994545,0cyclictest0-21swapper/120:00:591
4099949994545,0cyclictest0-21swapper/323:19:583
4099963994443,1cyclictest92650irq/30-p4p121:59:503
4099953994444,0cyclictest4191814-21kworker/1:022:24:001
4099953994444,0cyclictest4191814-21kworker/1:022:11:591
4099953994444,0cyclictest4191814-21kworker/1:021:55:591
4099953994444,0cyclictest4133287-21kworker/1:320:45:591
4099953994444,0cyclictest0-21swapper/121:09:581
4099953994444,0cyclictest0-21swapper/119:46:591
4099963994343,0cyclictest217102-21kworker/1:123:21:001
4099963994343,0cyclictest1000-21snmpd21:35:543
4099953994343,0cyclictest4109331-21kworker/1:119:38:581
4099953994343,0cyclictest0-21swapper/121:02:591
4099953994343,0cyclictest0-21swapper/120:50:231
4099953994343,0cyclictest0-21swapper/120:33:591
4099953994341,1cyclictest3508964-21gnome-shell22:40:581
4099953994341,1cyclictest3508964-21gnome-shell22:08:591
4099963994241,1cyclictest3508964-21gnome-shell22:56:583
4099953994242,0cyclictest0-21swapper/119:13:591
4099953994240,1cyclictest3508964-21gnome-shell21:24:591
4099953994238,4cyclictest0-21swapper/323:34:593
4099949994242,0cyclictest0-21swapper/019:39:260
4099949994241,1cyclictest92650irq/30-p4p123:54:583
4099963994141,0cyclictest92650irq/30-p4p123:10:033
4099963994137,4cyclictest0-21swapper/323:42:583
4099953994141,0cyclictest0-21swapper/119:16:591
4099949994139,1cyclictest3508964-21gnome-shell20:41:590
4099963994040,0cyclictest0-21swapper/100:38:581
4099963994038,2cyclictest0-21swapper/300:00:593
4099953994040,0cyclictest4109331-21kworker/1:119:41:591
4099953994035,4cyclictest0-21swapper/323:36:263
4099953993939,0cyclictest0-21swapper/122:32:581
4099949993937,1cyclictest3508964-21gnome-shell20:35:580
4099963993838,0cyclictest92650irq/30-p4p123:09:283
4099963993837,1cyclictest0-21swapper/320:08:003
4099963993836,1cyclictest3508964-21gnome-shell21:17:583
4099963993836,1cyclictest3508964-21gnome-shell21:17:583
4099953993838,0cyclictest4109331-21kworker/1:119:57:591
4099949993836,1cyclictest3508964-21gnome-shell21:03:590
4099949993836,1cyclictest3508964-21gnome-shell19:54:580
4099953993736,1cyclictest4106339-21sensors19:20:231
4099963993635,1cyclictest31-21ksoftirqd/321:43:483
4099953993631,4cyclictest0-21swapper/100:25:181
409995399361,11cyclictest213849-21CPU1
4099963993535,0cyclictest0-21swapper/322:29:553
4099963993534,1cyclictest92650irq/30-p4p122:17:563
4099963993530,4cyclictest0-21swapper/300:09:023
4099963993434,0cyclictest92650irq/30-p4p122:45:553
4099963993433,1cyclictest92650irq/30-p4p121:10:423
4099963993332,1cyclictest92650irq/30-p4p121:45:303
4099963993332,1cyclictest92650irq/30-p4p121:26:443
4099963993130,1cyclictest92650irq/30-p4p120:40:403
4099963993130,1cyclictest92650irq/30-p4p120:10:373
4099953993129,1cyclictest48352-21sensors22:35:231
4099963993029,1cyclictest92650irq/30-p4p120:26:303
4099958993027,3cyclictest0-21swapper/323:47:583
4099963992928,1cyclictest92650irq/30-p4p120:36:343
4099963992928,1cyclictest92650irq/30-p4p120:22:553
4099963992727,0cyclictest8471-21kworker/3:122:01:593
4099963992622,3cyclictest0-21swapper/300:23:593
4099963992424,0cyclictest0-21swapper/322:11:593
4099963992424,0cyclictest0-21swapper/321:52:003
4099963992423,1cyclictest49776-21kworker/3:222:44:593
4099963992323,0cyclictest0-21swapper/319:38:593
4099963992322,1cyclictest4146263-21sensors20:50:243
4099963992222,0cyclictest4099845-21kworker/3:119:13:593
4099963992020,0cyclictest0-21swapper/319:41:593
4099963991918,1cyclictest3508964-21gnome-shell22:32:583
4099963991616,0cyclictest0-21swapper/319:20:243
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional