You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-01 - 05:14
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot4.osadl.org (updated Sat Nov 01, 2025 00:46:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
6027882417394,15sleep130-21swapper/1319:06:355
6028492367345,14sleep20-21swapper/219:07:308
6028152361317,36sleep40-21swapper/419:06:5910
6027212356311,15sleep50-21swapper/519:05:4011
6028022353309,14sleep80-21swapper/819:06:4714
6028852352309,34sleep120-21swapper/1219:07:554
6028892351304,15sleep150-21swapper/1519:07:597
6029182344322,14sleep100-21swapper/1019:08:262
6029702343320,15sleep30-21swapper/319:09:079
6029642342319,15sleep140-21swapper/1419:09:026
6028792341317,15sleep70-21swapper/719:07:5113
6020252341330,7sleep90-21swapper/919:05:2715
6028282340317,15sleep00-21swapper/019:07:110
6027222340317,15sleep60-21swapper/619:05:4112
6028222337314,15sleep110-21swapper/1119:07:073
6027682337314,15sleep10-21swapper/119:06:241
60342399283282,1cyclictest0-21swapper/220:40:168
60345099228227,1cyclictest683862-21nodev-device-ev20:40:162
60345599172171,1cyclictest696684-21nodev-device-ev20:55:184
60343099161161,0cyclictest0-21swapper/420:55:1910
603459998988,1cyclictest0-21swapper/1300:15:175
603443998684,1cyclictest709508-21nodev-device-ev21:10:1814
603446998584,1cyclictest790623-21nodev-device-ev22:45:2015
603443998180,1cyclictest837587-21nodev-device-ev23:40:1814
603418997473,1cyclictest0-21swapper/021:10:190
603423997372,1cyclictest0-21swapper/221:40:198
603436997170,1cyclictest679610-21nodev-device-ev20:35:1812
603459996967,2cyclictest632650-21nodev-device-ev19:40:185
603418996968,1cyclictest0-21swapper/023:40:180
603459996665,1cyclictest662538-21nodev-device-ev20:15:175
603440996665,1cyclictest743659-21nodev-device-ev21:50:1913
603446996564,1cyclictest0-21swapper/921:15:1715
603463996463,1cyclictest0-21swapper/1421:05:186
603463996160,1cyclictest0-21swapper/1423:15:186
603450996160,1cyclictest811977-21nodev-device-ev23:10:182
603453995958,1cyclictest786341-21nodev-device-ev22:40:213
603453995554,1cyclictest0-21swapper/1120:45:163
603465995352,1cyclictest0-21swapper/1521:50:197
603420995352,1cyclictest756472-21nodev-device-ev22:05:181
603420995251,1cyclictest0-21swapper/119:20:211
603443995151,0cyclictest0-21swapper/800:30:1814
603455995049,1cyclictest872829-21nodev-device-ev00:25:154
603427994544,1cyclictest0-21swapper/322:40:219
603436994241,1cyclictest824796-21nodev-device-ev23:25:1812
603427994140,1cyclictest688144-21nodev-device-ev20:45:159
603418994140,1cyclictest877098-21nodev-device-ev00:30:180
603443994039,1cyclictest636901-21nodev-device-ev19:45:1614
603443994039,1cyclictest636901-21nodev-device-ev19:45:1614
603423994039,1cyclictest854672-21nodev-device-ev00:00:178
603430993938,1cyclictest0-21swapper/400:25:1510
603436993635,1cyclictest646161-21timerandwakeup19:55:2412
603455993433,1cyclictest777823-21nodev-device-ev22:30:174
603436993331,2cyclictest0-21swapper/621:10:1912
603436993230,2cyclictest0-21swapper/622:00:1912
603436993229,3cyclictest0-21swapper/619:10:2012
603465993127,2cyclictest0-21swapper/1522:45:187
603436993126,2cyclictest546024-21kworker/6:2-events20:20:2012
603436993028,2cyclictest0-21swapper/600:27:2312
603436993028,2cyclictest0-21swapper/600:02:4312
603436993028,0cyclictest0-21swapper/619:15:0212
603436993026,2cyclictest776634-21cstates22:30:1112
603436993026,2cyclictest0-21swapper/623:34:5912
603436993022,5cyclictest761rcuc/622:45:1812
60346399292,26cyclictest0-21swapper/1421:00:436
603455992929,0cyclictest0-21swapper/1221:13:414
603436992926,3cyclictest805242-21latency_hist23:04:5912
603436992926,3cyclictest805242-21latency_hist23:04:5912
603436992925,2cyclictest78-21ksoftirqd/600:20:1912
603436992925,2cyclictest0-21swapper/600:30:0512
603436992923,3cyclictest0-21swapper/623:17:1912
60343699290,27cyclictest833625-21ntpq23:35:2112
60343699290,27cyclictest761rcuc/620:25:1612
60343699290,27cyclictest709523-21kworker/6:1+mm_percpu_wq22:20:2112
60343699290,27cyclictest617652-21latency_hist19:25:0012
60343699290,26cyclictest0-21swapper/600:10:1512
603423992927,2cyclictest3939865-21snmpd20:04:588
603423992926,3cyclictest645437-21nodev-device-ev19:55:158
603423992926,3cyclictest3939865-21snmpd21:38:448
60342399290,28cyclictest0-21swapper/223:06:138
60342399290,27cyclictest0-21swapper/223:55:278
60346399280,27cyclictest0-21swapper/1422:51:556
60346399280,27cyclictest0-21swapper/1420:45:146
60346399280,27cyclictest0-21swapper/1419:58:506
60345999280,27cyclictest0-21swapper/1321:09:345
603455992828,0cyclictest0-21swapper/1223:18:114
603455992828,0cyclictest0-21swapper/1222:25:014
603455992828,0cyclictest0-21swapper/1221:50:214
603455992827,1cyclictest592976-21kworker/u32:2+flush-259:020:10:194
603455992827,1cyclictest0-21swapper/1200:16:274
60344699280,27cyclictest0-21swapper/922:24:5715
60344699280,27cyclictest0-21swapper/920:42:0515
603440992827,1cyclictest3939865-21snmpd22:00:4413
60344099280,27cyclictest0-21swapper/723:15:1613
60344099280,27cyclictest0-21swapper/722:45:1813
60344099280,27cyclictest0-21swapper/721:00:2813
603436992826,2cyclictest0-21swapper/623:10:2112
603436992825,3cyclictest709523-21kworker/6:1-events22:09:5912
603436992825,3cyclictest0-21swapper/623:24:1912
603436992825,3cyclictest0-21swapper/620:05:1612
603436992825,0cyclictest0-21swapper/619:30:2012
603436992824,2cyclictest722278-21libvirtd21:25:1512
60343699280,25cyclictest0-21swapper/622:13:5112
60343399280,27cyclictest0-21swapper/520:34:1511
60343399280,27cyclictest0-21swapper/519:47:1411
60343399280,27cyclictest0-21swapper/519:47:1411
60342799280,27cyclictest0-21swapper/321:06:249
603423992827,1cyclictest3939865-21snmpd19:13:348
603423992825,3cyclictest3939865-21snmpd23:17:298
60342399280,27cyclictest0-21swapper/220:24:008
60342099280,27cyclictest0-21swapper/119:44:231
60342099280,1cyclictest0-21swapper/123:35:261
60342099280,1cyclictest0-21swapper/121:42:171
603418992827,1cyclictest0-21swapper/019:45:170
603418992827,1cyclictest0-21swapper/019:45:170
60341899280,27cyclictest0-21swapper/022:20:160
60341899280,27cyclictest0-21swapper/019:50:140
60341899280,27cyclictest0-21swapper/019:50:140
60346599270,1cyclictest0-21swapper/1520:50:427
60346599270,1cyclictest0-21swapper/1519:50:187
60346599270,1cyclictest0-21swapper/1519:50:187
603463992726,1cyclictest654013-21kworker/14:1+events21:30:256
603463992726,1cyclictest3939865-21snmpd20:16:576
603463992726,1cyclictest3939865-21snmpd19:35:116
603463992724,3cyclictest0-21swapper/1423:55:146
603463992721,3cyclictest0-21swapper/1419:15:026
60346399270,26cyclictest0-21swapper/1400:06:276
60346399270,1cyclictest0-21swapper/1400:21:076
603459992726,1cyclictest3939865-21snmpd22:17:365
603459992726,1cyclictest0-21swapper/1319:34:085
60345999270,1cyclictest0-21swapper/1321:25:495
603455992727,0cyclictest0-21swapper/1222:15:014
603455992727,0cyclictest0-21swapper/1222:05:314
603455992727,0cyclictest0-21swapper/1219:35:174
603455992726,1cyclictest3939865-21snmpd22:50:254
603455992726,1cyclictest3939865-21snmpd20:07:564
603453992726,1cyclictest3939865-21snmpd23:21:143
60345399270,27cyclictest0-21swapper/1119:55:133
60345399270,1cyclictest0-21swapper/1121:46:293
603450992726,1cyclictest713480-21ethtool21:15:152
603450992726,1cyclictest3939865-21snmpd23:20:052
603450992726,1cyclictest3939865-21snmpd23:17:442
603450992726,1cyclictest3939865-21snmpd22:13:292
60345099270,27cyclictest0-21swapper/1021:55:322
60345099270,26cyclictest0-21swapper/1000:05:212
60345099270,1cyclictest0-21swapper/1000:24:552
60345099270,1cyclictest0-21swapper/1000:04:512
603446992726,1cyclictest3939865-21snmpd00:18:3415
603443992726,1cyclictest704934-21cat21:05:1514
603443992726,1cyclictest3939865-21snmpd20:50:3214
603443992726,1cyclictest0-21swapper/822:31:2414
60344399270,1cyclictest0-21swapper/823:27:1114
603440992726,1cyclictest3939865-21snmpd23:44:4213
603440992726,1cyclictest3939865-21snmpd23:00:3113
603440992726,1cyclictest3939865-21snmpd23:00:3113
60344099270,0cyclictest0-21swapper/721:46:2913
603436992725,2cyclictest709523-21kworker/6:1-events21:40:1312
603436992725,2cyclictest0-21swapper/621:15:1512
603436992725,2cyclictest0-21swapper/620:40:2012
603436992725,0cyclictest0-21swapper/621:50:2912
603436992724,3cyclictest0-21swapper/620:00:2012
603436992722,3cyclictest864579-21ntpq00:15:1912
603436992722,3cyclictest820529-21kworker/6:1+events00:39:5512
603436992722,3cyclictest546024-21kworker/6:2-events19:50:2812
603436992722,3cyclictest546024-21kworker/6:2-events19:50:2812
603436992722,3cyclictest0-21swapper/622:25:2112
60343699270,27cyclictest546024-21kworker/6:2+mm_percpu_wq20:15:1812
60343699270,27cyclictest0-21swapper/621:30:2312
60343699270,25cyclictest0-21swapper/621:38:4512
60343699270,1cyclictest546024-21kworker/6:2+mm_percpu_wq20:50:1912
603433992726,1cyclictest3939865-21snmpd23:09:1211
603433992726,1cyclictest3939865-21snmpd21:26:0111
603433992726,1cyclictest3939865-21snmpd19:25:4611
60343399270,26cyclictest0-21swapper/521:05:3111
60343399270,26cyclictest0-21swapper/520:09:5011
603430992727,0cyclictest0-21swapper/419:55:1610
603430992726,1cyclictest3939865-21snmpd21:12:3410
60343099270,26cyclictest0-21swapper/420:50:1910
60342799270,27cyclictest0-21swapper/321:24:169
603423992726,1cyclictest3939865-21snmpd23:54:578
603423992726,1cyclictest0-21swapper/219:27:108
60342399270,26cyclictest0-21swapper/221:30:248
60342399270,1cyclictest0-21swapper/219:53:328
60342399270,1cyclictest0-21swapper/219:53:318
603420992727,0cyclictest0-21swapper/119:55:161
60342099270,27cyclictest0-21swapper/123:08:071
60341899270,27cyclictest0-21swapper/022:55:160
60341899270,27cyclictest0-21swapper/022:55:160
603463992625,1cyclictest3939865-21snmpd21:12:136
60346399260,0cyclictest0-21swapper/1422:55:146
60346399260,0cyclictest0-21swapper/1422:55:146
603459992625,1cyclictest3939865-21snmpd23:59:365
603459992625,1cyclictest3939865-21snmpd19:46:115
603459992625,1cyclictest3939865-21snmpd19:46:115
60345999260,26cyclictest0-21swapper/1319:20:195
603455992626,0cyclictest0-21swapper/1219:46:194
603455992626,0cyclictest0-21swapper/1219:46:194
603455992625,1cyclictest645452-21kworker/12:0-events22:11:394
603455992625,1cyclictest0-21swapper/1223:35:014
603453992625,1cyclictest3939865-21snmpd22:58:253
603453992625,1cyclictest3939865-21snmpd22:58:253
603450992625,1cyclictest3939865-21snmpd22:42:392
603450992625,1cyclictest3939865-21snmpd19:52:262
603450992625,1cyclictest3939865-21snmpd19:52:262
603450992625,1cyclictest0-21swapper/1020:29:572
603446992625,1cyclictest3939865-21snmpd23:46:2415
603446992625,1cyclictest0-21swapper/900:01:0015
603443992625,1cyclictest3939865-21snmpd21:32:4314
603443992625,1cyclictest3939865-21snmpd00:37:2214
603443992625,1cyclictest3939865-21snmpd00:10:2714
60344099261,11cyclictest0-21swapper/700:28:5813
60344099261,11cyclictest0-21swapper/700:17:5913
603436992625,1cyclictest78-21ksoftirqd/621:05:2312
603436992624,2cyclictest0-21swapper/621:45:1512
603436992624,2cyclictest0-21swapper/620:10:2212
603436992624,0cyclictest0-21swapper/622:15:1712
603436992623,3cyclictest0-21swapper/619:25:1612
603436992623,0cyclictest0-21swapper/623:40:1912
603436992622,2cyclictest0-21swapper/622:50:1512
603436992621,3cyclictest761rcuc/621:00:1712
603436992621,3cyclictest0-21swapper/619:40:1412
603436992616,6cyclictest0-21swapper/600:05:3312
603433992625,1cyclictest3939865-21snmpd19:16:5211
60343399260,26cyclictest0-21swapper/520:19:0311
603430992625,1cyclictest3939865-21snmpd21:24:1310
60343099260,26cyclictest0-21swapper/423:35:2610
60343099260,26cyclictest0-21swapper/421:42:1610
60343099260,26cyclictest0-21swapper/420:12:5310
60343099260,26cyclictest0-21swapper/419:44:2310
60343099260,26cyclictest0-21swapper/400:39:0110
603427992626,0cyclictest645133-21mii-tool19:55:149
603427992625,1cyclictest670774-21mii-tool20:25:179
603423992625,1cyclictest3939865-21snmpd22:39:158
603420992625,1cyclictest3939865-21snmpd21:55:051
603420992621,2cyclictest0-21swapper/119:50:181
603420992621,2cyclictest0-21swapper/119:50:181
60342099260,26cyclictest0-21swapper/120:56:371
603418992625,1cyclictest3939865-21snmpd23:28:260
603418992625,1cyclictest3939865-21snmpd20:32:150
603418992625,1cyclictest0-21swapper/020:50:030
603465992524,1cyclictest3939865-21snmpd23:38:477
603465992524,1cyclictest3939865-21snmpd19:41:237
603463992524,1cyclictest3939865-21snmpd20:06:356
603463992524,1cyclictest3939865-21snmpd20:02:056
603459992524,1cyclictest3939865-21snmpd20:33:515
603455992525,0cyclictest0-21swapper/1223:10:374
603455992525,0cyclictest0-21swapper/1219:17:534
603455992525,0cyclictest0-21swapper/1219:10:534
603453992524,1cyclictest3939865-21snmpd23:08:373
603446992524,1cyclictest3939865-21snmpd21:59:3815
603446992524,1cyclictest3939865-21snmpd19:45:2315
603446992524,1cyclictest3939865-21snmpd19:45:2215
603446992523,1cyclictest3939865-21snmpd19:51:5315
603446992523,1cyclictest3939865-21snmpd19:51:5315
603446992522,0cyclictest0-21swapper/900:10:1115
603443992524,1cyclictest3939865-21snmpd22:52:4614
603440992525,0cyclictest649422-21mii-tool20:00:1413
603440992524,1cyclictest3939865-21snmpd20:38:5113
60344099251,11cyclictest0-21swapper/723:45:0213
60344099251,11cyclictest0-21swapper/723:23:0413
60344099251,11cyclictest0-21swapper/720:49:1813
60344099251,11cyclictest0-21swapper/720:05:2113
603436992522,3cyclictest0-21swapper/623:59:1712
603436992522,0cyclictest0-21swapper/622:40:1412
603436992522,0cyclictest0-21swapper/622:35:1412
603436992520,3cyclictest761rcuc/619:40:0012
603433992524,1cyclictest3939865-21snmpd19:34:1411
603433992524,1cyclictest0-21swapper/500:39:3111
603430992525,0cyclictest0-21swapper/400:30:2110
603430992524,1cyclictest3939865-21snmpd23:51:5110
603430992524,1cyclictest3939865-21snmpd22:46:3610
603427992525,0cyclictest730546-21ethtool21:35:159
603427992524,1cyclictest3939865-21snmpd19:18:429
603427992524,1cyclictest0-21swapper/320:03:539
603423992524,1cyclictest3939865-21snmpd22:13:538
603423992524,1cyclictest3939865-21snmpd00:27:558
603423992524,1cyclictest0-21swapper/222:44:308
603423992523,2cyclictest3939865-21snmpd20:25:038
603423992522,3cyclictest3939865-21snmpd22:30:278
60342399250,24cyclictest0-21swapper/219:24:048
603420992524,1cyclictest3939865-21snmpd23:40:081
603420992524,1cyclictest0-21swapper/100:19:221
603418992524,1cyclictest3939865-21snmpd23:34:460
603418992524,1cyclictest3939865-21snmpd22:30:540
603465992423,1cyclictest3939865-21snmpd23:30:477
603465992423,1cyclictest3939865-21snmpd20:18:127
603463992423,1cyclictest3939865-21snmpd20:57:166
603463992423,1cyclictest3939865-21snmpd00:35:106
603463992423,1cyclictest3939865-21snmpd00:30:516
603459992423,1cyclictest0-21swapper/1322:43:545
603459992422,2cyclictest3939865-21snmpd00:38:585
603455992424,0cyclictest0-21swapper/1221:36:354
603455992424,0cyclictest0-21swapper/1221:15:114
603455992424,0cyclictest0-21swapper/1220:18:444
603455992424,0cyclictest0-21swapper/1219:56:384
603455992424,0cyclictest0-21swapper/1200:34:574
603455992423,1cyclictest3939865-21snmpd22:47:044
603453992423,1cyclictest3939865-21snmpd19:45:043
603453992423,1cyclictest3939865-21snmpd19:45:043
603453992423,1cyclictest0-21swapper/1121:01:583
603453992423,1cyclictest0-21swapper/1119:11:553
603450992423,1cyclictest3939865-21snmpd22:09:292
603450992423,1cyclictest3939865-21snmpd19:27:382
603450992423,1cyclictest3939865-21snmpd19:22:222
603450992423,1cyclictest0-21swapper/1022:27:272
603446992423,1cyclictest3939865-21snmpd23:53:5415
603446992423,1cyclictest3939865-21snmpd22:10:3215
603446992423,1cyclictest3939865-21snmpd21:03:5215
603446992423,1cyclictest0-21swapper/923:11:2215
603443992423,1cyclictest3939865-21snmpd21:28:4014
603443992423,1cyclictest3939865-21snmpd21:19:3914
603443992423,1cyclictest3939865-21snmpd20:56:2714
603443992423,1cyclictest3939865-21snmpd19:20:3314
603440992423,1cyclictest0-21swapper/719:37:2013
603436992422,2cyclictest0-21swapper/623:05:2312
603436992421,3cyclictest0-21swapper/623:50:1512
603436992421,3cyclictest0-21swapper/621:55:2112
603436992420,2cyclictest0-21swapper/620:30:2812
603436992420,1cyclictest0-21swapper/623:47:4112
603433992423,1cyclictest841540-21mii-tool23:45:1611
603433992423,1cyclictest3939865-21snmpd23:41:1711
603433992423,1cyclictest3939865-21snmpd22:16:0511
603433992423,1cyclictest3939865-21snmpd19:41:2611
603433992423,1cyclictest0-21swapper/519:36:5311
603430992424,0cyclictest803116-21mii-tool23:00:1710
603430992424,0cyclictest803116-21mii-tool23:00:1710
603430992423,1cyclictest773238-21ethtool22:25:1610
603423992423,1cyclictest756169-21mii-tool22:05:168
603423992423,1cyclictest636599-21mii-tool19:45:158
603423992423,1cyclictest636599-21mii-tool19:45:158
603423992423,1cyclictest3939865-21snmpd20:48:398
603420992424,0cyclictest0-21swapper/121:50:271
603420992423,1cyclictest3939865-21snmpd23:14:221
603420992423,1cyclictest0-21swapper/121:30:161
603420992423,1cyclictest0-21swapper/100:21:161
60342099240,23cyclictest662572-21libvirt-ifstat20:15:181
603418992423,1cyclictest3939865-21snmpd21:37:170
603418992423,1cyclictest0-21swapper/000:10:060
603465992321,2cyclictest0-21swapper/1522:40:187
603463992322,1cyclictest3939865-21snmpd23:33:536
603459992322,1cyclictest3939865-21snmpd20:12:145
603459992322,1cyclictest0-21swapper/1323:41:235
603459992322,1cyclictest0-21swapper/1321:20:165
603455992323,0cyclictest0-21swapper/1221:56:204
603455992323,0cyclictest0-21swapper/1221:48:524
603455992323,0cyclictest0-21swapper/1219:33:514
603455992323,0cyclictest0-21swapper/1200:35:354
603455992322,1cyclictest0-21swapper/1219:23:514
603450992322,1cyclictest700633-21ethtool21:00:152
603450992322,1cyclictest3939865-21snmpd00:36:582
603450992322,1cyclictest0-21swapper/1022:30:242
603450992322,1cyclictest0-21swapper/1019:15:022
603446992322,1cyclictest611085-21mii-tool19:15:1415
603446992322,1cyclictest3939865-21snmpd22:35:2415
603443992322,1cyclictest3939865-21snmpd21:03:4514
603443992322,1cyclictest3939865-21snmpd20:49:4514
603443992322,1cyclictest3939865-21snmpd20:39:0214
603443992322,1cyclictest0-21swapper/819:43:3414
603440992322,1cyclictest0-21swapper/700:13:3913
603436992321,0cyclictest0-21swapper/621:20:1712
603436992320,3cyclictest0-21swapper/622:55:2112
603436992320,3cyclictest0-21swapper/622:55:2112
603433992322,1cyclictest3939865-21snmpd20:11:5011
603430992322,1cyclictest0-21swapper/422:30:1710
603430992322,1cyclictest0-21swapper/422:06:5210
603427992323,0cyclictest837285-21mii-tool23:40:159
603427992322,1cyclictest811671-21ethtool23:10:169
603427992322,1cyclictest0-21swapper/321:47:119
603423992319,4cyclictest3939865-21snmpd23:13:168
603420992323,0cyclictest0-21swapper/122:25:311
603420992322,1cyclictest3939865-21snmpd22:32:391
603420992322,1cyclictest3939865-21snmpd22:23:511
603420992322,1cyclictest0-21swapper/122:57:011
603420992322,1cyclictest0-21swapper/122:57:001
603420992322,0cyclictest0-21swapper/123:30:211
603418992323,0cyclictest623812-21mii-tool19:30:160
603418992322,1cyclictest3939865-21snmpd19:19:520
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional