You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-26 - 06:27
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack8slot2.osadl.org (updated Sun Jul 26, 2026 00:43:43)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
114214599193145,30cyclictest1168163-21kworker/u16:1+rpciod20:40:230
114214599164113,38cyclictest0-21swapper/000:20:230
114214599156143,7cyclictest171ktimers/019:50:300
1142145991472,14cyclictest1208050-21sendmail-msp21:40:250
1142147991442,134cyclictest1244519-21ps22:31:112
11421489913578,51cyclictest0-21swapper/322:01:053
114214699135117,12cyclictest79-21hwrng21:01:011
114214799133127,4cyclictest10950irq/205-8000000.ethernet-rx022:00:392
114214799133102,26cyclictest0-21swapper/223:05:562
11421459913332,34cyclictest1190868-21ssh21:15:160
11421459913332,34cyclictest1190868-21ssh21:15:160
114214699132100,28cyclictest79-21hwrng00:17:381
114214599132114,14cyclictest79-21hwrng20:50:470
114214599132114,14cyclictest79-21hwrng20:50:470
114214799131115,10cyclictest79-21hwrng21:53:152
114214899128116,4cyclictest79-21hwrng00:06:223
114214799128118,5cyclictest79-21hwrng21:35:502
114214899127116,7cyclictest79-21hwrng19:32:573
11421459912719,66cyclictest16-21ksoftirqd/020:15:310
11421459912719,66cyclictest16-21ksoftirqd/020:15:310
114214699125114,6cyclictest79-21hwrng22:16:481
11421479912388,27cyclictest0-21swapper/223:50:492
114214799123107,10cyclictest79-21hwrng23:10:022
114214799123107,10cyclictest79-21hwrng23:10:022
114214899121112,6cyclictest79-21hwrng21:48:073
114214799121107,6cyclictest79-21hwrng22:49:342
114214799121107,11cyclictest0-21swapper/222:56:062
1142145991215,14cyclictest1224629-21kworker/u16:18+rpciod22:40:020
1142145991215,14cyclictest1224629-21kworker/u16:18+rpciod22:40:020
114214699120109,7cyclictest79-21hwrng20:39:311
114214899119107,6cyclictest79-21hwrng20:42:353
114214699119110,6cyclictest79-21hwrng22:33:111
114214899118110,5cyclictest79-21hwrng23:38:433
114214599118109,6cyclictest79-21hwrng21:46:040
114214899117104,5cyclictest79-21hwrng00:22:453
11421479911798,16cyclictest0-21swapper/223:20:222
114214699117101,13cyclictest79-21hwrng22:14:451
1142145991171,110cyclictest171ktimers/022:06:230
114214899116108,5cyclictest79-21hwrng23:51:003
114214599116104,7cyclictest79-21hwrng23:21:180
11421489911497,14cyclictest79-21hwrng23:43:503
114214899114106,5cyclictest79-21hwrng22:39:193
114214899114106,5cyclictest79-21hwrng22:39:193
11421479911468,38cyclictest0-21swapper/223:35:512
114214699113106,4cyclictest79-21hwrng00:07:231
114214699113104,5cyclictest79-21hwrng00:26:501
114214599113103,7cyclictest79-21hwrng19:15:330
11421479911239,67cyclictest10750irq/163-8000000.ethernet-tx622:41:212
114214799112104,5cyclictest79-21hwrng00:32:592
114214699112104,5cyclictest79-21hwrng00:34:011
11421489911198,7cyclictest79-21hwrng20:16:593
11421489911198,7cyclictest79-21hwrng20:16:593
11421469911199,10cyclictest79-21hwrng20:24:091
11421469911199,10cyclictest79-21hwrng20:24:091
114214699111103,5cyclictest79-21hwrng22:09:381
11421459911149,13cyclictest0-21swapper/022:01:270
11421469911099,5cyclictest79-21hwrng21:57:201
11421469911096,4cyclictest79-21hwrng23:24:231
11421469911094,6cyclictest79-21hwrng19:21:411
11421459911088,16cyclictest0-21swapper/022:21:200
11421459911039,26cyclictest1145701-21kworker/u16:11+rpciod19:21:100
11421489910996,10cyclictest79-21hwrng23:31:333
1142145991091,3cyclictest0-21swapper/023:55:570
1142148991089,72cyclictest1277796-21sendmail-msp23:20:243
114214899108100,5cyclictest79-21hwrng21:11:153
11421479910899,6cyclictest79-21hwrng21:16:232
11421479910899,6cyclictest79-21hwrng21:16:232
114214799108100,5cyclictest79-21hwrng23:16:112
1142145991085,64cyclictest1281930-21cpu23:25:470
11421479910745,25cyclictest0-21swapper/222:21:092
11421469910793,5cyclictest79-21hwrng19:26:491
114214699107100,4cyclictest79-21hwrng23:08:001
11421459910796,4cyclictest79-21hwrng20:47:420
11421459910782,15cyclictest1317208-21ssh00:15:530
11421489910539,48cyclictest1187093-21latency_hist21:10:013
11421469910586,9cyclictest79-21hwrng20:41:341
11421459910596,6cyclictest79-21hwrng19:55:290
1142145991052,84cyclictest1269615-21sleep23:06:550
11421489910496,5cyclictest79-21hwrng20:20:033
11421489910496,5cyclictest79-21hwrng20:20:033
11421479910442,22cyclictest0-21swapper/219:20:462
11421469910493,5cyclictest79-21hwrng20:19:021
11421469910493,5cyclictest79-21hwrng20:19:021
11421459910488,6cyclictest79-21hwrng22:45:280
11421459910448,20cyclictest0-21swapper/021:55:370
11421479910395,6cyclictest79-21hwrng22:12:422
11421459910396,4cyclictest79-21hwrng22:54:410
11421459910396,4cyclictest79-21hwrng22:54:410
11421459910389,11cyclictest79-21hwrng21:29:410
1142145991031,70cyclictest1245477-21kworker/u16:9+rpciod23:01:200
11421479910162,3cyclictest10950irq/205-8000000.ethernet-rx023:00:162
1142147991014,64cyclictest1219812-21ntpq21:55:522
11421479910144,12cyclictest0-21swapper/219:55:012
11421479910134,8cyclictest10750irq/163-8000000.ethernet-tx623:41:142
11421479910111,74cyclictest1228370-21sshd-session22:08:262
11421469910194,5cyclictest79-21hwrng21:50:101
11421469910194,5cyclictest79-21hwrng21:41:591
1142145991013,69cyclictest1325462-21sleep00:27:570
1142145991011,73cyclictest1296440-21ntpq23:45:560
11421479910064,10cyclictest381ktimers/219:30:572
114214799991,92cyclictest37-21rcuc/200:15:002
1142145999939,14cyclictest0-21swapper/019:10:120
1142145999939,14cyclictest0-21swapper/019:10:120
114214799983,28cyclictest530-21mstpd21:01:122
1142146999890,5cyclictest79-21hwrng23:27:271
1142145999889,5cyclictest79-21hwrng19:40:070
1142147999785,5cyclictest79-21hwrng00:36:032
1142147999758,6cyclictest10950irq/205-8000000.ethernet-rx023:25:142
114214599975,9cyclictest1283827-21kworker/u16:6+rpciod00:15:000
1142145999734,32cyclictest0-21swapper/023:30:110
1142148999689,5cyclictest79-21hwrng21:44:023
114214799966,66cyclictest1240799-21ntpq22:25:542
1142147999641,30cyclictest1168364-21sendmail-msp20:20:292
1142147999641,30cyclictest1168364-21sendmail-msp20:20:292
1142146999687,6cyclictest79-21hwrng19:17:361
1142148999588,4cyclictest79-21hwrng19:27:503
1142147999544,9cyclictest0-21swapper/220:46:092
1142146999586,6cyclictest79-21hwrng00:37:051
1142148999487,4cyclictest79-21hwrng20:48:443
1142148999485,6cyclictest79-21hwrng19:54:273
1142148999452,17cyclictest0-21swapper/321:56:013
1142146999485,6cyclictest79-21hwrng22:36:151
1142146999485,6cyclictest79-21hwrng22:36:151
1142145999469,13cyclictest0-21swapper/021:21:200
1142147999371,12cyclictest10950irq/205-8000000.ethernet-rx000:21:322
1142145999371,18cyclictest0-21swapper/020:01:260
1142145999340,22cyclictest1283828-21kworker/u16:7+xprtiod23:35:250
1142145999317,46cyclictest21-21rcuc/021:35:360
1142148999283,7cyclictest79-21hwrng23:49:593
1142148999283,6cyclictest79-21hwrng22:47:313
1142147999284,6cyclictest79-21hwrng21:34:492
1142147999284,6cyclictest79-21hwrng21:34:492
114214799923,8cyclictest10950irq/205-8000000.ethernet-rx019:45:012
1142146999284,6cyclictest79-21hwrng00:04:191
1142148999176,6cyclictest79-21hwrng20:36:273
1142148999153,27cyclictest0-21swapper/300:00:103
1142146999080,7cyclictest79-21hwrng20:33:221
1142145999082,5cyclictest79-21hwrng21:33:470
1142145999082,5cyclictest79-21hwrng21:33:470
1142145999041,43cyclictest19-21rcu_preempt22:31:090
1142145999032,30cyclictest1142144-21cyclictest19:31:040
1142147998981,4cyclictest79-21hwrng20:25:112
114214599894,59cyclictest1232702-21ssh22:15:010
1142148998874,5cyclictest79-21hwrng19:12:283
1142148998874,5cyclictest79-21hwrng19:12:283
1142145998829,41cyclictest10750irq/163-8000000.ethernet-tx620:40:020
1142148998773,11cyclictest79-21hwrng21:30:433
1142148998773,11cyclictest79-21hwrng21:30:433
1142148998712,42cyclictest47-21ksoftirqd/322:50:383
1142148998712,42cyclictest47-21ksoftirqd/322:50:383
1142147998724,25cyclictest1283829-21kworker/u16:8+xprtiod00:00:082
1142146998776,6cyclictest79-21hwrng19:52:251
1142146998730,34cyclictest1142144-21cyclictest19:45:211
1142145998668,8cyclictest1330019-21apt-get00:35:160
1142145998637,31cyclictest171ktimers/020:56:020
1142148998573,9cyclictest79-21hwrng20:34:243
1142145998576,6cyclictest79-21hwrng19:45:150
1142148998478,4cyclictest79-21hwrng20:53:513
1142148998478,4cyclictest79-21hwrng20:53:513
1142146998467,14cyclictest79-21hwrng21:06:081
1142147998371,10cyclictest79-21hwrng20:52:502
1142147998371,10cyclictest79-21hwrng20:52:502
1142146998371,10cyclictest0-21swapper/123:31:081
1142148998257,13cyclictest461ktimers/320:25:153
114214799821,79cyclictest0-21swapper/221:25:482
1142145998273,6cyclictest79-21hwrng23:17:130
1142148998140,35cyclictest461ktimers/322:30:203
114214799817,65cyclictest37-21rcuc/223:55:212
1142147998169,8cyclictest79-21hwrng20:56:552
1142146998154,22cyclictest0-21swapper/123:35:141
1142146998144,33cyclictest0-21swapper/121:20:361
1142147998068,10cyclictest79-21hwrng20:09:492
1142147998056,18cyclictest0-21swapper/220:40:412
1142145998029,23cyclictest171ktimers/020:35:010
1142146997959,16cyclictest0-21swapper/100:20:191
1142146997956,19cyclictest301ktimers/119:35:161
1142146997956,19cyclictest301ktimers/119:35:161
1142148997871,4cyclictest79-21hwrng20:57:573
1142148997869,6cyclictest79-21hwrng19:58:333
1142148997858,13cyclictest45-21rcuc/300:30:403
1142148997858,13cyclictest0-21swapper/319:21:053
114214799781,63cyclictest0-21swapper/221:10:442
1142145997870,5cyclictest79-21hwrng20:29:160
1142147997669,5cyclictest79-21hwrng23:48:572
1142146997652,19cyclictest0-21swapper/119:56:111
1142145997633,18cyclictest10950irq/205-8000000.ethernet-rx021:54:030
1142148997553,18cyclictest0-21swapper/323:00:173
1142148997519,53cyclictest461ktimers/322:40:173
1142147997540,30cyclictest0-21swapper/220:00:342
114214799752,41cyclictest1140232-21kworker/u16:10+rpciod19:40:252
1142146997552,14cyclictest1273284-21kworker/u16:1+rpciod23:54:591
1142145997537,30cyclictest16-21ksoftirqd/022:13:450
1142148997451,19cyclictest0-21swapper/322:25:123
1142147997468,4cyclictest381ktimers/222:15:232
1142145997440,31cyclictest0-21swapper/000:00:570
1142148997361,10cyclictest461ktimers/322:11:103
1142148997336,32cyclictest1268886-21ntpq23:06:163
1142147997364,5cyclictest79-21hwrng19:14:312
1142147997364,5cyclictest79-21hwrng19:14:312
1142146997355,9cyclictest0-21swapper/120:00:291
1142146997342,26cyclictest29-21rcuc/120:05:151
1142145997352,18cyclictest0-21swapper/023:50:300
1142145997342,18cyclictest0-21swapper/000:30:140
1142148997245,23cyclictest0-21swapper/323:25:263
1142148997242,23cyclictest0-21swapper/320:00:283
1142146997247,18cyclictest0-21swapper/123:41:221
1142147997166,3cyclictest0-21swapper/221:41:162
1142145997152,14cyclictest0-21swapper/020:10:370
1142148997057,10cyclictest461ktimers/319:15:233
1142146997038,28cyclictest0-21swapper/123:55:371
1142146997035,26cyclictest0-21swapper/123:00:491
1142148996932,15cyclictest461ktimers/321:20:513
1142147996947,17cyclictest0-21swapper/221:20:422
1142146996931,31cyclictest1190910-21ssh21:15:251
1142146996931,31cyclictest1190910-21ssh21:15:251
1142148996855,9cyclictest0-21swapper/322:05:253
1142148996847,16cyclictest1312708-21sleep00:10:103
1142148996844,20cyclictest0-21swapper/322:20:023
1142148996842,18cyclictest0-21swapper/321:15:263
1142148996842,18cyclictest0-21swapper/321:15:263
1142148996837,28cyclictest0-21swapper/320:10:303
114214799683,51cyclictest1212956-21ssh21:46:032
1142147996826,34cyclictest0-21swapper/219:15:362
1142146996851,13cyclictest301ktimers/121:31:001
1142146996851,13cyclictest301ktimers/121:31:001
1142146996846,18cyclictest0-21swapper/121:45:371
114214899672,49cyclictest1198273-21fschecks_count21:25:363
1142146996753,11cyclictest0-21swapper/122:45:321
1142146996736,28cyclictest0-21swapper/122:40:451
1142146996730,30cyclictest1260778-21ssh22:55:181
1142145996743,21cyclictest0-21swapper/023:40:430
1142147996657,5cyclictest79-21hwrng20:13:552
1142147996652,11cyclictest0-21swapper/222:50:372
1142147996652,11cyclictest0-21swapper/222:50:372
1142147996636,26cyclictest0-21swapper/220:40:022
1142146996648,6cyclictest127-21jbd2/mmcblk1p2-822:51:021
1142146996648,6cyclictest127-21jbd2/mmcblk1p2-822:51:021
1142146996635,29cyclictest0-21swapper/122:20:211
1142145996641,21cyclictest0-21swapper/022:25:290
1142148996549,12cyclictest0-21swapper/322:21:243
1142148996548,13cyclictest461ktimers/319:45:163
1142147996559,4cyclictest0-21swapper/200:15:132
1142147996545,16cyclictest0-21swapper/200:25:412
1142147996536,25cyclictest1140230-21kworker/u16:8+xprtiod20:15:232
1142147996536,25cyclictest1140230-21kworker/u16:8+xprtiod20:15:232
1142146996543,18cyclictest1142144-21cyclictest20:50:151
1142146996543,18cyclictest1142144-21cyclictest20:50:151
1142145996542,19cyclictest171ktimers/021:10:140
1142145996539,19cyclictest0-21swapper/020:20:120
1142145996539,19cyclictest0-21swapper/020:20:120
1142145996522,22cyclictest1224629-21kworker/u16:18+xprtiod22:41:030
1142147996423,38cyclictest0-21swapper/200:10:012
1142146996450,10cyclictest0-21swapper/122:00:221
1142146996442,20cyclictest0-21swapper/123:45:361
1142146996431,29cyclictest1188427-21ntpq21:10:571
114214699641,39cyclictest1273284-21kworker/u16:1+rpciod23:20:021
1142145996429,31cyclictest1309371-21ssh00:05:250
1142148996347,11cyclictest0-21swapper/323:55:043
1142146996326,31cyclictest1239881-21ssh22:25:281
114214899627,51cyclictest1272128-21ssh23:10:523
114214899627,51cyclictest1272128-21ssh23:10:523
1142146996252,7cyclictest10950irq/205-8000000.ethernet-rx019:40:281
1142145996241,18cyclictest0-21swapper/022:55:310
1142145996229,29cyclictest1183304-21sendmail-msp21:01:000
1142148996154,4cyclictest10950irq/205-8000000.ethernet-rx023:16:033
1142148996146,10cyclictest0-21swapper/321:00:423
1142148996143,13cyclictest0-21swapper/322:55:303
1142146996134,19cyclictest0-21swapper/123:10:381
1142146996134,19cyclictest0-21swapper/123:10:381
1142145996128,20cyclictest16-21ksoftirqd/020:05:240
1142147996033,21cyclictest1-21systemd19:26:172
1142147996029,26cyclictest1185676-21diskstats21:05:342
1142145996043,12cyclictest0-21swapper/023:15:000
1142145996043,12cyclictest0-21swapper/023:15:000
1142148995939,17cyclictest0-21swapper/319:41:163
1142148995937,15cyclictest0-21swapper/300:35:323
1142147995938,18cyclictest0-21swapper/219:35:392
1142147995938,18cyclictest0-21swapper/219:35:392
1142146995940,12cyclictest0-21swapper/121:40:011
1142146995936,19cyclictest301ktimers/119:30:241
1142146995910,45cyclictest1313945-21ps00:11:071
1142145995937,19cyclictest0-21swapper/021:10:030
1142148995838,16cyclictest0-21swapper/321:37:123
1142148995838,14cyclictest0-21swapper/300:25:313
1142146995845,10cyclictest0-21swapper/120:45:361
1142146995818,33cyclictest31-21ksoftirqd/120:55:151
1142148995743,10cyclictest0-21swapper/300:15:383
1142148995732,19cyclictest1-21systemd20:05:493
1142147995741,11cyclictest0-21swapper/219:56:112
1142146995743,9cyclictest0-21swapper/120:15:011
114214699573,43cyclictest1201037-21ssh21:30:011
114214899562,43cyclictest1216229-21ssh21:50:483
1142147995638,9cyclictest0-21swapper/220:30:372
1142147995634,19cyclictest0-21swapper/223:30:132
1142146995634,16cyclictest0-21swapper/120:25:291
114214599561,34cyclictest1153239-21kworker/u16:6+rpciod19:40:020
114214599561,34cyclictest1153239-21kworker/u16:6+rpciod19:40:020
1142147995535,17cyclictest0-21swapper/222:35:332
1142147995535,17cyclictest0-21swapper/222:35:332
1142146995533,16cyclictest0-21swapper/119:10:111
1142146995533,16cyclictest0-21swapper/119:10:111
1142146995436,14cyclictest0-21swapper/119:10:021
1142145995238,10cyclictest0-21swapper/019:10:030
1142145995233,15cyclictest0-21swapper/019:25:010
1142148995143,5cyclictest1153353-21munin-run19:40:003
1142148995143,5cyclictest1153353-21munin-run19:40:003
1142147995034,13cyclictest0-21swapper/219:10:022
1142148994732,9cyclictest0-21swapper/319:10:033
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional