You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-10 - 17:23

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Fri Jul 10, 2026 12:43:18)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1306617997262,6cyclictest0-21swapper/110:00:391
1306618995947,8cyclictest510950-21cups-browsed10:00:392
130661799594,14cyclictest1324600-21latency_hist08:10:021
1306616995445,6cyclictest510950-21cups-browsed09:30:010
1306616995445,6cyclictest510950-21cups-browsed09:30:010
1306618995342,7cyclictest0-21swapper/211:55:432
1306616995041,6cyclictest510950-21cups-browsed08:50:010
130661799483,9cyclictest1330122-21ntpq08:25:451
130661699482,31cyclictest1324767-21latency_hist08:10:020
1306616994721,18cyclictest151ktimers/008:00:370
130661899464,32cyclictest1439898-21ssh11:50:432
1306618994632,5cyclictest351ktimers/210:50:412
1306617994621,21cyclictest0-21swapper/109:45:441
130661799453,32cyclictest1433768-21ssh11:40:371
130661799453,32cyclictest1433768-21ssh11:40:371
1306617994528,14cyclictest1351745-21munin-plugin-st09:25:011
130661699452,39cyclictest1454711-21ssh12:15:420
1306618994427,11cyclictest265-21systemd-journal08:35:402
130661799443,13cyclictest1451958-21ps12:10:441
1306616994434,6cyclictest1436919-21ssh11:45:440
1306616994434,6cyclictest1436919-21ssh11:45:440
1306618994334,6cyclictest1454153-21aten_r2power_fr12:15:312
1306618994333,6cyclictest510947-21cupsd10:21:332
1306617994233,6cyclictest1-21systemd10:55:011
130661799423,33cyclictest1361853-21ssh09:40:391
130661799422,8cyclictest1466734-21ntpq12:35:401
1306617994224,15cyclictest1389099-21mailstats10:25:461
1306617994220,18cyclictest0-21swapper/109:50:431
130661799421,13cyclictest1423523-40mandb11:24:221
1306616994235,4cyclictest1003-21mta-sts-daemon12:10:370
1306616994217,22cyclictest1400936-21ssh10:45:430
1306618994131,7cyclictest420-21avahi-daemon12:20:532
1306617994132,6cyclictest1370252-21aten_r2power_fr09:55:301
1306617994130,8cyclictest1354773-21systemd-run09:30:011
1306617994130,8cyclictest1354773-21systemd-run09:30:011
1306617994123,15cyclictest1308104-21idleruntime-cro07:15:001
1306617994121,16cyclictest0-21swapper/110:45:511
130661799411,8cyclictest1385919-21ssh10:20:411
1306617994117,22cyclictest1394384-21sh10:35:291
1306617994117,22cyclictest1394384-21sh10:35:291
130661799411,17cyclictest1343911-21ps09:10:471
1306616994121,14cyclictest1343860-21ssh09:10:450
1306617994034,3cyclictest0-21swapper/111:55:001
1306617994033,3cyclictest0-21swapper/111:40:011
1306617994032,4cyclictest0-21swapper/112:15:441
130661799402,19cyclictest1336057-21sshd08:45:401
130661799401,28cyclictest1457721-21ssh12:20:391
1306617994010,6cyclictest1321082-21/usr/sbin/munin07:55:451
1306616994029,8cyclictest1375774-21latency_hist10:05:030
1306618993931,5cyclictest1420749-21idleruntime-cro11:20:012
1306618993930,5cyclictest1001-21mta-sts-daemon09:43:112
1306618993930,5cyclictest0-21swapper/211:40:412
1306618993930,5cyclictest0-21swapper/211:40:412
1306618993929,7cyclictest420-21avahi-daemon11:36:502
1306618993929,7cyclictest1436200-21aten2.4-expect11:45:272
1306618993929,7cyclictest1436200-21aten2.4-expect11:45:272
130661799399,6cyclictest1342495-21unixbench-2d09:05:501
1306617993913,2cyclictest0-21swapper/111:05:491
1306617993912,3cyclictest0-21swapper/111:45:381
1306617993912,3cyclictest0-21swapper/111:45:381
1306617993911,9cyclictest1340531-21sshd09:00:401
130661799391,13cyclictest1418782-21ntpq11:15:391
1306616993934,2cyclictest0-21swapper/007:25:410
1306616993932,3cyclictest0-21swapper/010:50:410
1306616993928,8cyclictest1356378-21unixbench_multi09:30:500
1306616993928,8cyclictest1333056-21sshd08:35:400
130661699392,34cyclictest420-21avahi-daemon10:40:290
130661699392,31cyclictest1346765-21ssh09:15:380
1306618993830,5cyclictest1400518-21if_eth010:45:332
1306618993827,7cyclictest420-21avahi-daemon09:18:172
130661799386,11cyclictest421-21dbus-daemon10:11:181
130661799383,8cyclictest1316578-21ntpq07:40:431
1306617993823,12cyclictest1000-21mta-sts-daemon10:32:301
1306617993823,12cyclictest0-21swapper/110:10:011
1306617993817,18cyclictest0-21swapper/111:30:361
1306617993815,20cyclictest0-21swapper/107:10:021
1306617993815,20cyclictest0-21swapper/107:10:021
1306617993814,2cyclictest0-21swapper/109:35:421
130661799381,12cyclictest1397959-21ntpq10:40:431
130661799381,12cyclictest1325592-21ntpq08:10:431
1306617993811,2cyclictest0-21swapper/107:40:011
1306616993829,6cyclictest1315649-21latency_hist07:40:020
1306616993815,19cyclictest0-21swapper/009:35:380
1306618993729,4cyclictest0-21swapper/210:55:412
1306618993728,6cyclictest510950-21cups-browsed09:45:262
1306618993727,5cyclictest1000-21mta-sts-daemon10:05:402
1306618993726,8cyclictest1354778-21ssh09:30:012
1306618993726,8cyclictest1354778-21ssh09:30:012
1306618993726,7cyclictest421-21dbus-daemon09:00:012
130661899371,33cyclictest1427792-21ssh11:30:382
130661799379,5cyclictest1409597-21latency11:00:321
130661799376,8cyclictest421-21dbus-daemon07:20:351
130661799374,13cyclictest428-21mta-sts-daemon07:50:381
1306617993728,6cyclictest1314118-21systemd-run07:35:011
130661799372,16cyclictest1463793-21sshd12:30:411
130661799371,11cyclictest1342652-21diskmemload10:19:431
130661799371,10cyclictest1342652-21diskmemload12:00:431
1306616993730,4cyclictest421-21dbus-daemon10:18:050
1306616993729,4cyclictest0-21swapper/011:05:330
1306616993727,7cyclictest1420726-21ssh11:20:010
1306616993726,7cyclictest0-21swapper/012:00:400
1306616993724,10cyclictest12650irq/32-eth011:10:400
1306618993629,3cyclictest0-21swapper/212:30:382
1306618993628,4cyclictest0-21swapper/209:35:402
1306618993627,6cyclictest510950-21cups-browsed10:10:452
1306618993626,6cyclictest1318618-21systemd-run07:50:012
1306618993626,6cyclictest0-21swapper/207:40:012
1306617993629,4cyclictest1356424-21head09:30:501
1306617993615,2cyclictest0-21swapper/112:25:391
130661799361,11cyclictest1346343-21df_inode09:15:301
1306616993630,4cyclictest1372799-21kworker/u8:5-nfsiod10:30:410
1306616993629,4cyclictest1467169-21timerwakeupswit12:35:490
1306616993628,6cyclictest1334464-21needreboot08:40:360
1306616993628,3cyclictest0-21swapper/011:20:410
1306618993529,3cyclictest0-21swapper/212:25:472
1306618993529,3cyclictest0-21swapper/209:20:542
1306618993529,3cyclictest0-21swapper/207:30:022
1306618993527,4cyclictest0-21swapper/209:10:492
1306618993526,6cyclictest1321538-21head07:55:512
1306618993525,6cyclictest510947-21cupsd11:04:202
130661899352,23cyclictest1370836-21ssh09:55:412
130661799352,8cyclictest567-21gdbus11:13:201
1306617993518,14cyclictest1003-21mta-sts-daemon11:56:391
130661799351,11cyclictest1448926-21open_inodes12:05:461
130661799351,11cyclictest1001-21mta-sts-daemon07:15:431
1306617993510,5cyclictest0-21swapper/110:55:401
1306616993513,16cyclictest12650irq/32-eth010:35:380
1306616993513,16cyclictest12650irq/32-eth010:35:380
1306618993426,6cyclictest0-21swapper/211:24:232
1306618993426,5cyclictest1451351-21fschecks_count12:10:312
1306618993425,5cyclictest1447715-21awk12:05:012
1306618993425,4cyclictest0-21swapper/211:05:372
1306618993424,6cyclictest510947-21cupsd10:17:542
130661799344,6cyclictest0-21swapper/108:00:301
130661799342,13cyclictest1424896-21ntp_states11:25:431
1306617993412,6cyclictest1333481-21grep08:35:511
1306617993411,2cyclictest0-21swapper/108:30:311
130661799341,10cyclictest1327656-21idleruntime-cro08:20:011
1306616993428,4cyclictest1435740-21cut11:45:010
1306616993428,4cyclictest1435740-21cut11:45:010
1306616993424,7cyclictest1002-21mta-sts-daemon09:20:450
1306616993420,4cyclictest0-21swapper/007:25:000
1306616993417,10cyclictest12650irq/32-eth011:30:370
1306618993326,3cyclictest0-21swapper/210:40:412
1306618993326,3cyclictest0-21swapper/208:25:012
1306618993324,6cyclictest421-21dbus-daemon09:54:472
130661899332,25cyclictest510950-21cups-browsed08:40:412
130661799333,10cyclictest1334498-21ntpq08:40:371
1306617993326,4cyclictest1312506-21unixbench_multi07:25:521
1306616993327,4cyclictest1430401-21fschecks_count11:35:310
1306616993325,5cyclictest420-21avahi-daemon10:23:300
1306616993324,3cyclictest0-21swapper/009:10:010
1306616993313,15cyclictest1439844-21ntpq11:50:410
130661699331,25cyclictest1361831-21rm09:40:370
1306618993226,3cyclictest0-21swapper/210:30:272
1306618993226,3cyclictest0-21swapper/208:10:022
1306618993225,4cyclictest1388711-21missed_timers10:25:342
1306618993225,3cyclictest0-21swapper/212:35:392
1306618993224,4cyclictest0-21swapper/209:35:012
1306618993223,6cyclictest1-21systemd09:05:012
1306618993222,6cyclictest1325178-21fschecks_time08:10:342
130661799321,9cyclictest609973-21munin-node08:50:531
130661699323,22cyclictest1367840-21sh09:50:390
1306616993224,5cyclictest1450888-21latency_hist12:10:030
1306616993222,8cyclictest1307409-21needreboot07:10:350
1306616993221,7cyclictest12650irq/32-eth012:30:360
1306616993220,7cyclictest12650irq/32-eth011:00:440
1306616993217,12cyclictest1377370-21unixbench-2d10:05:510
1306616993216,12cyclictest1337167-21fschecks_time08:50:310
1306618993122,6cyclictest1424744-21/usr/sbin/munin11:25:352
1306617993122,6cyclictest1329178-21systemd-run08:25:011
1306616993123,5cyclictest420-21avahi-daemon09:55:530
1306616993121,6cyclictest420-21avahi-daemon10:55:100
1306618993024,3cyclictest0-21swapper/207:20:012
1306618993023,3cyclictest0-21swapper/212:10:032
1306618993022,6cyclictest1329130-21kworker/u8:3+xprtiod08:50:512
1306618993021,4cyclictest0-21swapper/211:10:402
1306618993018,7cyclictest1320284-21latency_hist07:55:022
1306616993024,4cyclictest1459858-21latency_hist12:25:040
1306616993023,2cyclictest0-21swapper/011:55:430
130661699301,3cyclictest0-21swapper/007:55:380
130661699301,21cyclictest665-21snmpd07:15:460
1306618992923,3cyclictest0-21swapper/209:10:012
1306618992922,4cyclictest0-21swapper/207:25:002
1306618992919,7cyclictest1327663-21idleruntime-cro08:20:012
1306616992920,6cyclictest1002-21mta-sts-daemon09:47:290
1306616992920,6cyclictest0-21swapper/012:25:360
1306616992912,11cyclictest12650irq/32-eth010:10:410
130661899286,13cyclictest428-21mta-sts-daemon08:25:462
130661899284,21cyclictest510947-21cupsd07:30:422
1306618992819,4cyclictest0-21swapper/210:35:362
1306618992819,4cyclictest0-21swapper/210:35:362
130661699284,15cyclictest958-21sendmail-mta07:50:370
130661699282,20cyclictest1388864-21ntpq10:25:390
1306616992818,8cyclictest1003-21mta-sts-daemon09:05:020
130661899272,21cyclictest1331527-21sshd08:30:412
1306618992721,3cyclictest0-21swapper/207:40:512
1306617992720,4cyclictest1339517-21tail08:55:511
1306617992720,4cyclictest1318545-21unixbench_singl07:45:531
130661699277,13cyclictest151ktimers/007:45:400
1306616992721,3cyclictest151ktimers/008:15:390
1306616992721,3cyclictest1001-21mta-sts-daemon07:40:350
1306616992718,7cyclictest421-21dbus-daemon07:35:020
130661699271,22cyclictest623-21sshd08:10:410
130661699271,21cyclictest1424848-21ssh11:25:400
1306618992619,4cyclictest1003-21mta-sts-daemon08:45:422
1306618992618,5cyclictest1306572-21munin-run07:10:012
1306618992618,5cyclictest1306572-21munin-run07:10:012
1306618992618,4cyclictest1307973-21unixbench_multi07:10:502
1306616992619,4cyclictest1329054-21tail08:20:510
130661899241,3cyclictest171rcu_preempt08:00:412
1306616992411,10cyclictest0-21swapper/008:55:510
130661699235,7cyclictest421-21dbus-daemon07:10:020
130661699235,7cyclictest421-21dbus-daemon07:10:020
1306616992318,3cyclictest1003-21mta-sts-daemon08:25:050
1306616992217,2cyclictest0-21swapper/008:30:410
130661999214,9cyclictest0-21swapper/311:30:363
130661999203,7cyclictest0-21swapper/311:45:393
130661999203,7cyclictest0-21swapper/311:45:393
130661999192,8cyclictest0-21swapper/308:10:023
130661999191,8cyclictest0-21swapper/310:55:423
130661999191,10cyclictest0-21swapper/311:24:243
130661999183,8cyclictest0-21swapper/312:35:383
130661999183,8cyclictest0-21swapper/311:00:363
130661999183,7cyclictest0-21swapper/309:25:463
130661999183,7cyclictest0-21swapper/309:25:463
130661999182,8cyclictest0-21swapper/310:30:433
130661999182,6cyclictest0-21swapper/308:40:413
130661999181,9cyclictest0-21swapper/310:20:433
130661999181,10cyclictest0-21swapper/309:55:453
130661999173,8cyclictest0-21swapper/310:50:413
130661999173,8cyclictest0-21swapper/310:40:453
130661999172,9cyclictest0-21swapper/308:35:403
130661999163,7cyclictest0-21swapper/310:35:383
130661999163,7cyclictest0-21swapper/310:35:383
130661999162,8cyclictest0-21swapper/309:40:373
130661999162,7cyclictest0-21swapper/309:15:443
130661999161,8cyclictest0-21swapper/312:20:413
130661999161,8cyclictest0-21swapper/310:15:403
130661999161,6cyclictest0-21swapper/307:10:433
130661999153,8cyclictest0-21swapper/312:15:473
130661999153,7cyclictest0-21swapper/311:35:393
130661999153,7cyclictest0-21swapper/309:30:373
130661999152,8cyclictest0-21swapper/312:30:413
130661999152,8cyclictest0-21swapper/310:05:373
130661999152,7cyclictest0-21swapper/312:00:413
130661999152,7cyclictest0-21swapper/311:50:433
130661999151,7cyclictest0-21swapper/311:15:393
130661999151,7cyclictest0-21swapper/307:20:393
130661999151,6cyclictest0-21swapper/307:40:433
130661999144,5cyclictest0-21swapper/311:25:443
130661999143,6cyclictest0-21swapper/311:40:443
130661999143,6cyclictest0-21swapper/311:40:443
130661999142,7cyclictest0-21swapper/312:05:423
130661999142,7cyclictest0-21swapper/311:55:433
130661999142,7cyclictest0-21swapper/309:50:413
130661999142,6cyclictest0-21swapper/307:55:383
130661999142,5cyclictest0-21swapper/309:00:393
130661999141,8cyclictest0-21swapper/312:25:413
130661999141,8cyclictest0-21swapper/310:10:383
130661999141,8cyclictest0-21swapper/309:35:383
130661999141,8cyclictest0-21swapper/309:20:443
130661999141,7cyclictest0-21swapper/308:00:433
130661999141,6cyclictest0-21swapper/308:25:413
130661999141,5cyclictest0-21swapper/308:30:413
130661999134,5cyclictest0-21swapper/309:45:423
130661999133,7cyclictest0-21swapper/310:25:323
130661999132,7cyclictest0-21swapper/310:00:433
130661999132,7cyclictest0-21swapper/308:15:403
130661999132,6cyclictest0-21swapper/312:10:323
130661999132,6cyclictest0-21swapper/311:05:283
130661999132,6cyclictest0-21swapper/310:45:313
130661999132,6cyclictest0-21swapper/309:10:303
130661999132,6cyclictest0-21swapper/308:45:403
130661999131,6cyclictest0-21swapper/309:05:403
130661999131,6cyclictest0-21swapper/308:50:373
130661999122,5cyclictest0-21swapper/307:45:393
130661999121,7cyclictest0-21swapper/308:55:423
130661999121,6cyclictest0-21swapper/311:10:293
130661999121,6cyclictest0-21swapper/308:20:383
130661999121,6cyclictest0-21swapper/307:50:433
130661999121,6cyclictest0-21swapper/307:35:383
130661999121,6cyclictest0-21swapper/307:25:393
130661999114,5cyclictest0-21swapper/308:10:463
130661999113,5cyclictest0-21swapper/307:15:493
130661999104,4cyclictest0-21swapper/307:30:403
13066199982,4cyclictest0-21swapper/307:10:023
13066199982,4cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional