You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-11 - 10:51

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Fri Sep 11, 2026 00:42:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1418293996149,6cyclictest1-21systemd23:20:020
1418293995950,6cyclictest1569225-21unixbench_multi00:16:210
1418295995442,7cyclictest1564413-21systemd00:10:022
1418294995446,5cyclictest1506337-21munin-plugin-st22:35:001
1418293995442,7cyclictest421-21dbus-daemon22:25:010
1418293995442,7cyclictest421-21dbus-daemon22:25:010
1418295995040,5cyclictest0-21swapper/200:26:112
1418295995040,5cyclictest0-21swapper/200:26:112
1418295994939,5cyclictest0-21swapper/223:51:142
1418295994931,6cyclictest1513315-21cut22:46:042
1418293994735,9cyclictest265-21systemd-journal21:56:120
1418295994636,6cyclictest1516571-21grep22:51:092
1418294994635,8cyclictest1540788-21sh23:31:061
1418293994639,4cyclictest1558267-21idleruntime-cro00:00:000
1418293994621,16cyclictest151ktimers/019:21:160
1418295994536,6cyclictest1418298-21systemd-run19:10:012
1418295994435,6cyclictest1486854-21unixbench_singl22:01:282
1418295994435,5cyclictest1558329-21systemd00:00:022
1418293994420,15cyclictest12650irq/32-eth023:06:140
1418295994330,7cyclictest0-21swapper/221:26:132
1418295994330,7cyclictest0-21swapper/221:26:132
1418295994214,3cyclictest171rcu_preempt23:00:032
1418293994232,6cyclictest3897124-21cups-browsed23:46:340
1418295994133,5cyclictest1546108-21systemd-run23:40:012
1418295994131,5cyclictest0-21swapper/223:31:082
141829499419,11cyclictest1440422-21mailstats20:21:221
141829599403,32cyclictest1568661-21ssh00:16:092
1418295994031,7cyclictest3897124-21cups-browsed22:41:362
1418295994031,5cyclictest1421207-21unixbench_singl19:16:212
141829499409,14cyclictest1498544-21ntp_states22:21:151
141829499409,14cyclictest1498544-21ntp_states22:21:151
1418294994034,3cyclictest0-21swapper/123:20:011
1418294994013,8cyclictest421-21dbus-daemon21:30:201
1418294994013,8cyclictest421-21dbus-daemon21:30:201
1418295993930,6cyclictest1521604-21ssh23:00:012
1418294993932,4cyclictest1465310-21sed21:26:241
1418294993932,4cyclictest1465310-21sed21:26:241
1418294993932,4cyclictest1433295-21sendmail20:00:011
1418294993916,17cyclictest0-21swapper/120:41:091
1418293993933,4cyclictest1555214-21munin-plugin-st23:55:010
1418293993918,14cyclictest12650irq/32-eth000:26:120
1418293993918,14cyclictest12650irq/32-eth000:26:120
1418295993829,5cyclictest1552156-21sh23:50:012
1418295993828,6cyclictest1439315-21systemd-run20:20:012
1418295993828,6cyclictest1439315-21systemd-run20:20:012
1418295993820,3cyclictest171rcu_preempt22:10:022
1418294993832,2cyclictest0-21swapper/122:56:121
1418294993829,6cyclictest3897124-21cups-browsed23:07:281
1418294993828,6cyclictest420-21avahi-daemon23:37:251
1418294993827,8cyclictest1495252-21needreboot22:16:061
1418293993823,10cyclictest12650irq/32-eth021:21:110
1418295993730,4cyclictest1561355-21ssh00:05:012
1418295993729,5cyclictest1509408-21diskmemload22:40:012
1418295993729,4cyclictest0-21swapper/200:31:082
141829499377,12cyclictest1574874-21ntpq00:26:151
141829499377,12cyclictest1574874-21ntpq00:26:151
1418294993731,3cyclictest0-21swapper/122:40:011
1418294993729,5cyclictest1486091-21missed_timers22:01:101
1418294993728,5cyclictest1558335-21latency_hist00:00:021
1418294993727,6cyclictest1562069-21aten_r2power_vo00:06:031
1418294993719,12cyclictest421-21dbus-daemon00:31:091
1418293993728,6cyclictest1558327-21cups-browsed00:11:250
1418293993725,8cyclictest0-21swapper/022:26:010
141829599364,4cyclictest171rcu_preempt00:21:122
141829599364,4cyclictest171rcu_preempt00:21:122
1418295993628,5cyclictest1451154-21tail20:56:212
1418294993630,3cyclictest0-21swapper/121:45:011
1418294993613,11cyclictest1454285-21diskmemload00:19:261
1418293993629,5cyclictest443-21gpm00:06:160
1418293993625,8cyclictest1572173-21timerandwakeup00:21:230
1418293993625,8cyclictest1572173-21timerandwakeup00:21:230
1418293993624,9cyclictest1-21systemd00:00:120
141829399362,26cyclictest1486390-21ssh22:01:220
1418293993620,4cyclictest1544087-21ssh23:36:080
141829599357,8cyclictest36-21ksoftirqd/220:11:122
1418295993526,6cyclictest1001-21mta-sts-daemon23:41:302
1418295993525,3cyclictest171rcu_preempt19:11:122
1418295993521,8cyclictest1504577-21ssh22:31:122
141829499359,9cyclictest1514904-21ssh22:48:081
1418294993528,3cyclictest0-21swapper/121:21:111
1418294993526,6cyclictest3897124-21cups-browsed19:21:071
1418294993521,8cyclictest1437158-21ntpq20:11:091
1418294993512,7cyclictest1476246-21ssh21:45:381
1418294993510,8cyclictest1472942-21latency_hist21:40:021
1418293993529,4cyclictest1433306-21systemd-run20:00:010
1418293993527,5cyclictest439-21systemd-logind20:55:010
1418293993526,6cyclictest3897124-21cups-browsed21:10:290
1418293993526,6cyclictest1546605-21/usr/sbin/munin23:41:200
1418293993526,6cyclictest1504987-21timerwakeupswit22:31:210
1418293993518,11cyclictest151ktimers/023:01:170
141829399351,29cyclictest1580797-21sshd00:36:110
141829599349,6cyclictest171rcu_preempt23:16:132
1418295993425,6cyclictest1-21systemd19:30:022
1418295993425,5cyclictest0-21swapper/222:11:122
1418295993425,4cyclictest0-21swapper/219:31:112
1418295993425,3cyclictest171rcu_preempt22:21:122
1418295993425,3cyclictest171rcu_preempt22:21:122
1418295993424,7cyclictest1502016-21unixbench_multi22:26:222
1418295993423,4cyclictest0-21swapper/220:26:142
1418295993418,3cyclictest171rcu_preempt00:12:322
141829499349,7cyclictest1549935-21df_inode23:46:051
1418294993427,4cyclictest1516139-21aten_r2power_en22:51:031
1418294993427,4cyclictest1431776-21munin-plugin-st19:55:011
1418294993427,4cyclictest1001-21mta-sts-daemon21:16:151
1418294993427,3cyclictest0-21swapper/122:00:011
1418294993426,5cyclictest1502030-21unixbench_multi22:26:231
1418294993424,7cyclictest265-21systemd-journal19:50:011
1418294993423,5cyclictest1441651-21ntpq20:26:091
1418294993421,8cyclictest1450721-21ntpq20:56:121
1418294993420,9cyclictest1423721-21ntpq19:26:121
1418294993420,10cyclictest1445235-21/usr/sbin/munin20:36:221
1418294993410,7cyclictest1479181-21ssh21:50:171
1418294993410,7cyclictest1454285-21diskmemload22:43:401
141829399344,24cyclictest1477221-21ssh21:46:160
141829399343,24cyclictest1507590-21sshd22:36:110
1418293993426,5cyclictest1003-21mta-sts-daemon00:31:080
1418293993425,4cyclictest0-21swapper/021:41:180
141829399342,25cyclictest1471020-21ssh21:36:150
1418293993420,11cyclictest0-21swapper/021:55:020
1418293993410,17cyclictest1528945-21ssh23:11:080
1418295993326,4cyclictest1484971-21idleruntime-cro22:00:012
1418295993326,3cyclictest0-21swapper/223:26:022
1418295993326,3cyclictest0-21swapper/223:15:012
1418295993325,6cyclictest0-21swapper/220:40:012
1418295993325,3cyclictest0-21swapper/221:46:082
1418295993323,6cyclictest1440809-21systemd-run20:25:012
1418295993322,3cyclictest171rcu_preempt21:36:002
1418295993320,3cyclictest171rcu_preempt21:42:382
1418295993313,4cyclictest1468964-21kworker/u8:2-xprtiod22:20:032
141829499339,9cyclictest1454285-21diskmemload22:05:471
141829499339,10cyclictest1572636-21ssh00:22:111
141829499339,10cyclictest1572636-21ssh00:22:111
141829499339,10cyclictest1521975-21ssh23:00:221
141829499336,8cyclictest1535823-21ssh23:21:371
141829499336,8cyclictest1535823-21ssh23:21:371
141829499332,27cyclictest1580881-21rm00:36:151
1418294993321,8cyclictest1447771-21ntpq20:46:151
1418294993321,8cyclictest1420620-21ntpq19:16:071
1418294993321,7cyclictest1419183-21ntpq19:11:131
1418294993320,8cyclictest1449131-21ntpq20:51:091
1418294993320,8cyclictest1428211-21ntpq19:41:111
1418294993310,8cyclictest1453289-21diskstats21:06:031
1418294993310,8cyclictest1453289-21diskstats21:06:031
1418293993327,4cyclictest1460440-21munin-run21:20:010
1418293993325,3cyclictest0-21swapper/022:12:120
1418293993318,7cyclictest694-21cron19:35:010
141829599323,20cyclictest1443162-21sshd20:31:122
1418295993225,4cyclictest1582583-21systemctl00:40:012
1418295993225,4cyclictest1457398-21latency_hist21:15:012
1418295993224,5cyclictest421-21dbus-daemon23:10:012
1418295993224,5cyclictest1449645-21unixbench_multi20:51:212
1418295993224,3cyclictest0-21swapper/223:21:122
1418295993224,3cyclictest0-21swapper/223:21:122
1418295993217,2cyclictest171rcu_preempt21:01:142
141829599321,25cyclictest1480073-21ssh21:51:092
1418295993212,15cyclictest265-21systemd-journal19:36:122
141829499326,10cyclictest1418407-21latency_hist19:10:031
141829499323,8cyclictest1454285-21diskmemload23:51:491
141829499323,23cyclictest265-21systemd-journal23:41:131
1418294993223,4cyclictest1565756-21ntpq00:11:181
1418294993219,8cyclictest1529080-21ntpq23:11:141
1418294993219,8cyclictest1434241-21ntpq20:01:131
141829399328,17cyclictest1003-21mta-sts-daemon22:41:150
1418293993223,6cyclictest1427147-21unixbench_multi19:36:200
1418293993222,8cyclictest1420586-21needreboot19:16:060
1418293993221,7cyclictest0-21swapper/022:56:120
1418293993217,13cyclictest151ktimers/020:21:110
141829399321,23cyclictest1513795-21rm22:46:150
141829399321,14cyclictest1488986-21if_wlan022:06:090
1418295993124,3cyclictest0-21swapper/221:16:002
1418295993118,3cyclictest171rcu_preempt21:21:232
1418294993122,6cyclictest0-21swapper/100:01:041
1418294993119,8cyclictest1438624-21ntpq20:16:091
1418294993119,8cyclictest1438624-21ntpq20:16:091
1418294993110,17cyclictest0-21swapper/120:06:101
1418294993110,17cyclictest0-21swapper/120:06:101
1418293993125,3cyclictest0-21swapper/022:51:050
1418293993123,5cyclictest1469894-21latency_hist21:35:020
1418293993118,10cyclictest1464372-21fschecks_count21:26:030
1418293993118,10cyclictest1464372-21fschecks_count21:26:030
1418295993022,5cyclictest1434789-21munin-run20:05:012
1418295993020,3cyclictest171rcu_preempt21:06:102
1418295993020,3cyclictest171rcu_preempt21:06:102
1418295993018,9cyclictest1432582-21needreboot19:56:062
1418295993017,3cyclictest171rcu_preempt21:33:102
1418295993017,3cyclictest171rcu_preempt21:33:102
1418295993017,3cyclictest171rcu_preempt20:46:112
141829499309,5cyclictest28-21ksoftirqd/121:14:561
1418294993022,4cyclictest1427278-21munin-run19:40:011
1418294993019,7cyclictest3897119-21cupsd19:31:001
1418294993010,15cyclictest3897124-21cups-browsed20:31:121
1418293993023,5cyclictest1442394-21latency_hist20:30:030
1418293993023,4cyclictest1427815-21fschecks_count19:41:020
1418293993023,3cyclictest0-21swapper/022:16:130
1418295992923,3cyclictest0-21swapper/219:25:012
1418295992916,3cyclictest171rcu_preempt20:41:112
141829499299,6cyclictest28-21ksoftirqd/123:25:291
1418294992922,5cyclictest1454285-21diskmemload22:11:081
1418293992924,3cyclictest151ktimers/020:46:130
1418293992922,4cyclictest0-21swapper/023:26:130
1418293992921,5cyclictest3897124-21cups-browsed21:33:180
1418293992915,10cyclictest0-21swapper/020:20:020
1418293992915,10cyclictest0-21swapper/020:20:020
141829599288,5cyclictest171rcu_preempt19:51:172
1418295992818,3cyclictest171rcu_preempt20:06:212
1418295992818,3cyclictest171rcu_preempt20:06:212
1418295992813,3cyclictest171rcu_preempt19:41:192
1418294992818,7cyclictest1452194-21ntpq21:01:101
1418293992822,4cyclictest0-21swapper/023:35:010
1418293992822,3cyclictest0-21swapper/023:21:060
1418293992822,3cyclictest0-21swapper/023:21:060
1418293992822,3cyclictest0-21swapper/021:10:000
1418293992822,3cyclictest0-21swapper/021:10:000
1418293992819,5cyclictest420-21avahi-daemon20:05:530
1418293992819,5cyclictest420-21avahi-daemon20:05:530
1418293992721,4cyclictest1424309-21systemd-run19:30:020
1418293992717,7cyclictest421-21dbus-daemon20:40:020
1418295992611,3cyclictest171rcu_preempt19:46:092
141829399261,22cyclictest1437772-21idleruntime-cro20:15:000
1418293992518,5cyclictest3897124-21cups-browsed21:02:450
1418293992513,8cyclictest12650irq/32-eth020:31:120
1418293992418,4cyclictest151ktimers/019:11:140
1418293992417,5cyclictest1418299-21true19:10:010
1418293992417,4cyclictest1433809-21sort20:01:030
1418293992415,6cyclictest1450143-21telnet20:56:000
1418293992318,3cyclictest1000-21mta-sts-daemon19:47:210
1418293992316,4cyclictest1431111-21netstat19:51:070
141829399231,11cyclictest1446235-21ntpq20:41:120
141829699192,8cyclictest0-21swapper/300:16:113
141829699181,9cyclictest0-21swapper/322:41:143
141829699173,8cyclictest0-21swapper/322:26:173
141829699172,8cyclictest0-21swapper/321:36:113
141829699171,9cyclictest0-21swapper/323:56:163
141829699163,8cyclictest0-21swapper/322:16:103
141829699152,8cyclictest0-21swapper/323:31:213
141829699152,8cyclictest0-21swapper/321:51:123
141829699152,8cyclictest0-21swapper/300:26:043
141829699152,8cyclictest0-21swapper/300:26:043
141829699152,7cyclictest0-21swapper/323:36:123
141829699152,7cyclictest0-21swapper/323:06:113
141829699152,7cyclictest0-21swapper/300:31:083
141829699152,7cyclictest0-21swapper/300:21:123
141829699152,7cyclictest0-21swapper/300:21:123
141829699152,5cyclictest0-21swapper/320:01:103
141829699151,9cyclictest0-21swapper/320:31:123
141829699151,8cyclictest0-21swapper/322:01:143
141829699151,7cyclictest0-21swapper/322:06:213
141829699143,6cyclictest0-21swapper/300:01:103
141829699142,8cyclictest0-21swapper/323:51:123
141829699142,7cyclictest0-21swapper/322:56:103
141829699142,7cyclictest0-21swapper/321:26:133
141829699142,7cyclictest0-21swapper/321:26:133
141829699142,6cyclictest0-21swapper/322:36:003
141829699142,6cyclictest0-21swapper/321:46:133
141829699141,8cyclictest0-21swapper/321:41:143
141829699141,7cyclictest0-21swapper/300:36:103
141829699141,6cyclictest0-21swapper/320:51:113
141829699133,4cyclictest0-21swapper/319:21:193
141829699132,7cyclictest0-21swapper/323:16:013
141829699132,7cyclictest0-21swapper/323:01:133
141829699132,7cyclictest0-21swapper/322:11:173
141829699132,7cyclictest0-21swapper/321:56:103
141829699132,7cyclictest0-21swapper/321:31:053
141829699132,7cyclictest0-21swapper/321:31:053
141829699132,7cyclictest0-21swapper/319:11:123
141829699132,7cyclictest0-21swapper/300:11:063
141829699132,6cyclictest0-21swapper/322:21:113
141829699132,6cyclictest0-21swapper/322:21:113
141829699132,6cyclictest0-21swapper/320:46:153
141829699132,6cyclictest0-21swapper/319:46:123
141829699132,6cyclictest0-21swapper/300:06:123
141829699132,5cyclictest0-21swapper/320:21:163
141829699131,8cyclictest0-21swapper/322:31:023
141829699131,7cyclictest0-21swapper/323:46:203
141829699131,7cyclictest0-21swapper/321:11:113
141829699131,6cyclictest0-21swapper/320:41:113
141829699131,6cyclictest0-21swapper/319:41:083
141829699131,5cyclictest0-21swapper/321:01:093
141829699123,7cyclictest0-21swapper/323:41:013
141829699123,5cyclictest0-21swapper/319:56:083
141829699122,7cyclictest0-21swapper/321:21:053
141829699122,6cyclictest0-21swapper/321:16:123
141829699122,6cyclictest0-21swapper/319:31:113
141829699122,6cyclictest0-21swapper/319:16:103
141829699121,8cyclictest0-21swapper/320:25:023
141829699121,7cyclictest0-21swapper/323:26:063
141829699121,7cyclictest0-21swapper/322:51:203
141829699121,7cyclictest0-21swapper/322:46:083
141829699121,7cyclictest0-21swapper/320:06:093
141829699121,7cyclictest0-21swapper/320:06:093
141829699121,6cyclictest0-21swapper/323:10:263
141829699121,6cyclictest0-21swapper/319:55:023
141829699121,5cyclictest0-21swapper/320:16:113
141829699121,5cyclictest0-21swapper/320:16:113
141829699121,5cyclictest0-21swapper/319:36:083
141829699112,6cyclictest0-21swapper/323:21:023
141829699112,6cyclictest0-21swapper/323:21:023
141829699112,6cyclictest0-21swapper/321:10:003
141829699112,6cyclictest0-21swapper/321:10:003
141829699112,5cyclictest0-21swapper/320:56:123
141829699111,6cyclictest0-21swapper/319:26:113
141829699101,6cyclictest0-21swapper/320:40:013
141829699101,6cyclictest0-21swapper/320:11:123
14182969981,4cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional