You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-12-10 - 12:18

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackeslot3s.osadl.org (updated Tue Dec 10, 2024 00:45:03)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2598660999716,30cyclictest2600142-21modprobe19:40:012
2598653998581,2cyclictest0-21swapper/023:20:030
2598653997116,49cyclictest2614791-21true00:20:000
259865699671,61cyclictest2605068-21sshd21:12:421
2598653996632,29cyclictest272-21dbus-daemon23:45:010
259866599658,28cyclictest2607195-21kworker/u8:122:15:013
2598656996524,37cyclictest412-21sshd22:39:421
259866599643,18cyclictest2611663-21modprobe23:20:013
259865699643,56cyclictest2610097-21munin-run22:50:011
259865699642,58cyclictest2613431-21sshd23:54:391
259865699642,58cyclictest2608478-21cron22:17:011
259865699642,58cyclictest2608478-21cron22:17:001
2598656996416,44cyclictest2600743-21grep19:50:011
259865699641,58cyclictest2611612-21sshd23:19:361
259865699632,56cyclictest363-21snmpd00:27:221
259865699632,55cyclictest48-21kcompactd021:25:521
259865699632,55cyclictest2600947-21munin-run19:55:021
259865699631,58cyclictest2607969-21sshd22:05:411
259865399631,10cyclictest2601446-21sshd20:03:400
2598665996220,36cyclictest1-21systemd20:45:003
259865699623,55cyclictest2615533-21sshd00:34:411
259865699622,55cyclictest2613211-21munin-run23:50:001
259865699621,57cyclictest48-21kcompactd023:05:451
259865699621,57cyclictest48-21kcompactd023:05:441
259865699621,55cyclictest2599648-21munin-run19:30:011
259865399621,57cyclictest0-21swapper/019:33:420
2598653996213,44cyclictest272-21dbus-daemon20:20:010
259866599612,14cyclictest2609542-21cron22:40:003
2598665996121,36cyclictest2615291-21latency_hist00:30:033
259865699612,53cyclictest2615216-21latency_hist00:25:021
259865699611,56cyclictest2604797-21sshd21:06:421
259865699611,56cyclictest2601433-21sshd20:01:401
259865699611,55cyclictest2613680-21sshd23:58:401
259865699611,55cyclictest2610304-21sshd22:51:421
259865699611,55cyclictest2600444-21munin-run19:45:021
259865699611,54cyclictest48-21kcompactd020:27:031
2598665996017,38cyclictest271-21cron19:50:003
259865699602,53cyclictest2603807-21munin-run20:50:001
259865699602,53cyclictest2599867-21sshd19:31:411
259865699602,52cyclictest2607514-21munin-run22:00:001
259865699601,55cyclictest363-21snmpd00:02:571
259865699601,55cyclictest2602986-21sshd20:33:041
259865699601,55cyclictest2602480-21sshd20:22:411
259865699601,55cyclictest2602480-21sshd20:22:401
259865699601,54cyclictest48-21kcompactd023:11:511
259865699601,54cyclictest2604554-21sshd21:03:081
259865699601,53cyclictest2610551-21sshd22:55:401
259865399603,8cyclictest2610561-21modprobe22:57:410
2598653996032,25cyclictest2605510-21cat21:20:030
259865399602,15cyclictest2600138-21cron19:40:000
259866599593,17cyclictest2606451-21munin-run21:40:003
259865699592,52cyclictest363-21snmpd19:11:001
259865699591,54cyclictest2614738-21sshd00:19:421
259865699591,54cyclictest2609023-21sshd22:27:421
259865699591,54cyclictest2601931-21sshd20:10:411
259865699591,53cyclictest48-21kcompactd022:01:571
259865699591,52cyclictest48-21kcompactd022:22:291
2598653995925,30cyclictest19050irq/34-mmc100:00:030
259866599583,8cyclictest2614228-21cron00:10:013
259866599582,12cyclictest2602220-21modprobe20:20:013
2598665995817,37cyclictest2613165-21sshd23:45:423
259866599581,12cyclictest363-21snmpd23:27:113
259866599581,12cyclictest363-21snmpd21:57:173
2598665995810,11cyclictest235-21systemd-journal00:05:003
2598660995839,7cyclictest131rcu_preempt21:10:032
2598656995835,17cyclictest235-21systemd-journal23:24:591
259865699582,51cyclictest2605399-21munin-run21:20:011
259865699581,53cyclictest48-21kcompactd021:30:181
259865699581,53cyclictest2604280-21sshd20:59:411
259865699581,53cyclictest2602211-21sshd20:19:411
259865399583,16cyclictest272-21dbus-daemon22:20:010
259865399583,16cyclictest272-21dbus-daemon22:20:000
2598653995812,6cyclictest2603005-21modprobe20:35:000
259865399581,11cyclictest2605777-21latency_hist21:25:010
259866599574,7cyclictest2613712-21munin-run00:00:013
2598665995716,36cyclictest272-21dbus-daemon22:50:013
259866599571,13cyclictest2615000-21sshd00:20:413
259866599571,12cyclictest2607183-21sshd21:50:423
2598665995710,41cyclictest0-21swapper/323:35:013
259865699576,47cyclictest363-21snmpd21:52:511
259865699572,50cyclictest2610843-21sshd23:03:421
259865699572,50cyclictest2603544-21munin-run20:45:011
259865699571,53cyclictest2614224-21sshd00:09:411
259865699571,52cyclictest363-21snmpd21:40:171
259865699571,51cyclictest48-21kcompactd023:36:161
259865699571,51cyclictest48-21kcompactd023:31:151
259865699571,51cyclictest48-21kcompactd023:25:431
259865699571,51cyclictest48-21kcompactd021:36:261
259865699571,51cyclictest363-21snmpd23:42:141
259865399572,12cyclictest2612676-21munin-run23:40:000
2598653995718,35cyclictest2612413-21latency_hist23:35:030
2598653995718,35cyclictest2601152-21sshd19:56:420
259866599563,8cyclictest2607738-21cron22:05:003
259866599562,14cyclictest2605099-21cut21:15:003
259866599562,13cyclictest48-21kcompactd022:55:123
259866599562,13cyclictest2602738-21sshd20:28:043
2598665995618,33cyclictest2605361-21sh21:20:003
2598665995616,36cyclictest2606697-21sshd21:43:143
259866599561,14cyclictest2604397-21sed21:00:023
259866599561,13cyclictest2615807-21sendmail00:39:593
259866599561,13cyclictest2608774-21sshd22:23:413
259865699562,49cyclictest2598699-21latency_hist19:10:011
259865699561,51cyclictest120-21kswapd022:10:121
259865699561,50cyclictest48-21kcompactd021:20:531
259865699561,50cyclictest363-21snmpd19:21:021
259865699561,49cyclictest48-21kcompactd022:40:131
259865399565,10cyclictest2611361-21modprobe23:14:590
259865399562,17cyclictest2613464-21munin-run23:55:010
2598653995621,30cyclictest272-21dbus-daemon20:15:000
2598653995617,34cyclictest2604640-21wc21:05:020
2598653995612,39cyclictest19050irq/34-mmc121:50:010
2598653995611,8cyclictest2614645-21cat00:15:020
259865399561,10cyclictest363-21snmpd00:33:580
259866599558,18cyclictest2600005-21latency_hist19:35:033
259866599552,9cyclictest2598877-21grep19:15:013
259866599552,8cyclictest2610324-21cron22:55:013
259866599552,7cyclictest2600920-21cron19:55:003
259866599552,14cyclictest2609817-21sshd22:44:413
2598665995512,12cyclictest37-21ksoftirqd/323:45:013
259865699552,50cyclictest363-21snmpd00:37:241
259865699552,49cyclictest363-21snmpd20:51:361
259865699552,48cyclictest2603305-21munin-run20:40:021
259865699552,48cyclictest2603305-21munin-run20:40:011
259865699551,50cyclictest2601696-21sshd20:08:421
259865699551,50cyclictest2601696-21sshd20:08:411
259865699551,37cyclictest0-21swapper/122:30:021
2598653995547,6cyclictest19050irq/34-mmc100:00:030
2598653995527,25cyclictest12-21ksoftirqd/022:30:020
259865399552,13cyclictest2604879-21latency_hist21:10:010
259865399551,16cyclictest1-21systemd19:30:000
259865399551,10cyclictest2608004-21munin-run22:10:010
2598653995510,12cyclictest272-21dbus-daemon22:55:010
259866599542,9cyclictest2614766-21munin-run00:20:003
259866599542,12cyclictest2599793-21latency_hist19:30:013
2598665995410,5cyclictest1-21systemd20:25:013
2598665995410,5cyclictest1-21systemd20:25:013
2598660995433,14cyclictest235-21systemd-journal23:50:012
259865699541,49cyclictest2601227-21systemd-run20:00:001
259865699541,48cyclictest363-21snmpd00:11:271
259865399542,8cyclictest2611918-21true23:25:000
259865399542,10cyclictest2609559-21sendmail22:40:000
2598653995416,33cyclictest1-21systemd20:30:010
259865399541,48cyclictest2603989-21latency_hist20:50:030
259865399541,12cyclictest2609285-21sshd22:34:310
259866599532,12cyclictest2604046-21munin-run20:55:003
259866599532,11cyclictest2601981-21systemd-run20:15:003
259866599532,10cyclictest2601174-21cron20:00:003
2598665995316,33cyclictest2607998-21cron22:10:013
259866599531,14cyclictest2603025-21/usr/sbin/munin20:35:003
259866599531,13cyclictest2615511-21sshd00:30:413
259866599531,13cyclictest2604840-21munin-run21:10:003
259866599531,12cyclictest363-21snmpd23:23:383
259865699531,48cyclictest48-21kcompactd019:37:081
2598653995323,26cyclictest2599193-21latency_hist19:20:020
2598653995323,26cyclictest2599193-21latency_hist19:20:010
259865399531,48cyclictest0-21swapper/021:35:410
2598653995313,35cyclictest2603529-21sshd20:44:400
259865399531,13cyclictest363-21snmpd22:47:280
259865399531,11cyclictest2601685-21sshd20:06:420
259865399531,11cyclictest2601685-21sshd20:06:410
259866599523,10cyclictest2614493-21modprobe00:15:013
259866599521,14cyclictest235-21systemd-journal23:15:003
259866599521,12cyclictest363-21snmpd21:47:173
2598660995235,12cyclictest235-21systemd-journal21:31:412
2598660995233,14cyclictest1-21systemd19:45:002
2598660995228,16cyclictest235-21systemd-journal21:00:002
259865399523,10cyclictest2610869-21modprobe23:05:000
259865399522,8cyclictest2603273-21grep20:40:010
259865399522,8cyclictest2603273-21grep20:40:000
2598653995222,26cyclictest2607876-21date22:05:010
2598653995222,24cyclictest12-21ksoftirqd/021:45:000
259865399522,13cyclictest2607450-21sshd21:59:250
259865399522,12cyclictest2606112-21sshd21:31:400
2598653995216,32cyclictest2615812-21run-parts00:40:000
259865399521,49cyclictest0-21swapper/021:00:020
259865399521,10cyclictest363-21snmpd22:21:570
259866599513,9cyclictest2608517-21cron22:20:013
259866599513,9cyclictest2608517-21cron22:20:003
2598665995124,23cyclictest2601486-21latency_hist20:05:013
259866599512,14cyclictest1-21systemd21:34:413
259866599511,14cyclictest2600124-21modprobe19:37:413
259866599511,12cyclictest1-21systemd21:05:013
259866599511,11cyclictest363-21snmpd20:49:403
259865699512,44cyclictest363-21snmpd21:46:481
259865699511,45cyclictest363-21snmpd19:18:191
259865699511,45cyclictest363-21snmpd19:18:181
259865399517,4cyclictest0-21swapper/020:25:010
259865399517,4cyclictest0-21swapper/020:25:010
259865399516,14cyclictest2598821-21sshd19:11:410
259865399513,8cyclictest2598663-21grep19:10:020
259865399512,13cyclictest2614229-21cron00:10:010
259865399512,12cyclictest2608270-21munin-run22:15:000
259866599505,7cyclictest0-21swapper/323:55:023
259866599501,15cyclictest363-21snmpd23:02:403
2598660995033,13cyclictest235-21systemd-journal23:52:412
2598660995033,13cyclictest235-21systemd-journal00:00:002
2598660995027,14cyclictest272-21dbus-daemon20:25:022
2598660995027,14cyclictest272-21dbus-daemon20:25:012
2598660995024,22cyclictest150-21pr/ttyS220:35:022
259865399503,7cyclictest235-21systemd-journal19:55:010
259865399502,12cyclictest2607196-21sshd21:53:420
259865399501,4cyclictest2605852-21sshd21:25:420
2598653995011,7cyclictest0-21swapper/000:30:010
259865399501,15cyclictest2599408-21unin-run19:25:000
259866599492,8cyclictest2609269-21sshd22:31:403
259866599491,14cyclictest2612650-21sshd23:39:373
259866599491,14cyclictest2603438-21sed20:40:033
259866599491,14cyclictest2603438-21sed20:40:033
259865399494,7cyclictest2612165-21munin-plugin-st23:30:000
259865399492,8cyclictest2605077-21modprobe21:13:420
259865399492,15cyclictest2600396-21modprobe19:40:410
259865399491,10cyclictest2604026-21sshd20:53:410
259866599482,15cyclictest2600432-21munin-run19:45:013
2598665994815,11cyclictest37-21ksoftirqd/321:20:023
2598665994813,8cyclictest2599189-21cut19:20:023
2598665994813,8cyclictest2599189-21cut19:20:013
2598660994824,17cyclictest235-21systemd-journal19:15:012
259865399481,12cyclictest2615001-21modprobe00:20:410
259866599473,12cyclictest2611087-21sshd23:06:413
259866599473,12cyclictest2611087-21sshd23:06:413
2598665994713,29cyclictest0-21swapper/319:20:303
259866099475,31cyclictest2610311-21kworker/u8:123:25:022
2598660994732,8cyclictest306-21in:imuxsock23:10:012
2598660994732,8cyclictest306-21in:imuxsock23:10:002
259866599464,7cyclictest2605891-21munin-run21:30:003
259866599462,7cyclictest2598781-21grep19:10:023
259866599461,16cyclictest2609030-21sshd22:29:313
2598660994632,8cyclictest306-21in:imuxsock22:00:012
2598660994627,12cyclictest2612654-21cron23:40:012
2598660994625,14cyclictest272-21dbus-daemon21:40:012
2598660994611,7cyclictest131rcu_preempt21:50:012
259865399461,12cyclictest2609819-21sshd22:44:410
259865399461,10cyclictest2613210-21systemd-run23:50:010
259866599451,11cyclictest2601686-21modprobe20:06:413
259866599451,11cyclictest2601686-21modprobe20:06:413
2598660994530,11cyclictest30-21ksoftirqd/200:40:012
2598660994529,12cyclictest1-21systemd22:05:002
2598660994521,17cyclictest272-21dbus-daemon00:30:012
2598660994521,16cyclictest235-21systemd-journal19:35:012
259865399452,10cyclictest235-21systemd-journal19:50:000
2598660994430,10cyclictest30-21ksoftirqd/222:44:322
2598660994429,8cyclictest2600678-21sh19:50:012
259865399442,11cyclictest2611310-21latency_hist23:10:030
2598660994328,8cyclictest306-21in:imuxsock23:00:012
2598660994328,7cyclictest306-21in:imuxsock22:30:002
2598660994325,13cyclictest235-21systemd-journal20:10:012
2598660994325,13cyclictest235-21systemd-journal20:10:002
2598660994323,14cyclictest272-21dbus-daemon22:15:012
2598660994319,18cyclictest1-21systemd21:25:002
259865399433,7cyclictest1-21systemd23:10:010
2598660994229,10cyclictest30-21ksoftirqd/220:40:022
2598660994229,10cyclictest30-21ksoftirqd/220:40:012
2598660994225,12cyclictest2599407-21systemd-run19:25:012
2598660994125,13cyclictest30-21ksoftirqd/222:40:022
2598660994123,13cyclictest272-21dbus-daemon00:00:042
2598660994030,5cyclictest306-21in:imuxsock20:46:402
2598660994025,12cyclictest30-21ksoftirqd/200:25:002
2598660994019,15cyclictest235-21systemd-journal21:14:592
259866099399,17cyclictest2602224-21modprobe20:20:002
259866099398,23cyclictest2606723-21munin-run21:45:012
259866099397,23cyclictest2610927-21grep23:05:022
259866099394,22cyclictest235-21systemd-journal20:44:592
2598660993931,6cyclictest30-21ksoftirqd/219:55:022
2598660993927,9cyclictest30-21ksoftirqd/200:15:012
2598660993927,8cyclictest2608791-21sh22:25:002
2598660993922,10cyclictest306-21in:imuxsock22:10:012
2598660993828,8cyclictest30-21ksoftirqd/222:55:002
2598660993828,8cyclictest30-21ksoftirqd/200:20:032
2598660993826,6cyclictest306-21in:imuxsock21:20:012
2598660993818,14cyclictest1-21systemd23:35:012
2598660993816,15cyclictest272-21dbus-daemon23:15:002
259866099373,29cyclictest235-21systemd-journal19:30:002
259866099373,24cyclictest2611635-21sendmail23:20:002
2598660993723,11cyclictest30-21ksoftirqd/221:55:012
2598660993723,11cyclictest2604206-21sed20:55:032
2598660993626,6cyclictest271-21cron19:20:002
2598660993626,6cyclictest271-21cron19:20:002
2598660993625,8cyclictest2605870-21sshd21:28:412
2598660993622,10cyclictest235-21systemd-journal21:05:012
2598660993619,13cyclictest1-21systemd00:35:022
2598660993619,12cyclictest235-21systemd-journal22:20:012
2598660993619,12cyclictest235-21systemd-journal22:20:002
259866099355,19cyclictest2610075-21modprobe22:50:012
2598660993528,5cyclictest30-21ksoftirqd/223:30:002
259866099344,3cyclictest131rcu_preempt19:10:012
259866099344,3cyclictest131rcu_preempt00:10:002
2598660993426,5cyclictest2609337-21latency_hist22:35:022
2598660993425,7cyclictest30-21ksoftirqd/220:14:412
2598660993424,7cyclictest30-21ksoftirqd/220:30:002
2598660993422,8cyclictest2601450-21sshd20:04:422
2598660993417,12cyclictest0-21swapper/219:59:592
259866099311,28cyclictest48-21kcompactd023:42:212
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional