<div dir="ltr">A couple questions:<div><br></div><div>- I guess this is Linux TCP BBRv1 ("bbr" module)? What's the OS distribution and exact kernel version ("uname -r")?</div><br>- What do you mean when you say "The old server allows for more re-transmits"?<div><br></div><div>- If BBRv1 is suffering throughput problems due to high retransmit rates, then usually the retransmit rate is around 15% or higher. If the retransmit rate is that high on a radio link that is being tested, then that radio link may be having issues that should be investigated separately?<br><div><br></div><div>- Would you be able to take a tcpdump trace of the well-behaved and problematic traffic and share the pcap or a plot?</div><div> <a href="https://github.com/google/bbr/blob/master/Documentation/bbr-faq.md#how-can-i-visualize-the-behavior-of-linux-tcp-bbr-connections">https://github.com/google/bbr/blob/master/Documentation/bbr-faq.md#how-can-i-visualize-the-behavior-of-linux-tcp-bbr-connections</a></div><div><br></div><div>- Would you be able to share the output of "ss -tin" from a recently built "ss" binary, near the end of a long-lived test flow, for the well-behaved and problematic cases?</div><div>  <a href="https://github.com/google/bbr/blob/master/Documentation/bbr-faq.md#how-can-i-monitor-linux-tcp-bbr-connections">https://github.com/google/bbr/blob/master/Documentation/bbr-faq.md#how-can-i-monitor-linux-tcp-bbr-connections</a></div><div><br></div><div>best,</div><div>neal</div><div><br></div><br class="gmail-Apple-interchange-newline"></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, Nov 16, 2020 at 10:25 AM <<a href="mailto:erik.taraldsen@telenor.com">erik.taraldsen@telenor.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">




<div dir="ltr" style="font-size:12pt;color:rgb(0,0,0);background-color:rgb(255,255,255);font-family:Calibri,Arial,Helvetica,sans-serif">
<p>I'm in the process of replacing a throughput test server.  The old server is running a 1Gbit Ethernet card on a 1Gbit link and ubuntu.  The new a 10Gbit card on a 40Gbit link and centos.  Both have low load and Xenon processors.</p>
<p><br>
</p>
<p>The purpose is for field installers to verify the bandwidth sold to the customers using known clients against known servers.  (4G and 5G fixed installations mainly).<br>
</p>
<p><br>
</p>
<p>What I'm finding is that the new server is consistently delivering slightly lower throughput than the old server.  The old server allows for more re-transmits and has a slightly higher congestion window than the new server.</p>
<p><br>
</p>
<p>Is there any way to tune bbr to allow for more re-transmits (which seems to be the limiting factor)?  Or other suggestions?</p>
<p><br>
</p>
<p><br>
</p>
<p>(Frankly I think the old server is to aggressive for general purpose use.  It seems to starve out other tcp sessions more than the new server.  So for delivering regular content to users the new implementation seems more balanced, but that is not the target
 here.  We want to stress test the radio link.)<br>
</p>
<p><br>
</p>
<p>Regards Erik <br>
</p>
</div>

_______________________________________________<br>
Bloat mailing list<br>
<a href="mailto:Bloat@lists.bufferbloat.net" target="_blank">Bloat@lists.bufferbloat.net</a><br>
<a href="https://lists.bufferbloat.net/listinfo/bloat" rel="noreferrer" target="_blank">https://lists.bufferbloat.net/listinfo/bloat</a><br>
</blockquote></div>