<div dir="ltr">I think TLS compression is a good answer.  I see options documented in logstash, ES, SPLUNK, SUMO. <div><br></div><div>We have 2 syslog relays that send data over strait TCP right now to another syslog-ng master. </div><div>I was looking for ways to optimize that communication as well as a network JSON input from logstash and how other connections to the above could be optimized. </div><div><br></div><div>Just a thought without much thought put into it I guess. </div><div><br></div><div><br></div><div>Scot   </div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Mar 13, 2018 at 12:53 PM, Nagy, Gábor <span dir="ltr"><<a href="mailto:gabor.nagy@balabit.com" target="_blank">gabor.nagy@balabit.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="auto"><div>Hi Scot,</div><div dir="auto"><br></div><div dir="auto">I don't know about native compression abilities in syslog-ng.</div><div dir="auto">You could use TLS compression, but I don't know if that suits you.</div><div dir="auto"><br></div><div dir="auto">Other options would require that you write your compressing programs and include them in program source/destination or using unix sockets.</div><div dir="auto"><br></div><div dir="auto">Can you explain what is your use case, please?</div><div dir="auto">Maybe compression is not the goal, just the tool to achieve it and we can propose something else.</div><div dir="auto"><br><div class="gmail_extra" dir="auto">Gabor</div><div class="gmail_extra" dir="auto"><br><div class="gmail_quote" dir="auto"><div><div class="h5">On 13 Mar 2018 3:05 pm, "Scot" <<a href="mailto:scotrn@gmail.com" target="_blank">scotrn@gmail.com</a>> wrote:<br type="attribution"></div></div><blockquote class="m_-7530243152993380535m_1346494394198742427quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5"><div dir="ltr">Hi, <div><br></div><div> Has anyone looked at enabling compression between sources and destinations? </div><div><br></div><div>Looks like Kafka is the only destination that supports compression by documentation. No inputs.  </div><div><br></div><div>Would be great to also compress between a syslog-ng relay and a syslog-ng target. </div><font color="#888888"><div><br></div><div>Scot</div></font></div>
<br></div></div>______________________________<wbr>______________________________<wbr>__________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailm<wbr>an/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support<wbr>/documentation/?product=syslog<wbr>-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/sy<wbr>slog-ng-faq</a><br>
<br>
<br></blockquote></div><br></div></div></div>
<br>______________________________<wbr>______________________________<wbr>__________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/<wbr>mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/<wbr>support/documentation/?<wbr>product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/<wbr>syslog-ng-faq</a><br>
<br>
<br></blockquote></div><br></div>