<div dir="ltr"><div>Hi,</div><div><br></div><div>mysql (or any other traditional SQL database for that matter) is not an ideal storage for logs, their performance range is usually much lower to what a log infrastructure can collect. <br></div><div><br></div><div>Assuming mysql is the botlleneck in your installation, you can tell syslog-ng to slow down incoming logs to the pace of mysql using the flags(flow-control) in your log {} statement, however that will mean that everything will slow down to what mysql can give you.</div><div><br></div><div>In any other case, you will need to improve mysql performance (larger box, better disks, tuning parameters etc). <br></div><div><br></div><div>Or you start using something else for logs, ElasticSearch is much better suited for this use-case. Splunk is better, but is quite expensive. One Identity (formerly Balabit) has SSB that can cope with a lot of logs and can be a good step forward, but that's proprietary too.</div><div><br></div><div>Cheers,</div><div>Bazsi</div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sun, Mar 22, 2020 at 8:34 PM Sync IT <<a href="mailto:syncit-bd@live.com">syncit-bd@live.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">




<div dir="ltr">
<div style="font-family:Calibri,Helvetica,sans-serif;font-size:12pt;color:rgb(0,0,0)">
Hi<br>
I have installed syslog-ng on a ubuntu machine. Mysql has been used to store the logs. But i keep seeing the logs are missed. that means logs are not storing properly. any idea what is wrong with it. it normally happened at the end of the day close to 12am.
 Kindly help. Thanks </div>
</div>

______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
</blockquote></div><br clear="all"><br>-- <br><div dir="ltr" class="gmail_signature">Bazsi</div>