<div dir="ltr"><div>  Hi,</div><div><br></div><div>We found another leak related to monitor-method(poll). When the tracked directory is deleted, glib allocates a GError structure for "Error opening directory \'...\': No such file or directory", that was not freed by syslog-ng. This can cause considerable memory leak when high number of directories tracked and deleted. We created a pull request to fix it: here you can track the progress: <a href="https://github.com/balabit/syslog-ng/pull/2267">https://github.com/balabit/syslog-ng/pull/2267</a></div><div><br></div><div>Br,</div><div>  Antal<br></div></div><br><div class="gmail_quote"><div dir="ltr">On Thu, Sep 6, 2018 at 1:15 PM Jose Angel Santiago <<a href="mailto:jasantiago@stratio.com">jasantiago@stratio.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div>Hi,</div><div><br></div><div>I had to restart syslog-ng process because it was affecting other services in the same host.</div><div><br></div><div>I've checked another host with was running with the fix too, it has 23000 files monitored and 38700 folders under base-dir, and now it's starting to eat the RAM, the cleaning process will be executed in about an hour (I'm sorry I can't force to do it before)<br></div><div><br></div><div>PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND<br></div><div>96 root      20   0  <b>5.609g 4.274g</b> 0.006g R <b>101.3</b>  <b>6.8 </b>  1263:46 syslog-ng          <br></div><div><br></div><div>Trace of pmap:</div><div><br></div><div>96:   /syslog-ng/exec/sbin/syslog-ng -F --no-caps -f /etc/syslog-ng/syslog-ng.conf -p /var/syslog-ng/syslog-ng.pid -R /var/syslog-ng/syslog-ng.persist -c /var/syslog-ng/syslog-ng.ctl<br>0000000000400000     12K r-x-- syslog-ng<br>0000000000602000      4K r---- syslog-ng<br>0000000000603000      4K rw--- syslog-ng<br>00000000015bc000 5689360K rw---   [ anon ]<br>00007ff9c8000000  19588K rw---   [ anon ]<br>00007ff9c9321000  45948K -----   [ anon ]<br>00007ff9cc000000   4288K rw---   [ anon ]<br>00007ff9cc430000  61248K -----   [ anon ]<br>00007ff9d0000000  26844K rw---   [ anon ]<br>00007ff9d1a37000  38692K -----   [ anon ]<br>00007ff9d4000000  10280K rw---   [ anon ]<br>00007ff9d4a0a000  55256K -----   [ anon ]<br>00007ff9dc000000  64604K rw---   [ anon ]<br>00007ff9dff17000    932K -----   [ anon ]<br>00007ff9e0000000  65508K rw---   [ anon ]<br>00007ff9e3ff9000     28K -----   [ anon ]<br>00007ff9e8000000   4480K rw---   [ anon ]<br>00007ff9e8460000  61056K -----   [ anon ]<br>00007ff9f0000000  65488K rw---   [ anon ]<br>00007ff9f3ff4000     48K -----   [ anon ]<br>00007ff9f8000000  14716K rw---   [ anon ]<br>00007ff9f8e5f000  50820K -----   [ anon ]<br>00007ffa00000000  18252K rw---   [ anon ]<br>00007ffa011d3000  47284K -----   [ anon ]<br>00007ffa08000000  65536K rw---   [ anon ]<br>00007ffa0c000000  30460K rw---   [ anon ]<br>00007ffa0ddbf000  35076K -----   [ anon ]<br>00007ffa10000000  65484K rw---   [ anon ]<br>00007ffa13ff3000     52K -----   [ anon ]<br>00007ffa167fd000      4K -----   [ anon ]<br>00007ffa167fe000   8192K rw---   [ anon ]<br>00007ffa18000000   7920K rw---   [ anon ]<br>00007ffa187bc000  57616K -----   [ anon ]<br>00007ffa1cffa000      4K -----   [ anon ]<br>00007ffa1cffb000   8192K rw---   [ anon ]<br>00007ffa1f7ff000      4K -----   [ anon ]<br>00007ffa1f800000   8192K rw---   [ anon ]<br>00007ffa20000000  65536K rw---   [ anon ]<br>00007ffa24000000  14764K rw---   [ anon ]<br>00007ffa24e6b000  50772K -----   [ anon ]<br>00007ffa28000000  24348K rw---   [ anon ]<br>00007ffa297c7000  41188K -----   [ anon ]<br>00007ffa2c000000  40916K rw---   [ anon ]<br>00007ffa2e7f5000  24620K -----   [ anon ]<br>00007ffa30000000  17684K rw---   [ anon ]<br>00007ffa31145000  47852K -----   [ anon ]<br>00007ffa34000000  10988K rw---   [ anon ]<br>00007ffa34abb000  54548K -----   [ anon ]<br>00007ffa38000000  20464K rw---   [ anon ]<br>00007ffa393fc000  45072K -----   [ anon ]<br>00007ffa3c316000      4K -----   [ anon ]<br>00007ffa3c317000   8192K rw---   [ anon ]<br>00007ffa3ea78000      4K -----   [ anon ]<br>00007ffa3ea79000   8192K rw---   [ anon ]<br>00007ffa3fbee000   7360K rw-s- syslog-ng.persist<br>00007ffa4031e000     92K r-x-- <a href="http://libresolv-2.23.so" target="_blank">libresolv-2.23.so</a><br>00007ffa40335000   2048K ----- <a href="http://libresolv-2.23.so" target="_blank">libresolv-2.23.so</a><br>00007ffa40535000      4K r---- <a href="http://libresolv-2.23.so" target="_blank">libresolv-2.23.so</a><br>00007ffa40536000      4K rw--- <a href="http://libresolv-2.23.so" target="_blank">libresolv-2.23.so</a><br>00007ffa40537000      8K rw---   [ anon ]<br>00007ffa40539000     20K r-x-- <a href="http://libnss_dns-2.23.so" target="_blank">libnss_dns-2.23.so</a><br>00007ffa4053e000   2048K ----- <a href="http://libnss_dns-2.23.so" target="_blank">libnss_dns-2.23.so</a><br>00007ffa4073e000      4K r---- <a href="http://libnss_dns-2.23.so" target="_blank">libnss_dns-2.23.so</a><br>00007ffa4073f000      4K rw--- <a href="http://libnss_dns-2.23.so" target="_blank">libnss_dns-2.23.so</a><br>00007ffa40740000   3328K rw---   [ anon ]<br>00007ffa40ac0000    256K rw---   [ anon ]<br>00007ffa40b40000    512K rw---   [ anon ]<br>00007ffa40c00000    256K rw---   [ anon ]<br>00007ffa40c6c000    256K rw---   [ anon ]<br>00007ffa40d6c000     44K r-x-- libsyslogformat.so<br>00007ffa40d77000   2044K ----- libsyslogformat.so<br>00007ffa40f76000      4K r---- libsyslogformat.so<br>00007ffa40f77000      4K rw--- libsyslogformat.so<br>00007ffa40f78000   4612K rw---   [ anon ]<br>00007ffa413f9000     24K r-x-- _<a href="http://hashlib.x86_64-linux-gnu.so" target="_blank">hashlib.x86_64-linux-gnu.so</a><br>00007ffa413ff000   2044K ----- _<a href="http://hashlib.x86_64-linux-gnu.so" target="_blank">hashlib.x86_64-linux-gnu.so</a><br>00007ffa415fe000      4K r---- _<a href="http://hashlib.x86_64-linux-gnu.so" target="_blank">hashlib.x86_64-linux-gnu.so</a><br>00007ffa415ff000      4K rw--- _<a href="http://hashlib.x86_64-linux-gnu.so" target="_blank">hashlib.x86_64-linux-gnu.so</a><br>00007ffa41600000    256K rw---   [ anon ]<br>00007ffa41640000     48K r-x-- _<a href="http://json.x86_64-linux-gnu.so" target="_blank">json.x86_64-linux-gnu.so</a><br>00007ffa4164c000   2044K ----- _<a href="http://json.x86_64-linux-gnu.so" target="_blank">json.x86_64-linux-gnu.so</a><br>00007ffa4184b000      4K r---- _<a href="http://json.x86_64-linux-gnu.so" target="_blank">json.x86_64-linux-gnu.so</a><br>00007ffa4184c000      4K rw--- _<a href="http://json.x86_64-linux-gnu.so" target="_blank">json.x86_64-linux-gnu.so</a><br>00007ffa4184d000     84K r-x-- _<a href="http://ssl.x86_64-linux-gnu.so" target="_blank">ssl.x86_64-linux-gnu.so</a><br>00007ffa41862000   2044K ----- _<a href="http://ssl.x86_64-linux-gnu.so" target="_blank">ssl.x86_64-linux-gnu.so</a><br>00007ffa41a61000      4K r---- _<a href="http://ssl.x86_64-linux-gnu.so" target="_blank">ssl.x86_64-linux-gnu.so</a><br>00007ffa41a62000     16K rw--- _<a href="http://ssl.x86_64-linux-gnu.so" target="_blank">ssl.x86_64-linux-gnu.so</a><br>00007ffa41a66000    768K rw---   [ anon ]<br>00007ffa41b57000    256K rw---   [ anon ]<br>00007ffa41b97000   1056K r-x-- <a href="http://libm-2.23.so" target="_blank">libm-2.23.so</a><br>00007ffa41c9f000   2044K ----- <a href="http://libm-2.23.so" target="_blank">libm-2.23.so</a><br>00007ffa41e9e000      4K r---- <a href="http://libm-2.23.so" target="_blank">libm-2.23.so</a><br>00007ffa41e9f000      4K rw--- <a href="http://libm-2.23.so" target="_blank">libm-2.23.so</a><br>00007ffa41ea0000      8K r-x-- <a href="http://libutil-2.23.so" target="_blank">libutil-2.23.so</a><br>00007ffa41ea2000   2044K ----- <a href="http://libutil-2.23.so" target="_blank">libutil-2.23.so</a><br>00007ffa420a1000      4K r---- <a href="http://libutil-2.23.so" target="_blank">libutil-2.23.so</a><br>00007ffa420a2000      4K rw--- <a href="http://libutil-2.23.so" target="_blank">libutil-2.23.so</a><br>00007ffa420a3000    100K r-x-- libz.so.1.2.8<br>00007ffa420bc000   2044K ----- libz.so.1.2.8<br>00007ffa422bb000      4K r---- libz.so.1.2.8<br>00007ffa422bc000      4K rw--- libz.so.1.2.8<br>00007ffa422bd000   3016K r-x-- libpython2.7.so.1.0<br>00007ffa425af000   2048K ----- libpython2.7.so.1.0<br>00007ffa427af000      8K r---- libpython2.7.so.1.0<br>00007ffa427b1000    476K rw--- libpython2.7.so.1.0<br>00007ffa42828000    140K rw---   [ anon ]<br>00007ffa4284b000     72K r-x-- libmod-python.so<br>00007ffa4285d000   2044K ----- libmod-python.so<br>00007ffa42a5c000      4K r---- libmod-python.so<br>00007ffa42a5d000      4K rw--- libmod-python.so<br>00007ffa42a5e000      4K rw---   [ anon ]<br>00007ffa42a5f000     32K r-x-- libwrap.so.0.7.6<br>00007ffa42a67000   2044K ----- libwrap.so.0.7.6<br>00007ffa42c66000      4K r---- libwrap.so.0.7.6<br>00007ffa42c67000      4K rw--- libwrap.so.0.7.6<br>00007ffa42c68000      4K rw---   [ anon ]<br>00007ffa42c69000     88K r-x-- libnet.so.1.7.0<br>00007ffa42c7f000   2044K ----- libnet.so.1.7.0<br>00007ffa42e7e000      4K r---- libnet.so.1.7.0<br>00007ffa42e7f000      4K rw--- libnet.so.1.7.0<br>00007ffa42e80000      8K rw---   [ anon ]<br>00007ffa42e82000    132K r-x-- libafsocket.so<br>00007ffa42ea3000   2048K ----- libafsocket.so<br>00007ffa430a3000      4K r---- libafsocket.so<br>00007ffa430a4000      8K rw--- libafsocket.so<br>00007ffa430a6000      4K rw---   [ anon ]<br>00007ffa430a7000    108K r-x-- libaffile.so<br>00007ffa430c2000   2044K ----- libaffile.so<br>00007ffa432c1000      4K r---- libaffile.so<br>00007ffa432c2000      4K rw--- libaffile.so<br>00007ffa432c3000      4K rw---   [ anon ]<br>00007ffa432c4000      8K r-x-- libconfgen.so<br>00007ffa432c6000   2044K ----- libconfgen.so<br>00007ffa434c5000      4K r---- libconfgen.so<br>00007ffa434c6000      4K rw--- libconfgen.so<br>00007ffa434c7000     36K r-x-- libbasicfuncs.so<br>00007ffa434d0000   2048K ----- libbasicfuncs.so<br>00007ffa436d0000      4K r---- libbasicfuncs.so<br>00007ffa436d1000      8K rw--- libbasicfuncs.so<br>00007ffa436d3000     32K r-x-- libappmodel.so<br>00007ffa436db000   2048K ----- libappmodel.so<br>00007ffa438db000      4K r---- libappmodel.so<br>00007ffa438dc000      4K rw--- libappmodel.so<br>00007ffa438dd000     40K r-x-- libjson-c.so.2.0.0<br>00007ffa438e7000   2044K ----- libjson-c.so.2.0.0<br>00007ffa43ae6000      4K r---- libjson-c.so.2.0.0<br>00007ffa43ae7000      4K rw--- libjson-c.so.2.0.0<br>00007ffa43ae8000     40K r-x-- libjson-plugin.so<br>00007ffa43af2000   2048K ----- libjson-plugin.so<br>00007ffa43cf2000      4K r---- libjson-plugin.so<br>00007ffa43cf3000      4K rw--- libjson-plugin.so<br>00007ffa43cf4000     44K r-x-- <a href="http://libnss_nis-2.23.so" target="_blank">libnss_nis-2.23.so</a><br>00007ffa43cff000   2044K ----- <a href="http://libnss_nis-2.23.so" target="_blank">libnss_nis-2.23.so</a><br>00007ffa43efe000      4K r---- <a href="http://libnss_nis-2.23.so" target="_blank">libnss_nis-2.23.so</a><br>00007ffa43eff000      4K rw--- <a href="http://libnss_nis-2.23.so" target="_blank">libnss_nis-2.23.so</a><br>00007ffa43f00000     88K r-x-- <a href="http://libnsl-2.23.so" target="_blank">libnsl-2.23.so</a><br>00007ffa43f16000   2044K ----- <a href="http://libnsl-2.23.so" target="_blank">libnsl-2.23.so</a><br>00007ffa44115000      4K r---- <a href="http://libnsl-2.23.so" target="_blank">libnsl-2.23.so</a><br>00007ffa44116000      4K rw--- <a href="http://libnsl-2.23.so" target="_blank">libnsl-2.23.so</a><br>00007ffa44117000      8K rw---   [ anon ]<br>00007ffa44119000     32K r-x-- <a href="http://libnss_compat-2.23.so" target="_blank">libnss_compat-2.23.so</a><br>00007ffa44121000   2044K ----- <a href="http://libnss_compat-2.23.so" target="_blank">libnss_compat-2.23.so</a><br>00007ffa44320000      4K r---- <a href="http://libnss_compat-2.23.so" target="_blank">libnss_compat-2.23.so</a><br>00007ffa44321000      4K rw--- <a href="http://libnss_compat-2.23.so" target="_blank">libnss_compat-2.23.so</a><br>00007ffa44322000     44K r-x-- <a href="http://libnss_files-2.23.so" target="_blank">libnss_files-2.23.so</a><br>00007ffa4432d000   2044K ----- <a href="http://libnss_files-2.23.so" target="_blank">libnss_files-2.23.so</a><br>00007ffa4452c000      4K r---- <a href="http://libnss_files-2.23.so" target="_blank">libnss_files-2.23.so</a><br>00007ffa4452d000      4K rw--- <a href="http://libnss_files-2.23.so" target="_blank">libnss_files-2.23.so</a><br>00007ffa4452e000     24K rw---   [ anon ]<br>00007ffa44534000     72K r-x-- libgpg-error.so.0.17.0<br>00007ffa44546000   2048K ----- libgpg-error.so.0.17.0<br>00007ffa44746000      4K r---- libgpg-error.so.0.17.0<br>00007ffa44747000      4K rw--- libgpg-error.so.0.17.0<br>00007ffa44748000    864K r-x-- libgcrypt.so.20.0.5<br>00007ffa44820000   2044K ----- libgcrypt.so.20.0.5<br>00007ffa44a1f000      4K r---- libgcrypt.so.20.0.5<br>00007ffa44a20000     32K rw--- libgcrypt.so.20.0.5<br>00007ffa44a28000      4K rw---   [ anon ]<br>00007ffa44a29000    132K r-x-- liblzma.so.5.0.0<br>00007ffa44a4a000   2044K ----- liblzma.so.5.0.0<br>00007ffa44c49000      4K r---- liblzma.so.5.0.0<br>00007ffa44c4a000      4K rw--- liblzma.so.5.0.0<br>00007ffa44c4b000    124K r-x-- libselinux.so.1<br>00007ffa44c6a000   2044K ----- libselinux.so.1<br>00007ffa44e69000      4K r---- libselinux.so.1<br>00007ffa44e6a000      4K rw--- libselinux.so.1<br>00007ffa44e6b000      8K rw---   [ anon ]<br>00007ffa44e6d000   2152K r-x-- libcrypto.so.1.0.0<br>00007ffa45087000   2044K ----- libcrypto.so.1.0.0<br>00007ffa45286000    112K r---- libcrypto.so.1.0.0<br>00007ffa452a2000     48K rw--- libcrypto.so.1.0.0<br>00007ffa452ae000     12K rw---   [ anon ]<br>00007ffa452b1000    376K r-x-- libssl.so.1.0.0<br>00007ffa4530f000   2048K ----- libssl.so.1.0.0<br>00007ffa4550f000     16K r---- libssl.so.1.0.0<br>00007ffa45513000     28K rw--- libssl.so.1.0.0<br>00007ffa4551a000     12K r-x-- libsecret-storage.so.0.0.0<br>00007ffa4551d000   2044K ----- libsecret-storage.so.0.0.0<br>00007ffa4571c000      4K r---- libsecret-storage.so.0.0.0<br>00007ffa4571d000      4K rw--- libsecret-storage.so.0.0.0<br>00007ffa4571e000     12K r-x-- <a href="http://libdl-2.23.so" target="_blank">libdl-2.23.so</a><br>00007ffa45721000   2044K ----- <a href="http://libdl-2.23.so" target="_blank">libdl-2.23.so</a><br>00007ffa45920000      4K r---- <a href="http://libdl-2.23.so" target="_blank">libdl-2.23.so</a><br>00007ffa45921000      4K rw--- <a href="http://libdl-2.23.so" target="_blank">libdl-2.23.so</a><br>00007ffa45922000    440K r-x-- libpcre.so.3.13.2<br>00007ffa45990000   2048K ----- libpcre.so.3.13.2<br>00007ffa45b90000      4K r---- libpcre.so.3.13.2<br>00007ffa45b91000      4K rw--- libpcre.so.3.13.2<br>00007ffa45b92000     16K r-x-- libcap.so.2.24<br>00007ffa45b96000   2048K ----- libcap.so.2.24<br>00007ffa45d96000      4K r---- libcap.so.2.24<br>00007ffa45d97000      4K rw--- libcap.so.2.24<br>00007ffa45d98000     12K r-x-- libevtlog-3.17.so.0.0.0<br>00007ffa45d9b000   2048K ----- libevtlog-3.17.so.0.0.0<br>00007ffa45f9b000      4K r---- libevtlog-3.17.so.0.0.0<br>00007ffa45f9c000      4K rw--- libevtlog-3.17.so.0.0.0<br>00007ffa45f9d000      4K r-x-- libgthread-2.0.so.0.4800.2<br>00007ffa45f9e000   2044K ----- libgthread-2.0.so.0.4800.2<br>00007ffa4619d000      4K r---- libgthread-2.0.so.0.4800.2<br>00007ffa4619e000      4K rw--- libgthread-2.0.so.0.4800.2<br>00007ffa4619f000     12K r-x-- libgmodule-2.0.so.0.4800.2<br>00007ffa461a2000   2044K ----- libgmodule-2.0.so.0.4800.2<br>00007ffa463a1000      4K r---- libgmodule-2.0.so.0.4800.2<br>00007ffa463a2000      4K rw--- libgmodule-2.0.so.0.4800.2<br>00007ffa463a3000     28K r-x-- <a href="http://librt-2.23.so" target="_blank">librt-2.23.so</a><br>00007ffa463aa000   2044K ----- <a href="http://librt-2.23.so" target="_blank">librt-2.23.so</a><br>00007ffa465a9000      4K r---- <a href="http://librt-2.23.so" target="_blank">librt-2.23.so</a><br>00007ffa465aa000      4K rw--- <a href="http://librt-2.23.so" target="_blank">librt-2.23.so</a><br>00007ffa465ab000   1792K r-x-- <a href="http://libc-2.23.so" target="_blank">libc-2.23.so</a><br>00007ffa4676b000   2044K ----- <a href="http://libc-2.23.so" target="_blank">libc-2.23.so</a><br>00007ffa4696a000     16K r---- <a href="http://libc-2.23.so" target="_blank">libc-2.23.so</a><br>00007ffa4696e000      8K rw--- <a href="http://libc-2.23.so" target="_blank">libc-2.23.so</a><br>00007ffa46970000     16K rw---   [ anon ]<br>00007ffa46974000     96K r-x-- <a href="http://libpthread-2.23.so" target="_blank">libpthread-2.23.so</a><br>00007ffa4698c000   2044K ----- <a href="http://libpthread-2.23.so" target="_blank">libpthread-2.23.so</a><br>00007ffa46b8b000      4K r---- <a href="http://libpthread-2.23.so" target="_blank">libpthread-2.23.so</a><br>00007ffa46b8c000      4K rw--- <a href="http://libpthread-2.23.so" target="_blank">libpthread-2.23.so</a><br>00007ffa46b8d000     16K rw---   [ anon ]<br>00007ffa46b91000   1084K r-x-- libglib-2.0.so.0.4800.2<br>00007ffa46ca0000   2044K ----- libglib-2.0.so.0.4800.2<br>00007ffa46e9f000      4K r---- libglib-2.0.so.0.4800.2<br>00007ffa46ea0000      4K rw--- libglib-2.0.so.0.4800.2<br>00007ffa46ea1000      4K rw---   [ anon ]<br>00007ffa46ea2000    768K r-x-- libsyslog-ng-3.17.so.0.0.0<br>00007ffa46f62000   2044K ----- libsyslog-ng-3.17.so.0.0.0<br>00007ffa47161000     16K r---- libsyslog-ng-3.17.so.0.0.0<br>00007ffa47165000     24K rw--- libsyslog-ng-3.17.so.0.0.0<br>00007ffa4716b000      8K rw---   [ anon ]<br>00007ffa4716d000    152K r-x-- <a href="http://ld-2.23.so" target="_blank">ld-2.23.so</a><br>00007ffa471ba000    256K rw---   [ anon ]<br>00007ffa472a2000    256K rw---   [ anon ]<br>00007ffa472e2000     64K rwx--   [ anon ]<br>00007ffa472f2000     28K r--s- gconv-modules.cache<br>00007ffa472f9000     36K rw---   [ anon ]<br>00007ffa47302000    512K r-x-- libsystemd.so.0.14.0<br>00007ffa47382000     12K r---- libsystemd.so.0.14.0<br>00007ffa47385000      4K rw--- libsystemd.so.0.14.0<br>00007ffa47386000     20K rw---   [ anon ]<br>00007ffa47390000      8K rw---   [ anon ]<br>00007ffa47392000      4K r---- <a href="http://ld-2.23.so" target="_blank">ld-2.23.so</a><br>00007ffa47393000      4K rw--- <a href="http://ld-2.23.so" target="_blank">ld-2.23.so</a><br>00007ffa47394000      4K rw---   [ anon ]<br>00007ffe81489000    132K rw---   [ stack ]<br>00007ffe81564000      8K r-x--   [ anon ]<br>ffffffffff600000      4K r-x--   [ anon ]<br> total          7226528K<br></div><div><br></div><div><br></div><div>Configuration:</div><div><br></div><div>@version: 3.16.1<br>@module mod-java<br>@include "/etc/syslog-ng/scl.conf"<br><br>options {<br>    chain_hostnames(off);<br>    use-dns(no);<br>    use-fqdn(no);<br>    owner("syslog-ng");<br>    group("stratio");<br>    perm(0640);<br>    stats_freq(0);<br>    bad-hostname("^gconfd$");<br>    flush-lines(100);<br>    log-fifo-size(345000);<br>};<br><br>########################<br># Filters<br>########################<br># Here's come the filter options. With this rules, we can set which<br># message go where.<br><br>filter f_dbg { level(debug); };<br>filter f_info { level(info); };<br>filter f_notice { level(notice); };<br>filter f_warn { level(warn); };<br>filter f_err { level(err); };<br>filter f_crit { level(crit .. emerg); };<br><br>filter f_debug { level(debug) and not facility(auth, authpriv, news, mail); };<br>filter f_error { level(err .. emerg) ; };<br>filter f_messages { level(info,notice,warn) and<br>                    not facility(auth,authpriv,cron,daemon,mail,news); };<br><br>filter f_auth { facility(auth, authpriv) and not filter(f_debug); };<br>filter f_cron { facility(cron) and not filter(f_debug); };<br>filter f_daemon { facility(daemon) and not filter(f_debug); };<br>filter f_kern { facility(kern) and not filter(f_debug); };<br>filter f_lpr { facility(lpr) and not filter(f_debug); };<br>filter f_local { facility(local0, local1, local3, local4, local5,<br>                        local6, local7) and not filter(f_debug); };<br>filter f_mail { facility(mail) and not filter(f_debug); };<br>filter f_news { facility(news) and not filter(f_debug); };<br>filter f_syslog3 { not facility(auth, authpriv, mail) and not filter(f_debug); };<br>filter f_user { facility(user) and not filter(f_debug); };<br><br>filter f_text_only {<br>  not match(<br>    ".*[\\x80-\\xFF].*"<br>    value("MESSAGE")<br>  );<br>};<br><br>###<br># Sources<br><br></div><div>source s_stdout_files { wildcard-file(<br>    base-dir("/var/lib/slaves/")<br>    filename-pattern("stdout")<br>    max-files(3400)<br>    follow-freq(0.5)<br>    monitor-method(poll)<br>    log-fetch-limit(100)<br>    log-iw-size(345000)<br>    flags(no-parse)<br>    recursive(yes)<br>    multi-line-mode(indented)<br>); };<br><br>source s_stderr_files { wildcard-file(<br>    base-dir("/var/lib/slaves/")<br>    filename-pattern("stderr")<br>    max-files(3400)<br>    follow-freq(0.5)<br>    monitor-method(poll)<br>    log-fetch-limit(100)<br>    log-iw-size(345000)<br>    flags(no-parse)<br>    recursive(yes)<br>    multi-line-mode(indented)<br>); };<br><br></div><div><br></div><div>Thanks.<br></div><div><br></div></div></div></div></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">2018-09-06 12:59 GMT+02:00 Nemes, Antal <span dir="ltr"><<a href="mailto:antal.nemes@oneidentity.com" target="_blank">antal.nemes@oneidentity.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>  Hi,</div><div><br></div><div>The same free policy cannot work with _handle_file_deleted, because we cannot free the readers immediately. There is a race between file delete and syslog-ng reading the data. It can happen that one deletes a file before syslog-ng reads all its contents, which would cause message loss. In that case we just signal the deletion event to the reader (log_pipe_notify(&reader->super, NC_FILE_DELETED, NULL); and when the reader reads EOF at a later time, that's when the reader object is freed.</div><div><br></div><div>Can you send the output of pmap <pid of syslog-ng> with the leak? That may give us a clue where to look with the leak.</div><div><br></div><div>Also can you send your configuration, or at least the part about the wildcard filesources? The reproduction might depend on max_files or monitor_method parameter, or maybe other.</div><div><br></div><div>Thanks,</div><div>  Antal<br></div><div><br><b><i></i></b></div></div><div class="m_8361817785521090928HOEnZb"><div class="m_8361817785521090928h5"><br><div class="gmail_quote"><div dir="ltr">On Thu, Sep 6, 2018 at 12:00 PM Jose Angel Santiago <<a href="mailto:jasantiago@stratio.com" target="_blank">jasantiago@stratio.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div dir="ltr"><div dir="ltr">Reviewing your commit I've found out that the method <b><i>_handle_file_deleted</i></b> seems not to free memory when a monitored file has been deleted, according to the changes you made in <i><b>_handler_handler_directory_deleted.</b></i> Could it be the cause of the memory leak? <br></div><div dir="ltr"><br></div><div>Thanks.<br></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">2018-09-06 11:50 GMT+02:00 Jose Angel Santiago <span dir="ltr"><<a href="mailto:jasantiago@stratio.com" target="_blank">jasantiago@stratio.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>Hi,</div><div><br></div><div>I was testing your fix in several environments before replying, unfortunately syslog-ng stills shows a huge RAM consumption in our use of case.<br></div><div><br></div><div>We have two wildcard-file sources defined in our syslog-ng conf file, both of them have the same base-dir reference, but one source has a filename-pattern and the other source has a different one (I think we can't use the same source and several filename-patterns because of the lack of regular expression support). We execute the deletion of obsolete files and folder under base-dir once every 2 days, and we create a lot of new folders and files constantly while using our platform, but the growth of these log files (the ones affected by the filename-pattern) has been pretty low in this test, about 10-20 msgs per second total.<br></div><div><br></div><div>This is some data of the fix test:</div><div><br></div><div>Syslog-ng was consuming 21,7G of RAM with 10600 files affected by the filename-pattern and 20000 folders under base-dir (not a single folder were deleted yet so this is the expected behaviour of syslog-ng, and we find it extremely unaffordable)<br></div><div><br></div><div>One hour later, right before the cleaning process was executed, syslog-ng was consuming 35G of RAM, and it didn't decrease after the cleaning, not even a little, with just 380 files affected by the filename-pattern and 2200 folders under base-dir.</div><div><br></div><div>There is no message in the syslog-agent queue and all the messages are received by the relay (which ingest messages in an elasticsearch)<br></div><div><br></div><div></div><div>For the record, we do noticed a small RAM usage decrease in a previous test in a lab environment when we deleted every folder & file under base-dir (from 870M to 550M).</div><div><br></div><div>It seems syslog-ng wildcard-source is not optimized when it has too handle thousands of folders and filename-patterns under base-dir. Have you ever test the wildcard-source with a use of case similar to ours?</div><div><br></div><div>Can I send you any more information which may help to find out how to optimize it? I wish I can help with the code but I have no idea of C language :-(</div><div><br></div><div>Thanks in advance.<br></div><div><br></div><div><br></div><div><br></div></div><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982HOEnZb"><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982h5"><div class="gmail_extra"><br><div class="gmail_quote">2018-09-04 18:03 GMT+02:00 Nagy, Gábor <span dir="ltr"><<a href="mailto:gabor.nagy@oneidentity.com" target="_blank">gabor.nagy@oneidentity.com</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div dir="ltr"><div dir="ltr">Hello,<div><br></div><div>Thanks for the thorough investigation!</div><div>We've checked it and found a memory leak in directory monitoring.</div><div><br></div><div>I've pushed the fix to my fork and created a merge request about it:</div><div><a href="https://github.com/gaborznagy/syslog-ng/commits/fix-wildcard-memleak" target="_blank">https://github.com/gaborznagy/syslog-ng/commits/fix-wildcard-memleak</a><br></div><div><a href="https://github.com/balabit/syslog-ng/pull/2261" target="_blank">https://github.com/balabit/syslog-ng/pull/2261</a><br></div><div>Can you verify that this fixes your problem, please?<br></div><span><div><br></div><div>> log-fifo-size value is 345000, so I assume it can't be a buffer situation since 345000 messages can't occupy 40-50 GB of memory.</div></span>Well our default log-msg-size is 64kB so if all messages have a size of log-msg-size then it can be around ~21GB when syslog-ng is buffering.<div><br></div><div>Best Regards,</div><div>Gabor</div><div><br></div></div></div></div><br><div class="gmail_quote"><div><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982m_-1929412820416842841h5"><div dir="ltr">On Tue, Sep 4, 2018 at 10:50 AM Jose Angel Santiago <<a href="mailto:jasantiago@stratio.com" target="_blank">jasantiago@stratio.com</a>> wrote:<br></div></div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982m_-1929412820416842841h5"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div>Hi,</div><div><br></div><div>I'm using syslog-ng 3.16.1 with wildcard-file as source (let's call it "syslog-agent), which sends log messages to another syslog-ng acting as a relay.</div><div><br></div><div>I've noticed that syslog-agent instances RAM consumption keeps increasing until they leave no free memory in the cluster (each server has 64G of RAM). In my use case, new folders & files are created constantly under base-dir folder, but every 2 days obsolete folders & files are deleted. I assumed that syslog-ng would free some RAM every time those folders & files are deleted, but it doesn't, not even if I run a syslog-ng-ctl reload operation.<br></div><div><br></div><div>log-fifo-size value is 345000, so I assume it can't be a buffer situation since 345000 messages can't occupy 40-50 GB of memory.<br></div><div><br></div><div>I've performed the following test to reproduce the situation in small scale:<br></div><div><br></div><div>- Launch a syslog-agent with a wildcard-file source reading from "/tmp/test/" base-dir. syslog-agent RAM usage is about 125M.<br></div><div>- Run a simple script to create complex folder hierarchy under /tmp/test and some files with 5000 log messages to read from.</div><div>- Wait until syslog-agent RAM usage gets 1GB</div><div>- Stop script execution and wait until syslog-agent has send all logs to relay.</div><div>- Delete everything under /tmp/test and execute syslog-ng-ctl reload operation</div><div>- 24 hours after, syslog-agent RAM usage still is 1GB</div><div><br></div><div>I've used heaptrack tool as a try to find a memory leak in syslog-ng, you can see in the attached image that iv_list_empty function in iv_list.h file is where most of the RAM usage is.</div><div><br></div><div>How do I get syslog-ng to free RAM? Or is it a memory leak?<br></div><div><br></div><div>Thanks in advance.<br></div><div><br></div><div><br>-- <br><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982m_-1929412820416842841m_8907804634403254099m_3621039169146007147m_-2079808352006165492m_8265598438814446906m_-6856896294115027446m_8183392002242789907gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><br><div><div style="color:rgb(136,136,136);font-size:12.8px"><div dir="ltr"><div dir="ltr"><div style="color:rgb(0,0,0);font-family:"Times New Roman";font-size:12.7273px"><span style="font-size:9pt;font-family:Tahoma;color:rgb(217,217,217);font-weight:700;vertical-align:baseline;white-space:pre-wrap">|</span><span style="font-size:9pt;font-family:Tahoma;color:rgb(102,102,102);vertical-align:baseline;white-space:pre-wrap"> Jose Angel Santiago</span><br></div><div style="color:rgb(0,0,0);font-family:"Times New Roman";font-size:12.7273px"><div style="color:rgb(34,34,34);font-family:arial,sans-serif;font-size:12.7273px"><span><br><p dir="ltr" style="line-height:1.656;margin-top:0pt;margin-bottom:0pt"><a href="http://www.stratio.com/" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/SfSwo77PKD8TgM6em8B7mlcqOV9_N-AoAASRBMbZ3PFYgdFIibiMdr3zR_AZbMScWJOeRN7me-R_nK6vn1rnHSbApJVGfEjendjUa7LiGewC_fPGilVYciUS7E9v4mpKpl--caud" style="border:medium none" alt="Logo_signature2.png" width="96" height="22"></span></a></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">Vía de las dos Castillas, 33, Ática 4, 3ª Planta</span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">28224 Pozuelo de Alarcón, Madrid, Spain </span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);vertical-align:baseline;white-space:pre-wrap"><a href="tel:+34%20918%2028%2064%2073" value="+34918286473" target="_blank">+34 918 286 473</a> | </span><a href="http://www.stratio.com" target="_blank"><span style="font-size:8pt;font-family:Tahoma;color:rgb(17,85,204);vertical-align:baseline;white-space:pre-wrap">www.stratio.com</span></a></p><a href="https://twitter.com/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/hOlHqJK94rZ7nBo9gzYKhLiwgogX1sgXV81pPDpAHHyRVeCjHxw0THNCq19zhcZalZiYeVYt9r4T_7LhoeLMxN1eTMnG46IfttV83WkTGC3jL1z04craZ8mmUn9hNnxDTIgh4_cT" style="border:medium none" width="20" height="20"></span></a><a href="https://www.linkedin.com/company/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh6.googleusercontent.com/xs2vZh2SrmNnOaJO9i07vQzFNoghAaZytG_Zh09D9-ESjgOv5LHzLrbVNOFa-e3g5FYdmeg-kj6Ur6hID_h1joaSCdsHETfxTNqNSXan5nxBdGtmxq6NMWoh6puraVK1JGPxzhzX" style="border:medium none" width="20" height="20"></span></a><a href="https://www.youtube.com/c/StratioBD" target="_blank"><span style="font-size:8pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;font-style:italic;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/GdwY5Qtr3qEaHfNZszPc0lGx52_bfO00F-ge1MzYQPNLQmXf2jO4z2kvWwIEKi2swQ-IfLjNvpS7o4wR0nwNhnhOFd7zZ1zJDtFVZLkp52XyaM0GpEXySD2iLbWq-dw0cmXUe7Jj" style="border:medium none" width="20" height="20"></span></a></span><br></div></div></div></div></div></div></div></div></div></div></div></div></div>
</div></div></div></div></div></div>
______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
</blockquote></div>
<br>______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
<br></blockquote></div><br><br clear="all"><br>-- <br><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982m_-1929412820416842841gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><br><div><div style="color:rgb(136,136,136);font-size:12.8000001907349px"><div dir="ltr"><div dir="ltr"><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><span style="font-size:9pt;font-family:Tahoma;color:rgb(217,217,217);font-weight:700;vertical-align:baseline;white-space:pre-wrap">|</span><span style="font-size:9pt;font-family:Tahoma;color:rgb(102,102,102);vertical-align:baseline;white-space:pre-wrap"> Jose Angel Santiago</span><br></div><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><div style="color:rgb(34,34,34);font-family:arial,sans-serif;font-size:12.7272720336914px"><span><br><p dir="ltr" style="line-height:1.656;margin-top:0pt;margin-bottom:0pt"><a href="http://www.stratio.com/" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/SfSwo77PKD8TgM6em8B7mlcqOV9_N-AoAASRBMbZ3PFYgdFIibiMdr3zR_AZbMScWJOeRN7me-R_nK6vn1rnHSbApJVGfEjendjUa7LiGewC_fPGilVYciUS7E9v4mpKpl--caud" style="border:none" alt="Logo_signature2.png" width="96" height="22"></span></a></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">Vía de las dos Castillas, 33, Ática 4, 3ª Planta</span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">28224 Pozuelo de Alarcón, Madrid, Spain </span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);vertical-align:baseline;white-space:pre-wrap"><a href="tel:+34%20918%2028%2064%2073" value="+34918286473" target="_blank">+34 918 286 473</a> | </span><a href="http://www.stratio.com" target="_blank"><span style="font-size:8pt;font-family:Tahoma;color:rgb(17,85,204);vertical-align:baseline;white-space:pre-wrap">www.stratio.com</span></a></p><a href="https://twitter.com/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/hOlHqJK94rZ7nBo9gzYKhLiwgogX1sgXV81pPDpAHHyRVeCjHxw0THNCq19zhcZalZiYeVYt9r4T_7LhoeLMxN1eTMnG46IfttV83WkTGC3jL1z04craZ8mmUn9hNnxDTIgh4_cT" style="border:none" width="20" height="20"></span></a><a href="https://www.linkedin.com/company/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh6.googleusercontent.com/xs2vZh2SrmNnOaJO9i07vQzFNoghAaZytG_Zh09D9-ESjgOv5LHzLrbVNOFa-e3g5FYdmeg-kj6Ur6hID_h1joaSCdsHETfxTNqNSXan5nxBdGtmxq6NMWoh6puraVK1JGPxzhzX" style="border:none" width="20" height="20"></span></a><a href="https://www.youtube.com/c/StratioBD" target="_blank"><span style="font-size:8pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;font-style:italic;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/GdwY5Qtr3qEaHfNZszPc0lGx52_bfO00F-ge1MzYQPNLQmXf2jO4z2kvWwIEKi2swQ-IfLjNvpS7o4wR0nwNhnhOFd7zZ1zJDtFVZLkp52XyaM0GpEXySD2iLbWq-dw0cmXUe7Jj" style="border:none" width="20" height="20"></span></a></span><br></div></div></div></div></div></div></div></div></div></div></div></div></div>
</div>
</div></div></blockquote></div><br><br clear="all"><br>-- <br><div class="m_8361817785521090928m_1284247062400173032m_8879115122149750982gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><br><div><div style="color:rgb(136,136,136);font-size:12.8000001907349px"><div dir="ltr"><div dir="ltr"><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><span style="font-size:9pt;font-family:Tahoma;color:rgb(217,217,217);font-weight:700;vertical-align:baseline;white-space:pre-wrap">|</span><span style="font-size:9pt;font-family:Tahoma;color:rgb(102,102,102);vertical-align:baseline;white-space:pre-wrap"> Jose Angel Santiago</span><br></div><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><div style="color:rgb(34,34,34);font-family:arial,sans-serif;font-size:12.7272720336914px"><span><br><p dir="ltr" style="line-height:1.656;margin-top:0pt;margin-bottom:0pt"><a href="http://www.stratio.com/" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/SfSwo77PKD8TgM6em8B7mlcqOV9_N-AoAASRBMbZ3PFYgdFIibiMdr3zR_AZbMScWJOeRN7me-R_nK6vn1rnHSbApJVGfEjendjUa7LiGewC_fPGilVYciUS7E9v4mpKpl--caud" style="border:none" alt="Logo_signature2.png" width="96" height="22"></span></a></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">Vía de las dos Castillas, 33, Ática 4, 3ª Planta</span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">28224 Pozuelo de Alarcón, Madrid, Spain </span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);vertical-align:baseline;white-space:pre-wrap"><a href="tel:+34%20918%2028%2064%2073" value="+34918286473" target="_blank">+34 918 286 473</a> | </span><a href="http://www.stratio.com" target="_blank"><span style="font-size:8pt;font-family:Tahoma;color:rgb(17,85,204);vertical-align:baseline;white-space:pre-wrap">www.stratio.com</span></a></p><a href="https://twitter.com/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/hOlHqJK94rZ7nBo9gzYKhLiwgogX1sgXV81pPDpAHHyRVeCjHxw0THNCq19zhcZalZiYeVYt9r4T_7LhoeLMxN1eTMnG46IfttV83WkTGC3jL1z04craZ8mmUn9hNnxDTIgh4_cT" style="border:none" width="20" height="20"></span></a><a href="https://www.linkedin.com/company/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh6.googleusercontent.com/xs2vZh2SrmNnOaJO9i07vQzFNoghAaZytG_Zh09D9-ESjgOv5LHzLrbVNOFa-e3g5FYdmeg-kj6Ur6hID_h1joaSCdsHETfxTNqNSXan5nxBdGtmxq6NMWoh6puraVK1JGPxzhzX" style="border:none" width="20" height="20"></span></a><a href="https://www.youtube.com/c/StratioBD" target="_blank"><span style="font-size:8pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;font-style:italic;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/GdwY5Qtr3qEaHfNZszPc0lGx52_bfO00F-ge1MzYQPNLQmXf2jO4z2kvWwIEKi2swQ-IfLjNvpS7o4wR0nwNhnhOFd7zZ1zJDtFVZLkp52XyaM0GpEXySD2iLbWq-dw0cmXUe7Jj" style="border:none" width="20" height="20"></span></a></span><br></div></div></div></div></div></div></div></div></div></div></div></div></div>
</div>
______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
</blockquote></div>
</div></div><br>______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
<br></blockquote></div><br><br clear="all"><br>-- <br><div class="m_8361817785521090928gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><br><div><div style="color:rgb(136,136,136);font-size:12.8000001907349px"><div dir="ltr"><div dir="ltr"><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><span style="font-size:9pt;font-family:Tahoma;color:rgb(217,217,217);font-weight:700;vertical-align:baseline;white-space:pre-wrap">|</span><span style="font-size:9pt;font-family:Tahoma;color:rgb(102,102,102);vertical-align:baseline;white-space:pre-wrap"> Jose Angel Santiago</span><br></div><div style="color:rgb(0,0,0);font-family:'Times New Roman';font-size:12.7272720336914px"><div style="color:rgb(34,34,34);font-family:arial,sans-serif;font-size:12.7272720336914px"><span><br><p dir="ltr" style="line-height:1.656;margin-top:0pt;margin-bottom:0pt"><a href="http://www.stratio.com/" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/SfSwo77PKD8TgM6em8B7mlcqOV9_N-AoAASRBMbZ3PFYgdFIibiMdr3zR_AZbMScWJOeRN7me-R_nK6vn1rnHSbApJVGfEjendjUa7LiGewC_fPGilVYciUS7E9v4mpKpl--caud" width="96" height="22" style="border:none" alt="Logo_signature2.png"></span></a></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">Vía de las dos Castillas, 33, Ática 4, 3ª Planta</span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);background-color:transparent;vertical-align:baseline;white-space:pre-wrap">28224 Pozuelo de Alarcón, Madrid, Spain </span></p><p dir="ltr" style="line-height:1.2;margin-top:0pt;margin-bottom:0pt"><span style="font-size:8pt;font-family:Tahoma;color:rgb(153,153,153);vertical-align:baseline;white-space:pre-wrap"><a href="tel:+34%20918%2028%2064%2073" value="+34918286473" target="_blank">+34 918 286 473</a> | </span><a href="http://www.stratio.com" target="_blank"><span style="font-size:8pt;font-family:Tahoma;color:rgb(17,85,204);vertical-align:baseline;white-space:pre-wrap">www.stratio.com</span></a></p><a href="https://twitter.com/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/hOlHqJK94rZ7nBo9gzYKhLiwgogX1sgXV81pPDpAHHyRVeCjHxw0THNCq19zhcZalZiYeVYt9r4T_7LhoeLMxN1eTMnG46IfttV83WkTGC3jL1z04craZ8mmUn9hNnxDTIgh4_cT" width="20" height="20" style="border:none"></span></a><a href="https://www.linkedin.com/company/stratiobd" target="_blank"><span style="font-size:10pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh6.googleusercontent.com/xs2vZh2SrmNnOaJO9i07vQzFNoghAaZytG_Zh09D9-ESjgOv5LHzLrbVNOFa-e3g5FYdmeg-kj6Ur6hID_h1joaSCdsHETfxTNqNSXan5nxBdGtmxq6NMWoh6puraVK1JGPxzhzX" width="20" height="20" style="border:none"></span></a><a href="https://www.youtube.com/c/StratioBD" target="_blank"><span style="font-size:8pt;font-family:Arial;color:rgb(17,85,204);background-color:transparent;font-style:italic;vertical-align:baseline;white-space:pre-wrap"><img src="https://lh3.googleusercontent.com/GdwY5Qtr3qEaHfNZszPc0lGx52_bfO00F-ge1MzYQPNLQmXf2jO4z2kvWwIEKi2swQ-IfLjNvpS7o4wR0nwNhnhOFd7zZ1zJDtFVZLkp52XyaM0GpEXySD2iLbWq-dw0cmXUe7Jj" width="20" height="20" style="border:none"></span></a></span><br></div></div></div></div></div></div></div></div></div></div></div></div></div>
</div>
______________________________________________________________________________<br>
Member info: <a href="https://lists.balabit.hu/mailman/listinfo/syslog-ng" rel="noreferrer" target="_blank">https://lists.balabit.hu/mailman/listinfo/syslog-ng</a><br>
Documentation: <a href="http://www.balabit.com/support/documentation/?product=syslog-ng" rel="noreferrer" target="_blank">http://www.balabit.com/support/documentation/?product=syslog-ng</a><br>
FAQ: <a href="http://www.balabit.com/wiki/syslog-ng-faq" rel="noreferrer" target="_blank">http://www.balabit.com/wiki/syslog-ng-faq</a><br>
<br>
</blockquote></div>