<div dir="ltr"><div>Thanks Daniel for your answer,</div><div><br>Before upgrade kamailio to latest 5.0.x, I collected more information in 5.0.1 version about reported problem.</div><div>In production environment I have 4 sip proxies that are synchronized via DMQ. The configuration of DMQ  is follow:<br><br></div><div>loadmodule "dmq.so"<br>modparam("dmq", "server_address", "sip:MY_IP_ADDRESS:MY_PORT_ADDRESS")<br>modparam("dmq", "notification_address", "DMQ_HOSTS")<br>modparam("dmq", "multi_notify", 1)<br>modparam("dmq", "num_workers", 4)<br></div><div><br></div><div>Where "DMQ_HOSTS" that is used in the notification_address parameter is the FQDN of the proxies. The FQDN is resolved with the IP of the 4 proxies..</div><div><br></div><div>Let me know if I did something wrong in my configuration.<br></div><div><br></div><div>In scenario that kamailio crashes I had around 7700 user registers and when I restart the proxy it crashes in dmq module, the backtrace of coredump is the following:.</div><div><br></div><div></div><div><br></div><div>Program terminated with signal 11, Segmentation fault.<br>#0  0x00007f8773f0b198 in ?? () from /usr/lib64/kamailio/modules/dmq.so<br>Missing separate debuginfos, use: debuginfo-install kamailio-5.0.1-1.el6.x86_64<br>(gdb) bt full<br>#0  0x00007f8773f0b198 in ?? () from /usr/lib64/kamailio/modules/dmq.so<br>No symbol table info available.<br>#1  0x00007f8773f0ec1a in job_queue_size () from /usr/lib64/kamailio/modules/dmq.so<br>No symbol table info available.<br>#2  0x00007f8773f0e2f4 in add_dmq_job () from /usr/lib64/kamailio/modules/dmq.so<br>No symbol table info available.<br>#3  0x00007f8773f00ec1 in dmq_handle_message () from /usr/lib64/kamailio/modules/dmq.so<br>No symbol table info available.<br>#4  0x00000000004336e1 in do_action ()<br>No symbol table info available.<br>#5  0x000000000044046c in run_actions ()<br>No symbol table info available.<br>#6  0x000000000043364a in do_action ()<br>No symbol table info available.<br>#7  0x000000000044046c in run_actions ()<br>No symbol table info available.<br>#8  0x0000000000440bfe in run_top_route ()<br>No symbol table info available.<br>#9  0x0000000000529ae1 in receive_msg ()<br>No symbol table info available.<br>#10 0x000000000063da5f in udp_rcv_loop ()<br>No symbol table info available.<br>#11 0x000000000042372c in main_loop ()<br>No symbol table info available.<br>#12 0x000000000042aaf9 in main ()<br>No symbol table info available.<br>(gdb)<br></div><div><br></div><div>

Was this problem in dmq identified/fixed?

</div><div><br></div><div>Best regards,<br>Virgílio Cunha</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Em qua., 29 de jan. de 2020 às 13:49, Daniel-Constantin Mierla <<a href="mailto:miconda@gmail.com" target="_blank">miconda@gmail.com</a>> escreveu:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
  
    
  
  <div>
    <p>The CRITICAL log message is a side effect of the crash, not the
      reason of the crash.</p>
    <p>First I suggest you upgrade to at least to latest 5.0.x, because
      there were many fixes after 5.0.1, and what you get may be fixed
      already. Such upgrade requires to deploy new binaries and restart.</p>
    <p>Even better will be to upgrade to a maintained release, such as
      5.3 or 5.2. This may require to change config file and database
      structure, but you have more fixes include.<br>
    </p>
    <p>After upgrade, if you still get the crash, grab the backtrace
      with gdb from the core file -- logs suggest it was generate:</p>
    <p>ALERT: <core> [main.c:747]: handle_sigs(): core was
      generated</p>
    <p>Cheers,<br>
      Daniel<br>
    </p>
    <div>On 29.01.20 11:45, Virgílio Cunha
      wrote:<br>
    </div>
    <blockquote type="cite">
      
      <div dir="ltr">Hello everyone,
        <div><br>
        </div>
        <div>I have a problem in production environment where I have two
          SIP Proxies and both had the same problem but I don't have a
          ideia about root cause that triggered it.</div>
        <div><br>
        </div>
        <div>Unfortunately I don't have  a core dump file because it was
          truncated for don't have space enough in file system. So I
          only have loggings filesin DEBUG level.<br>
        </div>
        <div><br>
        </div>
        <div>The proxy_1 apparently was processing a SUBSCRIBE request
          and the proxy_2 was processing a DMQ messages. Both of proxies
          crashed after appear this line in logging file<br>
          "
          CRITICAL: <core> [core/pass_fd.c:277]: receive_fd(): EOF
          on 10"</div>
        <div><br>
          What could trigger this error? <br>
          <br>
        </div>
        <div><br>
        </div>
        <div>The loggin of proxy_1 is following:</div>
        <div><br>
        </div>
        <div>2020-01-28 05:17:37.058  INFO: <script>: New request
          - M=SUBSCRIBE R=sip:<a href="http://172.29.213.10:5070" target="_blank">172.29.213.10:5070</a> F=<a href="http://sip:9147323151@businesshostedvoice.com:5061" target="_blank">sip:9147323151@businesshostedvoice.com:5061</a>
          T=<a>sip:9147323156@busine</a><br>
          <a href="http://sshostedvoice.com:5061" target="_blank">sshostedvoice.com:5061</a>
          IP=udp:<a href="http://10.159.0.25:5060" target="_blank">10.159.0.25:5060</a> ID=<a href="mailto:0gQAAC8WAAACBAAALxYAAJmTUrVeFdEMSouFoeDnzdKbnqZHYs2tiFs%2BOkphqx4p@10.159.0.25" target="_blank">0gQAAC8WAAACBAAALxYAAJmTUrVeFdEMSouFoeDnzdKbnqZHYs2tiFs+Okphqx4p@10.159.0.25</a>
          CSeq=20830<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 74) called from core:
          core/usr_avp.c: create_avp(175)<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 80) returns address 0x7f3fb4365df8
          frag. 0x7f3fb4365dc0<br>
          (size=80) on 1 -th hit<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 52) called from core:
          core/usr_avp.c: create_avp(175)<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 56) returns address 0x7f3fb7c8ef08
          frag. 0x7f3fb7c8eed0<br>
          (size=56) on 1 -th hit<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 67) called from core:
          core/usr_avp.c: create_avp(175)<br>
          2020-01-28 05:17:37.058  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 72) returns address 0x7f3fd2bc8928
          frag. 0x7f3fd2bc88f0<br>
          (size=72) on 1 -th hit<br>
          2020-01-28 05:17:37.059  INFO: <script>: Applying
          rewrite rules on '9147323156' using dialplan 'DB_MANIPS' -
          R=sip:<a href="http://172.29.213.10:5070" target="_blank">172.29.213.10:5070</a>
          ID=0gQAAC8WAAACBAAALxYAAJmT<br>
          <a href="mailto:UrVeFdEMSouFoeDnzdKbnqZHYs2tiFs%2BOkphqx4p@10.159.0.25" target="_blank">UrVeFdEMSouFoeDnzdKbnqZHYs2tiFs+Okphqx4p@10.159.0.25</a>
          UA='Grandstream GXP2140 1.0.9.135'<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dialplan.c:208]:
          dp_get_ivalue(): searching 4<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dialplan.c:216]:
          dp_get_ivalue(): dpid is 1 from pv argument<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dialplan.c:225]:
          dp_get_svalue(): searching 4<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dialplan.c:313]:
          dp_translate_f(): input is 9147323156<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dp_repl.c:606]:
          translate(): regex operator testing over [9147323156]<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dp_repl.c:606]:
          translate(): regex operator testing over [9147323156]<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dp_repl.c:606]:
          translate(): regex operator testing over [9147323156]<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dp_repl.c:676]:
          translate(): no matching rule<br>
          2020-01-28 05:17:37.059  DEBUG: dialplan [dialplan.c:318]:
          dp_translate_f(): could not translate 9147323156 with dpid 1<br>
          2020-01-28 05:17:37.059  INFO: <script>: No matching
          rewrite rules for '9147323156' found - R=sip:<a href="http://172.29.213.10:5070" target="_blank">172.29.213.10:5070</a>
          ID=0gQAAC8WAAACBAAALxYAAJmTUrVeFdEMSouFoeDnz<br>
          <a href="mailto:dKbnqZHYs2tiFs%2BOkphqx4p@10.159.0.25" target="_blank">dKbnqZHYs2tiFs+Okphqx4p@10.159.0.25</a>
          UA='Grandstream GXP2140 1.0.9.135'<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 70) called from core:
          core/usr_avp.c: create_avp(175)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f3f97a41000, 72) returns address 0x7f3fa7f6f028
          frag. 0x7f3fa7f6eff0<br>
          (size=72) on 1 -th hit<br>
          2020-01-28 05:17:37.059  INFO: <script>: Clean AVPs that
          contains rewrite rule from method ROUTE_APPLY_REWRITE_RULE
          ID=0gQAAC8WAAACBAAALxYAAJmTUrVeFdEMSouFoeDnzd<br>
          <a href="mailto:KbnqZHYs2tiFs%2BOkphqx4p@10.159.0.25" target="_blank">KbnqZHYs2tiFs+Okphqx4p@10.159.0.25</a><br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f3f97a41000,
          0x7f3fb4365df8), called from core: core/usr_avp.c: destroy_a<br>
          vp(592)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f3fb4365dc0 alloc'ed from core: core/usr_avp.c: create_avp<br>
          (175)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f3f97a41000,
          0x7f3fb7c8ef08), called from core: core/usr_avp.c:
          destroy_avp(592)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f3fb7c8eed0 alloc'ed from core: core/usr_avp.c:
          create_avp(175)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f3f97a41000,
          0x7f3fd2bc8928), called from core: core/usr_avp.c:
          destroy_avp(592)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f3fd2bc88f0 alloc'ed from core: core/usr_avp.c:
          create_avp(175)<br>
        </div>
        <div>2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f40d8531010, 247) called from db_postgres:
          km_dbase.c: db_postgres_submit_query(171)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f40d8531010, 248) returns address 0x7f40d8aac7d8
          frag. 0x7f40d8aac7a0 (size=376) on 1 -th hit<br>
          2020-01-28 05:17:37.059  CRITICAL: <core>
          [core/pass_fd.c:277]: receive_fd(): EOF on 10<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/tcp_main.c:3456]: handle_ser_child(): dead child 2, pid
          28150 (shutting down?)<br>
          2020-01-28 05:17:37.059  DEBUG: <core>
          [core/io_wait.h:602]: io_watch_del(): DBG: io_watch_del
          (0xa52ba0, 10, -1, 0x0) fd_no=61 called<br>
          2020-01-28 05:17:37.059  ALERT: <core> [main.c:744]:
          handle_sigs(): child process 28150 exited by a signal 11<br>
          2020-01-28 05:17:37.059  ALERT: <core> [main.c:747]:
          handle_sigs(): core was generated<br>
          2020-01-28 05:17:37.059  INFO: <core> [main.c:759]:
          handle_sigs(): terminating due to SIGCHLD<br>
          2020-01-28 05:17:37.059  DEBUG: <core> [main.c:761]:
          handle_sigs(): terminating due to SIGCHLD<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5260600,
          used+overhead=7067400, free=11806968<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5260600,
          used+overhead=7067400, free=11806968<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: max used
          (+overhead)= 7144424<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5111688,
          used+overhead=6932632, free=11941736<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: max used
          (+overhead)= 7144424<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: dumping all
          alloc'ed. fragments:<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:      0. N
           address=0x7f40d856a6d8 frag=0x7f40d856a6a0 size=1024 used=1<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:           alloc'd
          from core: core/str_hash.h: str_hash_alloc(59)<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:          start
          check=f0f0f0f0, end check= c0c0c0c0, abcdefed<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
        </div>
        <div>2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5260600,
          used+overhead=7067400, free=11806968<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: max used
          (+overhead)= 7144424<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5260600,
          used+overhead=7067400, free=11806968<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: max used
          (+overhead)= 7144424<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: dumping all
          alloc'ed. fragments:<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:      0. N
           address=0x7f40d856a6d8 frag=0x7f40d856a6a0 size=1024 used=1<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:           alloc'd
          from core: core/str_hash.h: str_hash_alloc(59)<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:          start
          check=f0f0f0f0, end check= c0c0c0c0, abcdefed<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:      1. N
           address=0x7f40d856ab40 frag=0x7f40d856ab08 size=256 used=1<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:           alloc'd
          from core: core/str_hash.h: str_hash_alloc(59)<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:          start
          check=f0f0f0f0, end check= c0c0c0c0, abcdefed<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:      2. N
           address=0x7f40d856aca8 frag=0x7f40d856ac70 size=176 used=1<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status:           alloc'd
          from core: core/counters.c: cnt_hash_add(332)<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: (0x7f40d8531010):<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5103784,
          used+overhead=6908920, free=11965448<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: heap size= 18874368<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: used= 5103784,
          used+overhead=6908920, free=11965448<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: max used
          (+overhead)= 7144424<br>
          2020-01-28 05:17:37.060  DEBUG: qm_status: dumping all
          alloc'ed. fragments:<br>
        </div>
        <div><br>
        </div>
        <div><br>
        </div>
        <div> The loggin of proxy_2 is following:<br>
        </div>
        <div><br>
        </div>
        <div>2020-01-28 05:57:21.077  DEBUG: <core>
          [core/parser/msg_parser.c:171]: get_hdr_field(): <To>
          [74]; uri=[<a href="http://sip:usrloc@172.29.217.7:5060" target="_blank">sip:usrloc@172.29.217.7:5060</a>]<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/parser/msg_parser.c:172]: get_hdr_field(): to body [<<a href="http://sip:usrloc@172.29.217.7:5060" target="_blank">sip:usrloc@172.29.217.7:5060</a>>]<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) called from core:
          core/parser/msg_parser.c: parse_he<br>
          aders(319)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) returns address 0x7f5ae499f980
          frag. 0x7f5ae499f948<br>
          (size=64) on 1 -th hit<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) called from core:
          core/parser/msg_parser.c: parse_he<br>
          aders(319)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) returns address 0x7f5ae499bcf8
          frag. 0x7f5ae499bcc0<br>
          (size=64) on 1 -th hit<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 48) called from core:
          core/parser/msg_parser.c: get_hdr_<br>
          field(135)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 48) returns address 0x7f5ae4916f90
          frag. 0x7f5ae4916f58<br>
          (size=48) on 1 -th hit<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/parser/msg_parser.c:152]: get_hdr_field(): cseq
          <CSeq>: <10> <KDMQ><br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) called from core:
          core/parser/msg_parser.c: parse_headers(319)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 64) returns address 0x7f5ae499e520
          frag. 0x7f5ae499e4e8 (size=64) on 1 -th hit<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/receive.c:191]: receive_msg(): --- received sip message
          - reply - call-id: [<a href="mailto:3d48b3aa4ec7e11f-8255@172.29.213.8" target="_blank">3d48b3aa4ec7e11f-8255@172.29.213.8</a>]
          - cseq: [10 KDMQ]<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:368]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 936) called from core:
          core/rvalue.c: rval_new_empty(224)<br>
        </div>
        <div>2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:413]: qm_malloc():
          qm_malloc(0x7f5ae4367010, 936) returns address 0x7f5ae48e1340
          frag. 0x7f5ae48e1308 (size=1736) on 1 -th hit<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae48e1340), called from core: core/rvalue.c:
          rval_destroy(129)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae48e1308 alloc'ed from core: core/rvalue.c:
          rval_new_empty(224)<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:1001]:
          t_check_msg(): msg id=190277 global id=190276 T
          start=0xffffffffffffffff<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:879]:
          t_reply_matching(): t_reply_matching: hash 26335 label 0
          branch 0<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:933]:
          t_reply_matching(): reply matched (T=0x7f59eef5b310)!<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:1070]:
          t_check_msg(): msg id=190277 global id=190277 T
          end=0x7f59eef5b310<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:1001]:
          t_check_msg(): msg id=190277 global id=190277 T
          start=0x7f59eef5b310<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_lookup.c:1073]:
          t_check_msg(): T already found!<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_reply.c:2147]:
          reply_received(): org. status uas=0, uac[0]=0 local=2
          is_invite=0)<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_reply.c:1220]:
          t_should_relay_response():
          ->>>>>>>>> T_code=0, new_code=200<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_reply.c:2021]:
          local_reply(): branch=0, save=0, winner=0<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_reply.c:2060]:
          local_reply(): local transaction completed 200/0 (totag retr:
          0/1024)<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_hooks.c:258]:
          run_trans_callbacks_internal(): DBG: trans=0x7f59eef5b310,
          callback type 1024, id 0 entered<br>
          2020-01-28 05:57:21.077  DEBUG: dmq [dmq_funcs.c:61]:
          dmq_tm_callback(): dmq_tm_callback start<br>
          2020-01-28 05:57:21.077  DEBUG: dmq_usrloc
          [usrloc_sync.c:583]: usrloc_dmq_resp_callback_f(): dmq
          response callback triggered [0x7f5ae4a373c8 200 (nil)]<br>
          2020-01-28 05:57:21.077  DEBUG: dmq [dmq_funcs.c:67]:
          dmq_tm_callback(): dmq_tm_callback done<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f59a3877000,
          0x7f59f9b93080), called from dmq: dmqnode.c:
          shm_free_node(306)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f59f9b93048 alloc'ed from dmq: ../../core/ut.h:
          shm_str_dup(723)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f59a3877000,
          0x7f59c6055a40), called from dmq: dmqnode.c:
          shm_free_node(307)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f59c6055a08 alloc'ed from dmq: dmqnode.c: shm_dup_node(279)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f59a3877000,
          0x7f59c4a46a48), called from dmq: dmq_funcs.c:
          dmq_tm_callback(69)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f59c4a46a10 alloc'ed from dmq: dmq_funcs.c:
          dmq_send_message(212)<br>
          2020-01-28 05:57:21.077  DEBUG: tm [t_reply.c:1578]:
          cleanup_uac_timers(): RETR/FR timers reset<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/receive.c:348]: receive_msg(): reply-route executed in:
          143 usec<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/usr_avp.c:631]: destroy_avp_list(): destroying list
          (nil)<br>
          2020-01-28 05:57:21.077  DEBUG: <core>
          [core/xavp.c:446]: xavp_destroy_list(): destroying xavp list
          (nil)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/receive.c:368]: receive_msg(): cleaning up<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae499e670), called from core: core/parser/parse_via.c:
          free_via_param_list(2725)<br>
        </div>
        <div>2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae499e638 alloc'ed from core: core/parser/parse_via.c:
          parse_via(2511)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae499f830), called from core: core/parser/parse_via.c:
          free_via_list(2738)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae499f7f8 alloc'ed from core: core/parser/msg_parser.c:
          get_hdr_field(116)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae4921478), called from core: core/parser/hf.c:
          free_hdr_field_lst(217)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae4921440 alloc'ed from core: core/parser/msg_parser.c:
          parse_headers(319)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae4924f60), called from core:
          core/parser/parse_addr_spec.c: free_to_params(895)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae4924f28 alloc'ed from core:
          core/parser/parse_addr_spec.c: parse_to_param(285)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae4998e48), called from core:
          core/parser/parse_addr_spec.c: free_to(905)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae4998e10 alloc'ed from core: core/parser/msg_parser.c:
          get_hdr_field(155)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae48ecd18), called from core: core/parser/hf.c:
          free_hdr_field_lst(217)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae48ecce0 alloc'ed from core: core/parser/msg_parser.c:
          parse_headers(319)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae499f980), called from core: core/parser/hf.c:
          free_hdr_field_lst(217)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae499f948 alloc'ed from core: core/parser/msg_parser.c:
          parse_headers(319)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae4916f90), called from core: core/parser/parse_cseq.c:
          free_cseq(99)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae4916f58 alloc'ed from core: core/parser/msg_parser.c:
          get_hdr_field(135)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae499bcf8), called from core: core/parser/hf.c:
          free_hdr_field_lst(217)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae499bcc0 alloc'ed from core: core/parser/msg_parser.c:
          parse_headers(319)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae499e520), called from core: core/parser/hf.c:
          free_hdr_field_lst(217)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae499e4e8 alloc'ed from core: core/parser/msg_parser.c:
          parse_headers(319)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:454]: qm_free(): qm_free(0x7f5ae4367010,
          0x7f5ae4a373c8), called from core: core/receive.c:
          receive_msg(370)<br>
          2020-01-28 05:57:21.078  DEBUG: <core>
          [core/mem/q_malloc.c:489]: qm_free(): qm_free: freeing frag.
          0x7f5ae4a37390 alloc'ed from core: core/receive.c:
          receive_msg(150)<br>
          2020-01-28 05:57:21.117  CRITICAL: <core>
          [core/pass_fd.c:277]: receive_fd(): EOF on 10<br>
          2020-01-28 05:57:21.117  DEBUG: <core>
          [core/tcp_main.c:3456]: handle_ser_child(): dead child 2, pid
          8253 (shutting down?)<br>
          2020-01-28 05:57:21.117  DEBUG: <core>
          [core/io_wait.h:602]: io_watch_del(): DBG: io_watch_del
          (0xa52ba0, 10, -1, 0x0) fd_no=61 called<br>
          2020-01-28 05:57:21.118  ALERT: <core> [main.c:744]:
          handle_sigs(): child process 8253 exited by a signal 11<br>
          2020-01-28 05:57:21.118  ALERT: <core> [main.c:747]:
          handle_sigs(): core was generated<br>
          2020-01-28 05:57:21.118  INFO: <core> [main.c:759]:
          handle_sigs(): terminating due to SIGCHLD<br>
          2020-01-28 05:57:21.118  DEBUG: <core> [main.c:761]:
          handle_sigs(): terminating due to SIGCHLD<br>
          2020-01-28 05:57:21.118  INFO: <core> [main.c:814]:
          sig_usr(): signal 15 received<br>
          2020-01-28 05:57:21.118  DEBUG: <core> [main.c:825]:
          sig_usr(): Memory status (pkg):<br>
        </div>
        <div><br>
        </div>
        <div>Best regards<br>
          Virgílio Cunha</div>
      </div>
      <br>
      <fieldset></fieldset>
      <pre>_______________________________________________
Kamailio (SER) - Users Mailing List
<a href="mailto:sr-users@lists.kamailio.org" target="_blank">sr-users@lists.kamailio.org</a>
<a href="https://lists.kamailio.org/cgi-bin/mailman/listinfo/sr-users" target="_blank">https://lists.kamailio.org/cgi-bin/mailman/listinfo/sr-users</a>
</pre>
    </blockquote>
    <pre cols="72">-- 
Daniel-Constantin Mierla -- <a href="http://www.asipto.com" target="_blank">www.asipto.com</a>
<a href="http://www.twitter.com/miconda" target="_blank">www.twitter.com/miconda</a> -- <a href="http://www.linkedin.com/in/miconda" target="_blank">www.linkedin.com/in/miconda</a>
Kamailio Advanced Training - March 9-11, 2020, Berlin - <a href="http://www.asipto.com" target="_blank">www.asipto.com</a>
Kamailio World Conference - April 27-29, 2020, in Berlin -- <a href="http://www.kamailioworld.com" target="_blank">www.kamailioworld.com</a></pre>
  </div>

</blockquote></div>