Asterisk RTP forward elakad

SIP Estension <-> SIP Trunk szolgáltató között felépített hívás esetén a hívás felépülése után ~1 másodperccel elakad a hang ~3-5 másodpercre, aztán szépen megy tovább, onnantól már jó.
Az RTP debug-ban látszik, hogy ez idő alatt csak bejövő RTP csomagok vannak az Asterisk-re, majd egy kötegban csak kimenők, mielőtt elindul rendesen a hang. Ilyenkor a tűzfalon is egyértelműen látszik, hogy nincs kimenő forgalom, csak bejövő.

Az Asterisk NAT mögött van, de minden szükséges port DNAT-olva van. A telefon és s SIP trunk is ugyanazon külső IP felől kapcsolódik a NAT-on keresztül.
SIP Extension <-> SIP Extension között nincs probléma, más kombinációt egyelőre nem tudtam kipróbálni (nincs kéznél 2 vonalas telefon, hogy a trunk-on át összekapcsoljam őket, illetve még várok egy másik szolgáltatói trunk-re)

A szolgáltatót (egyébként UPC) egyelőre nem csesztetném, mert látszólag az Asterisk-en áll meg a csomagküldés.

Asterisk 13.1.0~dfsg-1.1ubuntu4.1 + FreePBX, Extension oldalról egy Cisco 7912-vel, PC-s Zoiper-el, illetve Android-al próbálkozom, az eredmény minden esetben ugyanez.