Error acceso a Terminal Server desde fuera

Hola a todos:
Dentro de la red el Terminal Server está funcionando fenomenal, y cuando
accedo desde fuera usando el router (ADSL), unas veces funciona y otras
no. Tengo configurado en el TS un puerto diferente al predeterminado, y
tengo un NAT en el router que apunta a éste puerto (18500 o algo así).
Como os digo unas veces funciona y otras no (ultimamente son mas veces las
que no funciona), pero dentro de la red funciona siempre.
A veces cuando me conecto desde fuera se conecta, y pasados unos minutos
me desconcecta y ya no puedo conectarme.
Se os ocurre que puede estar pasando??

Mil gracias a todos como siempre.

Ciao
Antonio