Como dice Spore, hay que cambiar el comportamiento-byte del tile en cuestión. Pero cabe destacar, que el comportamiento que debes poner es el 62, 63, 64 o 65 para lograr el efecto que planteas en las imágenes (pondrás uno de esos valores dependiendo de la dirección en la que quieras que esté el warp).

Por ejemplo, el 65 es "Arrow down => warp under block". Esto hará que el warp se ejecute si vas hacia abajo (lo que es la salida de una casa de toda la vida o de una cueva). A parte, te mostrará la flecha ("Arrow down").