Problema al descargar archivo de audio alojado en servidor externo

Hola. Este es mi primer post, pido disculpas si estuviera duplicado o si no procede aquí, he estado mirando y no he encontrado nada al respecto.
Os explico el problema que tengo, por si creéis que puede tener solución.
Estoy preparando una web que tendrá una página de podcast. El plugin que más me ha convencido (no es definitivo, pero tiene todas las papeletas) es mb.miniAudioPlayer por su interfaz, configuración y por una opción de descarga del audio. Pero los archivos de audio los tengo en otro servidor para que no me ocupen espacio. Bien, a la hora de reproducir se reproduce bien y sin problema, pero al pinchar en descargar me aparece el mensaje «WThe file http://miweb.com/audio/20180504.mp3 doesn’t exist; check the URL». Por más opciones que he mirado en configuración del plugin o en el cpanel por si había que activar algo no he encontrado nada.
Por favor, alguien puede echarme un cable?
Debo decir también que soy novato en wordpress.

Muchas gracias a todos.