Retención e IVA de factura de servicios prestados fuera de la UE a una empresa radicada fuera de la UE.

Tengo claro que he de facturar sin IVA (al ser fuera del territorio de aplicación del impuesto). Al fin y al cabo a cualquier país le interesa que no se repercuta, de ese modo se facilita la exportación. Y en lo que respecta a la retención entiendo que tampoco ha de aplicarse. El cliente, al estar en otro país, no va a ingresarlo en la hacienda española. ¿Es esto así?
Pero, ¿qué pasaría si el cliente tuviera su domicilio fiscal en España y no en el extranjero?

Si el cliente es no residente en España, no es de aplicación ni el IVA español, ni tampoco tendríaque practicar retención por IRPF.
Si el cliente tiene domicilio fiscal en España, es residente español, ya que opera mediante establecimiento permanente.
Habría la duda de si la prestación de servicio es a la sede extranjera, o al establecimiento permanente español.
Si es a la sede extranjera, no importa para nada que además, disponga de establecimiento permanente.
Si es al establecimiento permanente, es un cliente español a todos los efectos, y no importa para nada que la sede jurídica sea extranjera.