Desgravación IVA compra local comercial

Buenos días.

He adquirido un local comercial en bruto.
Ha sido primera transmisión así que he tenido que pagar IVA sin poder realizar la inversión de sujeto pasivo.

Tengo la intención a medio plazo (un par de años) de acondicionarlo y ponerlo en alquiler, pero mientras tanto mi intención es mantenerlo como está, vacío y sin actividad.

Ya estoy dado de alta en el epígrafe 861.2 por otros alquileres. Además soy autónomo en otro epígrafe. Hago declaración trimestral de IVA.

Mi pregunta es... ¿Puedo compensar el IVA de la compraventa con el IVA de otros locales que tengo alquilados y de la otra actividad? ¿O al no tener actividad el local y no generar IVA no podría hacerlo?

Muchas gracias