Vivienda habitual

buenos días, tengo una duda, yo vivo en una casa que no es de mi propiedad y en la que estoy 6 meses al año y luego tengo otra que sí es de mi propiedad en la que vivo los otros 6 meses. Estoy empadronado en la primera ya que es dónde hago la vida en invierno (es la capital de provincia) y luego en la otra paso los meses de verano y algún fin de semana más, podría decirse que a lo largo del año paso un poco más de tiempo en la de mi propiedad que en la otra. No me gustaría cambiar el padrón ya que en la primera es dónde voto y dónde tengo el médico y no quiero liarme con papeleos pero si me gustaría en la declaración de la renta poner que vivo en la que es de mi propiedad así no tendría que pagar en el irpf, es esto posible? es decir puedo poner que mi vivienda habitual es la de verano y seguir empadronado en la primera? Las dos viviendas están en la misma provincia. 
Gracias