Non c'è Imu sull'alloggio al genitore affidatario

Sono comproprietario di una casa al 50% con la mia ex compagna (ci siamo lasciati nel 2020). Abbiamo una figlia minorenne, che vive con la mamma in questo immobile. Da gennaio 2021, sono andato ad abitare in affitto in un'altra casa, nel territorio dello stesso Comune, e vi ho preso la residenza. All'ufficio tributi del Comune, mi hanno detto che, sul 50% di mia proprietà della casa dove vivono la mia ex e mia figlia, devo pagare l'Imu, cosa che peraltro ho fatto da quando mi sono trasferito. Vorrei, però, capire se devo veramente continuare a pagare tale imposta.