Pittura che non si attacca

Buongiorno,
ho acquistato da poco casa e per economia ho deciso di dipingere io le pareti, visto che l'ho sempre fatto nelle mie case precedenti.
Nella prima stanza, che aveva un fondo giallino, dipingo di bianco e va tutto bene. la seconda stanza aveva 3 pareti sempre gialline ed una rossa.
Qua dipingo con un grigio chiaro.
Dopo un'ora circa dalla parete che sotto era rossa comincia a staccarsi il colore, sia il mio che il rosso stesso.
Mi informo e mi dicono che sotto sicuramente era tempera (non mi era mai capitato) e che è necessario passare prima un fissativo.
Nel frattempo, dopo un altro giorno, la stessa cosa accade ad un'altra parete che prima era gialla.
E non capisco perché, visto che le altre due sono perfette.
Risultato: tolgo tutta la pittura con la spatola, lavoraccio.
Passo il fissativo in entrambe e dopo 3 ore passo un'altra mano di colore in una delle due.
Dopo mezz'ora comincia a staccarsi pure questo.
Non vado più avanti perché non so cosa fare.... Avete consigli?