Recedere da contratto preliminare di vendita

Il 5 dic 07 ho firmato un preliminare di vendita per un fabbricato rurale con annesso terreno, dando anche la disponibilità ad abitarlo. Il preliminare prevedeva un anticipo versato alla stipula, e la restante somma in due rate a luglio 08 e Dic 08 con rogito notarile. A distanza di due mesi, dal preliminare, cioè a febb. 08, mi hanno contestato la ristrutturazione dell'immobile eseguita senza autorizzazione comunale, per cui ad oggi non hanno rispettato i termini di pagamento, e mi hanno intimato la restituzione del doppio dell'anticipo versato. Desidero sapere, dato che sono loro a recedere, se posso restituire solo la caparra iniziale senza la penale del 100% da loro richiesta. (Sopratutto è chiaro il loro intento di acquisire il bene ad un prezzo irrisorio sfruttando questa irregolarita' tra l'altro da loro conosciuta, riducendo il prezzo iniziale del 40%). Posso richiedere nel contempo un compenso per quanto riguarda l'occupazione dell'immobile adibita ad abitazione primaria da ben 18 mesi ad oggi e per la quale non hanno contribuito a nessuna spesa? Prego ove possibile avere una risposta in merito, al piu' presto?
Ringrazio vivamente
Gulino, da Caltagirone (CT)