Recessione affitto per problemi immobile

Buongiorno.
In estate ho affittato un appartamento al piano terra nell'ottica di abitarvi per un lungo periodo. Ho comprato i mobili e apportato migliorie autorizzate dal padrone (cambiato gli infissi). Appena e' arrivato l'inverno sono comparsi problemi strutturali della casa: Muffa sino a un metro da terra, tutti gli armadi rovinati, cosi' come tutto cio' che era a contatto con le pareti.
Parlando coi vicini di casa ho scoperto che questi problemi la casa ce li ha sempre avuti e che nessuno resiste piu' di un inverno nell'appartamento. Ho contattato i precedenti inqulini e ne ho trovati due che mi hanno confermato la cosa. Aggiungendo che l'agenzia immobiliare che tratta l'appartamento e' sempre la stessa e che e' a conoscenza del problema perche' tutti si son lamentati.
Quindi il padrone di casa e l'agente immobiliare erano completamente a conoscenza dei problemi strutturali dell'appartamento al momento della firma del contratto.
Ho un contratto regolarmente registrato 4+4 che prevede 3 mesi di disdetta, due mesi di caparra. Ho pagato 1000 euro all'agenzia immobiliare.
Adesso sono costretto a cambiare casa, e anche alla svelta. Rimettendoci un sacco di soldi e tempo.
Loro ovviamente dicono "noi ti abbiamo fatto vedere una casa che tu hai accettato di affittare quindi non ti dobbiamo nulla". Ma e' chiara la malafede di entrambi.
Io ritengo di esser stato vittima di una truffa in quanto il padrone di casa in estate ha imbiancato le pareti e affittato un appartamento "in regola", sapendo che non lo era.
Che posso fare? Posso rivalermi sul padrone di casa e sull'agente immobiliare oppure hanno ragione loro?
Stefano, da Bologna (BO)