Usufruttuario

Buongiorno,
mio padre è disabile al 100% da qualche anno, poiché ha il parkinsonismo e altri problemi fisici, e la legge 104, la situazione è un pò complessa, in quanto è usufruttuario dell'immobile in cui vive con mio fratello, che è invece il proprietario, e dovrebbero aver firmato una scrittura privata in cui mio padre si impegna a non mandarlo via di casa. Ora la situazione di mio padre si è aggravata ulteriormente, infatti in una settimana è caduto praticamente tutti i giorni, poiché mio fratello non riusciva a prendersene cura ho deciso di trasferirmi da loro con il mio compagno, che era momentaneamente in cerca di occupazione, ed a seguito della scadenza del mio contratto sono rimasta casa per potermene occupare personalmente. Nel mese in cui ci siamo trasferiti mio padre piano piano si sta riprendendo e non è più caduto, poiché costantemente seguito, mio fratello invece ci ha intimato più volte di tornarcene a casa nostra poiché qua è casa sua e per lui non dobbiamo restare, ovviamente mio padre non vuole che ciò accada ma non sa legalmente cosa può fare mio fratello, può obbligarci ad andare via? poiché la casa è divisibile in 2 unità possiamo chiudere la scala e lasciare a mio fratello l'appartamento sopra senza che lui si opponga e che crei ulteriori problemi? Posso richiedere che venga tolto mio fratello come beneficiario della 104, poiché i permessi li utilizza per oziare od andare in ferie invece di aiutare mio padre?
Ringrazio in anticipo per l'aiuto fornito, cordiali saluti
Katia, dalla provincia di RE