Accord et ensuite refus pour travaux

Bonjour,
En Juillet 2007, mon propriétaire me donne son accord écrit pour exécuter des travaux relatifs à des problèmes d'humidité (à mons avis relevant des obligations du bailleur) dans le logement que j'occupe.
Une partie des ces travaux a été faite en Août 2007 (coin évier) et je lui redemande ce 7 Juin 2008 si je peux entreprendre les travaux de la salle d'eau pour lesquels j'avais déja eu accord en Juillet 2007, connaissant ces changements de position.
En réponse, le 13 Juin 2008, il me demande de lui fournir une estimation du coût des travaux. Je lui remets donc la facture pro-forma le 18 Juin 2008.
Ce 24 Juin 2008, il me donne une réponse : "D'accord mais est-ce bien indiqué dans l'environnement actuel ?"
Il sous-entend par "environnement" qu'il y a quelques mois j'ai eu des mots avec un des enfants de sa concubine qui m'a interpellé alors que mon chien était sur le trottoir.
Il faut savoir que le bailleur, sa concubine, les enfants, les beaux-enfants ainsi que les petits-enfants de celle-ci vivent dans l'enceinte de la propriété de mon bailleur (12 personnes). Moi j'habite juste à côté.
Je voudrai donc savoir s'il a le droit de se retrancher derrière de tels arguments pour ne pas faire de travaux, car avant cela il invoquait le fait que la maison ne lui appartenait pas (il est usufruitier) et de plus son fils qui en est le propriétaire ne veut pas non plus faire de frais.