Vous avez tout a fait le droit de ne pas renouveller le droit pour ces motifs en invoquant le trouble du voisinage mais en respectant un préavis de 6 mois avant la fin du bail
Motifs du congé
Le bailleur peut donner congé au locataire :
soit pour reprendre le logement afin de l'occuper ou de le faire occuper par un parent proche,
soit pour vendre le logement,
soit pour un motif légitime et sérieux.
Congé en cas de non respect des obligations
Le bailleur peut donner congé au locataire en fin de bail s'il ne remplit pas ses obligations, par exemple :
utilisation du logement pour un autre usage que celui prévu au contrat,
défaut d'assurance, défaut d'entretien du logement,
retards répétés du paiement du loyer et des charges,
troubles du voisinage.