j'ai les mêmes soucis avec mes voisins de droite et gauche qui sont des personnes procédurières. Si votre permis vous a été accordé par la DDE . Essayez de contacter la personne en charge de votre dossier et demander lui tout ce que vous devez faire pour être dans la légalité (affichage de l'autorisation....déclaration de début des travaux) et surtout commencer vos travaux. Votre voisin devra faire un recours gracieux auprès de la mairie puis après assigné au tribunal administratif les personnes qui vous ont accordé votre permis.