Prendre un second notaire pour la vente

Bonjour,
suite à un compromis de vente, nous allons acheté un appartement. C'est le notaire du vendeur qui a la charge de faire la vente. or, aprés plusieurs mois d'attente et report, nous n'avons plus confiance dans ce notaire. La vente a enfin été fixée dans 15 jours. Entre temps, j'ai contacté un second notaire pour me représenter. Si celui-ci était d'accord pour nous assister, le notaire initial, en charge du dossier, a catégoriquement refusé l'arrivée de ce second notaire à 15 jours de la vente, bien que la date n'avait pas encore été fixée. Puis-je passer outre et faire venir le jour de la vente mon notaire?