Vente forcée sans compromis de vente

Bonjour,
J'ai visité un appartement pour lequel j'ai fait une offre au propriétaire en direct. Il n'y a pas d'agence dans la transaction.
C'est le locataire qui nous a mis en contact. Nous nous sommes vu autour d'une table et nous sommes mis d'accord sur un prix et des modalités.
Il y a eu un échange de mails récapitulatifs et mise en contact des notaires respectifs. Leur notaire a envoyé les informations au mien qui a rédigé un compromis et l'a retourné pour relecture et prise de rendez vous pour la signature du document.
C'est à ce moment que les choses se bloquent. Le notaire ne renvoie pas le compromis et refuse de fixer une date sous prétexte qu'un autre acheteur avec lequel il y aurait eu un échange de mails plus d'un mois au paravant se serait manifesté de nouveau. Via son notaire avec lequel rien n'a été signé, il menacerait de faire un procès ce qui effraie le vendeur.
Ce dernier m'assure qu'il n'a jamais rien signé avec cet acheteur. Que celui ci ne s'est pas manifesté pendant plus d'un mois. Qu'il n'a jamais demandé à son notaire d'envoyer quoi que ce soit à l'autre notaire.
Il dit vouloir finaliser la vente avec moi mais ne peut avancer sans avoir la certitude qu'il ne risque rien d'énorme venant de l'autre acheteur.
Quels sont les risques s'il y en a et peut-on le forcer à vendre à quelqu'un d'autre s'il ne le souhaite plus?
Puisque je suis dans la même situation que ce premier acquéreur (on m'a envoyé des mails, un projet de compromis,..) qui se remanifeste d'un coup, ai-je des recours ?
Merci de vote aide.