Prescription ou pas

Bonjour,
bonjour,j'ai achete un terrain fin 2009 qui jouxte le mien afin d'agrandir ma propriété, l'acte a donc été signe , le terrain borné par un géometre, et surprise apres avoir demandé au voisin qu'il demonte des cabanes construites sur ce terrain et enleve le materiel stocké dedans , celui ci me dit qu'il est le proprietaire de ce terrain par prescription trentenaire.
or l'ancien proprietaire a en effet accordé a cette personne de faire un bout de jardin sur ce terrain en effet cela fait bon nombre d'année qu'il jardine tond l'herbe,il l'a agrementé d'arbres mais a ces risques et périls il me semble ? mais c'est bien l'ancien propriétaire qui en paye les impots, le cadastre etait bien au nom de l'ancien propriétaire, j'avoue que cette histoire de prescription est vraiment floue, car n'importe qui peut donc jardiner sur terrain et s'en faire valoir proprietaire au bout de trente ans, meme s'il il y a un proprietaire connu qui en paye les impot ??? je vous remercie de bien vouloir m'eclaircir sur cette question car en plus cette personne est assez menacante et je n'ose meme plus aller sur mon terrain, pour enlever moi meme ces cabanes.