Panneau sur un grillage mitoyen ?

Bonjour,

Sur un côté de ma maison, il existe un grillage me séparant de l'un de mes voisins. C'est de ce côté que se trouve ma grille d'entrée, devant laquelle, avant la route, il y a un terre-plein m'appartenant.
Sur l'un des bords de ce terre-plein continue donc le fameux grillage mitoyen (en en tout cas que je considère comme tel jusqu'à preuve du contraire). Ce grillage est posé sur un muret.

Sur ce grillage; évidemment de mon côté, j'ai posé une pancarte permettant d'indiquer mon entrée lorsqu'on arrive d'un des deux côtés de la route (sans visibilité) et sur laquelle j'ai écrit le nom de ma maison, mon numéro de telephone et "B&B" car je reçois des gens en Bed and Breakfast. (Voir la photo)

Or, mon voisin me dit que je n'ai pas le droit de poser cette pancarte, accrochée donc à ce grillage mitoyen (plan cadastral). Il dit que j'aurais dû lui demander l'autorisation, qu'il m'aurait de toute façon refusé par principe. Il écrit "Vous n'avez aucune autorisation, ainsi et selon les articles ref 653 et 666 du code civil ma clôture est absolument privée".
Il conteste, sans véritable argument, la mitoyenneté de ce grillage : "ma clôture n'est pas mitoyenne, et en aucun cas vous ne pouvez l'utiliser pour servir de support à votre panneau publicitaire" .

Première question. Si je comprends bien tout ce que j'ai lu sur ce sujet, ce grillage est mitoyen. Comment en être absolument certain ?
Ensuite, si comme je le crois il est bien mitoyen, j'ai donc bien le droit d'accrocher ce panneau de mon côté, n'est ce pas ?

Qu'est ce qui pourrait encore m'empêcher d'accrocher ce panneau ? La largeur du muret et le fait que le grillage soit au milieu de ce dernier ? Le fait qu'il y ait la mention B&B ... mon numero de tel ? A t-il le droit de l'enlever comme il menace de le faire faire ("Je vous prie de vouloir retirer votre panneau, à défaut et sans autre avis, je ferai intervenir les autorités compétentes, tous frais éventuels à votre charge") ?

Je finirai en disant que, bien sûr, ce panneau ne le gêne absolument pas et que c'est par principe qu'il essaie de me nuire.

En vous remerciant