Bonsoir
Vous avez tout interet à avoir votre résidence principale en france, en effet vous pourrez retirer un zero sur montant de vos impots sur le revenu.Par contre si vous conservez un logement en Suisse il vous sera réclamé des taxes d'habitation.
Pour l'avs vous pouvez cotiser depuis l'étranger.

Bonjour,

Ce qui importe dans votre cas, c'est votre lieu de résidence (et le nombre de jours) : si vous résidez en France et travaillez en France toute l'année, même si vous avez signé un contrat de droit suisse, il n'est pas possible d'aller contre les dispositions du pays de résidence (droit communautaire).
Donc, vous devrez vous acquitter de vos impôts en France, serez assujetti au système d'assurance santé français, et votre employeur suisse devra même verses les charges et cotisations sociales en France.

Source : "Travailler et vivre en Suisse : guide pratique pour les résidents et frontaliers", 2ème édition, Gualino éditeur (http://www.travailler-en-suisse.ch/html/presentation-guide-suisse.html)