Que peut-on(doit-on) faire au point de vue administratif ?

Bonjour à tous!

je m'appelle Vicky 33 ans pacsée et  3 enfants (4,5 et 13 ans)  , nous habitons près de Marseille ! Mon cher et tendre souhaite s'installer en Guadeloupe depuis de nombreuses années mais j'avoue avoir été réticente pendant bien longtemps l'éloignement de la famille et des amis me semblait difficile.. Puis cette idée a fait son petit bonhomme de chemin, ma maman et ma belle mère y séjourne 6 mois dans l'année et j'ai retrouvé deux amies qui y habitent depuis 5/6 ans ...et depuis 1 an nous avons décidé de nous impliquer réellement dans ce projet.
Mise en vente de notre maison, prospection quant au boulot ... mon mari attend une réponse d'emploi pour semaine prochaine après plusieurs CONF. CALL et VISIO via skype (le décalage horaire est rude  CONF. CALL et VISIO a 23h chez nous ca pique après une journée de boulot )
On touche du doigt la concrétisation de notre projet et je commence à drôlement stresser et en même temps être euphorique, sentiments ambivalents assez particulier.
Petite question qui me turlupine, que peut-on (doit-on) faire au point de vue administratif avant de partir... (sécu, impôts...)
je viens de découvrir votre site et  j'espère y puiser pleins d'infos et par la suite pouvoir répondre aux questionnements de certains.
merci par avance
vicky