Imposition sous visa J1

Hello tout le monde!
Une nouvelle question pour les  personnes ayant eu une expérience J1-J2.
Je n'ai pas trouvé d'ancien post répondant à ma question alors pardon s'il s'agit d'un doublon.

Mon mari et moi sommes sous visa J1-J2 et nous nous sommes déjà occupés de nos taxes US.
Vient maintenant le problème des impôts en France. Ayant travaillé une partie de 2015 en France, nous allons donc continuer à payer nos impôts cette année mais ma question est plus au niveau de la déclaration du changement d'adresse. Il m'a semblé comprendre qu'en partant en J1, on restait résidents français, temporairement aux US.
Faut-il alors se déclarer comme résident US au moment de remplir les impôts en France? Parce que manifestement au premier janvier 2016 nous ne vivions plus en France...