.com en anglais, /lang-fr/ pour fr, faut t-il geolocaliser ?

Bonjour, j'ai cherche sur le forum, sans trouver de reponse claire, même si je suis sur que ca a déjà été posé:

J'ai un site en deux langues. Par défaut en anglais avec le .com et en français avec l'extension /lang-fr.

J'ai déclaré les deux dans GWT et leur ai attribué à chacun un sitemap. Mais je me pose la question de la géolocalisation.

Pour moi, le .com est destiné au marché mondial anglophone, pas simplement auxs US. Mais comme le serveur est en France (IP en France), j'ai compris grâce au forum que Google l'a localisé comme site Francais (même si la langue et anglaise).
1er Q: Est ce pénalisant et est-il préférable que je force la localisation sur US ?

Quand au /lang-fr/, au début, il n'était pas déclaré. Quand je l'ai rajoute, je l'ai localisé en France. Et mon trafic à chuté de 80% en deux jours. J'ai pris peur et ai vire la localisation, même si ce n'est peut être pas du à ca, ayant fait plein d'autres "choses" en parallèle, comme du rewritting, du nofollow etc.... Depuis, ce n'est jamais remonté.
2iem Q: Est il souhaitable de localiser le site en /lang-fr/ en France, quand on vise tout le marché mondiale francophone, et non pas simplement la France ?

Merci d'avance pour vos bons conseils
Franck